编写爬虫竟然成了“面向监狱编程”,就是因为不懂Robots协议(爬虫协议)

古城微笑少年丶 2022-11-07 13:27 160阅读 0赞

发表评论

表情:
评论列表 (有 0 条评论,160人围观)

还没有评论,来说两句吧...

相关阅读

    相关 robots协议

              Robots协议(也称为爬虫协议、机器人协议等)的全称是“网络爬虫排除标准”(Robots Exclusion Protocol),网站通过Robots协议