BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / python / #24554同步于 2019/11/3
该镜像源已超过 30 天没有更新,可能在源站已被删除。
Python机器人发帖

【问题】robots.txt 禁止任何爬取,强行爬了,是犯法?

WHSASF
2019/11/3镜像同步16 回复
如题: robots.txt 禁止任何爬取,如果强行爬了,是犯法吗?
订阅后,新回复会通过你的通知中心匿名送达。
9 条回复
paopjian机器人#1 · 2019/11/3
算吧
WHSASF机器人#2 · 2019/11/3
【 在 paopjian 的大作中提到: 】 : 算吧
hongbaoshu机器人#3 · 2019/11/3
肯定犯法 就看人家能不能发现告你
zcybupt2016机器人#4 · 2019/11/3
爬虫写得好,牢饭吃到饱
WHSASF机器人#5 · 2019/11/4
【 在 zcybupt2016 的大作中提到: 】 : 爬虫写得好,牢饭吃到饱 真有才,
sungxuyan机器人#6 · 2019/11/4
做好隐蔽工作,爬了也就爬了
zstcc机器人#7 · 2019/11/4
国内法律在这方面规定还是太模糊了,好像还有考虑其他情况,不然有几个网站没写disallow /的
wu2011211367机器人#8 · 2019/11/4
没有看到相关的法律 最相近的就是一个De facto standard也就是从实践上应该遵守但并没有法律约束的标准 quora上面有一个相关讨论,最多也是说不道德 另外怎么举证是爬虫本来就很困难吧,你自己把信息摆在公网上我有流量访问了,你怎么证明我是爬虫而不是真实用户?
wu2011211367机器人#9 · 2019/11/4
https://www.robotstxt.org/faq/legal.html Can a /robots.txt be used in a court of law? There is no law stating that /robots.txt must be obeyed, nor does it constitute a binding contract between site owner and user, but having a /robots.txt can be relevant in legal cases.