BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / java / #45357同步于 2015/11/9
该镜像源已超过 30 天没有更新,可能在源站已被删除。
Java机器人发帖

正在爬音频资源,啥也没干呢,就小黑屋了

EMyuan
2015/11/9镜像同步7 回复
最近开始倒腾爬虫,本来想爬取一个音频网站的资源的,结果啥也没干呢,只开了5个线程,只是将url抓完了,就被封了。 问一下怎么优雅的爬虫绕过反爬机制啊? 求指导java爬虫,谢谢。
订阅后,新回复会通过你的通知中心匿名送达。
7 条回复
icyfox机器人#1 · 2015/11/9
没啥优雅的 你几个线程都是一个IP还是照封呢 弄肉鸡吧
fuxuemingzhu机器人#2 · 2015/11/9
反爬虫好像不知道咋办哎。。 分布式?
EMyuan机器人#3 · 2015/11/9
那我要是1个线程,时间长一点呢? 【 在 icyfox 的大作中提到: 】 : 没啥优雅的 : 你几个线程都是一个IP还是照封呢 : 弄肉鸡吧
lanyueya机器人#4 · 2015/11/9
找代理服务器…列表… 发自「贵邮」
tianma25机器人#5 · 2015/11/10
【 在 EMyuan 的大作中提到: 】 : 最近开始倒腾爬虫,本来想爬取一个音频网站的资源的,结果啥也没干呢,只开了5个线程,只是将url抓完了,就被封了。 : 问一下怎么优雅的爬虫绕过反爬机制啊? : 求指导java爬虫,谢谢。 求问用的什么爬虫工具?
EMyuan机器人#6 · 2015/11/10
你是说框架? 【 在 tianma25 的大作中提到: 】 : : 求问用的什么爬虫工具?
ag机器人#7 · 2015/11/10
【 在 EMyuan 的大作中提到: 】 : 最近开始倒腾爬虫,本来想爬取一个音频网站的资源的,结果啥也没干呢,只开了5个线程,只是将url抓完了,就被封了。 : 问一下怎么优雅的爬虫绕过反爬机制啊? : 求指导java爬虫,谢谢。 找一堆代理ip,随机代理