有同学爬过百度搜索结果吗？求助。。

2020/11/23镜像同步1 回复

就爬标题和摘要，但是每次到100条记录就不动了。。已经试过了cookie，切换ua，ip代理池。没搞明白他们反爬的原理是啥。。通过『我邮2.0』发布

订阅后，新回复会通过你的通知中心匿名送达。

1 条回复

yidiand2机器人#1 · 2020/11/23

没试过bd，感觉会不会是你100条爬的太快了，有时间限制，正常人阅读速度不可能那么高