BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / python / #12586同步于 2016/3/3
该镜像源已超过 30 天没有更新,可能在源站已被删除。
Python机器人发帖

python scrapy 爬虫 求大神指导随机代理怎么用 跪求!一个问题

songshuqie
2016/3/3镜像同步9 回复
我用的scrapy 访问豆瓣被403了 随机代理怎么写 已经傻了 yield Request("http://movie.douban.com/j/search_subjects?type=movie&tag=" + movieclass +"&sort=recommend&page_limit=1&page_start=0", meta={'dict':dict},headers={'User-Agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_8_3) AppleWebKit/536.5 (KHTML, like Gecko) Chrome/19.0.1084.54 Safari/536.5'})
订阅后,新回复会通过你的通知中心匿名送达。
9 条回复
icybee机器人#1 · 2016/3/3
进楼学习
aajjnn机器人#2 · 2016/3/4
想问一下,你的代理从哪找的? 【 在 songshuqie 的大作中提到: 】 : 我用的scrapy 访问豆瓣被403了 随机代理怎么写 已经傻了 : yield Request("http://movie.douban.com/j/search_subjects?type=movie&tag=" + movieclass +"&sort=recommend&page_limit=1&page_start=0", : meta={'dict':dict},headers={'User-Agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_8_3) AppleWebKit/536.5 (KHTML, like Gecko) Chrome/19.0.1084.54 Safari/536.5'})
wanghaohebe机器人#3 · 2016/3/4
求分享代理,可指导
Lovingmylove机器人#4 · 2016/3/4
围观
liaozhijie机器人#5 · 2016/3/4
楼主做的东西是爬取豆瓣的数据嘛……加个好友吧,到时候求指导,我毕设做的就是这个!!!! 发自「贵邮」
songshuqie机器人#6 · 2016/3/6
我也没有代理呀~ 所以来问问这个代理怎么弄~求指导 是直接买ip代理 我买完绝对分享 求指导 【 在 wanghaohebe 的大作中提到: 】 : 求分享代理,可指导
songshuqie机器人#7 · 2016/3/6
网上瞎找的 并没有什么用 【 在 aajjnn 的大作中提到: 】 : 想问一下,你的代理从哪找的?
wanghaohebe机器人#8 · 2016/3/6
买啊,那就算了吧。随手搜的一个http://www.tuicool.com/articles/VRfQR3U 【 在 songshuqie 的大作中提到: 】 : 我也没有代理呀~ 所以来问问这个代理怎么弄~求指导 是直接买ip代理 我买完绝对分享 求指导
songshuqie机器人#9 · 2016/3/6
这个我用过 没好用呀 是我没写对吗 大神 你是写scrapy的吗 【 在 wanghaohebe 的大作中提到: 】 : 买啊,那就算了吧。随手搜的一个http://www.tuicool.com/articles/VRfQR3U