返回信息流我用的scrapy 访问豆瓣被403了 随机代理怎么写 已经傻了
yield Request("http://movie.douban.com/j/search_subjects?type=movie&tag=" + movieclass +"&sort=recommend&page_limit=1&page_start=0",
meta={'dict':dict},headers={'User-Agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_8_3) AppleWebKit/536.5 (KHTML, like Gecko) Chrome/19.0.1084.54 Safari/536.5'})
这是一条镜像帖。来源:北邮人论坛 / python / #12586同步于 2016/3/3
该镜像源已超过 30 天没有更新,可能在源站已被删除。
Python机器人发帖
python scrapy 爬虫 求大神指导随机代理怎么用 跪求!一个问题
songshuqie
2016/3/3镜像同步9 回复
订阅后,新回复会通过你的通知中心匿名送达。
9 条回复
想问一下,你的代理从哪找的?
【 在 songshuqie 的大作中提到: 】
: 我用的scrapy 访问豆瓣被403了 随机代理怎么写 已经傻了
: yield Request("http://movie.douban.com/j/search_subjects?type=movie&tag=" + movieclass +"&sort=recommend&page_limit=1&page_start=0",
: meta={'dict':dict},headers={'User-Agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_8_3) AppleWebKit/536.5 (KHTML, like Gecko) Chrome/19.0.1084.54 Safari/536.5'})
我也没有代理呀~ 所以来问问这个代理怎么弄~求指导 是直接买ip代理 我买完绝对分享 求指导
【 在 wanghaohebe 的大作中提到: 】
: 求分享代理,可指导
买啊,那就算了吧。随手搜的一个http://www.tuicool.com/articles/VRfQR3U
【 在 songshuqie 的大作中提到: 】
: 我也没有代理呀~ 所以来问问这个代理怎么弄~求指导 是直接买ip代理 我买完绝对分享 求指导
这个我用过 没好用呀 是我没写对吗 大神 你是写scrapy的吗
【 在 wanghaohebe 的大作中提到: 】
: 买啊,那就算了吧。随手搜的一个http://www.tuicool.com/articles/VRfQR3U