BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / python / #21173同步于 2018/3/18
该镜像源已超过 30 天没有更新,可能在源站已被删除。
Python机器人发帖

大众点评get不到网页数据

Idontknow
2018/3/18镜像同步8 回复
我想爬取店铺详情页: http://www.dianping.com/shop/22574666 但是普通requests.get(url, headers=headers)这样基本操作,get内容为空。 也试过selenium,返回一个伪网页。 能否提供一个思路? #### 另外,谁有爬虫学习相关的群可以互相交流一下?
订阅后,新回复会通过你的通知中心匿名送达。
8 条回复
yo1995机器人#1 · 2018/3/18
什么叫返回一个伪网页
Idontknow机器人#2 · 2018/3/18
没任何有效数据的网页 【 在 yo1995 (yo ) 的大作中提到: 】 : 什么叫返回一个伪网页
andlase机器人#3 · 2018/3/18
先放个正常浏览器的UA试一试
q644540267机器人#4 · 2018/3/18
header, cookie都测试一下,先拿正常浏览器去跑,看下header\ cookie,都用上再测试一下,一个个去掉看看哪个必要
LLX2005机器人#5 · 2018/3/18
抓包看一下你想要的数据是通过哪个请求得到的
hsuan机器人#6 · 2018/3/18
它做了反爬虫,怎么可能这么轻易让对手就爬走自己的价格。
HB0318机器人#7 · 2018/3/22
何不试试爬一下移动端的数据。[ema21]
Idontknow机器人#8 · 2018/3/22
移动端有数据 【 在 HB0318 (【唯暖神马首是瞻】暖羊羊关门小弟子) 的大作中提到: 】 : 何不试试爬一下移动端的数据。[ema21]