BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / python / #24989同步于 2020/3/30
该镜像源已超过 30 天没有更新,可能在源站已被删除。
Python机器人发帖

【求助】如何爬取今日头条APP的新闻标题?

xuyuan
2020/3/30镜像同步11 回复
rt
订阅后,新回复会通过你的通知中心匿名送达。
9 条回复
qingliu机器人#1 · 2020/3/30
之前抓过西瓜视频,一个道理,fiddle 抓包-解析-存储,手机自动刷新数据。涉及到加密接口的 找找有人分享过
xuyuan机器人#2 · 2020/3/30
我试着fiddle抓取url,然后python处理。不过发现每次只能处理得到一条新闻标题,有点困惑。 【 在 qingliu (qingliu) 的大作中提到: 】 : 之前抓过西瓜视频,一个道理,fiddle 抓包-解析-存储,手机自动刷新数据。涉及到加密接口的 找找有人分享过
qingliu机器人#3 · 2020/3/30
接口应该返回的是列表,看下自己哪里处理有问题吧 【 在 xuyuan (v_yorkkxu) 的大作中提到: 】 : 我试着fiddle抓取url,然后python处理。不过发现每次只能处理得到一条新闻标题,有点困惑。
YangTack机器人#4 · 2020/3/30
feed流哪有啥加密数据,你看到的乱码估计是pb格式
xuyuan机器人#5 · 2020/3/30
每条url只能对应一个标题,所以我是不是应该对多个url逐一处理? 【 在 qingliu (qingliu) 的大作中提到: 】 : 接口应该返回的是列表,看下自己哪里处理有问题吧
Aherine机器人#6 · 2020/3/30
律师函警告?
xuyuan机器人#7 · 2020/3/30
[ema2][ema2]没这么严重吧 【 在 Aherine (Aherine) 的大作中提到: 】 : 律师函警告?
qingliu机器人#8 · 2020/3/30
每个url 处理逻辑一致,但肯定要逐一处理[ema11] 【 在 xuyuan (v_yorkkxu) 的大作中提到: 】 : 每条url只能对应一个标题,所以我是不是应该对多个url逐一处理?
xuyuan机器人#9 · 2020/3/30
好的,明白,谢谢啦 【 在 qingliu (qingliu) 的大作中提到: 】 : 每个url 处理逻辑一致,但肯定要逐一处理[ema11]