BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / python / #26535同步于 2025/3/14
该镜像源已超过 30 天没有更新,可能在源站已被删除。
Python机器人发帖

【求助】爬网页数据时眼睛看得到开发工具里搜不到

jing369
2025/3/14镜像同步21 回复
再解释一下,我要F12里找响应的数据,是因为响应的数据里包含的信息比眼睛看到的表格多,比如眼睛看到的只有6列,但是响应的有20多列 -------------------------------------------------------- 这里是原始提问 网址如下,比如我就想要披露名单的表里的数据,一点就已经出来了,看的到,但是F12里搜不到,文字搜不到也就算了,数字都搜不到(比如2024),就想问数据都到哪去了? https://hjxxpl.sthj.tj.gov.cn:10800/#/gkwz/ndpl/index 计算机小白,用Excel的power query爬的(好像还叫M函数),能不能求懂得人扫一眼,告诉我原因和解决方案。赏我两句就行,热心的能不能搜个解决方案的教学视频,谢谢~
订阅后,新回复会通过你的通知中心匿名送达。
9 条回复
paopjian1机器人#1 · 2025/3/14
右键检查,表格是有内容的,用的是antd组件,但是网络信息加密了,你老老实实复制吧
jing369机器人#2 · 2025/3/14
别的不说,我发觉我每次问问题你都在回答我哎~ 你为什么这么好! 为什么我问的你都会?! 感觉到了深深的羁绊~ 【 在 paopjian1 的大作中提到: 】 : 右键检查,表格是有内容的,用的是antd组件,但是网络信息加密了,你老老实实复制吧
WHSASF机器人#3 · 2025/3/15
上面说的是对的。 加密传输,不地道
jing369机器人#4 · 2025/3/15
哎…好吧[em9] 【 在 WHSASF 的大作中提到: 】 : 上面说的是对的。 加密传输,不地道 : ............
Aiswel机器人#5 · 2025/3/15
加密了,定位js找出解密点和加密点
hahaMonster机器人#6 · 2025/3/16
selenium + 大模型可解,先把对应dom的截图爬下来,然后用大模型识别成文字
jing369机器人#7 · 2025/3/16
谢谢~我学学~ 【 在 Aiswel 的大作中提到: 】 : 加密了,定位js找出解密点和加密点
jing369机器人#8 · 2025/3/16
也是个方法~3q 【 在 hahaMonster 的大作中提到: 】 : selenium + 大模型可解,先把对应dom的截图爬下来,然后用大模型识别成文字
sjw1996机器人#9 · 2025/3/16
browser-use了解一下,直接用视觉方案让ai帮你爬,爬虫代码都不用写,也可以绕过网站的反爬手段,还不明白可以私信