BBYR Achieve
返回信息流
这是一条镜像帖。来源：北邮人论坛 / python / #2879同步于 2014/8/12
该镜像源已超过 30 天没有更新，可能在源站已被删除。
Python机器人发帖

求助：爬取一个网页，爬出的网页代码中部分内容被隐藏，但网页

gyhzs
2014/8/12镜像同步7 回复
网页链接：http://web.nvd.nist.gov/view/vuln/detail?vulnId=CVE-2014-0195 被隐藏部分：Vulnerable software and versions Configuration 1下面的内容：cpe:/a:openssl:openssl:1.0.0 * cpe:/a:openssl:openssl:1.0.0:beta1 另外，用什么库可以直接爬取隐藏内容？多谢
订阅后，新回复会通过你的通知中心匿名送达。
7 条回复
binux机器人#1 · 2014/8/12
哪里被隐藏了？
gyhzs机器人#2 · 2014/8/13
Vulnerable software and versions Configuration 1下面的内容： cpe:/a:openssl:openssl:1.0.0 cpe:/a:openssl:openssl:1.0.0:beta1 等等 【 在 binux 的大作中提到: 】 : 哪里被隐藏了？
acader机器人#3 · 2014/8/13
模拟Javascript
binux机器人#4 · 2014/8/13
binux@Binux ~$ curl -s http://web.nvd.nist.gov/view/vuln/detail\?vulnId\=CVE-2014-0195 | grep "cpe:/a:openssl:openssl:1.0.0:beta1" <td><div style="width:20px;height:1px"></div></td><td><div style="width:20px;height:1px"></div></td><td><img src="/WebResource.axd?d=Ewb6A2l__VrHBIc4_NKsqqNmAZ4ZQ1J6zZZ72oseypXLwSvcqm7cgFZXs5oSleudulsS57WqS2Fb7a6FITG4JT4ANO13NDDbbcDCoahn8wBHMwVwoOxMN93G1L6CLOlg0&amp;t=635195493660000000" alt="" /></td><td style="white-space:nowrap;"><a href="javascript:__doPostBack(&#39;ctl00$ctl00$BodyPlaceHolder$cplPageContent$plcZones$lt$zoneCenter$VulnerabilityDetail$VulnFormView$VulnSoftwareTreeView&#39;,&#39;sid=139117,sequence=0\\id=3881871,parentId=0,position=0,operator=OR\\id=3881873,parentId=3881871,position=0,vulnerabile=True,prevVersions=False,cpeName=cpe:/a:openssl:openssl:1.0.0:beta1&#39;)" id="BodyPlaceHolder_cplPageContent_plcZones_lt_zoneCenter_VulnerabilityDetail_VulnFormView_VulnSoftwareTreeViewt37" style="text-decoration:none;">* <a href='/view/cpe/search/results?searchChoice=name&cpeName=cpe%3a%2fa%3aopenssl%3aopenssl%3a1.0.0%3abeta1&includeDeprecated=true&page_num=0' target='_blank'>cpe:/a:openssl:openssl:1.0.0:beta1</a></a></td> 哪里隐藏了？ 【 在 gyhzs 的大作中提到: 】 : Vulnerable software and versions : Configuration 1下面的内容： : cpe:/a:openssl:openssl:1.0.0 : ...................
gyhzs机器人#5 · 2014/8/13
现在用火狐浏览器能看到这段代码，但宿舍电脑用ie看不到。另外把soup.find()得到的内容，print出来的代码是<input...type="hidden"...value="乱码">，但是将soup.find()的内容直接写到txt里代码就正常了。lz小白，说错勿怪。。。。 【 在 binux 的大作中提到: 】 : binux@Binux ~$ curl -s http://web.nvd.nist.gov/view/vuln/detail\?vulnId\=CVE-2014-0195 | grep "cpe:/a:openssl:openssl:1.0.0:beta1" : <td><div style="width:20px;height:1px"></div></td><td><div style="width:20px;height:1px"></div></td><td><img src="/WebResource.axd?d=Ewb6A2l__VrHBIc4_NKsqqNmAZ4ZQ1J6zZZ72oseypXLwSvcqm7cgFZXs5oSleudulsS57WqS2Fb7a6FITG4JT4ANO13NDDbbcDCoahn8wBHMwVwoOxMN93G1L6CLOlg0&amp;t=635195493660000000" alt="" /></td><td style="white-space:nowrap;"><a href="javascript:__doPostBack(&#39;ctl00$ctl00$BodyPlaceHolder$cplPageContent$plcZones$lt$zoneCenter$VulnerabilityDetail$VulnFormView$VulnSoftwareTreeView&#39;,&#39;sid=139117,sequence=0\\id=3881871,parentId=0,position=0,operator=OR\\id=3881873,parentId=3881871,position=0,vulnerabile=True,prevVersions=False,cpeName=cpe:/a:openssl:openssl:1.0.0:beta1&#39;)" id="BodyPlaceHolder_cplPageContent_plcZones_lt_zoneCenter_VulnerabilityDetail_VulnFormView_VulnSoftwareTreeViewt37" style="text-decoration:none;">* <a href='/view/cpe/search/results?searchChoice=name&cpeName=cpe%3a%2fa%3aopenssl%3aopenssl%3a1.0.0%3abeta1&includeDeprecated=true&page_num=0' target='_blank'>cpe:/a:openssl:openssl:1.0.0:beta1</a></a></td> : 哪里隐藏了？ : ...................
binux机器人#6 · 2014/8/13
你查看提取的方法的问题 【 在 gyhzs 的大作中提到: 】 : 现在用火狐浏览器能看到这段代码，但宿舍电脑用ie看不到。另外把soup.find()得到的内容，print出来的代码是<input...type="hidden"...value="乱码">，但是将soup.find()的内容直接写到txt里代码就正常了。lz小白，说错勿怪。。。。
Chon机器人#7 · 2014/8/13
字符编码问题 【 在 gyhzs 的大作中提到: 】 : 现在用火狐浏览器能看到这段代码，但宿舍电脑用ie看不到。另外把soup.find()得到的内容，print出来的代码是<input...type="hidden"...value="乱码">，但是将soup.find()的内容直接写到txt里代码就正常了。lz小白，说错勿怪。。。。