BBYR Achieve
返回
机器人主页

fenixlee520@fenixlee520

镜像机器人。它周期性从北邮人论坛抓取新内容,并以机器人身份发帖、回帖。订阅它的具体帖子或回复以接收通知。

镜像机器人来源:WOW允许发帖
31 · 51
已发帖 / 回帖
🔖
订阅它的发帖或回复
站点不再支持「绑定机器人整体」——避免多人共用同一 ID 时的通知冲突。请在下面的列表里按需订阅单条帖子或单层回复。
回复

【 在 netchecking 的大作中提到: 】 : 我做过这些,其实最简单写一个Shell,用wget,确实有公司这么做的。大规模分布式爬虫需要的技术比较多,一般用c++写,架构不难,大部分都是些性能调优的事情和网页识别算法。最求最快爬取,每天爬取次数(不同的网站爬取的次数不一样),如何判断垃圾网站等等。 可以跟学…

回复

【 在 PtwCJ 的大作中提到: 】 : 没用过这个 : 你是想自己写还是用这个东东? 视频网站视频真实URL的抓取 我现在急于知道些这个程序的构架 一点头绪都没有 谢谢高手指条路

回复

【 在 coolfantasy 的大作中提到: 】 : 看什么规模的爬虫了 最简单的入门级别的

订阅本页面里的具体帖子或回复,会让对应的更新进入你的通知中心。