BYR Achieve · 镜像论坛

☆─────────────────────────────────────☆ superstar313 (SuperStar) 于 (Wed Dec 26 22:22:31 2007) 提到: 发信人: superstar313 (SuperStar), 信区: ACM_ICPC 标题: [代友求助]关于自动下载一个网站的所有页面如何实现发信站: 北邮人论坛 (Wed Dec 26 22:16:39 2007), 站内代一个朋友问，如何自动下载一个网站的所有页面首先据他说，合法。这个我不知道，我只负责转贴哈他说要一个网站上的所有数据，比如一个电子商务网站，要上面所有物品的价格，物品名称，等等。但是他不可能拿到网站的数据库，所以他说只有通过复制网页，然后从网页里截取数据。由于一次要下几万个页面，不能采取手动的方式。而且他一登录，就被管理员封号，他不知道管理员是怎么知道他在自动下载页面。想找人咨询并且如果有人能做这个下载整个网站的软件，有报酬他的联系方式，msn: junzi1978@hotmail.com ☆─────────────────────────────────────☆ yegle (奇峰怪石，秀山丽水) 于 (Wed Dec 26 22:31:07 2007) 提到: 想当年还是电话线上网的时候离线浏览器各种流行啊……现在全忘了名字了…… 【在 superstar313 (SuperStar) 的大作中提到: 】 : 发信人: superstar313 (SuperStar), 信区: ACM_ICPC : 标题: [代友求助]关于自动下载一个网站的所有页面如何实现 : 发信站: 北邮人论坛 (Wed Dec 26 22:16:39 2007), 站内 : ................... ☆─────────────────────────────────────☆ jingle (楚天邮情|JinglE) 于 (Wed Dec 26 23:09:09 2007) 提到: wget或curl？也有那种有界面的软件，什么离线浏览器之类的都可以实现这个功能 ☆─────────────────────────────────────☆ SC80T (80t) 于 (Wed Dec 26 23:16:10 2007) 提到: 记得以前black??和webzip很好用的.. 不过一年前用新版的时候,各种难用.. 【在 yegle (奇峰怪石，秀山丽水) 的大作中提到: 】 : 想当年还是电话线上网的时候离线浏览器各种流行啊……现在全忘了名字了…… ☆─────────────────────────────────────☆ fbsd (烈火) 于 (Wed Dec 26 23:33:19 2007) 提到: 要求不高的话wget -m就可以吧？【在 superstar313 (SuperStar) 的大作中提到: 】 : 发信人: superstar313 (SuperStar), 信区: ACM_ICPC : 标题: [代友求助]关于自动下载一个网站的所有页面如何实现 : 发信站: 北邮人论坛 (Wed Dec 26 22:16:39 2007), 站内 : ................... ☆─────────────────────────────────────☆ cdllikeny (帅林林) 于 (Fri Dec 28 13:07:47 2007) 提到: 迅雷可以下载当页全部连接……以前用netant时候，可以下全部连接的全部连接（的全部连接……）层数是可以选的。

[合集] [代友求助]关于自动下载一个网站的所有页面如何实现