BBYR Achieve
返回首页
版面

SearchEngine

学术科技 · 当前来自首页固化板块目录。

1560
本版帖子
镜像请问爬虫每次抓下来的同一网页大小不一怎么解决?

给网页发一个http请求,然后使用recv(hSocket,cRecvData,sizeof(cRecvData),0);来接受网页的文字信息 经测试有时候因为网络问题不能接受到完整的网页,有时候可以,请问如何处理这种问题?

LaMer2011/3/22SearchEngine最后回复 2011/5/3· gh
3
镜像请教关于将nutch导出文件dump转化成xml文件的问题

nutch运行后通过查看不是可以把parse text导出来生成一个dump文件么,我现在想要将dump文件中的部分内容,例如说时间项、url项、text项内容摘取出来生成xml文件,请教下有研究这方面的高手吗?希望不吝赐教。 同时热烈欢迎有研究过nutch的同学发表意见。 谢谢啦!

louislyla2011/3/30SearchEngine最后回复 2011/4/13· louislyla
2
镜像欢迎报名2011北京高校互联网产品设计大赛

你是否能察觉到一些互联网产品设计的不合理,并有想法去改善它?你是否在脑海中总能闪现出产品设计的好点子,并能敏锐地发现它的商业价值?你是否想在一个为数亿人提供信息的平台上一展宏图,让自己的创意设计为亿万网民提供便捷服务?百度高校互联网产品设计大赛为你提供这样一个机会。 大赛旨在让高校的学生,通过从市场需求、竞争环境分析,…

Lchild2011/3/9SearchEngine最后回复 2011/3/22· g43855816
2
镜像想用Java做个数据搜索引擎,数据量比较大,求架构推荐!

想用Java做个数据搜索引擎,数据量比较大,求整个架构的推荐(比较适合的Java开源项目等),谢谢!

tangdi2010/12/15SearchEngine最后回复 2011/3/17· michael2008
2
镜像发现微软的onenote可以对图片和音视频进行搜索

输入关键字,图片和音视频里的内容也能搜索 比如说一个图片上有linux这几个字,也能搜出来。 我觉得这个太牛逼了。

left2011/1/15SearchEngine最后回复 2011/3/6· hlily
4
镜像现在搞搜索引擎还有前途么?

主要是现在感觉这块已经很成熟了啊。。。。 各位有啥意见么?

jajaa2010/12/3SearchEngine最后回复 2011/1/6· CMD
13
镜像请教网络爬虫

我想用C++写一个小的网络爬虫程序,现在遇到以下困难: 不知道如何从html里获取url,估计这也是最核心的一部分,请问有开源的库或者之类的工具吗,谢谢~~~

ClearRiver2010/1/16SearchEngine最后回复 2011/1/4· shirdrn
10
镜像有没有正在研究或以前研究过nutch源码的同学

欢迎站内联系,学习交流

hsb113222010/10/16SearchEngine最后回复 2011/1/4· shirdrn
3
镜像谁有关于文字多模式匹配的资料 给发一份 大过节的 谢了

lucifiery@gmail.com

xmilier2010/12/31SearchEngine最后回复 2011/1/3· RookieBoy
1
镜像关于luceneweb中文检索的问题……

下载了最新的个lucene3.0.2版本的,放在tomcat下都配置好了,可是为什么还不支持中文检索?

jyjyjy19892010/12/22SearchEngine最后回复 2010/12/31· simonsu
2
镜像google支持元搜索不?

自己构建的查询url,用python去请求,请求不到结果,但用浏览器访问构造的url则没问题。

RookieBoy2010/12/5SearchEngine最后回复 2010/12/22· RookieBoy
2
镜像关于Google scholar

小弟正着手看看一些有关专业的外文论文 因此想试试Google scholar的论文搜索 发现找的都要钱 听同学说有免费的 那么免费的是怎么找呢 还有 我邮图书馆貌似有链接进去 但是貌似还要收费 那是神马思想感情 谢谢各位的给力解答

defender2010/12/21SearchEngine最后回复 2010/12/21· defender
2
镜像密码忘了~~如何查看,搜狗浏览器智能填表的密码~~

rt~求大牛帮忙~~在哪个文件里呢~~

dovebupt2010/12/19SearchEngine最后回复 2010/12/20· Xer
1
镜像请问Heritrix怎么抓取需要用户名密码验证的网页?

请问如何抓取必须需要用户名和密码的网页~~ 谢谢~

tiangan3342010/8/16SearchEngine最后回复 2010/12/17· kofgods
1
镜像“GoogleCoder-谷歌开发者联盟”网站开通

“GoogleCoder-谷歌开发者联盟”专注于Google API以及Google相关软件开发及应用,有对此有兴趣的不妨去看看。 网址:www.googlecoder.org[em4]

kuangjuan2010/5/2SearchEngine最后回复 2010/12/4· kuangjuan
3