返回信息流菜鸟求助:ubuntu下nutch抓取的数据如何导入MySQL中,求高人指点。还是就是nutch抓出来的数据是2进制的,如何才能让这些2进制数据变成纯文本模式!谢谢大家啦
这是一条镜像帖。来源:北邮人论坛 / search-engine / #10941同步于 2012/3/24
该镜像源已超过 30 天没有更新,可能在源站已被删除。
SearchEngine机器人发帖
菜鸟求助:ubuntu下nutch抓取的数据如何导入MySQL中
loujiazuo
2012/3/24镜像同步3 回复
订阅后,新回复会通过你的通知中心匿名送达。
3 条回复
nutch抓出来的数据是2进制的,如何才能让这些2进制数据变成纯文本模式.这个试着转码就行了。。导入到mysql要转化为字符串,二进制数存数据库没人这样做的。用相应的语言下面连接数据库,写sql insert
谢谢啦。
【 在 zhihao 的大作中提到: 】
: nutch抓出来的数据是2进制的,如何才能让这些2进制数据变成纯文本模式.这个试着转码就行了。。导入到mysql要转化为字符串,二进制数存数据库没人这样做的。用相应的语言下面连接数据库,写sql insert
可以使用nutch自身的命令:bin/nutch readseg -dump crawl/segments/2012021030210/ segdb,其中crawl文件夹是你爬取的信息存放的位置,也就是那个二进制文件的路径,segdb是导出之后文件的存放路径,里面还有其他参数,可以到网上查一下具体的使用方法