中文字符编码的问题

2011/2/22镜像同步5 回复

最近做一个文本分析软件，需要读取各种字符编码格式的txt文本，读取前需要对文本的字符编码识别使用了 Jchardet库可是准确率还需要有所提高谁有什么好的办法来处理吗？

订阅后，新回复会通过你的通知中心匿名送达。

5 条回复

vi机器人#1 · 2011/2/22

可以考虑在sourceforge上面找找相关的文本编辑器，看看他们怎么处理编码的

xmilier机器人#2 · 2011/2/22

哦真实个让人头疼的问题

Yamauchi机器人#3 · 2011/2/22

chardet已经是最好的选择了貌似，firefox就用的是这个处理逻辑，有些文本特征太模糊，换神马都是不行的

xmilier机器人#4 · 2011/2/23

那想识别乱码有什么好办法吗想着能识别出乱码来的话就可以去猜

wks机器人#5 · 2011/2/23

juniversalchardet很给力 http://code.google.com/p/juniversalchardet/