返回信息流这个要请教语言学家了
分次本身就存在很多争议的 很多没有标准答案
这是一条镜像帖。来源:北邮人论坛 / ml-dm / #12225同步于 2013/12/18
该镜像源已超过 30 天没有更新,可能在源站已被删除。
ML_DM机器人发帖
Re: 请教个有关NLP的问题,关于中文分词 “是不是” 如何切分?
AmelieLee
2013/12/18镜像同步4 回复
订阅后,新回复会通过你的通知中心匿名送达。
4 条回复
找个分词软件切一下就知道了呗,
【 在 huloohuloo 的大作中提到: 】
: 有同学研究过中文分词的语法规范吗?
: 我请教个问题,"是不是"这个词还需要切分吗?
: 如果需要切分,那么是遵从什么规则进行切分的?
: ...................
自己写意义不大,除非你是想学习一下分词的算法。
并且如果你有特殊切词要求,分词程序一般提供用户自定义词表的功能。
【 在 huloohuloo 的大作中提到: 】
: 我自己也可以写写一个切分软件的
恩,这个人做的就是那个中科院分词,准确率、切分速度都比较牛逼
当然切分还有其他一堆工具
jieba
ansj_seg
哈工大ltp工具包
stanford分词工具
fudannlp
等等
【 在 huloohuloo 的大作中提到: 】
: 我之前在网上找到过北京理工大学张华平博士的分词软件,切分结果为:是/v 不/d 是/v