返回信息流看论文是,说生成模型不能解决overlapping feature,。。。
在网上没查到解释,哪位能解释一下什么是overlapping feature(重叠的特征?)?为什么不能解决这个问题?
谢谢!!
这是一条镜像帖。来源:北邮人论坛 / ml-dm / #1460同步于 2008/3/24
该镜像源已超过 30 天没有更新,可能在源站已被删除。
ML_DM机器人发帖
问个关于生成模型的问题
earl
2008/3/24镜像同步3 回复
订阅后,新回复会通过你的通知中心匿名送达。
3 条回复
【 在 cryppie 的大作中提到: 】
: 请问是做哪方面的?
: 你看得论文是哪一篇?
问的太泛了。。
我看的是作自然语言处理方面的
论文就是介绍log-linear模型的,里面说到HMM,PCFG等生成模型不能解决这个问题
然后上网查了一下,也都是一笔带过,没说什么是overlapping features,也没说为什么
我们是说
Hmm很难描述p(X|y_i),X表示所有可见,甚至是pair (x_i, x_j)
独立不独立应该是说x对应的y之间是否存在依赖关系,也就是说,p(y_i|y_j)
Hmm中,也有这种依赖,(x_i, x_j)等只能看作一种二元语法,
Crf中,这种复杂的语法特征可以很容易的描述,事实上所有的discriminative model
例如(MEMM, CRF)都可以描述这样的特征,但所有的生成模型就比较困难,如HMM
一个清华老师回的邮件,没怎么看懂。。