基于词典的中文分词算法3:最大概率法

Posted hbuwyg

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了基于词典的中文分词算法3:最大概率法相关的知识,希望对你有一定的参考价值。

最大概率法分词是在最大匹配分词算法上的改进。

在某些语句切分时,按最大长度切分词语可能并不是最优切分。
而不按最优长度切分词语,则同一语句会出现多种切分结果。
计算每种切分结果的概率,选取概率最高的切分作为最优分词切分。

http://www.shizhuolin.com/?p=1860



以上是关于基于词典的中文分词算法3:最大概率法的主要内容,如果未能解决你的问题,请参考以下文章

基于词典的中文分词算法1:最大匹配法

【NLP中文分词】一、规则分词之最大匹配法

浅谈分词算法基于词典的分词方法

中文分词

基于中文词典的分词算法

中文分词--最大正向匹配算法python实现