数学之美-2自然语言处理-从基于规则到基于统计的转变

Posted xuechengmeigui

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了数学之美-2自然语言处理-从基于规则到基于统计的转变相关的知识,希望对你有一定的参考价值。

序:任何一种语言都是信息编码的不同单位,语言的语法规则则是编解码的算法

1

 

技术图片

 

 技术图片

 

 存在的问题:文法覆盖规则太多,要人工写工程巨大,且就算写出涵盖所有自然语言处理现象的规则集合,用计算机解析也非常困难,于是出现了基于统计的NLP。

以上是关于数学之美-2自然语言处理-从基于规则到基于统计的转变的主要内容,如果未能解决你的问题,请参考以下文章

《数学之美》阅读小记

《数学之美》读书

读《数学之美》第三章 统计语言模型

《数学之美》——第二章 个人笔记

“数学之美”系列二:谈谈中文分词

统计语言模型