Python 自然语言处理

Posted Herokk

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python 自然语言处理相关的知识,希望对你有一定的参考价值。

一. 中文分词技术

中文自动分词可主要归纳为“规则分词”“统计分词”和“混合分词”,规则分词主要是通过人工设立词库,按照一定方式进行匹配切分,实现简单高效,但对新词很难进行处理,统计分词能够较好应对新词发现能特殊场景,但太过于依赖语料的质量,因此实践中多是采用两者的结合,即混合分词。

1.1 规则分词

 

以上是关于Python 自然语言处理的主要内容,如果未能解决你的问题,请参考以下文章

Python自然语言处理工具小结

Python中调用自然语言处理工具HanLP手记

Python自然语言处理实战核心技术与算法,Python自然语言处理,PyTorch深度学习实战下载

自然语言处理使用的工具——python

python and 我爱自然语言处理

Python | 自然语言处理