Python 自然语言处理
Posted Herokk
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python 自然语言处理相关的知识,希望对你有一定的参考价值。
一. 中文分词技术
中文自动分词可主要归纳为“规则分词”“统计分词”和“混合分词”,规则分词主要是通过人工设立词库,按照一定方式进行匹配切分,实现简单高效,但对新词很难进行处理,统计分词能够较好应对新词发现能特殊场景,但太过于依赖语料的质量,因此实践中多是采用两者的结合,即混合分词。
1.1 规则分词
以上是关于Python 自然语言处理的主要内容,如果未能解决你的问题,请参考以下文章