python —— 文本特征提取 CountVectorize

Posted Amysear

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python —— 文本特征提取 CountVectorize相关的知识,希望对你有一定的参考价值。

CountVectorize

来自:python学习 文本特征提取(二) CountVectorizer TfidfVectorizer 中文处理 - CSDN博客

https://blog.csdn.net/shuihupo/article/details/80930801

常用数据输入形式为:列表,列表元素为代表文章的字符串,一个字符串代表一篇文章,字符串是已经分割好的

CountVectorizer同样适用于中文

参数表作用
stop_words 停用词表;自定义停用词表
token_pattern 过滤规则;

 

属性表作用
vocabulary_ 词汇表;字典型
get_feature_names() 所有文本的词汇;列表型
stop_words_ 返回停用词表

CountVectorizer是通过fit_transform函数将文本中的词语转换为词频矩阵,矩阵元素a[i][j] 表示j词在第i个文本下的词频。即各个词语出现的次数,通过get_feature_names()可看到所有文本的关键字,通过toarray()可看到词频矩阵的结果。

方法表作用
fit_transform(X) 拟合模型,并返回文本矩阵

以上是关于python —— 文本特征提取 CountVectorize的主要内容,如果未能解决你的问题,请参考以下文章

文本特征提取专题_以python为工具Python机器学习系列

机器学习之路:python 文本特征提取 CountVectorizer, TfidfVectorizer

使用Python的文本挖掘的特征选择/提取

python 从文本中提取特征

了解python scikit-learn中的文本特征提取TfidfVectorizer

文本特征提取