如何在 PMID 列中使用 TF-IDF

Posted

技术标签:

【中文标题】如何在 PMID 列中使用 TF-IDF【英文标题】:How to use TF-IDF in PMID columns 【发布时间】:2021-04-30 04:44:56 【问题描述】:

数据框:

代码:

def word_count(sentence):
    return len(sentence.split())
    
df['word_count'] = df['PMID'].apply(word_count)
df.tail(10)

【问题讨论】:

考虑添加更多关于您的问题以及您已经尝试过的事情的详细信息。 @Pradeep Pariyar 我的回答有用吗? 【参考方案1】:

您可以使用TfidfVectorizer。

from sklearn.feature_extraction.text import TfidfVectorizer

v = TfidfVectorizer()
x = v.fit_transform(df['PMID'])

【讨论】:

以上是关于如何在 PMID 列中使用 TF-IDF的主要内容,如果未能解决你的问题,请参考以下文章

如何在 Lucene 中实现 tf-idf 和余弦相似度?

使用analyzer ='char'如何计算Tf-Idf值?

如何使用 TF-IDF 向量选择前 1000 个单词?

如何使用 , 和 : Oracle 中的分隔符将 CLOB 对象拆分为多条记录

如何在 R 中为 tf-idf 加权 dfm 训练朴素贝叶斯分类器?

如何使用 tf-idf 选择停用词? (非英语语料库)