词义消歧

Posted shanesun

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了词义消歧相关的知识,希望对你有一定的参考价值。

词义消歧:在自然语言中,一词多义现象普遍存在,如何区分不同上下文中的词汇语义,就是词汇歧义消解问题,或称词义消歧(word sense disambiguation,WSD)

基本思路:每个词表达不同含义时,其上下文(语境)往往不同,因此可以根据上下文信息区分词义

基本上下文信息包括:词、词性、位置等;如对于打字:他/P 很/D 会/V 与/C 人/N 打/V 交道/N 。/PU

方法1:基于贝叶斯分类器


假设某个多义词w的上下文为C,如果w的多个语义记为si,那么可以通过计算argmaxsi p(si|C)来确定w的词义

根据贝叶斯公式 p(si|C)= ( frac {a}{b} )


以上是关于词义消歧的主要内容,如果未能解决你的问题,请参考以下文章

使用 WEKA 进行词义消歧

NLP第十篇-语义分析

自然语言处理之使用gensim.Word2Vec训练词向量进行词义消歧

自然语言处理NLP之主题模型LDA(Latent Dirichlet Allocation)语义分析词义消歧词语相似度

第八篇:词汇语义

NLP入门资料