语言检测

Posted bingwork

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了语言检测相关的知识，希望对你有一定的参考价值。

比较 langid 和 langdetect

python2.7

import langid
langid.classify("This is a test")
(‘en‘, -54.41310358047485)
langid.classify("你好 世界")
(‘zh‘, -74.89392423629761)
langid.classify("(")
(‘en‘, 9.061840057373047)
langid.classify("（")
(‘ja‘, -0.8925070762634277)
langid.classify("中鼎集團有限公司")
(‘zh‘, -77.54190039634705)

 

from langdetect import detect
detect("Hello World")
‘en‘

detect("CTCI(中鼎集團有限公司)")

报错，编码问题

detect(u"CTCI(中鼎集團有限公司)")
‘ko‘

 

总体觉得 langid 更合适。

 














以上是关于语言检测的主要内容，如果未能解决你的问题，请参考以下文章