语言检测
Posted bingwork
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了语言检测相关的知识,希望对你有一定的参考价值。
比较 langid 和 langdetect
python2.7
import langid
langid.classify("This is a test")
(‘en‘, -54.41310358047485)
langid.classify("你好 世界")
(‘zh‘, -74.89392423629761)
langid.classify("(")
(‘en‘, 9.061840057373047)
langid.classify("(")
(‘ja‘, -0.8925070762634277)
langid.classify("中鼎集團有限公司")
(‘zh‘, -77.54190039634705)
from langdetect import detect
detect("Hello World")
‘en‘
detect("CTCI(中鼎集團有限公司)")
报错,编码问题
detect(u"CTCI(中鼎集團有限公司)")
‘ko‘
总体觉得 langid 更合适。
以上是关于语言检测的主要内容,如果未能解决你的问题,请参考以下文章