Python语言检测模块langid和langdetect的使用实例
更新时间：2019年02月19日 15:45:12 作者：Together_CZ
今天小编就为大家分享一篇关于Python语言检测模块langid和langdetect的使用实例，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧
之前使用数据编码风格检测的模块chardet比较多一点，今天提到的两个模块是检测数据的语言类型，比如是：中文还是英文，模块的使用方法也比较简单，我这里只是简单地使用了一下，因为项目中有这个需求，所以拿来用了一下，并没有深入地去研究这两个模块，模块的地址链接我都给出来了，需要的话可以去研究下：
def langidFunc():
'''
https://github.com/yishuihanhan/langid.py
'''
print langid.classify("We Are Family")
print langid.classify("Questa e una prova")
print langid.classify("我们都有一个家")
identifier=LanguageIdentifier.from_modelstring(model,norm_probs=True)
print identifier.classify("We Are Family")
def langdetectFunc():
'''
https://github.com/yishuihanhan/langdetect
'''
s1=u"本篇文章主要介绍两款语言探测工具，用于区分文本到底是什么语言，"
s2=u'We are pleased to introduce today a new technology'
print detect(s1)
print detect(s2)
print detect_langs(s2) # detect_langs()输出探测出的所有语言类型及其所占的比例
print detect_langs("Otec matka syn.")
结果如下：
('en', 9.061840057373047)
('it', -35.41771221160889)
('zh', -85.79573845863342)
('en', 0.16946150595865334)
zh-cn
en
[en:0.999998109575]
[pl:0.571426592237, fi:0.428568772028]
总结
以上就是这篇文章的全部内容了，希望本文的内容对大家的学习或者工作具有一定的参考学习价值，谢谢大家对脚本之家的支持。如果你想了解更多相关内容请查看下面相关链接
相关文章
xpath是最常用且最便捷高效的一种解析方式，通用型强，其不仅可以用于python语言中，还可以用于其他语言中，数据解析建议首先xpath2021-09-09
Python 的 httpx 包是一个用于 HTTP 交互的一个优秀且灵活的模块。本文进行详细的讲解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2022-03-03
这篇文章主要介绍了Python中的null是什么,Python中其实没有null这个词，取而代之的是None对象，即特殊类型NoneType，代表空、没有，本文通过实例代码给大家介绍的非常详细，需要的朋友可以参考下2022-09-09
这篇文章主要介绍了基于python的图像Gabor变换及特征提取，本文通过图文并茂的形式给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友参考下吧2020-10-10
今天小编就为大家分享一篇Pytorch 中retain_graph的用法详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-01-01
小编最近快毕业了，闲着无事学习下python的内容在学习到requsets库的导入问题时遇到一些问题，通过查找相关资料问题顺利解决，今天小编把问题解决思路及注意事项分享给大家供大家参考学习2021-05-05
本文主要介绍了纯numpy卷积神经网络实现手写数字识别的实践，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2022-08-08
与from和import相比,reload是内置函数,而不是语句，下面这篇文章主要给大家介绍了关于python中reload(module)用法的相关资料，文中给出了详细的示例代码供大家参考学习，需要的朋友们下面来一起看看吧。2017-09-09
在本篇内容中小编给大家整理的是关于python爬虫要用到的库总结内容，需要的朋友们可以学习下。2020-07-07
这篇文章主要介绍了python如何用moviepy对视频进行简单的处理，帮助大家更好的利用python处理视频，感兴趣的朋友可以了解下2021-03-03
最新评论