Python语言检测模块langid和langdetect的使用实例
更新时间：2019年02月19日 15:45:12 作者：Together_CZ
今天小编就为大家分享一篇关于Python语言检测模块langid和langdetect的使用实例，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧
之前使用数据编码风格检测的模块chardet比较多一点，今天提到的两个模块是检测数据的语言类型，比如是：中文还是英文，模块的使用方法也比较简单，我这里只是简单地使用了一下，因为项目中有这个需求，所以拿来用了一下，并没有深入地去研究这两个模块，模块的地址链接我都给出来了，需要的话可以去研究下：
def langidFunc():
'''
https://github.com/yishuihanhan/langid.py
'''
print langid.classify("We Are Family")
print langid.classify("Questa e una prova")
print langid.classify("我们都有一个家")
identifier=LanguageIdentifier.from_modelstring(model,norm_probs=True)
print identifier.classify("We Are Family")
def langdetectFunc():
'''
https://github.com/yishuihanhan/langdetect
'''
s1=u"本篇文章主要介绍两款语言探测工具，用于区分文本到底是什么语言，"
s2=u'We are pleased to introduce today a new technology'
print detect(s1)
print detect(s2)
print detect_langs(s2) # detect_langs()输出探测出的所有语言类型及其所占的比例
print detect_langs("Otec matka syn.")
结果如下：
('en', 9.061840057373047)
('it', -35.41771221160889)
('zh', -85.79573845863342)
('en', 0.16946150595865334)
zh-cn
en
[en:0.999998109575]
[pl:0.571426592237, fi:0.428568772028]
总结
以上就是这篇文章的全部内容了，希望本文的内容对大家的学习或者工作具有一定的参考学习价值，谢谢大家对脚本之家的支持。如果你想了解更多相关内容请查看下面相关链接
相关文章
Python中包含了许多内建的语言特性，它们使得代码简洁且易于理解。这些特性包括列表/集合/字典推导式，属性（property）、以及装饰器（decorator）。对于大部分特性来说，这些“中级”的语言特性有着完善的文档，并且易于学习。但是这里有个例外，那就是描述符。2016-02-02
今天小编就为大家分享一篇python 根据时间来生成唯一的字符串方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-01-01
这篇文章主要介绍了PyQt5 python 数据库 表格动态增删改详情，首先手动连接数据库与下一个的程序连接数据库是独立的2个部分，下面来看看文章的详细介绍2022-01-01
Python数学建模库StatsModels统计回归简介初识
这篇文章主要为大家介绍了Python数学建模库StatsModels统计回归的基本概念，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝打击多多进步2021-10-10
这篇文章主要介绍了python中重启for循环，使其重新开始遍历方式，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2023-03-03
NumPy（Numerical Python）是Python的一种开源的数值计算扩展。本文将利用NumPy库绘制利萨茹曲线、计算斐波那契数列、方波和锯齿波和三角波，需要的可以参考一下2022-06-06
这篇文章主要介绍了ElasticSearch Python 使用示例详解,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧2025-04-04
这篇文章主要为大家详细介绍了python实现机器人行走效果，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2018-01-01
列表推导式和生成器都是Python中处理集合的强大工具,列表推导式用于快速生成列表,而生成器表达式则提供了一种节约内存的方式来处理大型数据集,下面就来介绍一下python实现列表推导式与生成器,感兴趣的可以了解一下2024-09-09
这篇文章主要介绍了Pyinstaller打包Scrapy项目的实现步骤，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2020-09-09
最新评论