由FastText提供的闪电般的快速语言预测。
whatlang的Python项目详细描述
http://www.apache.org/licenses/license-2.0
对于许可证下的特定语言管理权限和限制。
描述:whatlang
==
Lightning Fast语言预测:rocket:
Dependencies
==
必须安装以下依赖项。
```
$pip install future==0.16.0
$pip install cython==0.27.2
$pip install cysignals==1.6.5
$pip install pyfasttext==0.4.3
```
====
>使用"whatlang"预测语言
``python
>;>from whatlang import whatlang
>;>wl=whatlang()
>;>wl.predict_lang("母亲")
"恩"
>;>wl.predict_lang(u"2980;__)"
"塔"
>;>wl.predict_lang(u"____")
'ml'
``````
`>还支持批预测
```python
>;&wl predict_lang(["english sentence",u"__"]
['en','ml']
```
支持的语言相应语言的iso代码如下。
```
af als am an ar arz as ast av azb ba bar bcl be bg bh bn bo bpy br bs bxr ca cbk
ce ceb ckb co cs cv cy da de diq dsb dty dv el eml en eo es et eu fa fi fr fy ga
gd glGN Gom gu gv he hi hif hr hsb ht hu hy ia id ie ilo io is it ja jbo jbo ka kk km
kn ko krc ku kv kw ky la lb lez li lmo lo lrc lt lv mai mg mhr min mk ml mn mrj ms
mt mwl my myv mzn nah nap nds ne new nl nn no oc or os pa pam pfl pl pms pnb ps pt qu
rm ro rurue sa sah sc scn sco sd sh si sk sl so sq sr su sv sw ta tg th tk tl tr
tt tyv ug uk ur uz vep vi vls vo wa war wu xal xmf yi yo yue zh
```
参考
===
``whatlang``由`` FastText``
[*用子词信息充实词向量*](https://arxiv.org/abs/1607.04606)
`````
@文章{bojanowski2016充实,
标题{用子词信息充实词向量},
作者{bojanowski,piotr和grave,Edouard和Joulin,Armand和Mikolov,Tomas},
Journal={arxiv preprint arxiv:1607.04606},
Year={2016}
}
``````
P.Bojanowski,T.Mikolov,[*高效文本分类技巧包*](https://arxiv.org/abs/1607.01759)
````
@文章{joulin2016bag,
标题{高效文本分类技巧包},
作者{Joulin,Armand和Grave,edouard和bojanowski,piotr和mikolov,tomas},
期刊{arxiv预印本arxiv:1607.01759},
年份{2016}
}
``````
Bojanowski,M.Douze,H.Jégou,T.Mikolov,[*fasttext.zip:压缩文本分类模式ELS*](https://arxiv.org/abs/1612.03651)
`````
@文章{joulin2016fasttext,
标题{fasttext.zip:压缩文本分类模型},
作者{joulin,armand and grave,edouard and bojanowski,piotr and douze,matthijs and j{e}gou,h{e}rve和mikolov,tomas},
日志={arxiv预印本arxiv:1612.03651},
年份={2016}
}
```
关键词:语言检测库
平台:未知
分类器:开发状态::5-生产/稳定
分类器:预期受众::开发人员
分类器:许可证::OSI批准::Apache软件许可证
分类器:操作系统::操作系统无关
分类器:编程语言::python::2
分类器:编程语言::python::2.7
分类器:编程语言::python::3
分类器:编程语言::python::3.4
分类器:编程语言::python::3.5
分类器:编程语言::python::3.6
对于许可证下的特定语言管理权限和限制。
描述:whatlang
==
Lightning Fast语言预测:rocket:
Dependencies
==
必须安装以下依赖项。
```
$pip install future==0.16.0
$pip install cython==0.27.2
$pip install cysignals==1.6.5
$pip install pyfasttext==0.4.3
```
====
>使用"whatlang"预测语言
``python
>;>from whatlang import whatlang
>;>wl=whatlang()
>;>wl.predict_lang("母亲")
"恩"
>;>wl.predict_lang(u"2980;__)"
"塔"
>;>wl.predict_lang(u"____")
'ml'
``````
`>还支持批预测
```python
>;&wl predict_lang(["english sentence",u"__"]
['en','ml']
```
支持的语言相应语言的iso代码如下。
```
af als am an ar arz as ast av azb ba bar bcl be bg bh bn bo bpy br bs bxr ca cbk
ce ceb ckb co cs cv cy da de diq dsb dty dv el eml en eo es et eu fa fi fr fy ga
gd glGN Gom gu gv he hi hif hr hsb ht hu hy ia id ie ilo io is it ja jbo jbo ka kk km
kn ko krc ku kv kw ky la lb lez li lmo lo lrc lt lv mai mg mhr min mk ml mn mrj ms
mt mwl my myv mzn nah nap nds ne new nl nn no oc or os pa pam pfl pl pms pnb ps pt qu
rm ro rurue sa sah sc scn sco sd sh si sk sl so sq sr su sv sw ta tg th tk tl tr
tt tyv ug uk ur uz vep vi vls vo wa war wu xal xmf yi yo yue zh
```
参考
===
``whatlang``由`` FastText``
[*用子词信息充实词向量*](https://arxiv.org/abs/1607.04606)
`````
@文章{bojanowski2016充实,
标题{用子词信息充实词向量},
作者{bojanowski,piotr和grave,Edouard和Joulin,Armand和Mikolov,Tomas},
Journal={arxiv preprint arxiv:1607.04606},
Year={2016}
}
``````
P.Bojanowski,T.Mikolov,[*高效文本分类技巧包*](https://arxiv.org/abs/1607.01759)
````
@文章{joulin2016bag,
标题{高效文本分类技巧包},
作者{Joulin,Armand和Grave,edouard和bojanowski,piotr和mikolov,tomas},
期刊{arxiv预印本arxiv:1607.01759},
年份{2016}
}
``````
Bojanowski,M.Douze,H.Jégou,T.Mikolov,[*fasttext.zip:压缩文本分类模式ELS*](https://arxiv.org/abs/1612.03651)
`````
@文章{joulin2016fasttext,
标题{fasttext.zip:压缩文本分类模型},
作者{joulin,armand and grave,edouard and bojanowski,piotr and douze,matthijs and j{e}gou,h{e}rve和mikolov,tomas},
日志={arxiv预印本arxiv:1612.03651},
年份={2016}
}
```
关键词:语言检测库
平台:未知
分类器:开发状态::5-生产/稳定
分类器:预期受众::开发人员
分类器:许可证::OSI批准::Apache软件许可证
分类器:操作系统::操作系统无关
分类器:编程语言::python::2
分类器:编程语言::python::2.7
分类器:编程语言::python::3
分类器:编程语言::python::3.4
分类器:编程语言::python::3.5
分类器:编程语言::python::3.6
标签: