标记器开发和评估工具
tokenizer-tools的Python项目详细描述
标记器工具
NLP的工具/实用程序(包括数据集读取、标记集编码和解码、度量计算)
- 自由软件:麻省理工学院许可证
- 文档:https://tokenizer-tools.readthedocs.io。
功能
- 合作
- 标签集
- 公司
待办事项
- 项目名称,标记器工具
学分
这个包是用Cookiecutter和audreyr/cookiecutter-pypackage项目模板创建的。
历史记录
0.1.0(2018-09-05)
- pypi上的第一个版本。