7. 常用分词工具包

名称	星	更新	活跃	费用
jieba-结巴分词	stars-jieba	commit-jieba	activity-jieba	免费
HanLP-汉语言处理包	stars-hanlp	commit-hanlp	activity-hanlp	免费
SnowNLP-中文的类库	stars-snownlp	commit-snownlp	activity-snownlp	免费
pkuseg-北大多领域分词	stars-pkuseg	commit-pkuseg	activity-pkuseg	免费
NLPIR-中科院汉语分词	stars-nlpir	commit-nlpir	activity-nlpir	付费
FoolNLTK-中文处理	stars-foolnltk	commit-foolnltk	activity-foolnltk	免费
pyltp-哈工大语言云	stars-pyltp	commit-pyltp	activity-pyltp	商用付费
THULAC-清华词法分析	stars-thulac	commit-thulac	activity-thulac	商用付费
Jiagu-甲骨NLP	stars-jiagu	commit-jiagu	activity-jiagu	免费

名称	分词	词性	实体	情感	提炼	并行	词典
jieba 结巴分词	√	√	×	×	√	√	√
pkuseg-北大多领域分词	√	×	×	×	×	√	√
FoolNLTK	√	√	√	×	×	√	√
HanLP-汉语言处理包	√	√	√	√	√	×	√

7.1. ## 菜单

• 7.1.1. FoolNLTK
  • 7.1.1.1. 特点
  • 7.1.1.2. 定制自己的模型
  • 7.1.1.3. 安装
  • 7.1.1.4. 使用说明
  • 7.1.1.5. 其他语言版本
  • 7.1.1.6. 注意
• 7.1.2. train
• 7.1.3. JieBa
  • 7.1.3.1. 特点
  • 7.1.3.2. 友情链接
  • 7.1.3.3. 安装说明
  • 7.1.3.4. 算法
  • 7.1.3.5. 主要功能
  • 7.1.3.6. 延迟加载机制
  • 7.1.3.7. 其他词典
  • 7.1.3.8. 其他语言实现
  • 7.1.3.9. 系统集成
  • 7.1.3.10. 分词速度
  • 7.1.3.11. 常见问题
  • 7.1.3.12. 修订历史
• 7.1.4. CppJieba
  • 7.1.4.1. 特性
  • 7.1.4.2. 用法
  • 7.1.4.3. Demo
  • 7.1.4.4. 其它词典资料分享
  • 7.1.4.5. 应用
  • 7.1.4.6. 线上演示
  • 7.1.4.7. 性能评测
  • 7.1.4.8. 客服
  • 7.1.4.9. 鸣谢
  • 7.1.4.10. 许可证
  • 7.1.4.11. 作者
• 7.1.5. NodeJieba
  • 7.1.5.1. 介绍
  • 7.1.5.2. 特点
  • 7.1.5.3. 下载
  • 7.1.5.4. 用法
  • 7.1.5.5. 测试
  • 7.1.5.6. 应用
  • 7.1.5.7. 性能评测
  • 7.1.5.8. 在线演示
  • 7.1.5.9. Windows 安转
  • 7.1.5.10. 客服
  • 7.1.5.11. 许可证
  • 7.1.5.12. 鸣谢
  • 7.1.5.13. 作者
• 7.1.6. HanLP
  • 7.1.6.1. 项目主页
  • 7.1.6.2. 下载与配置
  • 7.1.6.3. 调用方法
  • 7.1.6.4. 词典说明
  • 7.1.6.5. 版权
• 7.1.7. Jcseg logo
  • 7.1.7.1. # Jcseg是什么？
  • 7.1.7.2. # Jcseg核心功能：
  • 7.1.7.3. # Jcseg中文分词：
  • 7.1.7.4. # Jcseg快速体验：
  • 7.1.7.5. Jcseg Maven仓库：
  • 7.1.7.6. # Jcseg lucene分词接口：
  • 7.1.7.7. # Jcseg solr分词接口：
  • 7.1.7.8. # Jcseg elasticsearch接口：
  • 7.1.7.9. # Jcseg分词服务器:
  • 7.1.7.10. # Jcseg二次开发:
  • 7.1.7.11. 相关附录
• 7.1.8. Jiagu
  • 7.1.8.1. 目录
  • 7.1.8.2. 附录
• 7.1.9. Keras
• 7.1.10. x_train and y_train are Numpy arrays –just like in the Scikit-Learn API.
• 7.1.11. PyTorch
• 7.1.12. SnowNLP
  • 7.1.12.1. Features
  • 7.1.12.2. Get It now
  • 7.1.12.3. 关于训练
  • 7.1.12.4. License
• 7.1.13. spacy
• 7.1.14. 斯坦福-StanfordNLP
  • 7.1.14.1. 参考
  • 7.1.14.2. 问题和使用问答
  • 7.1.14.3. 安装
  • 7.1.14.4. 运行 StanfordNLP
  • 7.1.14.5. 训练自己的神经管道
  • 7.1.14.6. 执照
• 7.1.15. 清华-THULAC
  • 7.1.15.1. 软件简介
  • 7.1.15.2. 在线演示
  • 7.1.15.3. 编译和安装
  • 7.1.15.4. 使用方式
  • 7.1.15.5. 与代表性分词软件的性能对比
  • 7.1.15.6. 词性标记集
  • 7.1.15.7. THULAC 的不同配置
  • 7.1.15.8. 获取链接
  • 7.1.15.9. 注意事项
  • 7.1.15.10. 历史
  • 7.1.15.11. 开源协议
  • 7.1.15.12. 相关论文
  • 7.1.15.13. 常见问题
  • 7.1.15.14. 致谢
• 7.1.16. TensorFlow
• 7.1.17. Ansj 中文分词
  • 7.1.17.1. 摘要
  • 7.1.17.2. 下载 jar
  • 7.1.17.3. maven
  • 7.1.17.4. 调用 demo
  • 7.1.17.5. Join Us
• 7.1.18. 👍🏻 表库
  • 7.1.18.1. 语言库
  • 7.1.18.2. 服务
  • 7.1.18.3. 注释工具
• 7.1.19. 玻森数据
• 7.1.20. 哈工大-LTP
• 7.1.21. 中科院-NLPIR
  • 7.1.21.1. 功能
  • 7.1.21.2. 新词识别与自适应分词功能
  • 7.1.21.3. 用户专业词典功能
• 7.1.22. NLTK
• 7.1.23. 北大-pkuseg
  • 7.1.23.1. 主要亮点
  • 7.1.23.2. 编译和安装
  • 7.1.23.3. 使用方式
  • 7.1.23.4. 预训练模型
  • 7.1.23.5. 各类分词工具包的性能对比
  • 7.1.23.6. 版本历史
  • 7.1.23.7. 开源协议
  • 7.1.23.8. 相关论文
  • 7.1.23.9. 常见问题及解答
  • 7.1.23.10. 作者
• 7.1.24. scikit-learn
  • 7.1.24.1. 安装
  • 7.1.24.2. 更新日志
  • 7.1.24.3. 发展
  • 7.1.24.4. 项目历史
  • 7.1.24.5. 帮助和支持
• 7.1.25. sego
  • 7.1.25.1. 安装/更新
  • 7.1.25.2. 使用