python分词工具使用

骑猪看日落 2022-01-28 12:17 172阅读 0赞

几款好用的分词工具，如 jieba, hanlp, synonyms  
参见

*  [准确实用，7个优秀的开源中文分词库推荐][7]
 *  [synonyms：中文近义词工具包][synonyms]

# hanlp #

官网：[http://hanlp.com][http_hanlp.com]

## 安装 ##

1.  `pip install pyhanlp`
2.  若报错“缺少VC++组件”，则需要在 [https://www.lfd.uci.edu/~gohlke/pythonlibs/][https_www.lfd.uci.edu_gohlke_pythonlibs] 网站找到JPype1-0.6.2-cp36-cp36m-win\_amd64.whl ，点击下载，当下载地址输入`pip install JPype1-0.6.3-cp36-cp36m-win_amd64.whl`，再重复上一步。  
    【[python的java胶水(jpype1)][python_java_jpype1]】
3.  若报错“No JVM shared library file (jvm.dll) found”，需要安装JDK  
    【[NLP第2课：中文分词利器 jieba 和 HanLP][NLP_2_ jieba _ HanLP]】【[JDK下载][JDK]】
4.  通过`hanlp --version`获取hanlp路径，将hanlp-release.zip解压的文件和data放入路径中，并修改hanlp.properties的绝对路径 。  
    【[hanlp-release.zip下载][hanlp-release.zip]】

## 参考资料 ##

*  通过Java调用hanlp：[自然语言处理之hanlp，Python调用与构建][hanlp_Python]
 *  官网：[自然语言处理工具包HanLP的Python接口][HanLP_Python]
 *  情感分析：[pyhanlp 文本分类与情感分析][pyhanlp]

## 情感分析 ##

[自然语言情感分析之jieba分词][jieba]

[7]: https://blog.csdn.net/liyongzhi1992/article/details/81316815
[synonyms]: https://php.ctolib.com/article/wiki/73751
[http_hanlp.com]: http://hanlp.com
[https_www.lfd.uci.edu_gohlke_pythonlibs]: https://www.lfd.uci.edu/~gohlke/pythonlibs/
[python_java_jpype1]: https://www.cnblogs.com/xypbk/p/8805794.html
[NLP_2_ jieba _ HanLP]: https://www.jianshu.com/p/009671e56027
[JDK]: https://www.cnblogs.com/renqiqiang/p/6822143.html
[hanlp-release.zip]: https://github.com/hankcs/HanLP/releases
[hanlp_Python]: https://blog.csdn.net/HHTNAN/article/details/81908451
[HanLP_Python]: https://github.com/hankcs/pyhanlp
[pyhanlp]: https://blog.csdn.net/FontThrone/article/details/82831801
[jieba]: https://blog.csdn.net/ziyonghong/article/details/83926800