IK分词器扩展词停用词

叁歲伎倆 2024-05-05 07:48 62阅读 0赞

## 系列文章目录 ##

--------------------

#### 文章目录 ####

*  系列文章目录
 *  前言

--------------------

## 前言 ##

前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。[点击跳转到网站][Link 1]，这篇文章男女通用，看懂了就去分享给你的码吧。  
![在这里插入图片描述][d5970148c34f42a183c4adbc68279736.jpeg_pic_center]

--------------------

Elasticsearch 是一个分布式、RESTful 风格的搜索和数据分析引擎，能够解决不断涌现出的各种用例。 作为 Elastic Stack 的核心，它集中存储您的数据，帮助您发现意料之中以及意料之外的情况。

![在这里插入图片描述][5ed45df6ed0346dfa4a1e3dddc9b4670.png]

# 进入容器内部
    docker exec -it es /bin/bash
    # 查看文件
    cat /usr/share/elasticsearch/plugins/ik/config/IKAnalyzer.cfg.xml

内容

<?xml version="1.0" encoding="UTF-8"?>
    <!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd">
    <properties>
        <comment>IK Analyzer 扩展配置</comment>
        
        <entry key="ext_dict"></entry>
         
        <entry key="ext_stopwords"></entry>
        
        
        
        
    </properties>

这里需要定制自己的扩展词或者停用词，dic词典一行一个词，非常容易编辑。

问题是如果我是一个刚开始的项目，从哪里来那么多字典，就好像输入法需要安装词库。

我们可以去搜狗输入法官方下载一些词库

https://pinyin.sogou.com/dict/

下载后是一些.scel的文件，用文本是无法编辑的，此时需要一个工具来把他转为可用的词典

深蓝细胞词库scel转txt工具.rar

![在这里插入图片描述][b9ea672dec1544e689b94f234311281f.png]  
转换后安装到自己的插件中。

这是一个通用的做法，如果是你用的solr，也可以这样操作。

[Link 1]: https://www.captainbed.cn/talon
[d5970148c34f42a183c4adbc68279736.jpeg_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/1ff131486c384f1d808a93c67e546501.jpeg
[5ed45df6ed0346dfa4a1e3dddc9b4670.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/f6165f74b20849059c657fa89b8e6283.png
[b9ea672dec1544e689b94f234311281f.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/3c8591021c704f39ae9be98a8b0ef3a8.png