Elasticsearch系列(三)mapping详解

梦里梦外; 2022-03-22 06:52 212阅读 0赞

### 一、前言 ###

> Elasticsearch中mapping创建类似MYSQL中的表schema，本文大致记录下ES中mapping创建遇到的一些问题，供彼此学习，更多的请查看官网。

[Elasticsearch-mapping][]

### 一、示例分析 ###

curl -XPUT "http://localhost:9200/rate" -H 'Content-Type: application/json' -d'
    {
        "settings" : {
            "refresh_interval": "10s"，
            "index.mapper.dynamic": false
        },
        "mappings": {
                "rate": {
                    "properties": {
                        "accountInfo": {
                            "type": "text",
                            "index": false
                        },
                        "createTime": {
                            "type": "long"
                        }，
                        "text": {
                            "type": "text",
                            "analyzer": "ik_max_word",
                            "search_analyzer": "ik_max_word"
                        },
                        "rateReply": {
                            "type": "text",
                            "fields": {
                                "keyword": {
                                    "type": "keyword",
                                    "ignore_above": 256
                                }
                            }
                        },
                    }
                }
            }
    }'

mappings 中field定义选择

"field": {  
             "type":  "text", //文本类型  
             
             "index": "analyzed"//分词，不分词是：not_analyzed ，设置成false，字段将不会被索引  
             
             "analyzer":"ik"//指定分词器  
             
             "boost":1.23//字段级别的分数加权  
             
             "doc_values":false//对not_analyzed字段，默认都是开启，analyzed字段不能使用，对排序和聚合能提升较大性能，节约内存,如果您确定不需要对字段进行排序或聚合，或者从script访问字段值，则可以禁用doc值以节省磁盘空间：
             
             "fielddata":{"loading" : "eager" }//Elasticsearch 加载内存 fielddata 的默认行为是 延迟 加载 。 当 Elasticsearch 第一次查询某个字段时，它将会完整加载这个字段所有 Segment 中的倒排索引到内存中，以便于以后的查询能够获取更好的性能。
             
             "fields":{"keyword": {"type": "keyword","ignore_above": 256}} //可以对一个字段提供多种索引模式，同一个字段的值，一个分词，一个不分词  
             
             "ignore_above":100 //超过100个字符的文本，将会被忽略，不被索引
               
             "include_in_all":ture//设置是否此字段包含在_all字段中，默认是true，除非index设置成no选项  
             
             "index_options":"docs"//4个可选参数docs（索引文档号） ,freqs（文档号+词频），positions（文档号+词频+位置，通常用来距离查询），offsets（文档号+词频+位置+偏移量，通常被使用在高亮字段）分词字段默认是position，其他的默认是docs  
             
             "norms":{"enable":true,"loading":"lazy"}//分词字段默认配置，不分词字段：默认{"enable":false}，存储长度因子和索引时boost，建议对需要参与评分字段使用 ，会额外增加内存消耗量  
             
             "null_value":"NULL"//设置一些缺失字段的初始化值，只有string可以使用，分词字段的null值也会被分词  
             
             "position_increament_gap":0//影响距离查询或近似查询，可以设置在多值字段的数据上火分词字段上，查询时可指定slop间隔，默认值是100  
             
             "store":false//是否单独设置此字段的是否存储而从_source字段中分离，默认是false，只能搜索，不能获取值  
             
             "search_analyzer":"ik"//设置搜索时的分词器，默认跟ananlyzer是一致的，比如index时用standard+ngram，搜索时用standard用来完成自动提示功能  
             
             "similarity":"BM25"//默认是TF/IDF算法，指定一个字段评分策略，仅仅对字符串型和分词类型有效  
             
             "term_vector":"no"//默认不存储向量信息，支持参数yes（term存储），with_positions（term+位置）,with_offsets（term+偏移量），with_positions_offsets(term+位置+偏移量) 对快速高亮fast vector highlighter能提升性能，但开启又会加大索引体积，不适合大数据量用  
           }

**官网字段解释：**

[fielddata][]

[doc\_values][doc_values]

[norms][]

看完上面mappings的设计，可以思考以下几个问题？

1、ES中日期类型字段如何设计？  
2、ES中字段分词器设置？存储分词和搜索分词？  
3、ES中字段是否建立索引设置？  
4、ES中字段评分设置？

### 二、Dynamic Mapping ###

ES - Mapping中如果要新增字段，ES会进行自动映射字段的类型，我们可以自定义字段映射的规则，也可以禁止ES自动创建没有字段的mapping

"settings" : {
            "index.mapper.dynamic": false
        }

[Dynamic Mapping][]

[ES映射][ES]

[Elasticsearch-mapping]: https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping.html
[fielddata]: https://www.elastic.co/guide/cn/elasticsearch/guide/current/preload-fielddata.html#preload-fielddata
[doc_values]: https://www.elastic.co/guide/en/elasticsearch/reference/5.4/doc-values.html
[norms]: https://www.elastic.co/guide/en/elasticsearch/reference/5.5/norms.html
[Dynamic Mapping]: https://www.elastic.co/guide/en/elasticsearch/reference/5.5/dynamic-mapping.html#_disabling_automatic_type_creation
[ES]: https://es.xiaoleilu.com/052_Mapping_Analysis/45_Mapping.html