百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 文章教程 > 正文

ES中的动态映射和动态模板(动态映射是什么意思)

yund56 2025-07-09 21:38 3 浏览

ES中的动态映射和动态模板

为了方便演示和切换 ES 地址,在 ~/.bashrc 中添加如下变量和脚本:

ES=localhost:9200 escurl () { curl -H 'Content-Type: application/json' "$@"; } 复制代码

Elasticsearch 具有非常强大的动态性和灵活性,例如当向一个不存在的索引添加文档时,会自动创建该索引,例如:

$ escurl -XPUT $ES/my_article/doc/1?pretty -d '
{
  "title": "标题",
  "createdAt": "2020-02-02T02:02:02.020Z",
  "wordCount": 100,
  "extra": {
    "deleted": false,
    "score": 8.5
  }
}'
复制代码

如果 my_article 索引不存在,则会自动创建 my_article 索引,并向其中添加数据,其数据结构为:

{
  "mappings": {
    "doc": {
      "properties": {
        "createdAt": { "type": "date" },
        "wordCount": { "type": "long" },
        "extra": {
          "properties": {
            "score": { "type": "float" },
            "deleted": { "type": "boolean" }
          }
        },
        "title": {
          "type": "text",
          "fields": {
            "keyword": {
              "ignore_above": 256,
              "type": "keyword"
            }
          }
        }
      }
    }
  }
}
复制代码

可以发现 ES 自动做了如下字段类型映射

  • title 字段映射成 text 类型
  • createdAt 字段映射成 date 类型
  • wordCount 字段映射成 long 类型
  • extra.score 字段映射成 float 类型
  • extra.deleted 字段映射成 boolean 类型

猜测非常准确,而且后续增加新字段还可以动态猜测并更新 mapping。

动态更新映射

如果继续添加一个新文档,里面多出几个字段:

$ escurl -XPUT $ES/my_article/doc/2?pretty -d '
{
  "title": "新文章",
  "createdAt": "2020-02-02T02:02:02.020Z",
  "wordCount": 100,
  "likes": 0,
  "author": "作者",
  "extra": {
    "deleted": false,
    "score": 8.5,
    "remark": "备注"
  }
}'
复制代码

发现映射被自动更新了:

{
  "mappings": {
    "doc": {
      "properties": {
        "createdAt": { "type": "date" },
        "wordCount": { "type": "long" },
        "author": {
          "type": "text",
          "fields": { "keyword": { "ignore_above": 256, "type": "keyword" } }
        },
        "extra": {
          "properties": {
            "score": { "type": "float" },
            "deleted": { "type": "boolean" },
            "remark": {
              "type": "text",
              "fields": { "keyword": { "ignore_above": 256, "type": "keyword" } }
            }
          }
        },
        "title": {
          "type": "text",
          "fields": { "keyword": { "ignore_above": 256, "type": "keyword" } }
        },
        "likes": { "type": "long" }
      }
    }
  }
}
复制代码

也就是说,ES 会根据该字段的值猜测其数据类型,并动态添加到类型映射里面。

手动干预动态映射

动态映射虽然灵活,但有时候又想明确数据结构,因为不是所有字段都需要被存储,此时可以配置索引的 dynamic 选项,有三个可选值:

  • true:动态添加新的字段(默认值)
  • false:忽略新的字段
  • strict:如果遇到新字段抛出异常
$ escurl -XPUT $ES/my_article?pretty -d '
{
  "mappings": {
    "doc": {
      "dynamic": "false",
      "properties": {
        "title":  { "type": "keyword"},
        "wordCount": { "type": "long" },
        "createdAt": { "type": "date" },
        "extra":  {
          "type": "object",
          "dynamic": true
        }
      }
    }
  }
}'
复制代码

上面的索引的意思是:如果遇到新字段,会自动忽略,而内部对象 extra 遇到新字段就会动态创建新字段。注意,如果索引已经存在就会出错,必须删除重建。这个时候,如果再添加如下数据:

$ escurl -XPUT $ES/your_article/doc/2?pretty -d '
{
  "title": "新文章",
  "createdAt": "2020-02-02T02:02:02.020Z",
  "wordCount": 100,
  "likes": 0,
  "author": "作者",
  "extra": {
    "deleted": false,
    "score": 8.5,
    "remark": "备注"
  }
}'
复制代码

likes 和 author 字段就会被忽略,而 extra.remark 字段则被添加进去了。

用动态模板约束动态映射

动态映射的自动推断功能很强大,但有时候并不完全符合业务需求,例如我希望所有 string 类型都映射成 keyword 而不是 text,所有 number 都映射成 double 而不是 long,这个时候就需要动态模板(dynamic_templates),可以完全控制新生成字段的映射类型。例如:

$ escurl -XPUT $ES/my_article?pretty -d '
{
  "settings": {
    "index": {
      "number_of_shards": 1,
      "number_of_replicas": 0
    }
  },
  "mappings": {
    "doc": {
      "dynamic_templates": [
        {
          "string_fields": {
            "match": "*",
            "match_mapping_type": "string",
            "mapping": {
              "type": "keyword",
              "ignore_above": 256
            }
          }
        },
        {
          "number_fields": {
            "match": "*",
            "match_mapping_type": "long",
            "mapping": {
              "type": "double"
            }
          }
        }
      ]
    }
  }
}'
复制代码

dynamic_templates 是一个数组,也就是说可以添加多个模板,ES 会按照顺序来检测,启用第一个匹配的模板。

上面的做法是给当前索引指定动态模板,其实也可以反过来,先创建动态模板,让模板指定匹配的索引。

$ escurl -XPUT $ES/_template/my-template?pretty -d '
{
  "index_patterns":[ "my_*" ],
  "mappings": {
    "doc": {
      "dynamic_templates": [
        {
          "string_fields": {
            "match": "*",
            "match_mapping_type": "string",
            "mapping": {
              "type": "keyword",
              "ignore_above": 256
            }
          }
        },
        {
          "number_fields": {
            "match": "*",
            "match_mapping_type": "long",
            "mapping": {
              "type": "double"
            }
          }
        }
      ]
    }
  }
}'
复制代码

这个时候再创建 my-xxx 索引的时候,动态字段映射会根据 my-template 里面的规则进行映射。由于动态模板非常实用,下面记录其增删改查的语法:

查看模板

escurl -XGET $ES/_template?pretty # 查看所有模板
escurl -XGET $ES/_template/tpl_1?pretty # 查看指定模板 tpl_1
escurl -XGET $ES/_template/tpl_1,tpl_2?pretty # 批量查看模板 tpl_1 和 tpl_2
复制代码

返回结果是一个对象,key 是模板名称,value 是模板定义。

检查模板是否存在

$ escurl --head $ES/_template/tpl_1
复制代码

存在则返回:

HTTP/1.1 200 OK
content-type: application/json; charset=UTF-8
content-length: 488
复制代码

否则返回:

HTTP/1.1 404 Not Found
content-type: application/json; charset=UTF-8
content-length: 2
复制代码

创建模板

$ escurl -XPUT $ES/_template/my-prefix-template
{
  "order": 0,
  "index_patterns": [
    "prefix-*"
  ],
  "settings": {
    "index": {
      "number_of_shards": "5",
      "number_of_replicas": "0"
    }
  },
  "mappings": {
    "doc": {
      "dynamic_templates": [
        {
          "string_fields": {
            "match": "*",
            "match_mapping_type": "string",
            "mapping": {
              "type": "keyword",
              "ignore_above": 256
            }
          }
        }
      ],
      "properties": {
        "discount": {
          "type": "double"
        },
        "pay": {
          "type": "double"
        }
      }
    }
  }
}
复制代码

删除模板

$ escurl -XDELETE $ES/_template/template_1

相关推荐

【绘画参考】女朋友/女性的多场景动态姿势参考(动态速写素材)

今天分享一组女性动态素材女性不同场景的动态姿势图包括游泳、睡觉等多种场景包括站、趴、躺、走、坐等适合作为女性角色动作参考或是人体动态素材线稿练习想要更多人体素材后台私信回复“R18”即可如果喜欢板...

「绘画参考」Mangapose 人体3D动态动作姿势参考(动态速写素材)

今天继续分享人体动态的素材是关于3D版人体动态姿势参考今天是第二趴:动态动作合集包括跳跃、蹲、持枪、跑步等男女的各种人体动态的姿势图想有扎实基础的话赶紧练起来附上3D动态姿势相关素材「绘画参考」Man...

精美动态垃圾分类PPT模板免费下载|象刀PPT

★一份精美优质的PPT模板助力高效办公,高清画质,优秀的设计,让演示更精彩。★象刀PPT出品的《精美动态垃圾分类PPT模板》可免费下载。★本模板为PPTX格式,请使用WPS或office软件打开★复...

动漫设计人体动态练习素材(动漫人体绘画教程步骤图)

很棒的两组人体都太参考图,赶紧收了吧如果你想学习绘画,或者觉得自己的绘画水平还需要提高,那么可以关注微信公众号:名动漫董飞老师(微信添加搜索:名动漫董飞老师),免费获取300节绘画学习视频教程!同时大...

漫画人物动态表情素材参考(漫画人物动态图片大全)

转载内容...

动态美鱼图(绘画素材)(动态鱼图片游来游去3d)

...

国际象棋中局困境破局指南:5大动态计划模板来袭

国际象棋中局的困境与挑战**在国际象棋的战场上,中局常常被视为决定胜负的关键阶段。据相关统计显示,高达90%的棋手会在中局阶段输掉比赛,这一数据令人震惊,也揭示了中局阶段的复杂性和挑战性。就像在...

ES中的动态映射和动态模板(动态映射是什么意思)

ES中的动态映射和动态模板为了方便演示和切换ES地址,在~/.bashrc中添加如下变量和脚本:ES=localhost:9200escurl(){curl-H'Conte...

上千例动漫人物武打动态素材!(动漫人物打斗动作参考)

上千个人物战斗动态参考~对打、拔剑和飞踢等多种武打姿势,再也不用担心不会拗造型啦~新浪微博ID:SAI资源库微信公共平台:PS-ZYK不想错过任何一条你想看的绘画资讯?猛戳下方↘订阅↘吧!...

【绘画参考】男性的各种动态姿势参考(动态速写素材)

今天板君分享人体动态素材包括了坐、站、半躺等动作并且人体的肌肉线条很明显非常适合作为男性动态参考喜欢肌肉男的快码住学习吧图片来源/网络版权归原作者所有转载请注明出处...

726张可视化图表Excel模板,动态数据看板,简单实用不劳心

Hello大家好,我是帮帮。今天跟大家分享一组726张可视化图表Excel模板,动态数据看板,简单实用不劳心。有个好消息!为了方便大家更快的掌握技巧,寻找捷径。请大家点击文章末尾的“了解更多”,在里面...

送福利:动态PPT模板42套:免费拿(免费动态ppt模板大全)

只需要您私信我:“动态PPT”,我就会给您百度网盘下载链接!免费下载哟!42套动态PPT模板,非常实用!赶快来领取吧

500例人体动态素材,原来画画要这么狠!简直太喜欢了

「绘画素材」狗粮来袭!情侣CP日常动态素材参考

对于下个月即将迎来的520小编提前给大家摸鱼时间今天就来分享一组甜到掉牙双人动态素材参考!超接地气的日常图快点动笔画下你们的恋爱日常吧!↓↓↓—THEEND—图源网络,侵删往期分享:520发柠檬...

「绘画参考」华纳概念画师Josh Black人体动态线稿作品

今天板君分享一组人体参考华纳画师JoshBlack的作品这组人体动态线稿姿势丰富涉略人物范围也比较广泛些除常见的男女分类还有职业如和尚、射箭手、运动员等画师的线条特别流畅很舒服非常适合作为人体参...