爆款云主机2核4G限时秒杀,88元/年起!
查看详情

活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 618智算钜惠季 爆款云主机2核4G限时秒杀,88元/年起!
  • 免费体验DeepSeek,上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens,限时两周
  • 云上钜惠 HOT 爆款云主机全场特惠,更有万元锦鲤券等你来领!
  • 算力套餐 HOT 让算力触手可及
  • 天翼云脑AOne NEW 连接、保护、办公,All-in-One!
  • 中小企业应用上云专场 产品组合下单即享折上9折起,助力企业快速上云
  • 息壤高校钜惠活动 NEW 天翼云息壤杯高校AI大赛,数款产品享受线上订购超值特惠
  • 天翼云电脑专场 HOT 移动办公新选择,爆款4核8G畅享1年3.5折起,快来抢购!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

智算服务

打造统一的产品能力,实现算网调度、训练推理、技术架构、资源管理一体化智算服务
智算云(DeepSeek专区)
科研助手
  • 算力商城
  • 应用商城
  • 开发机
  • 并行计算
算力互联调度平台
  • 应用市场
  • 算力市场
  • 算力调度推荐
一站式智算服务平台
  • 模型广场
  • 体验中心
  • 服务接入
智算一体机
  • 智算一体机
大模型
  • DeepSeek-R1-昇腾版(671B)
  • DeepSeek-R1-英伟达版(671B)
  • DeepSeek-V3-昇腾版(671B)
  • DeepSeek-R1-Distill-Llama-70B
  • DeepSeek-R1-Distill-Qwen-32B
  • Qwen2-72B-Instruct
  • StableDiffusion-V2.1
  • TeleChat-12B

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场创新解决方案
办公协同
  • WPS云文档
  • 安全邮箱
  • EMM手机管家
  • 智能商业平台
财务管理
  • 工资条
  • 税务风控云
企业应用
  • 翼信息化运维服务
  • 翼视频云归档解决方案
工业能源
  • 智慧工厂_生产流程管理解决方案
  • 智慧工地
建站工具
  • SSL证书
  • 新域名服务
网络工具
  • 翼云加速
灾备迁移
  • 云管家2.0
  • 翼备份
资源管理
  • 全栈混合云敏捷版(软件)
  • 全栈混合云敏捷版(一体机)
行业应用
  • 翼电子教室
  • 翼智慧显示一体化解决方案

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
  • 天翼云EasyCoding平台
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼云东升计划
  • 适配中心
  • 东升计划
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
开放能力
  • EasyCoding敏捷开发平台
培训与认证
  • 天翼云学堂
  • 天翼云认证
魔乐社区
  • 魔乐社区

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 建议与反馈
  • 用户体验官
  • 服务保障
  • 客户公告
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 智算服务
  • 产品
  • 解决方案
  • 应用商城
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心

      elasticsearch中文档映射Mapping用法详解

      首页 知识中心 大数据 文章详情页

      elasticsearch中文档映射Mapping用法详解

      2023-05-24 08:08:46 阅读次数:111

      elasticsearch,大数据

      Mapping类似数据库中的schema的定义,作用如下:

      • 定义索引中的字段的名称
      • 定义字段的数据类型,例如字符串,数字,布尔等
      • 字段,倒排索引的相关配置(Analyzed or Not Analyzed,Analyzer)

      ES中Mapping映射可以分为动态映射和静态映射。

      动态映射:

              在关系数据库中,需要事先创建数据库,然后在该数据库下创建数据表,并创建表字段、类型、长度、主键等,最后才能基于表插入数据。而Elasticpearch中不需要定义Mapping映射(即关系型数据库的表、字段等),在文档写入Elasticsearch时,会根据文档字段自动识别类型,这种机制称之为动态映射。

              动态映射(Dynamic Mapping)的机制,使得我们无需手动定义Mappings,Elasticsearch会自动根据文档信息,推算出字段的类型。但是有时候会推算的不对,例如地理位置信息。当类型如果设置不对时,会导致一些功能无法正常运行,例如Range查询

      静态映射:

              静态映射是在Elasticsearch中也可以事先定义好映射,包含文档的各字段类型、分词器等,这种方式称之为静态映射。

      Dynamic Mapping类型自动识别:

      JSON类型 ElasticSearch类型
      字符串 
      • 匹配日期格式,设置为Date
      • 匹配数字设置为float或者long,该选项默认关闭
      • 设置为Text,并且增加keyword字段
      布尔值 boolean
      浮点数 float
      整数 long
      对象 Object
      数组 由第一个非空数值的类型所决定
      空值 忽略

      动态映射:

      创建文档(es根据数据类型,会自动创建映射)

      # 创建文档(es根据数据类型,会自动创建映射)
      PUT /user/_doc/1
      {
        "name": "张三",
        "age": 26,
        "address": "北京市朝阳区"
      }

      运行结果:

      {
        "_index" : "user",
        "_type" : "_doc",
        "_id" : "1",
        "_version" : 1,
        "result" : "created",
        "_shards" : {
          "total" : 2,
          "successful" : 1,
          "failed" : 0
        },
        "_seq_no" : 0,
        "_primary_term" : 1
      }

      获取文档映射

      # 获取文档映射
      GET /user/_mapping

      运行结果:

      {
        "user" : {
          "mappings" : {
            "properties" : {
              "address" : {
                "type" : "text",
                "fields" : {
                  "keyword" : {
                    "type" : "keyword",
                    "ignore_above" : 256
                  }
                }
              },
              "age" : {
                "type" : "long"
              },
              "name" : {
                "type" : "text",
                "fields" : {
                  "keyword" : {
                    "type" : "keyword",
                    "ignore_above" : 256
                  }
                }
              }
            }
          }
        }
      }

      Mapping一旦建立后,那后期是否还可以更新或者修改Mapping字段类型信息呢?

      情况一:新增加字段

      • dynamic设为true时,一旦有新增字段的文档写入,Mapping 也同时被更新
      • dynamic设为false,Mapping 不会被更新,新增字段的数据无法被索引,但是信息会出现在_source中
      • dynamic设置成strict(严格控制策略),文档写入失败,抛出异常

      elasticsearch中文档映射Mapping用法详解

      情况二:对于已有字段,一旦已经有数据写入,就不再支持修改字段定义

      • Lucene实现的倒排索引,—旦生成后,就不允许修改
      • 如果希望改变字段类型,必须Reindex API,重建索引

              如果修改了字段的数据类型,会导致已被索引的数据无法被搜索;但是如果是增加新的字段,就不会有这样的影响。

      首先新建mapping信息:

      PUT user2
      {
        "mappings": {
          "dynamic": "strict",
          "properties": {
            "name": {
              "type": "text"
            },
            "address": {
              "type": "object",
              "dynamic": "true"
            }
          }
        }
      }

      运行结果:

      {
        "acknowledged" : true,
        "shards_acknowledged" : true,
        "index" : "user2"
      }

      插入新的文档,原因为age为新增字段报错,抛出异常,之前mapping中dynamic设置的为strict

      # 插入新的文档,原因为age为新增字段报错,抛出异常,之前mapping中dynamic设置的为strict
      PUT user2/_doc/1
      {
        "name": "张三",
        "age": 26,
        "address": {
          "provienc": "北京市",
          "city": "北京市"
        }
      }
      

      运行结果:

      {
        "error" : {
          "root_cause" : [
            {
              "type" : "strict_dynamic_mapping_exception",
              "reason" : "mapping set to strict, dynamic introduction of [age] within [_doc] is not allowed"
            }
          ],
          "type" : "strict_dynamic_mapping_exception",
          "reason" : "mapping set to strict, dynamic introduction of [age] within [_doc] is not allowed"
        },
        "status" : 400
      }

      接下来修改dynamic信息,更改为true后再次执行上面的语句:

      # 修改mapping信息
      PUT user2/_mapping
      {
        "dynamic": "true"
      }

      运行结果:

      {
        "acknowledged" : true
      }

      dynamic修改为true后,再次插入一个新的文档

      # dynamic修改为true后,再次插入一个新的文档
      PUT user2/_doc/1
      {
        "name": "张三",
        "age": 26,
        "address": {
          "provienc": "北京市",
          "city": "北京市"
        }
      }

      运行结果:

      {
        "_index" : "user2",
        "_type" : "_doc",
        "_id" : "1",
        "_version" : 1,
        "result" : "created",
        "_shards" : {
          "total" : 2,
          "successful" : 1,
          "failed" : 0
        },
        "_seq_no" : 0,
        "_primary_term" : 1
      }

      添加新字段后,再次查询mapping信息

      # 添加新字段后,再次查询mapping信息
      GET user2/_mapping

      运行结果:  【可以看出新增加了age字段的信息】

      {
        "user2" : {
          "mappings" : {
            "dynamic" : "true",
            "properties" : {
              "address" : {
                "dynamic" : "true",
                "properties" : {
                  "city" : {
                    "type" : "text",
                    "fields" : {
                      "keyword" : {
                        "type" : "keyword",
                        "ignore_above" : 256
                      }
                    }
                  },
                  "provienc" : {
                    "type" : "text",
                    "fields" : {
                      "keyword" : {
                        "type" : "keyword",
                        "ignore_above" : 256
                      }
                    }
                  }
                }
              },
              "age" : {
                "type" : "long"
              },
              "name" : {
                "type" : "text"
              }
            }
          }
        }
      }
      

      对已经存在的mapping映射进行修改:

      具体方法:

      1. 如果要推倒现有的映射,你得重新建立—个静态索引
      2. 然后把之前索引里的数据导入到新的索引里
      3. 删除原创建的索引
      4. 为新索引起个别名,为原索引名

      注意:通过上述4个步骤实现了索引的平滑过渡,并且是零停机!

      1.重新创建一个静态索引,并将数据迁移到新索引中

      # 重新创建一个静态索引
      POST _reindex
      {
        "source": {
          "index": "user2"
        },
        "dest": {
          "index": "new_user2"
        }
      }

      运行结果:

      {
        "took" : 185,
        "timed_out" : false,
        "total" : 1,
        "updated" : 0,
        "created" : 1,
        "deleted" : 0,
        "batches" : 1,
        "version_conflicts" : 0,
        "noops" : 0,
        "retries" : {
          "bulk" : 0,
          "search" : 0
        },
        "throttled_millis" : 0,
        "requests_per_second" : -1.0,
        "throttled_until_millis" : 0,
        "failures" : [ ]
      }

      2.查看新索引mapping信息

      # 查看新索引mapping信息
      GET new_user2/_mapping

      运行结果:   【新索引和旧索引mapping信息是相同的】

      {
        "new_user2" : {
          "mappings" : {
            "properties" : {
              "address" : {
                "properties" : {
                  "city" : {
                    "type" : "text",
                    "fields" : {
                      "keyword" : {
                        "type" : "keyword",
                        "ignore_above" : 256
                      }
                    }
                  },
                  "provienc" : {
                    "type" : "text",
                    "fields" : {
                      "keyword" : {
                        "type" : "keyword",
                        "ignore_above" : 256
                      }
                    }
                  }
                }
              },
              "age" : {
                "type" : "long"
              },
              "name" : {
                "type" : "text",
                "fields" : {
                  "keyword" : {
                    "type" : "keyword",
                    "ignore_above" : 256
                  }
                }
              }
            }
          }
        }
      }
      

      3.查看新索引的数据信息

      # 查看新索引的数据信息
      GET new_user2/_search

      运行结果:  【新索引已经包含了旧索引所有的数据】

      {
        "took" : 0,
        "timed_out" : false,
        "_shards" : {
          "total" : 1,
          "successful" : 1,
          "skipped" : 0,
          "failed" : 0
        },
        "hits" : {
          "total" : {
            "value" : 1,
            "relation" : "eq"
          },
          "max_score" : 1.0,
          "hits" : [
            {
              "_index" : "new_user2",
              "_type" : "_doc",
              "_id" : "1",
              "_score" : 1.0,
              "_source" : {
                "name" : "张三",
                "age" : 26,
                "address" : {
                  "provienc" : "北京市",
                  "city" : "北京市"
                }
              }
            }
          ]
        }
      }
      

      4.删除之前的旧索引

      # 删除旧索引
      DELETE user2

      运行结果:

      {
        "acknowledged" : true
      }
      

      5.为新索引起个别名,别名为旧索引的名称

      # 为新索引起别名
      PUT new_user2/_alias/user2

      运行结果:

      {
        "acknowledged" : true
      }

      注意:起别名前要确保别名不是已经存在的索引,如果存在则报错!这也是起别名之前先删除旧索引的原因! 

      6.查询旧索引(即为新索引的别名)

      # 查询旧索引(即为新索引的别名)
      GET user2
      
      # 效果等同于 GETuser2
      GET new_user2

      运行结果:

      {
        "new_user2" : {
          "aliases" : {
            "user2" : { }
          },
          "mappings" : {
            "properties" : {
              "address" : {
                "properties" : {
                  "city" : {
                    "type" : "text",
                    "fields" : {
                      "keyword" : {
                        "type" : "keyword",
                        "ignore_above" : 256
                      }
                    }
                  },
                  "provienc" : {
                    "type" : "text",
                    "fields" : {
                      "keyword" : {
                        "type" : "keyword",
                        "ignore_above" : 256
                      }
                    }
                  }
                }
              },
              "age" : {
                "type" : "long"
              },
              "name" : {
                "type" : "text",
                "fields" : {
                  "keyword" : {
                    "type" : "keyword",
                    "ignore_above" : 256
                  }
                }
              }
            }
          },
          "settings" : {
            "index" : {
              "routing" : {
                "allocation" : {
                  "include" : {
                    "_tier_preference" : "data_content"
                  }
                }
              },
              "number_of_shards" : "1",
              "provided_name" : "new_user2",
              "creation_date" : "1667317074691",
              "number_of_replicas" : "1",
              "uuid" : "rvKsAyTKQeuc-bWklCW-8A",
              "version" : {
                "created" : "7170699"
              }
            }
          }
        }
      }
      

      注意:新起的别名是不能DELETE的!抛出异常!

      版权声明:本文内容来自第三方投稿或授权转载,原文地址:https://blog.csdn.net/weixin_44799217/article/details/127642981,作者:IT之一小佬,版权归原作者所有。本网站转在其作品的目的在于传递更多信息,不拥有版权,亦不承担相应法律责任。如因作品内容、版权等问题需要同本网站联系,请发邮件至ctyunbbs@chinatelecom.cn沟通。

      上一篇:Docker容器数据卷

      下一篇:es库数据迁移

      相关文章

      2025-04-14 08:45:56

      【Hadoop】YARN多资源队列配置及使用实践

      【Hadoop】YARN多资源队列配置及使用实践

      2025-04-14 08:45:56
      ci , hadoop , mapreduce , yarn , 大数据
      2025-03-31 08:49:58

      Selenium Webdriver 3.X源码分析之核心代码common

      Selenium Webdriver 3.X源码分析之核心代码common

      2025-03-31 08:49:58
      java , python , 大数据 , 编程语言
      2025-03-24 08:53:15

      【漏洞复现】CVE-2015-5531 Arbitrary File Reading

      【漏洞复现】CVE-2015-5531 Arbitrary File Reading

      2025-03-24 08:53:15
      CVE , elasticsearch , https
      2025-03-24 08:47:15

      Python测试开发初稿

      Python测试开发初稿

      2025-03-24 08:47:15
      java , 人工智能 , 大数据 , 编程语言
      2025-01-17 09:15:58

      有一批气象观测站,现需要获取这些站点的观测数据,并存储到 Hive 中。但是气象局只提供了 api 查询,每次只能查询单个观测点。那么如果能够方便快速地获取到所有的观测点的数据?

      有一批气象观测站,现需要获取这些站点的观测数据,并存储到 Hive 中。但是气象局只提供了 api 查询,每次只能查询单个观测点。那么如果能够方便快速地获取到所有的观测点的数据?

      2025-01-17 09:15:58
      Hive , 大数据
      2025-01-17 09:14:02

      手写归并排序

      手写归并排序

      2025-01-17 09:14:02
      i++ , 后端 , 大数据 , 数组
      2025-01-17 09:14:02

      推箱子自动求解。

      推箱子自动求解。

      2025-01-17 09:14:02
      后端 , 大数据 , 死锁 , 缓存
      2025-01-17 09:13:53

      已知两个非负数的异或值为M,两数之和为N,求这两个数?

      已知两个非负数的异或值为M,两数之和为N,求这两个数?

      2025-01-17 09:13:53
      后端 , 大数据 , 空间复杂度 , 算法
      2025-01-17 09:06:45

      1到100万以内,如何打印99万个不重复的随机数?

      1到100万以内,如何打印99万个不重复的随机数?

      2025-01-17 09:06:45
      i++ , 后端 , 大数据 , 进制 , 随机数
      2024-11-20 09:47:05

      ElasticSearch中的分页(size、from)

      ElasticSearch中的分页(size、from)

      2024-11-20 09:47:05
      elasticsearch , 分页
      查看更多
      推荐标签

      作者介绍

      天翼云小翼
      天翼云用户

      文章

      33561

      阅读量

      5234040

      查看更多

      最新文章

      手写归并排序

      2025-01-17 09:14:02

      1到100万以内,如何打印99万个不重复的随机数?

      2025-01-17 09:06:45

      sqoop 的安装与常用抽数操作

      2024-09-25 10:14:34

      metricbeat监控logstash,上报数据到Elasticsearch,Kibana中查看Logstash node节点的Transport address地址为127.0.0.1:9600

      2024-09-24 06:31:22

      给定一个无序数组,里面数都是成双数的,只有一个数是成单数的,求这个数?

      2024-09-24 06:30:26

      给定一个无序数组,里面数都是成双数的,只有一个数是成单数的,求这个数?

      2024-09-24 06:30:26

      查看更多

      热门文章

      java163-同步方法锁

      2023-03-07 10:04:03

      58如何调出eclipse左边文件栏

      2023-03-13 09:32:12

      java156-序列化

      2023-03-10 10:21:07

      java162-同步对象锁

      2023-03-10 10:21:07

      大数据Spark “蘑菇云”行动第93课:Hive中的内置函数、UDF、UDAF实战

      2023-05-08 10:01:35

      大数据Spark “蘑菇云”行动第94课:Hive性能调优之Mapper和Reducer设置、队列设置和并行执行、JVM重用和动态分区、Join调优

      2023-05-05 09:59:12

      查看更多

      热门标签

      算法 leetcode python 数据 java 数组 节点 大数据 i++ 链表 golang c++ 排序 django 数据类型
      查看更多

      相关产品

      弹性云主机

      随时自助获取、弹性伸缩的云服务器资源

      天翼云电脑(公众版)

      便捷、安全、高效的云电脑服务

      对象存储

      高品质、低成本的云上存储服务

      云硬盘

      为云上计算资源提供持久性块存储

      查看更多

      随机文章

      Hadoop生态圈的了解?

      ElasticSearch中的文档和查询响应数据

      【Hadoop】HDFS体系结构分析

      elasticsearch操作(语句方式)

      Vue课程52-v-if和v-show的区别

      数据治理(二):数据治理功能方面

      • 7*24小时售后
      • 无忧退款
      • 免费备案
      • 专家服务
      售前咨询热线
      400-810-9889转1
      关注天翼云
      • 旗舰店
      • 天翼云APP
      • 天翼云微信公众号
      服务与支持
      • 备案中心
      • 售前咨询
      • 智能客服
      • 自助服务
      • 工单管理
      • 客户公告
      • 涉诈举报
      账户管理
      • 管理中心
      • 订单管理
      • 余额管理
      • 发票管理
      • 充值汇款
      • 续费管理
      快速入口
      • 天翼云旗舰店
      • 文档中心
      • 最新活动
      • 免费试用
      • 信任中心
      • 天翼云学堂
      云网生态
      • 甄选商城
      • 渠道合作
      • 云市场合作
      了解天翼云
      • 关于天翼云
      • 天翼云APP
      • 服务案例
      • 新闻资讯
      • 联系我们
      热门产品
      • 云电脑
      • 弹性云主机
      • 云电脑政企版
      • 天翼云手机
      • 云数据库
      • 对象存储
      • 云硬盘
      • Web应用防火墙
      • 服务器安全卫士
      • CDN加速
      热门推荐
      • 云服务备份
      • 边缘安全加速平台
      • 全站加速
      • 安全加速
      • 云服务器
      • 云主机
      • 智能边缘云
      • 应用编排服务
      • 微服务引擎
      • 共享流量包
      更多推荐
      • web应用防火墙
      • 密钥管理
      • 等保咨询
      • 安全专区
      • 应用运维管理
      • 云日志服务
      • 文档数据库服务
      • 云搜索服务
      • 数据湖探索
      • 数据仓库服务
      友情链接
      • 中国电信集团
      • 189邮箱
      • 天翼企业云盘
      • 天翼云盘
      ©2025 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
      公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
      • 用户协议
      • 隐私政策
      • 个人信息保护
      • 法律声明
      备案 京公网安备11010802043424号 京ICP备 2021034386号