一次mapping field的修改过程

Elasticsearch 的坑爹事

本文记录一次Elasticsearch mapping field修改过程

团队使用Elasticsearch做日志的分类检索分析服务,使用了类似如下的_mapping

{
    "settings" : {
        "number_of_shards" : 20
    },
    "mappings" : {
      "client" : {
        "properties" : {
          "ip" : {
            "type" : "long"
          },
          "cost" : {
            "type" : "long"
          },
}

现在问题来了,日志中输出的"127.0.0.1"这类的IP地址在Elasticsearch中是不能转化为long的(报错 Java.lang.NumberFormatException)，所以我们必须将字段改为string型或者ip型(Elasticsearch支持， 数据类型可见mapping-core-types)才能达到理想的效果.

目标明确了，就是改掉mapping的ip的field type即可.

elasticsearch.org找了一圈 嘿嘿, update一下即可

curl -XPUT localhost:8301/store/client/_mapping -d '
{
    "client" : {
        "properties" : {
            "local_ip" : {"type" : "string", "store" : "yes"}
        }
    }
}

报错结果

{"error":"MergeMappingException[Merge failed with failures {[mapper [local_ip] of different type, current_type [long], merged_type [string]]}]","status":400}

尼玛 真逗  我long想转一下string 居然失败（elasticsearch产品层面理应支持这种无损转化）  无果

Google了一下类似的案例 (案例)

在一个帖子中得到的elasticsearch开发人员的准确答复

"You can't change existing mapping type, you need to create a new index with the correct mapping and index the data again."

想想 略坑啊 我不管是因为elasticsearch还是因为底层Lucene的原因，修改一个field需要对所有已有数据的所有field进行reindex，这本身就是一个逆天的思路，但是elasticsearch的研发人员还觉得这没有什么不合理的.

在Elasticsearch上游逛了一圈，上面这样写到

(http://www.elasticsearch.org/blog/changing-mapping-with-zero-downtime/)

the problem—why you can’t change mappings

You can only find that which is stored in your index. In order to make your data searchable, your database needs to know what type of data each field contains and how it should be indexed. If you switch a field type from e.g. a string to a date, all of the data for that field that you already have indexed becomes useless. One way or another, you need to reindex that field.

...

OK，这一段话很合理，我改了一个field的类型 需要对这个field进行reindex，如论哪种数据库都需要这么做，没错.

我们再继续往下看看，reindexing your data, 尼玛一看，弱爆了，他的reindexing your data不是对修改的filed进行reindex，而是创建了一个新的index，对所有的filed进行reindexing, 太逆天了。

吐槽归吐槽，这个事情逃不了，那我就按他的来吧.

首先创建一个新的索引

curl -XPUT localhost:8305/store_v2 -d '
{
    "settings" : {
        "number_of_shards" : 20
    },
    "mappings" : {
      "client" : {
        "properties" : {
          "ip" : {
            "type" : "string"
          },
          "cost" : {
            "type" : "long"
          },
}

等等，我创建了新索引,client往Elasticsearch的代码不会需要修改吧，瞅了一眼，有解决方案，建立一个alias（别名，和C++引用差不多），通过alias来实现对后面索引数据的解耦合，看到这，舒了一口气。

现在的问题是 这是一个线上服务，不能停服务，所以我需要一个倒数据到我的新索引的一个方案

更多精彩内容：http://www.bianceng.cnhttp://www.bianceng.cn/Programming/net/

以上是小编为您精心准备的的内容，在的博客、问答、公众号、人物、课程等栏目也有的相关内容，欢迎继续使用右上角搜索按钮进行搜索elasticsearch
， field
， type
， mapping
， elasticsearch接口c#count
， elasticsearch 搜索
， elasticsearch sql
， 一个
root运行Elasticsearch
es修改mapping、elastic 修改mapping、kibana 修改mapping、ravenfield修改器、extjs 修改fieldlabel，以便于您获取更多的相关知识。