如何将一些ElasticSearch数据复制到新索引

Question

假设我的ElasticSearch中有电影数据，我创建了它们，如下所示：

curl -XPUT "http://192.168.0.2:9200/movies/movie/1" -d'
{
    "title": "The Godfather",
    "director": "Francis Ford Coppola",
    "year": 1972
}'

我有很多不同年代的电影。我想复制某一年（1972年）的所有电影，并将它们复制到一个新的索引“70sMovies”，但我不知道怎么做。

Answer 1

查看背包：https://github.com/jprante/elasticsearch-knapsack

一旦安装了插件并开始工作，就可以通过查询导出部分索引。例如：

curl -XPOST 'localhost:9200/test/test/_export' -d '{
"query" : {
    "match" : {
        "myfield" : "myvalue"
    }
},
"fields" : [ "_parent", "_source" ]
}'

这将创建一个仅包含查询结果的tarball，然后可以将其导入到另一个索引中。

Answer 2

最好的方法是使用elasticsearch转储工具https://github.com/taskrabbit/elasticsearch-dump.

我使用的真实世界示例：

elasticdump \
  --input=http://localhost:9700/.kibana \
  --output=http://localhost:9700/.kibana_read_only \
  --type=mapping
elasticdump \
  --input=http://localhost:9700/.kibana \
  --output=http://localhost:9700/.kibana_read_only \
  --type=data

Answer 3

自ElasticSearch 2.3以来，您现在可以使用内置的_reindexAPI

例如：

POST /_reindex
{
  "source": {
    "index": "twitter"
  },
  "dest": {
    "index": "new_twitter"
  }
}

或仅通过添加筛选器/查询的特定部分

POST /_reindex
{
  "source": {
    "index": "twitter",
    "query": {
      "term": {
        "user": "kimchy"
      }
    }
  },
  "dest": {
    "index": "new_twitter"
  }
}

阅读更多：https://www.elastic.co/guide/en/elasticsearch/reference/current/docs-reindex.html