将JSON文件导入/索引到Elasticsearch中

Question

我是Elasticsearch新手，在此之前一直在手动输入数据。例如，我做过这样的事情：

$ curl -XPUT 'http://localhost:9200/twitter/tweet/1' -d '{
    "user" : "kimchy",
    "post_date" : "2009-11-15T14:12:12",
    "message" : "trying out Elastic Search"
}'

我现在有一个。json文件，我想将其索引到Elasticsearch中。我也尝试过这样的事情，但没有成功：

curl -XPOST 'http://jfblouvmlxecs01:9200/test/test/1' -d lane.json

如何导入。json文件？我是否需要首先采取步骤来确保映射正确？

Answer 1

我们为这种东西做了一个小工具https://github.com/taskrabbit/elasticsearch-dump

Answer 2

根据当前文档，https://www.elastic.co/guide/en/elasticsearch/reference/current/docs-bulk.html：

如果要为curl提供文本文件输入，则必须使用--data二进制标志，而不是纯d。纯d不保留换行符。

例子：

$ curl -s -XPOST localhost:9200/_bulk --data-binary @requests

Answer 3

如果您想使用带有curl的文件，正确的命令是：

curl -XPOST 'http://jfblouvmlxecs01:9200/test/_doc/1' -d @lane.json

Elasticsearch是无模式的，因此您不一定需要映射。如果您按原样发送json并使用默认映射，则每个字段都将使用标准分析器进行索引和分析。

如果您想通过命令行与Elasticsearch交互，您可能想看看elasticshell，它应该比curl更方便一些。

2019-07-10：应注意，自定义映射类型已弃用，不应使用。我更新了上面url中的类型，以便更容易看到哪个是索引，哪个是类型，因为两者都命名为“test”很容易混淆。