弹性搜索中的批量查询

时间:2015-12-30 07:07:52

标签: elasticsearch elasticsearch-query

我们有一个包含100万条记录的数据库,我们希望使用UserID来查询电子邮件列表。

在弹性搜索中执行此操作的最佳方法是什么。我们不想循环使用个人UID并获取相应的电子邮件。如果我们可以通过一次批量搜索获得所有电子邮件,那将非常棒。

欢迎任何想法。

2 个答案:

答案 0 :(得分:1)

你可以这样试试。

POST localhost:9200/users/user/_search?pretty=true
{
    "_source": "email",
    "query" : {
        "match" : { "userId" : "abc123" }
    }
}

POST localhost:9200/users/user/_search?pretty=true
{  
    "query" : {
            "match" : { "userId":"abc123" }
        },
        "fields": ["email"]
}

我推荐第一个。

答案 1 :(得分:0)

您可以将Multi Search API用于此目的:

curl -s -XGET localhost:9200/_msearch/template -d '
{"index" : "logstash-2017.03.20"}
{"inline": {"query": {"match":  {"uid" : "E434C35-B080-403C-ADA9-2FD164CF70" }}}}
{"index" : "logstash-2017.03.20"}
{"inline": {"query": {"match":  {"uid" : "E1D65ED3-F3BE-42E8-AF2F-A4D4F843F7" }}}}
'

注意:每个搜索命令(对索引和查询行)必须用新行分隔,并且在最后一次查询后必须存在新行。将查询写入文件可能更安全,例如requests然后使用--data-binary标记:

curl -s -XGET localhost:9200/_msearch/template --data-binary "@requests"

您将为每个查询获取responses数组:

{
  "responses": [
    {
      "took": 86,
      "timed_out": false,
      "_shards": {
        "total": 3,
        "successful": 3,
        "failed": 0
      },
      "hits": {
        "total": 1,
        "max_score": 13.081283,
        "hits": [
          { ... }
        ]
      }
    },
    {
      "took": 82,
      "timed_out": false,
      "_shards": {
        "total": 3,
        "successful": 3,
        "failed": 0
      },
      "hits": {
        "total": 1,
        "max_score": 13.081283,
        "hits": [
          { ... }
        ]
      }
    }
  ]
}