Elasticsearch查询和Kibana无法按预期工作

时间:2018-05-15 20:18:49

标签: elasticsearch kibana

我正在尝试学习Elasticsearch,我正在使用Kibana来实现可视化。我似乎无法弄清楚我的映射和查询有什么问题。

我正在尝试存储照片元数据(iptc数据)。我有以下映射:

  {
"settings": {
  "index": {
    "analysis": {
      "filter": {},
      "analyzer": {
        "keyword_analyzer": {
          "filter": [
            "lowercase",
            "asciifolding",
            "trim"
          ],
          "char_filter": [],
          "type": "custom",
          "tokenizer": "keyword"
        },
        "edge_ngram_analyzer": {
          "filter": [
            "lowercase"
          ],
          "tokenizer": "edge_ngram_tokenizer"
        },
        "edge_ngram_search_analyzer": {
          "tokenizer": "lowercase"
        }
      },
      "tokenizer": {
        "edge_ngram_tokenizer": {
          "type": "edge_ngram",
          "min_gram": 2,
          "max_gram": 5,
          "token_chars": [
            "letter"
          ]
        }
      }
    }
  }
},
"mappings": {
  "doc": {
    "properties": {
      "photo_added": {
        "type": "date",
        "index": true,
        "format": "yyyy-MM-dd' 'H:m:s"
      },
      "photo_id": {
        "type": "long",
        "index": true
      },
      "photo_owner": {
        "type": "long",
        "index": true
      },
      "project": {
        "type": "long",
        "index": true
      },
      "iptc": {
        "type": "nested",
        "properties": {
          "caption/abstract": {
            "type": "text",
            "index": true
          },
          "copyright notice": {
            "type": "text",
            "index": true
          },
          "keywords": {
            "type": "text",
            "index": true,
            "fields": {
              "keywordstring": {
                "type": "text",
                "analyzer": "keyword_analyzer"
              },
              "edgengram": {
                "type": "text",
                "analyzer": "edge_ngram_analyzer",
                "search_analyzer": "edge_ngram_search_analyzer"
              },
              "completion": {
                "type": "completion"
              },
              "keyword": {
                "type": "keyword"
              }
            }
          },
          "object name": {
            "type": "text",
            "index": true
          },
          "province/state": {
            "type": "text",
            "index": true
          },
          "sub-location": {
            "type": "text",
            "index": true
          },
          "time created": {
            "type": "text",
            "index": true
          },
          "urgency": {
            "type": "text",
            "index": true
          },
          "writer/editor": {
            "type": "text",
            "index": true
          }
        }
      }
    }
  }
}
}

问题是:我想要一个查询,搜索关键字和标题以查找搜索文本的存在。每当在关键字中找到搜索文本时,得分就会提高,因为这表明该照片具有更高的相关性。所以我制定了以下查询(其中value是搜索文本):

GET /photos/_search
{
  "query": {
    "dis_max": {
      "queries": [
        {
          "fuzzy": {
            "iptc.keywords": {
              "value": "value",
              "fuzziness": 1,
              "boost": 1
            }
          }
        },
        {
          "fuzzy": {
            "iptc.caption/abstract": {
              "value": "value",
              "fuzziness": 1
            }
          }
        }
      ]
    }
  }
}

然而它似乎没有找到任何匹配,尽管该值在文档中......并且我似乎无法构造一个简单的匹配查询,它将与确切的文本匹配...例如:

GET /photos/doc/_search?error_trace=true
{
  "query": {
    "match": {
      "iptc.caption/abstract": "exact value from one of the documents"
    }
  }
}

将返回0结果...但是搜索文本正好在文档中..我不知道该怎么做才知道。更糟糕的是(对我而言,因为我感到沮丧,因为我感到很沮丧)Kibana似乎表现得很好......我几乎可以肯定这是非常简单的事情(文件日期在5年之内)但是当过滤精确的复制粘贴值,它返回0结果......如屏幕截图所示......

Results

我在这里疯了。有人知道如何解决这个或地球名称我做错了吗?

1 个答案:

答案 0 :(得分:0)

我找到了Elastic文档中的解决方案。

  

由于嵌套文档被索引为单独的文档,因此只能在嵌套查询,嵌套/反向嵌入聚合或嵌套内部命中的范围内访问它们。

Documentation

所以我构造了以下有效的查询。

{
  "query": {
    "nested": {
      "path": "iptc",
      "query": {
        "bool": {
          "should": [
            {
              "dis_max": {
                "queries": [
                  {
                    "fuzzy": {
                      "iptc.keywords": {
                        "value": "Feyenoord",
                        "boost": 1
                      }
                    }
                  },
                  {
                    "fuzzy": {
                      "iptc.caption/abstract": {
                        "value": "Feyenoord",
                        "fuzziness": 1
                      }
                    }
                  }
                ]
              }
            }
          ]
        }
      }
    }
  }