如何打印出elasticsearch创建的倒排索引?

时间:2014-10-09 02:05:59

标签: ruby-on-rails elasticsearch

如果我想获得elasticsearch创建的索引的所有标记(我正在使用rails elasticsearch gem),我将如何去做?做这样的事情只会获得搜索词的一组特定标记:

curl -XGET 'http://localhost:9200/development_test/_analyze?text=John Smith'

1 个答案:

答案 0 :(得分:1)

您可以将Scroll APITerm Vectors API合并,以便在倒排索引中枚举术语:

require "elastomer/client"
require "set"

client = Elastomer::Client.new({ :url => "http://localhost:9200" })
index = "someindex"
type = "sometype"
field = "somefield"

terms = Set.new

client.scan(nil, :index => index, :type => type).each_document do |document|
  term_vectors = client.index(index).docs(type).termvector({ :fields => field, :id => document["_id"] })["term_vectors"]
  if term_vectors.key?(field)
    term_vectors[field]["terms"].keys.each do |term|
      unless terms.include?(term)
        terms << term
        puts(term)
      end
    end
  end
end

这是相当缓慢和浪费的,因为它为索引中的每个文档执行_termvectors HTTP请求,保存RAM中的所有术语,并在枚举期间保持滚动上下文打开。但是,这并不需要像Luke这样的其他工具,这些术语可以从索引中流出。