无法使用node.js http.request将记录插入ElasticSearch - MapperParsingException [无法解析]

时间:2014-12-14 20:52:52

标签: javascript node.js rest http elasticsearch

尝试使用node.js的 http 模块( 使用第三方模块)将记录插入ElasticSearch

设置:在端口 9200上本地运行ElasticSearch实例(默认)

Node.js代码:

var querystring = require('querystring'); // to build our post string
var http = require('http');

// Build the post string from an object
var data = querystring.stringify({
  "text" :"hello world"
});

// An object of options to indicate where to post to
var post_options = {
    host: 'localhost',
    port: '9200',
    path: '/twitter/tweets/1',
    method: 'POST',
    headers: {
        'Content-Type': 'application/x-www-form-urlencoded',
        'Content-Length': Buffer.byteLength(data)
    }
};

// Set up the request
var post_req = http.request(post_options, function(res) {
    res.setEncoding('utf8');
    res.on('data', function (chunk) {
        console.log('Response: ' + chunk);
    });
});

// post the data
post_req.write(data);
post_req.end();

我收到以下错误

{"error":"MapperParsingException[failed to parse]; nested: 
ElasticsearchParseException[Failed to derive xcontent 
from (offset=0, length=18): [116, 101, 120, 116, 61, 104, 
101, 108, 108, 111, 37, 50, 48, 119, 111, 114, 108, 100]]; ",
"status":400}

但是执行以下 CURL 可以按预期工作:

curl -XPOST 'http://localhost:9200/twitter/tweet/1' -d '{"message" : "hello world"}'

我看了下面有类似错误消息的StackOverflow问题:

这些都没有回答我的问题。

任何非常感谢。 感谢

注意:我故意尝试使用 仅Node.js Core 来使用ElasticSearch REST API( 没有第三方)模块(请不要建议使用 elasticsearch-js es 请求,等)

2 个答案:

答案 0 :(得分:4)

回想起来,显而易见 使用查询字符串模块是错误的 ElasticSearch 期望将数据作为JSON发送("字符串化")

所以代码必须是:

var http = require('http');

// ElasticSearch Expects JSON not Querystring!
var data = JSON.stringify({
  "text" :"everything is awesome"
});

// An object of options to indicate where to post to
var post_options = {
    host: 'localhost',
    port: '9200',
    path: '/twitter/tweets/1234',
    method: 'POST',
    headers: {
        'Content-Type': 'application/json',
        'Content-Length': Buffer.byteLength(data)
    }
};

// Set up the request
var post_req = http.request(post_options, function(res) {
    res.setEncoding('utf8');
    res.on('data', function (chunk) {
        console.log('Response: ' + chunk);
    });
});

// post the data
post_req.write(data);
post_req.end();

按预期工作。确认使用:

curl -GET http://localhost:9200/twitter/tweets/1234?pretty

感谢@FelipeAlmeida 帮助我实现这一目标)

答案 1 :(得分:2)

虽然有可能使用formencoding索引Elasticsearch上的数据(我不确定,但我不得不研究),99%与Elasticsearch交谈的方式是通过纯JSON请求。

因此,请尝试将'Content-Type': 'application/x-www-form-urlencoded'更改为'Content-type': 'application/json'并告诉我它是否有效。