更新

Question

在Node.js中发出HTTP GET请求时是否有大小限制？如果是这样，我该怎么改变呢？

var url = "..." // very long, ~50'000 chars
http.get(url, function (res) {
    res.pipe(fs.createWriteStream("file.txt"));
});

给我这个：

<html><body><h1>400 Bad request</h1>
Your browser sent an invalid request.
</body></html>

在PowerShell或Bash中使用wget的功能完全正常。

$url = "..."
wget -outf file.txt $url

Answer 1

Node强制执行内置请求大小限制。请求的标头+ URI不应超过80 kb。

正如http_parser.h#L55中所定义的那样：

/* Maximium header size allowed */
#define HTTP_MAX_HEADER_SIZE (80*1024)

假设UTF-8字符可以在1到4个字节之间，则具有50 000个字符的字符串的大小将是从50 000到200 000字节，或从~48kb到195kb。

Answer 2

在新版本的NodeJS（v12.6.0 +）中，默认情况下标头请求大小限制为8kb，这也会影响响应标头大小。要使用8KB以上的标头，可以使用开关--max-http-header-size 65535（或任何所需的大小）。详细介绍here。