我在nodejs中写了一些代码。它即将从网站获取HTML。
var request = require('request');
var cheerio = require('cheerio');
var path = require('path');'
var fs = require('fs');
var num = 0;
var arc = '';
for(var i=0; i < 20000; i++) {
num++;
var requrl = 'http://127.0.0.1/'+ num + '.html';
request(requrl, function (error, response, body) {
if (!error && response.statusCode == 200) {
console.log(body); //get body
}
})
}
我刚刚发送请求从1.html获取html到20000.html