我想迭代一个集合中的4435个产品。对于我想要下载图像并将其上传到Amazon S3存储桶的每个产品。在最后一部分,我写了一个功能正常的功能。
但在750个产品之后,node.js崩溃而没有给我一个错误。使用> output.log &
函数,我得到了一个
' RangeError:超出最大调用堆栈大小'
我使用async.eachSeries
来迭代产品和产品图片。这是完整的功能,将循环所有产品。正如你所看到的那样,我会对“计数器”进行评论,但这还不够。任何人都可以告诉我我做错了什么吗?
module.exports.putImagesToAmazon = function(req, res){
console.log("putImagesToAmazon");
var resultArray = [];
//var counter =0;
Product.find({}).sort({_id: -1}).exec(function(err, products){
console.log("aantal producten", products.length);
async.eachSeries(products, function(product, callback){
if(product.images.length > 0){
async.eachSeries(product.images, function(image, cb){
if(image.src){
if(image.src.indexOf("http://") !== -1 || image.src.indexOf("https://") !== -1){
upload.uploadStream(image.src, 'product-image', function(err, data){
if(err) {
console.log("ERROR1", err);
resultArray.push(err);
cb();
}else{
image.src = data;
product.save(function(err, result){
if (err) {
console.log("saving product error", err);
}else{
console.log("product updated", product.name);
}
})
cb();
}
})
}else{
cb();
}
}
}, function(){
//counter++;
console.log("next");
callback();
})
}
}, function(){
console.log("callback", counter);
var fields = ['statusCode', 'statusMessage', 'error', "url"];
var csv = json2csv({data: resultArray, fields: fields});
fs.writeFile('errors.csv', csv, function(err){
if (err) throw err;
console.log("saved");
})
})
})
res.send("Ok");
}
答案 0 :(得分:2)
为了帮助你 只需输入:
//counter++;
console.log("next");
// to avoid Maximum call stack size exceeded error
setImmediate(()=>{
callback();
});