kue工作进度总是0

时间:2017-12-12 16:42:24

标签: node.js progress kue

我正在使用kue进行长时间运行。我希望能够跟踪运营进度。

var kue = require('kue'),
queue = kue.createQueue();

var daJob = queue.create('da', {
    title: 'data analysis'
    , batchSize: req.params.batchSize
}).save( function(err){
   if( !err ) console.log( daJob.id );
});

// listeners on the different events
daJob.on('complete', function(result){
  console.log('Job completed with data ', result);
  daJob.remove();
}).on('failed attempt', function(errorMessage, doneAttempts){
    console.log('Job failed');
}).on('failed', function(errorMessage){
    console.log('Job failed');
}).on('progress', function(progress, data){
    console.log('progress'+progress);
});


queue.process('da', function(daJob, done){

    var total = 0;

    async.parallel([
        function(callback){
            Col1.count({}, function(err, c) {
                total += c;
                callback();
            });
        },
        function(callback){
            Col2.count({}, function(err, c) {
                total += c;
                callback();
            });
        },
        function(callback){
            Col3.count({}, function(err, c) {
                total += c;
                callback();
            });
        }], function done(err, results) {
            if (err) console.error(err);
            var count = 0;
            async.parallel([
                function (callback) {
                    var cur1 = col1.find().lean().cursor({batchSize: req.params.batchSize});
                    cur1.on('data', function (mobileTN) {
                        count++;
                        functions.workMobileRecord(mobileTN);
                        console.log('mobile ' +count/total);
                        daJob.progress(count,total);
                    });
                    cur1.on('close', function () {
                        callback();
                    });
                },
                function (callback) {
                    var cur2 = col2.find().lean().cursor({batchSize: req.params.batchSize});
                    cur2.on('data', function (fixedTN) {
                        count++;
                        console.log(count/total);
                        daJob.progress(count,total);
                    });
                    cur2.on('close', function () {
                        callback();
                    });
                },
                function (callback){
                    var cur3 = col3.find().lean().cursor({batchSize:req.params.batchSize});
                    cur3.on('data', function(videoTN){
                        count++;
                        console.log(count/total);
                        daJob.progress(count,total);
                    });
                    cur3.on('close', function () {
                        callback();
                    });
                }], function done(err, results) {
                    if (err) console.error(err);
                    done(results);
                });
            });
        });

当我在.on('进度')中打印进度变量时,它总是打印为0.

根据文件:

Job Progress

  

作业进度对于视频等长时间运行的作业非常有用   转换。要更新作业的进度,只需调用即可   job.progress(已完成,总计[,数据]):

     

job.progress(frames,totalFrames);数据可用于传递额外的数据   有关工作的信息。例如,消息或对象   一些额外的上下文数据到当前状态。

如何调试这个?文档是不是最新的?

1 个答案:

答案 0 :(得分:0)

这似乎是kue的问题。

在设置数据值(应该是可选的)后,它开始工作。

我还注意到,有时作业会停止更新进度事件。我找到的解决方案是重命名正在完成工作的工作。