Node.js& Redis的;等待循环完成

时间:2012-10-10 12:42:21

标签: node.js asynchronous redis

我想问这个问题,因为我不确定我是否正确使用Node.js逻辑

我有一组我需要使用redis'get方法查询的id。并且在检查了某个值之后(假设我正在检查给定“key”的对象是否具有空名称),我将它们添加到列表中。这是我的示例代码;

var finalList = [];
var list = [];
redisClient.smembers("student_list", function(err,result){
            list = result; //id's of students
            console.log(result);

            var possibleStudents = [];


            for(var i = 0; i < list.length; i++){


                redisClient.get(list[i], function(err, result){
                    if(err)
                        console.log("Error: "+err);
                    else{
                        tempObject = JSON.parse(result);
                        if(tempObject.name != null){
                            finalList.push(tempObject);
                        }
                    }
                });     
            }

    });
   console.log("Goes here after checking every single object");

但正如预期的那样,由于Node的异步特性,如果不检查列表中的每个id,它就会执行“Goes here ...”。我需要在检查每个id后应用其余的过程(在redis db中映射并检查名称)。但我不知道该怎么做。也许如果我可以将回调附加到for循环并确保我的其余函数在循环结束后开始运行(我知道这是不可能的但只是给出一个想法)?

3 个答案:

答案 0 :(得分:4)

我会在你的问题中找到你建议的路线并将自定义回调附加到你的提取功能:

function getStudentsData(callback) {
    var setList = [];
    var dataList = [];

    redisClient.smembers("student_setList", function(err,result) {
        setList = result; //id's of students

        for(var i = 0; i < setList.length; i++) {
            redisClient.get(setList[i], function(err, result) {
                if(err) {
                    console.log("Error: "+err);
                } else {
                    tempObject = JSON.parse(result);
                    if(tempObject.name != null) {
                        dataList.push(tempObject);
                    }
                }
            });     
        }

        if(dataList.length == setList.length) {
            if(typeof callback == "function") {
                callback(dataList);
            }
            console.log("getStudentsData: done");
        } else {
            console.log("getStudentsData: length mistmach");
        }

    });
}

getStudentsData(function(dataList) {
    console.log("Goes here after checking every single object");
    console.log(dataList.length);
    //More code here
});

这可能是最有效的方法;或者你可以依赖旧学校while循环,直到数据准备就绪:

var finalList = [];
var list = [0];

redisClient.smembers("student_list", function(err,result) {
    list = result; //id's of students
    var possibleStudents = [];

    for(var i = 0; i < list.length; i++) {
        redisClient.get(list[i], function(err, result) {
            if(err) {
                console.log("Error: "+err);
            } else {
                tempObject = JSON.parse(result);
                if(tempObject.name != null) {
                    finalList.push(tempObject);
                }
            }
        });     
    }
});


process.nextTick(function() {
    if(finalList.length == list.length) {
        //Done
        console.log("Goes here after checking every single object");
        console.log(dataList.length);
        //More code here
    } else {
        //Not done, keep looping
        process.nextTick(arguments.callee);
    }
});

我们使用process.nextTick代替实际的while来确保其他请求不会在此期间被阻止;由于Javascript的单线程特性,这是首选方式。为了完整起见,我把它放进去了,但前一种方法效率更高,更适合node.js,所以除非涉及重大改写,否则请继续使用。

两种情况都依赖于异步回调,这是值得的,这意味着它之外的任何代码仍然可能在其他代码完成之前运行。例如,使用我们的第一个片段:

function getStudentsData(callback) {
    //[...]
}

getStudentsData(function(dataList) {
    //[...]
});

console.log("hello world");

最后一个console.log几乎可以保证在我们的回调传递给getStudentsData之前运行。解决方法?为它设计,它就是node.js的工作原理。在上面的例子中,它很容易,我们只会在我们的回调中调用console.log 传递给getStudentsData而不是在它之外。其他场景需要的解决方案与传统的程序编码有所不同,但是一旦你了解它就会发现事件驱动,非阻塞实际上是一个非常强大的功能。

答案 1 :(得分:3)

尝试使用finish模块。我创建了这个模块来处理这个问题。它比Async更容易使用,并且还可以产生更好的性能。这是一个例子:

var finish = require("finish");
finish(function(async) { 
  // Any asynchronous calls within this function will be captured
  // Just wrap each asynchronous call with function 'async'
  ['file1', 'file2', 'file3'].forEach(function(file) {
    async(function(done) { 
      // Your async function should use 'done' as callback, or call 'done' in its callback
      fs.readFile(file, done); 
    });
  });
}, function(err, results) {
  // fired after all asynchronous calls finish or as soon as an error occurs
  console.log(results[0]);console.log(results[1]);console.log(results[2]);
});

答案 2 :(得分:1)

为node.js尝试async模块。该模块具有异步forEach。