在node.io中实现async.parallel的问题

时间:2011-12-10 05:05:29

标签: node.js coffeescript node.io

此处列出的代码将提供部分输出,然后是错误(self.htmlparser.parseChunk)。使用async.series而不是async.parallel时,此示例按预期工作

ping webservice将等待2秒然后输出“pong”,以模拟webservice调用

app.coffee

async = require 'async'
start = (new Date()).getTime()

require('node.io').scrape () ->
    @ping = (callback, n) =>
            @getHtml 'http://localhost:8888/ping', (err, $, data) => 
                diff = (new Date()).getTime() - start
                console.log "#{n} : #{diff}"
                callback err, data
    async.parallel [
        (callback) =>
            @ping callback, 1
        ,
        (callback) =>
            @ping callback, 2
        ,
        (callback) =>
            @ping callback, 3
        ,
        ], (err,results) =>
            @exit err if err?
            console.log n for n in results
            @emit 'done'

使用async.series输出

1 : 2079
2 : 4089
3 : 6093
1
2
3
done
OK: Job complete

使用async.parallel输出

3 : 2079
/home/nodeuser/src/nodews/client/node_modules/node.io/lib/node.io/request.js:296
                    self.htmlparser.parseChunk(chunk);
TypeError: Cannot call method 'parseChunk' of null

系统信息

nodeuser@ubuntu:~/src/nodews/client$ node -v && coffee -v && npm -v
v0.4.12
CoffeeScript version 1.1.3
1.0.106

nodeuser@ubuntu:~/src/nodews/client$ uname -a
Linux ubuntu 2.6.38-12-generic #51-Ubuntu SMP Wed Sep 28 14:27:32 UTC 2011 x86_64 x86_64    x86_64 GNU/Linux

1 个答案:

答案 0 :(得分:4)

查看node.io源代码,似乎scrape创建了一个Job实例,在需要时会创建一个htmlparser实例,并在解析完成时将其销毁(即,当请求中的所有数据都被输入时)。因此,您无法从单个scrape并行解析多个源。相反,使用node.io的低级API方法(即new nodeio.Job);见this wiki page