此处列出的代码将提供部分输出,然后是错误(self.htmlparser.parseChunk)。使用async.series而不是async.parallel时,此示例按预期工作
ping webservice将等待2秒然后输出“pong”,以模拟webservice调用
app.coffee
async = require 'async'
start = (new Date()).getTime()
require('node.io').scrape () ->
@ping = (callback, n) =>
@getHtml 'http://localhost:8888/ping', (err, $, data) =>
diff = (new Date()).getTime() - start
console.log "#{n} : #{diff}"
callback err, data
async.parallel [
(callback) =>
@ping callback, 1
,
(callback) =>
@ping callback, 2
,
(callback) =>
@ping callback, 3
,
], (err,results) =>
@exit err if err?
console.log n for n in results
@emit 'done'
使用async.series输出
1 : 2079
2 : 4089
3 : 6093
1
2
3
done
OK: Job complete
使用async.parallel输出
3 : 2079
/home/nodeuser/src/nodews/client/node_modules/node.io/lib/node.io/request.js:296
self.htmlparser.parseChunk(chunk);
TypeError: Cannot call method 'parseChunk' of null
系统信息
nodeuser@ubuntu:~/src/nodews/client$ node -v && coffee -v && npm -v
v0.4.12
CoffeeScript version 1.1.3
1.0.106
nodeuser@ubuntu:~/src/nodews/client$ uname -a
Linux ubuntu 2.6.38-12-generic #51-Ubuntu SMP Wed Sep 28 14:27:32 UTC 2011 x86_64 x86_64 x86_64 GNU/Linux
答案 0 :(得分:4)
查看node.io源代码,似乎scrape
创建了一个Job
实例,在需要时会创建一个htmlparser实例,并在解析完成时将其销毁(即,当请求中的所有数据都被输入时)。因此,您无法从单个scrape
并行解析多个源。相反,使用node.io的低级API方法(即new nodeio.Job
);见this wiki page。