我有一个使用美丽汤和python的mulitprocessing库的python网页抓取工具。
我想创建一个网站,该网站调用刮板并显示其返回的项目。这里有个要点:即使使用多重处理,该脚本也可能需要很长时间才能运行并获取我要查找的项目。我不想等待AJAX请求完成并立即显示所有值。我想分别显示每个发现的内容。
这是websocket有用的地方吗?如果我的刮板可以进行多处理,我什至可以使用websockets吗?还是有更好的方法?
理想情况下,我想使用Javascript客户端,如果有区别的话。但这很灵活。