我可以在爬网过程中增加工作人员吗

时间:2018-11-21 15:00:18

标签: apache-storm stormcrawler

使用Storm Crawler 1.10和Apache storm 1.2.2。在抓取过程进行期间,如何更改工作线程和取数线程。

1 个答案:

答案 0 :(得分:1)

获取线程的数量无法即时更改,与工作者数量相同。您可以简单地停止拓扑,更改配置并重新启动它。中断将是最小的,我们将在其离开的地方进行抓取