标签: web-crawler search-engine screen-scraping open-search-server
我在OpenSearchServer中使用网络抓取工具,在抓取时,它会在Extracting url list操作期间卡住。在完成会话时,它也会卡住。无论如何设置时间限制或超时,如果某些事情需要太长时间才能中止?
Extracting url list