Spring是否有任何Web Scraping解决方案？

Question

我需要构建一个Web应用程序，它将抓取并抓取一些网站并提取数据，抓取工具将具有调度程序。我知道有很多工具可以解析和提取像Jsoup这样的数据，但我只是想知道我是否可以用Spring Tools实现它？

Answer 1

Spring没有一个适合您案例的单一模板项目。但是你绝对可以通过Spring实现你想要的。 Spring提供了许多template projects来开发不同类型的应用程序。有Spring Boot项目可以快速开始使用Web应用程序。有Spring Scheduler项目用于安排任务。我建议将这两者结合起来开发你的应用程序。

对于抓取和抓取，我相信Spring没有可用的模板。但您可以使用jSpider和jSoup来完成此操作。