应用程序自动搜索和抓取网站

Question

我应该使用哪种应用程序自动访问网站以收集信息？

基本上我有一个数据库可以完成我的计算;但是我必须从网站手动收集参数并将这些参数输入我的数据库。

我希望有一个应用程序可以执行以下操作：

1. 我输入产品名称，
2. 应用程序访问网站，使用网站的搜索功能查找产品信息，
3. 该应用程序会下载该产品的某些信息，
4. 它会对该信息执行计算，然后
5. 向我显示这些计算的结果

这有点超出我的深度，但无论软件多么复杂，我都愿意学习。

Answer 1

您不是在寻找数据库。您需要编写一个应用程序，该应用程序将从网页获取数据，然后将这些数据填充到数据库中。 即你需要构建一个“爬虫”或“刮刀”，然后将结果放入某些数据库，如MySQL。