WWW :: Mechanize :: Firefox在人流量大的网站上

时间:2014-02-18 21:48:28

标签: perl www-mechanize-firefox

我有一个网站,我希望用户输入搜索字词然后抓取其他两个网站并向用户显示一些已解析的结果。

由于两个网站都使用大量JavaScript来返回数据,因此我考虑使用WWW::Mechanize::Firefox

是否可以运行几个同时使用WWW::Mechanize::Firefox的脚本实例?

1 个答案:

答案 0 :(得分:0)

是的,你可以做你所描述的;但互联网不是数据库。

您是否曾要求您希望使用的网站所有者的许可?我当然不同意第三方无限制地使用我的带宽和我网站的内容。

它将更负责任(并且更容易实现)一个系统,通过协议,您可以每天收集一次所需的信息,并将其存储在数据库中。此后,您可以直接从自己的资源中显示您自己的用户要求的信息。