我使用Aperture了解抓取网站。如果我在mozila网页浏览器中打开http://demo.crawljax.com/。如何使用Aperture抓取打开的浏览器内容。
步骤: 1.在你的mozila firefox上打开http://demo.crawljax.com/。 2.执行java程序抓取打开的mozila firefox选项卡。
答案 0 :(得分:0)
您似乎需要抓取JavaScript / Ajax页面。你真的需要像googlebot这样的抓取工具。请参阅this googlebot可以抓取javascript页面。您可以使用其他一些驱动程序/爬虫来完成。
中的最佳答案答案 1 :(得分:0)
使用Aperture抓取打开的Webbrowser数据是不可能的。 Crawljax是测试工具,它将打开新的Web浏览器和测试数据..我使用Crawljax确保抓取动态网站数据。