标签: php web-scraping web-crawler
我正在研究这个基本的基础刮刀/爬虫,它工作正常,直到它获得.net生成的链接__doPostBack(...),任何想法如何处理这些链接背后的页面?
答案 0 :(得分:1)
尝试自动点击JavaScript按钮(需要PHP中的其他库),尝试复制浏览器在单击按钮后发送的请求。有各种firefox扩展程序可以帮助您检查请求,例如TamperData,Firebug和LiveHttp。