使用Post请求的Ruby抓取网站

时间:2012-04-24 00:35:52

标签: ruby forms post get screen-scraping

我基本上负责使用帖子请求抓取网站。我在寻找 ruby中的“net / http”和帖子示例似乎非常简单。问题是,如果我想使用zipcode找到一个连锁店(连锁网站使用post来查找商店),我该怎么办呢?我尝试过几种东西,但没有一种能够工作。下面是我正在使用的代码示例:

    url = ARGV[0]
    zipcode = ARGV[1]  

 params = {"q" => "#{zipcode}"}
 result = Net::HTTP.post_form(URI.parse("#{url}"),params)

我从命令行传递url和zipcode作为参数,其中url是链的商店定位器网址。

1 个答案:

答案 0 :(得分:2)

考虑使用Mechanize代替。

http://mechanize.rubyforge.org/