使用httparty请求站点的反机器人系统的问题

时间:2012-05-24 09:43:42

标签: ruby-on-rails httparty

我在使用httparty gem请求网站时遇到问题:反僵尸系统用一些无聊的东西回应我 httparty有任何标准方法来改变请求标题(我的意思是UserAgent等)? 或者可以用其他方式完成吗?

1 个答案:

答案 0 :(得分:1)

前段时间我使用内置了用户代理和Cookie支持的mechanize gem解决了这个问题。

Quick example

require 'rubygems'
require 'mechanize'

a = Mechanize.new { |agent|
  agent.user_agent_alias = 'Mac Safari'
}

a.get('http://google.com/') do |page|
  search_result = page.form_with(:name => 'f') do |search|
    search.q = 'Hello world'
  end.submit

  search_result.links.each do |link|
    puts link.text
  end
end