Rails 3 gem：Simple Scraper

Question

铁轨是否有一个好的刮刀宝石？我记得最近在阅读一篇关于一篇博文的博文但是找不到它。

由于

Answer 1

Nokogiri，也是结帐 SelectorGadget - 为您生成CSS选择器

Answer 2

很多存在。试试ScrAPI（见http://railscasts.com/episodes/173-screen-scraping-with-scrapi）或Nokogiri（见http://railscasts.com/episodes/190-screen-scraping-with-nokogiri）。

Answer 3

尝试了ScrAPI和Nokogiri的应用程序。

Nokogiri对于不同的编码（utf，windows-XXXX等）更加健壮。它只是有效。

使用ScrAPI，我必须先按照in this article所述检测编码。不用担心Nokogiri，因为它优雅地处理编码。

Answer 4

机械化，Hpricot也非常有用。请参阅以下链接以了解如何开始使用这些工具 -

http://rorguide.blogspot.com/2011/04/simple-ruby-screen-scraper-using.html（使用Mechanize，Hpricot和XPath的简单Ruby Screen Scraper）

http://rorguide.blogspot.com/2011/04/simple-ruby-screen-scraper-in-just-5.html（简单的Ruby Screen Scraper仅需5行而不使用XPath）