解析特定的网站数据并将其存储在db表中

Question

我想从需要user / pass的站点解析表行（当前名称为eg.test）并将其存储在数据库表中。 这可以在asp.net（或asp.net mvc4）中完成吗？

*我有用户名/密码 *网站登录表单为：http://exat.ru/toursearch/

谢谢，

Answer 1

我认为你在谈论网络抓取，而ASP.net可能不适合你正在尝试的东西。有许多网络抓取框架，例如。

http://scrapy.org/ for python

或

http://spyderwebtech.wordpress.com/2008/08/07/scraping-websites-with-curl/使用CURL

Answer 2

您可以查看“HttpWebRequest”，它可以为您获取网站数据。虽然您可能需要使用自定义解决方案解析它