标签: python web-scraping
我想抓取网页获取任何网站的标题和主要内容。我看到this。如果您从任何文章中复制任何网址(例如复制http://en-maktoob.news.yahoo.com/pakistani-army-fuels-anger-securing-swat-taliban-025337458.html到文本框并按Enter键),此网页将获得标题和文章并对其进行总结。它适用于大多数网站。我想知道如何不使用任何网站的HTML标签解析工作?如何获得每个网页的主要文章?
http://en-maktoob.news.yahoo.com/pakistani-army-fuels-anger-securing-swat-taliban-025337458.html