使用python请求对此链接进行刮擦

时间:2015-07-05 03:32:59

标签: python

这是我想要访问的链接 http://www.worldfree4u.me/300mb-movies/watch-online-assassination-games-hindi-dubbed-free-download/ 在浏览器中,当我去链接它说没有找到页面,之后当电影“暗杀游戏”的类型名称和从搜索页面访问链接它工作。我想用python请求做这件事。
我试过的东西

  • 在header referer中设置为搜索链接和用户代理为ie11 ua string
  • 尝试使用 s=requests.Session创建会话对象,然后在使用s.get(url,headers=headers)
  • 访问上述链接的另一个请求中
但上面的任何内容似乎都不起作用。

1 个答案:

答案 0 :(得分:0)

您可以使用以下网址在该网站上执行搜索:

http://www.worldfree4u.me/?s=<search term>

e.g。

import requests

search_term = 'assassination games'
r = requests.get('http://www.worldfree4u.me/?',params={'s': search_term})

将返回&#34;暗杀游戏&#34;的搜索结果。然后,您可以r.content上的BeautifulSoup等HTML解析器挑选出您感兴趣的结果。