Perl WWW :: Mechanize(或LWP)获取重定向网址

时间:2012-06-06 20:49:11

标签: perl url redirect www-mechanize lwp

所以我使用WWW::Mechanize抓取网站。它工作得很好,除非我请求一个网址,如:

http://www.levi.com/

我被重定向到:

http://us.levi.com/home/index.jsp

对于我的脚本,我需要知道这个重定向发生了,我被重定向的网址是什么。无论如何使用WWW::MechanizeLWP检测到这一点,然后获取重定向的网址?谢谢!

2 个答案:

答案 0 :(得分:10)

use strict;
use warnings;
use URI;
use WWW::Mechanize;

my $url = 'http://...';
my $mech = WWW::Mechanize->new(autocheck => 0);
$mech->max_redirect(0);
$mech->get($url);

my $status = $mech->status();
if (($status >= 300) && ($status < 400)) {
  my $location = $mech->response()->header('Location');
  if (defined $location) {
    print "Redirected to $location\n";
    $mech->get(URI->new_abs($location, $mech->base()));
  }
}

如果状态代码为 3XX ,则应检查重定向网址的响应标头。

答案 1 :(得分:0)

您还可以通过检查响应对象上的redirects()方法来到达同一个地方。

use strict;
use warnings;
use feature qw( say );

use WWW::Mechanize;

my $ua = WWW::Mechanize->new;
my $res = $ua->get('http://metacpan.org');

my @redirects = $res->redirects;
say 'request uri: ' . $redirects[-1]->request->uri;
say 'location header: ' . $redirects[-1]->header('Location');

打印:

request uri: http://metacpan.org
location header: https://metacpan.org/

请参阅https://metacpan.org/pod/HTTP::Response# $ r-%3Eredirects请注意,多个重定向可能会将您带到当前位置。因此,您可能希望检查通过redirects()返回的每个响应。