我正在尝试使用Mechanize开发PERL程序,这样我就可以在其他网站上重新发布我网站上的内容。但我在编码方面遇到了一些问题:
我的网站使用UTF-8编码,另一个网站使用ISO-8859-15进行编码。 以下是我网站上的数据样本以及其他网站上公布的结果:
10 M€d' encours / 10 M? d?encours
这是我的PERL计划:
#!/usr/bin/perl
use utf8;
use strict;
use warnings;
use WWW::Mechanize;
use HTML::TreeBuilder;
use HTML::TreeBuilder::XPath;
my $mech = WWW::Mechanize->new(
stack_depth => 0,
timeout => 10,
);
$mech->get("RecoveredDataFromMyWebsiteUrl");
my $tree = HTML::TreeBuilder::XPath->new_from_content($mech->content);
my $data = $tree->findvalue('/html/body//div[@id="content"]');
$data = Encode::encode("iso-8859-15",$data);
$mech->get("OtherWebsiteFormularUrl");
$mech->form_name("formular")->accept_charset('iso-8859-15');# Form Post Emploi
$mech->set_fields(
content => $data
);
$mech->submit;
open FIC,">output.html"
or die "E/S : $!\n";
my $out = select(FIC5);
print $mech->content;
答案 0 :(得分:1)
我会改变一些关于你如何抓取网站的事情,但是在编写utf8时尝试写入文件时可能会尝试这样做:
my $out_file = 'output.html';
open ( my $fh, ">:encoding(utf8)", $out_file) or die;