Perl:一个异步的http代理,通过mojolicious

时间:2015-12-17 06:40:12

标签: perl asynchronous http-proxy mojolicious

我制作了一个简单的http代理,它的工作正常,但速度不快,因为在函数handle_request中,我使用

my $tx = $ua->start( Mojo::Transaction::HTTP->new(req=>$request) );

执行请求,它阻止。

我尝试使用像:

这样的回调
$ua->start( Mojo::Transaction::HTTP->new(req=>$request) )=>sub{ ... }

使其无阻塞,然后犯了一个错误:

'error' => { 'message' => 'Premature connection close'}

我想这是因为函数handle_request立即返回,它不会等待回调完成。如果我使用信号量等待回调,那就意味着它再次被阻止。

#!/usr/bin/perl
use strict;
use warnings;
use utf8;
use Mojo::IOLoop::Server;
use Mojo::UserAgent;
use Mojo::Message::Response;
use Mojo::Message::Request;
use Mojo::Transaction::HTTP;
use Data::Dumper;

binmode STDOUT, ":encoding(UTF-8)";

my %buffer;

Mojo::IOLoop->server( {port => 3128} => sub {
    my ($loop, $stream, $client) = @_;

    $stream->on(
        read => sub {
            my ($stream, $chunk) = @_;

            my $buffer = $buffer{$client}{read_buffer} .= $chunk;

            if ($buffer =~ /^GET\s+|POST\s+|HEAD\s+(.*)\r\n\r\n$/i) {
                $buffer{$client}{read_buffer} = '';
                &handle_request($client,$stream,$buffer);
            }

            elsif ($buffer =~ /^CONNECT\s+(.*)\r\n\r\n$/i) {
                $buffer{$client}{read_buffer} = '';
                &handle_connect($stream,$buffer);
            }

            elsif($buffer{$client}{connection})
            {
                $buffer{$client}{read_buffer} = '';
                Mojo::IOLoop->stream($buffer{$client}{connection})->write($chunk);
            }

            if(length($buffer)>= 20 *1024 * 1024) {
                delete $buffer{$client};
                Mojo::IOLoop->remove($client);
                return;
            }
        });
});

sub handle_request{

    my($client,$stream,$chunk) = @_;

    my $request = Mojo::Message::Request->new;
    $request = $request->parse($chunk);

    my $ua = Mojo::UserAgent->new;
    my $tx = $ua->start( Mojo::Transaction::HTTP->new(req=>$request) );

    $stream->write( $tx->res->to_string );
}

sub handle_connect{
    my ($stream, $chunk) = @_;
    my $request = Mojo::Message::Request->new;
    my $ua = Mojo::UserAgent->new;

    $request = $request->parse($chunk);

    print Dumper($request);
}

Mojo::IOLoop->start;

希望得到一些建议。

1 个答案:

答案 0 :(得分:2)

你有2个问题:

  1. 当您的代码具有阻止样式时,您尝试调用$ua->start的非阻塞变体。函数handle_request必须具有回调作为参数。 如果您有回调链,那么实现它的最佳方法是使用Mojo::IOLoop::Delay
  2. 当您在子handle_request中以非阻塞样式创建变量$ ua时,您的变量将被垃圾回收器驱逐,因为首先执行子handle_request的退出并且$ ua被销毁,因为它是局部变量然后从$ ua得到答案。所以你得到Premature connection close。您需要在其他地方保存$ ua的实例以防止此类错误。
  3. <强> UPD 即可。
    我是write http / https代理的错误变种,它只能通过CONNECT方法工作,并且没有完整的第一条http消息。

    <强> UPD 即可。
    我添加了另一个http / https代理示例,它正确读取了第一条http消息,并且不仅通过CONNECT方法工作。

    <强> UPD 即可。
    哦,Mojo的作者写了https proxy的example