Perl:同形异义词攻击。可以比较外观相似的ascii /非ascii字符串吗?

时间:2019-02-08 18:54:23

标签: perl idn punycode

我遇到了这种所谓的“单应性攻击”,我想拒绝在视觉上看似仅是字母数字的解码后的punycode的域。例如,www.xn--80ak6aa92e.com将在浏览器(Firefox)中显示www.apple.com。域在外观上是相同的,但字符集不同。 Chrome已经对此进行了修补,浏览器显示了punycode。

我在下面有个例子。

#!/usr/bin/perl

use strict;
use warnings;

use Net::IDN::Encode ':all';
use utf8;                             


my $testdomain = "www.xn--80ak6aa92e.com";
my $IDN = domain_to_unicode($testdomain);
my $visual_result_ascii = "www.apple.com";

print "S1: $IDN\n";
print "S2: $visual_result_ascii";
print "MATCH" if ($IDN eq $visual_result_ascii);

外观上是相同的,但它们不匹配。可以将unicode字符串($ IDN)与字母数字字符串进行比较,在视觉上是一样的吗?

2 个答案:

答案 0 :(得分:1)

您的示例由Punycode converter转换为以下UTF-8字符串:

www.аррӏе.com
$ perl -e 'printf("%02x ", ord) for split("", "www.аррӏе.com"); print "\n"'
77 77 77 2e d0 b0 d1 80 d1 80 d3 8f d0 b5 2e 63 6f 6d

为Unicode:

$ perl -Mutf8 -e 'printf("%04x ", ord) for split("", "www.аррӏе.com"); print "\n"'
0077 0077 0077 002e 0430 0440 0440 04cf 0435 002e 0063 006f 006d

使用@ikegamis输入:

$ perl -Mutf8 -MEncode -e 'print encode("UTF-8", $_) for ("www.аррӏе.com" =~ /\p{Cyrillic}/g); print "\n"'
аррӏе
$ perl -Mutf8 -MEncode -e 'print encode("UTF-8", $_) for ("www.аррӏе.com" =~ /\P{Cyrillic}/g); print "\n"'
www..com

最初的想法

我不确定是否存在用于此目的的代码,但我的第一个想法是创建映射\N{xxxx}->“可视等效ASCII / UTF-8代码”。然后,您可以将映射应用于Unicode字符串,以将其“转换”为ASCII / UTF-8代码,并将结果字符串与域列表进行比较。

示例代码(我跳过了IDN解码工作,直接在测试数据中使用UTF-8结果)。这可能仍然可以改进,但至少可以证明这一想法。

#!/usr/bin/perl
use strict;
use warnings;

use utf8;
use Encode;

# Unicode (in HEX) -> visually equal ASCII/ISO-8859-1/... character
my %unicode_to_equivalent = (
   '0430' => 'a',
   '0435' => 'e',
   '04CF' => 'l',
   '0440' => 'p',
);

while (<DATA>) {
    chomp;

    # assuming that this returns a valid Perl UTF-8 string
    #my $IDN = domain_to_unicode($_);
    my($IDN, $compare) = split(' ', $_) ; # already decoded in test data

    my $visually_decoded =
        join('',              # merge result
             map {            # map, if mapping exists
                 $unicode_to_equivalent{sprintf("%04X", ord($_))} // $_
             }
             split ('', $IDN) # split to characters
        );

    print "Testing: ", encode('UTF-8', $IDN), " -> $compare ";
    print "Visual match!"
        if ($visually_decoded eq $compare);
    print "\n";
}

exit 0;

__DATA__
www.аррӏе.com www.apple.com

测试运行(取决于从答案中进行复制和粘贴是否保留原始UTF-8字符串)

$ perl dummy.pl
Testing: www.аррӏе.com -> www.apple.com Visual match!

计算字符串中的脚本数量

#!/usr/bin/perl
use strict;
use warnings;

use utf8;
use Encode;
use Unicode::UCD qw(charscript);

while (<DATA>) {
    chomp;

    # assuming that this returns a valid Perl UTF-8 string
    #my $IDN = domain_to_unicode($_);
    my($IDN) = $_;  # already decoded in test data

    # Unicod characters
    my @characters = split ('', $IDN);

    # See UTR #39: Unicode Security Mechanisms
    my %scripts =
        map { (charscript(ord), 1) } # Codepoint to script
        @characters;
    delete %scripts{Common};

    print 'Testing: ',
        encode('UTF-8', $IDN),
        ' (', join(' ', map { sprintf("%04X", ord) } @characters), ')',
        (keys %scripts == 1) ? ' not' : '', " suspicious\n";
}

exit 0;

__DATA__
www.аррӏе.com
www.apple.com
www.école.fr

测试运行(取决于从答案中进行复制和粘贴是否保留原始UTF-8字符串)

$ perl dummy.pl
Testing: www.аррӏе.com (0077 0077 0077 002E 0430 0440 0440 04CF 0435 002E 0063 006F 006D) suspicious
Testing: www.apple.com (0077 0077 0077 002E 0061 0070 0070 006C 0065 002E 0063 006F 006D) not suspicious
Testing: www.école.fr (0077 0077 0077 002E 00E9 0063 006F 006C 0065 002E 0066 0072) not suspicious

答案 1 :(得分:0)

经过一番研究并感谢您的评论,我现在得出一个结论。 最常见的问题来自西里尔语。该集合包含许多与拉丁字符在视觉上相似的字符,您可以进行许多组合。

我发现了一些骗局的IDN域,包括这些名称:

"аррӏе" "сһаѕе" "сіѕсо"

也许在这里,使用此字体,您可以看到差异,但是在浏览器中绝对没有视觉差异。

咨询https://en.wikipedia.org/wiki/Cyrillic_script_in_Unicode,我能够创建一个包含12个视觉上相似的字符的表。

更新:我在西里尔字母字符集中发现了另外4个类似拉丁字符,现在总共16个。

可以在它们之间创建许多组合,以在视觉上类似于合法域名创建100%的IDN。

0430 a CYRILLIC SMALL LETTER A
0441 c CYRILLIC SMALL LETTER ES
0501 d CYRILLIC SMALL LETTER KOMI DE
0435 e CYRILLIC SMALL LETTER IE
04bb h CYRILLIC SMALL LETTER SHHA 
0456 i CYRILLIC SMALL LETTER BYELORUSSIAN-UKRAINIAN I 
0458 j CYRILLIC SMALL LETTER JE
043a k CYRILLIC SMALL LETTER KA
04cf l CYRILLIC SMALL LETTER PALOCHKA 
043e o CYRILLIC SMALL LETTER O
0440 p CYRILLIC SMALL LETTER ER
051b q CYRILLIC SMALL LETTER QA 
0455 s CYRILLIC SMALL LETTER DZE
051d w CYRILLIC SMALL LETTER WE 
0445 x CYRILLIC SMALL LETTER HA
0443 y CYRILLIC SMALL LETTER U

问题发生在二级域上。扩展名也可以是IDN,但它们已经过验证,不能被欺骗并且不受此问题的影响。 域名注册商将检查所有字母是否来自同一集合。如果您混合使用拉丁,非拉丁字符,则IDN将不被接受。因此,额外的验证毫无意义。

我的想法很简单。我们分割域,仅解码SLD部分,然后匹配外观相似的西里尔字母列表。 如果所有字母在视觉上都与拉丁字母相似,那么结果几乎可以肯定是骗局。

#!/usr/bin/perl

use strict;
use warnings;

use utf8;
use open ':std', ':encoding(UTF-8)';
use Net::IDN::Encode ':all';
use Array::Utils qw(:all);

my @latinlike_cyrillics = qw (0430 0441 0501 0435 04bb 0456 0458 043a 04cf 043e 0440 051b 0455 051d 0445 0443);

# maybe you can find better examples
my $domain1 = "www.xn--80ak6aa92e.com";
my $domain2 = "www.xn--d1acpjx3f.xn--p1ai";

test_domain ($domain1);
test_domain ($domain2);

sub test_domain {
    my $testdomain = shift;
    my ($tLD, $sLD, $topLD) = split(/\./, $testdomain);
    my $IDN = domain_to_unicode($sLD);

    my @decoded; push (@decoded,sprintf("%04x", ord)) for ( split("", $IDN) );

    my @checker = array_minus( @decoded, @latinlike_cyrillics );
    if (@checker){print "$testdomain [$IDN] seems to be ok\n"}
    else {print "$testdomain [$IDN] is possibly scam\n"}
}