ext/Encode/t/Aliases.t

   1 #!../perl
   2
   3 BEGIN {
   4     if ($ENV{'PERL_CORE'}){
   5     chdir 't';
   6     unshift @INC, '../lib';
   7     }
   8     require Config; import Config;
   9     if ($Config{'extensions'} !~ /\bEncode\b/) {
  10     print "1..0 # Skip: Encode was not built\n";
  11         exit 0;
  12     }
  13 }
  14
  15 use strict;
  16 use Encode;
  17 use Encode::Alias;
  18 my %a2c;
  19 my $ON_EBCDIC;
  20
  21 sub init_a2c{
  22     %a2c = (
  23         'US-ascii' => 'ascii',
  24         'ISO-646-US' => 'ascii',
  25         'UTF-8'    => 'utf-8-strict',
  26         'UCS-2'    => 'UCS-2BE',
  27         'UCS2'     => 'UCS-2BE',
  28         'iso-10646-1' => 'UCS-2BE',
  29         'ucs2-le'  => 'UCS-2LE',
  30         'ucs2-be'  => 'UCS-2BE',
  31         'utf16'    => 'UTF-16',
  32         'utf32'    => 'UTF-32',
  33         'utf16-be'  => 'UTF-16BE',
  34         'utf32-be'  => 'UTF-32BE',
  35         'utf16-le'  => 'UTF-16LE',
  36         'utf32-le'  => 'UTF-32LE',
  37         'UCS4-BE'   => 'UTF-32BE',
  38         'UCS-4-LE'  => 'UTF-32LE',
  39         'cyrillic' => 'iso-8859-5',
  40         'arabic'   => 'iso-8859-6',
  41         'greek'    => 'iso-8859-7',
  42         'hebrew'   => 'iso-8859-8',
  43         'thai'     => 'iso-8859-11',
  44         'tis620'   => 'iso-8859-11',
  45         'tis-620'   => 'iso-8859-11',
  46         'WinLatin1'     => 'cp1252',
  47         'WinLatin2'     => 'cp1250',
  48         'WinCyrillic'   => 'cp1251',
  49         'WinGreek'      => 'cp1253',
  50         'WinTurkish'    => 'cp1254',
  51         'WinHebrew'     => 'cp1255',
  52         'WinArabic'     => 'cp1256',
  53         'WinBaltic'     => 'cp1257',
  54         'WinVietnamese' => 'cp1258',
  55         'koi8r'         => 'koi8-r',
  56         'koi8u'         => 'koi8-u',
  57         'ja_JP.euc'         => $ON_EBCDIC ? '' : 'euc-jp',
  58         'x-euc-jp'          => $ON_EBCDIC ? '' : 'euc-jp',
  59         'zh_CN.euc'         => $ON_EBCDIC ? '' : 'euc-cn',
  60         'x-euc-cn'          => $ON_EBCDIC ? '' : 'euc-cn',
  61         'ko_KR.euc'         => $ON_EBCDIC ? '' : 'euc-kr',
  62         'x-euc-kr'          => $ON_EBCDIC ? '' : 'euc-kr',
  63         'ujis'      => $ON_EBCDIC ? '' : 'euc-jp',
  64         'Shift_JIS'         => $ON_EBCDIC ? '' : 'shiftjis',
  65         'x-sjis'            => $ON_EBCDIC ? '' : 'shiftjis',
  66         'jis'       => $ON_EBCDIC ? '' : '7bit-jis',
  67         'big-5'     => $ON_EBCDIC ? '' : 'big5-eten',
  68         'zh_TW.Big5'    => $ON_EBCDIC ? '' : 'big5-eten',
  69         'tca-big5'          => $ON_EBCDIC ? '' : 'big5-eten',
  70         'big5-hk'           => $ON_EBCDIC ? '' : 'big5-hkscs',
  71         'hkscs-big5'    => $ON_EBCDIC ? '' : 'big5-hkscs',
  72         'GB_2312-80'    => $ON_EBCDIC ? '' : 'euc-cn',
  73         'KS_C_5601-1987'    => $ON_EBCDIC ? '' : 'cp949',
  74         #
  75         'gb12345-raw'   => $ON_EBCDIC ? '' : 'gb12345-raw',
  76         'gb2312-raw'    => $ON_EBCDIC ? '' : 'gb2312-raw',
  77         'jis0201-raw'   => $ON_EBCDIC ? '' : 'jis0201-raw',
  78         'jis0208-raw'   => $ON_EBCDIC ? '' : 'jis0208-raw',
  79         'jis0212-raw'   => $ON_EBCDIC ? '' : 'jis0212-raw',
  80         'ksc5601-raw'   => $ON_EBCDIC ? '' : 'ksc5601-raw',
  81        );
  82
  83     for my $i (1..11,13..16){
  84     $a2c{"ISO 8859 $i"} = "iso-8859-$i";
  85     }
  86     for my $i (1..10){
  87     $a2c{"ISO Latin $i"} = "iso-8859-$Encode::Alias::Latin2iso[$i]";
  88     }
  89     for my $k (keys %Encode::Alias::Winlatin2cp){
  90     my $v = $Encode::Alias::Winlatin2cp{$k};
  91     $a2c{"Win" . ucfirst($k)} = "cp" . $v;
  92     $a2c{"IBM-$v"} = $a2c{"MS-$v"} = "cp" . $v;
  93     $a2c{"cp-" . $v} = "cp" . $v;
  94     }
  95     my @a2c = keys %a2c;
  96     for my $k (@a2c){
  97     $a2c{uc($k)} = $a2c{$k};
  98     $a2c{lc($k)} = $a2c{$k};
  99     $a2c{lcfirst($k)} = $a2c{$k};
 100     $a2c{ucfirst($k)} = $a2c{$k};
 101     }
 102 }
 103
 104 BEGIN{
 105     $ON_EBCDIC = ord("A") == 193;
 106     @ARGV and $ON_EBCDIC = $ARGV[0] eq 'EBCDIC';
 107     $Encode::ON_EBCDIC = $ON_EBCDIC;
 108     init_a2c();
 109 }
 110
 111 if ($ON_EBCDIC){
 112     delete @Encode::ExtModule{
 113     qw(euc-cn gb2312 gb12345 gbk cp936 iso-ir-165 MacChineseSimp
 114        euc-jp iso-2022-jp 7bit-jis shiftjis MacJapanese cp932
 115        euc-kr ksc5601 cp949 MacKorean
 116        big5     big5-hkscs cp950 MacChineseTrad
 117        gb18030 big5plus euc-tw)
 118     };
 119 }
 120
 121 use Test::More tests => (scalar keys %a2c) * 4;
 122
 123 print "# alias test;  \$ON_EBCDIC == $ON_EBCDIC\n";
 124
 125 foreach my $a (keys %a2c){
 126     print "# $a => $a2c{$a}\n";
 127     my $e = Encode::find_encoding($a);
 128     is((defined($e) and $e->name), $a2c{$a},$a)
 129     or warn "alias was $a";;
 130 }
 131
 132 # now we override some of the aliases and see if it works fine
 133
 134 define_alias(
 135          qr/ascii/i    => 'WinLatin1',
 136          qr/cyrillic/i => 'WinCyrillic',
 137          qr/arabic/i   => 'WinArabic',
 138          qr/greek/i    => 'WinGreek',
 139          qr/hebrew/i   => 'WinHebrew'
 140         );
 141
 142 print "# alias test with alias overrides\n";
 143
 144 foreach my $a (keys %a2c){
 145     print "# $a => $a2c{$a}\n";
 146     my $e = Encode::find_encoding($a);
 147     is((defined($e) and $e->name), $a2c{$a}, "Override $a")
 148     or warn "alias was $a";
 149 }
 150
 151 print "# alias undef test\n";
 152
 153 Encode::Alias->undef_aliases;
 154 foreach my $a (keys %a2c){
 155     my $e = Encode::find_encoding($a);
 156     ok(!defined($e) || $e->name =~ /-raw$/o,"Undef $a")
 157     or warn "alias was $a";
 158 }
 159
 160 print "# alias reinit test\n";
 161
 162 Encode::Alias->init_aliases;
 163 init_a2c();
 164 foreach my $a (keys %a2c){
 165     my $e = Encode::find_encoding($a);
 166     is((defined($e) and $e->name), $a2c{$a}, "Reinit $a")
 167     or warn "alias was $a";
 168 }
 169 __END__
 170 for my $k (keys %a2c){
 171     $k =~ /[A-Z]/ and next;
 172     print "$k => $a2c{$k}\n";
 173 }
 174
 175
 176