ext/Encode/t/Aliases.t

   1 #!../perl
   2
   3 BEGIN {
   4     if ($ENV{'PERL_CORE'}){
   5     chdir 't';
   6     unshift @INC, '../lib';
   7     }
   8     require Config; import Config;
   9     if ($Config{'extensions'} !~ /\bEncode\b/) {
  10     print "1..0 # Skip: Encode was not built\n";
  11         exit 0;
  12     }
  13 }
  14
  15 use strict;
  16 use Encode;
  17 use Encode::Alias;
  18 my %a2c;
  19 my $ON_EBCDIC;
  20
  21 sub init_a2c{
  22     %a2c = (
  23         'US-ascii' => 'ascii',
  24         'ISO-646-US' => 'ascii',
  25         'UTF-8'    => 'utf-8-strict',
  26         'UCS-2'    => 'UCS-2BE',
  27         'UCS2'     => 'UCS-2BE',
  28         'iso-10646-1' => 'UCS-2BE',
  29         'ucs2-le'  => 'UCS-2LE',
  30         'ucs2-be'  => 'UCS-2BE',
  31         'utf16'    => 'UTF-16',
  32         'utf32'    => 'UTF-32',
  33         'utf16-be'  => 'UTF-16BE',
  34         'utf32-be'  => 'UTF-32BE',
  35         'utf16-le'  => 'UTF-16LE',
  36         'utf32-le'  => 'UTF-32LE',
  37         'UCS4-BE'   => 'UTF-32BE',
  38         'UCS-4-LE'  => 'UTF-32LE',
  39         'cyrillic' => 'iso-8859-5',
  40         'arabic'   => 'iso-8859-6',
  41         'greek'    => 'iso-8859-7',
  42         'hebrew'   => 'iso-8859-8',
  43         'thai'     => 'iso-8859-11',
  44         'tis620'   => 'iso-8859-11',
  45         'WinLatin1'     => 'cp1252',
  46         'WinLatin2'     => 'cp1250',
  47         'WinCyrillic'   => 'cp1251',
  48         'WinGreek'      => 'cp1253',
  49         'WinTurkish'    => 'cp1254',
  50         'WinHebrew'     => 'cp1255',
  51         'WinArabic'     => 'cp1256',
  52         'WinBaltic'     => 'cp1257',
  53         'WinVietnamese' => 'cp1258',
  54         'koi8r'         => 'koi8-r',
  55         'koi8u'         => 'koi8-u',
  56         'ja_JP.euc'         => $ON_EBCDIC ? '' : 'euc-jp',
  57         'x-euc-jp'          => $ON_EBCDIC ? '' : 'euc-jp',
  58         'zh_CN.euc'         => $ON_EBCDIC ? '' : 'euc-cn',
  59         'x-euc-cn'          => $ON_EBCDIC ? '' : 'euc-cn',
  60         'ko_KR.euc'         => $ON_EBCDIC ? '' : 'euc-kr',
  61         'x-euc-kr'          => $ON_EBCDIC ? '' : 'euc-kr',
  62         'ujis'      => $ON_EBCDIC ? '' : 'euc-jp',
  63         'Shift_JIS'         => $ON_EBCDIC ? '' : 'shiftjis',
  64         'x-sjis'            => $ON_EBCDIC ? '' : 'shiftjis',
  65         'jis'       => $ON_EBCDIC ? '' : '7bit-jis',
  66         'big-5'     => $ON_EBCDIC ? '' : 'big5-eten',
  67         'zh_TW.Big5'    => $ON_EBCDIC ? '' : 'big5-eten',
  68         'tca-big5'          => $ON_EBCDIC ? '' : 'big5-eten',
  69         'big5-hk'           => $ON_EBCDIC ? '' : 'big5-hkscs',
  70         'hkscs-big5'    => $ON_EBCDIC ? '' : 'big5-hkscs',
  71         'GB_2312-80'    => $ON_EBCDIC ? '' : 'euc-cn',
  72         'KS_C_5601-1987'    => $ON_EBCDIC ? '' : 'cp949',
  73         #
  74         'gb12345-raw'   => $ON_EBCDIC ? '' : 'gb12345-raw',
  75         'gb2312-raw'    => $ON_EBCDIC ? '' : 'gb2312-raw',
  76         'jis0201-raw'   => $ON_EBCDIC ? '' : 'jis0201-raw',
  77         'jis0208-raw'   => $ON_EBCDIC ? '' : 'jis0208-raw',
  78         'jis0212-raw'   => $ON_EBCDIC ? '' : 'jis0212-raw',
  79         'ksc5601-raw'   => $ON_EBCDIC ? '' : 'ksc5601-raw',
  80        );
  81
  82     for my $i (1..11,13..16){
  83     $a2c{"ISO 8859 $i"} = "iso-8859-$i";
  84     }
  85     for my $i (1..10){
  86     $a2c{"ISO Latin $i"} = "iso-8859-$Encode::Alias::Latin2iso[$i]";
  87     }
  88     for my $k (keys %Encode::Alias::Winlatin2cp){
  89     my $v = $Encode::Alias::Winlatin2cp{$k};
  90     $a2c{"Win" . ucfirst($k)} = "cp" . $v;
  91     $a2c{"IBM-$v"} = $a2c{"MS-$v"} = "cp" . $v;
  92     $a2c{"cp-" . $v} = "cp" . $v;
  93     }
  94     my @a2c = keys %a2c;
  95     for my $k (@a2c){
  96     $a2c{uc($k)} = $a2c{$k};
  97     $a2c{lc($k)} = $a2c{$k};
  98     $a2c{lcfirst($k)} = $a2c{$k};
  99     $a2c{ucfirst($k)} = $a2c{$k};
 100     }
 101 }
 102
 103 BEGIN{
 104     $ON_EBCDIC = ord("A") == 193;
 105     @ARGV and $ON_EBCDIC = $ARGV[0] eq 'EBCDIC';
 106     $Encode::ON_EBCDIC = $ON_EBCDIC;
 107     init_a2c();
 108 }
 109
 110 if ($ON_EBCDIC){
 111     delete @Encode::ExtModule{
 112     qw(euc-cn gb2312 gb12345 gbk cp936 iso-ir-165 MacChineseSimp
 113        euc-jp iso-2022-jp 7bit-jis shiftjis MacJapanese cp932
 114        euc-kr ksc5601 cp949 MacKorean
 115        big5     big5-hkscs cp950 MacChineseTrad
 116        gb18030 big5plus euc-tw)
 117     };
 118 }
 119
 120 use Test::More tests => (scalar keys %a2c) * 4;
 121
 122 print "# alias test;  \$ON_EBCDIC == $ON_EBCDIC\n";
 123
 124 foreach my $a (keys %a2c){
 125     my $e = Encode::find_encoding($a);
 126     is((defined($e) and $e->name), $a2c{$a},$a)
 127     or warn "alias was $a";;
 128 }
 129
 130 # now we override some of the aliases and see if it works fine
 131
 132 define_alias(
 133          qr/ascii/i    => 'WinLatin1',
 134          qr/cyrillic/i => 'WinCyrillic',
 135          qr/arabic/i   => 'WinArabic',
 136          qr/greek/i    => 'WinGreek',
 137          qr/hebrew/i   => 'WinHebrew'
 138         );
 139
 140 print "# alias test with alias overrides\n";
 141
 142 foreach my $a (keys %a2c){
 143     my $e = Encode::find_encoding($a);
 144     is((defined($e) and $e->name), $a2c{$a}, "Override $a")
 145     or warn "alias was $a";
 146 }
 147
 148 print "# alias undef test\n";
 149
 150 Encode::Alias->undef_aliases;
 151 foreach my $a (keys %a2c){
 152     my $e = Encode::find_encoding($a);
 153     ok(!defined($e) || $e->name =~ /-raw$/o,"Undef $a")
 154     or warn "alias was $a";
 155 }
 156
 157 print "# alias reinit test\n";
 158
 159 Encode::Alias->init_aliases;
 160 init_a2c();
 161 foreach my $a (keys %a2c){
 162     my $e = Encode::find_encoding($a);
 163     is((defined($e) and $e->name), $a2c{$a}, "Reinit $a")
 164     or warn "alias was $a";
 165 }
 166 __END__
 167 for my $k (keys %a2c){
 168     $k =~ /[A-Z]/ and next;
 169     print "$k => $a2c{$k}\n";
 170 }
 171
 172
 173