t/io/utf8.t

   1 #!./perl
   2
   3 BEGIN {
   4     chdir 't' if -d 't';
   5     @INC = '../lib';
   6     unless (exists $open::layers{'perlio'}) {
   7         print "1..0 # Skip: not perlio\n";
   8         exit 0;
   9     }
  10 }
  11
  12 $| = 1;
  13 my $total_tests = 25;
  14 if (ord('A') == 193) { $total_tests = 24; } # EBCDIC platforms do not warn on UTF-8
  15 print "1..$total_tests\n";
  16
  17 open(F,"+>:utf8",'a');
  18 print F chr(0x100).'£';
  19 print '#'.tell(F)."\n";
  20 print "not " unless tell(F) == 4;
  21 print "ok 1\n";
  22 print F "\n";
  23 print '#'.tell(F)."\n";
  24 print "not " unless tell(F) >= 5;
  25 print "ok 2\n";
  26 seek(F,0,0);
  27 print "not " unless getc(F) eq chr(0x100);
  28 print "ok 3\n";
  29 print "not " unless getc(F) eq "£";
  30 print "ok 4\n";
  31 print "not " unless getc(F) eq "\n";
  32 print "ok 5\n";
  33 seek(F,0,0);
  34 binmode(F,":bytes");
  35 my $chr = chr(0xc4);
  36 if (ord('A') == 193) { $chr = chr(0x8c); } # EBCDIC
  37 print "not " unless getc(F) eq $chr;
  38 print "ok 6\n";
  39 $chr = chr(0x80);
  40 if (ord('A') == 193) { $chr = chr(0x41); } # EBCDIC
  41 print "not " unless getc(F) eq $chr;
  42 print "ok 7\n";
  43 $chr = chr(0xc2);
  44 if (ord('A') == 193) { $chr = chr(0x80); } # EBCDIC
  45 print "not " unless getc(F) eq $chr;
  46 print "ok 8\n";
  47 $chr = chr(0xa3);
  48 if (ord('A') == 193) { $chr = chr(0x44); } # EBCDIC
  49 print "not " unless getc(F) eq $chr;
  50 print "ok 9\n";
  51 print "not " unless getc(F) eq "\n";
  52 print "ok 10\n";
  53 seek(F,0,0);
  54 binmode(F,":utf8");
  55 print "not " unless scalar(<F>) eq "\x{100}£\n";
  56 print "ok 11\n";
  57 seek(F,0,0);
  58 $buf = chr(0x200);
  59 $count = read(F,$buf,2,1);
  60 print "not " unless $count == 2;
  61 print "ok 12\n";
  62 print "not " unless $buf eq "\x{200}\x{100}£";
  63 print "ok 13\n";
  64 close(F);
  65
  66 {
  67 $a = chr(300); # This *is* UTF-encoded
  68 $b = chr(130); # This is not.
  69
  70 open F, ">:utf8", 'a' or die $!;
  71 print F $a,"\n";
  72 close F;
  73
  74 open F, "<:utf8", 'a' or die $!;
  75 $x = <F>;
  76 chomp($x);
  77 print "not " unless $x eq chr(300);
  78 print "ok 14\n";
  79
  80 open F, "a" or die $!; # Not UTF
  81 $x = <F>;
  82 chomp($x);
  83 $chr = chr(196).chr(172);
  84 if (ord('A') == 193) { $chr = chr(141).chr(83); } # EBCDIC
  85 print "not " unless $x eq $chr;
  86 print "ok 15\n";
  87 close F;
  88
  89 open F, ">:utf8", 'a' or die $!;
  90 binmode(F);  # we write a "\n" and then tell() - avoid CRLF issues.
  91 print F $a;
  92 my $y;
  93 { my $x = tell(F);
  94     { use bytes; $y = length($a);}
  95     print "not " unless $x == $y;
  96     print "ok 16\n";
  97 }
  98
  99 { # Check byte length of $b
 100 use bytes; my $y = length($b);
 101 print "not " unless $y == 1;
 102 print "ok 17\n";
 103 }
 104
 105 print F $b,"\n"; # Don't upgrades $b
 106
 107 { # Check byte length of $b
 108 use bytes; my $y = length($b);
 109 print "not ($y) " unless $y == 1;
 110 print "ok 18\n";
 111 }
 112
 113 { my $x = tell(F);
 114     { use bytes; if (ord('A')==193){$y += 2;}else{$y += 3;}} # EBCDIC ASCII
 115     print "not ($x,$y) " unless $x == $y;
 116     print "ok 19\n";
 117 }
 118
 119 close F;
 120
 121 open F, "a" or die $!; # Not UTF
 122 $x = <F>;
 123 chomp($x);
 124 $chr = v196.172.194.130;
 125 if (ord('A') == 193) { $chr = v141.83.130; } # EBCDIC
 126 printf "not (%vd) ", $x unless $x eq $chr;
 127 print "ok 20\n";
 128
 129 open F, "<:utf8", "a" or die $!;
 130 $x = <F>;
 131 chomp($x);
 132 close F;
 133 printf "not (%vd) ", $x unless $x eq chr(300).chr(130);
 134 print "ok 21\n";
 135
 136 # Now let's make it suffer.
 137 open F, ">", "a" or die $!;
 138 my $w;
 139 eval {local $SIG{__WARN__} = sub { $w = $_[0] };  print F $a; };
 140 print "not " if ($@ || $w !~ /Wide character in print/i);
 141 print "ok 22\n";
 142 }
 143
 144 # Hm. Time to get more evil.
 145 open F, ">:utf8", "a" or die $!;
 146 print F $a;
 147 binmode(F, ":bytes");
 148 print F chr(130)."\n";
 149 close F;
 150
 151 open F, "<", "a" or die $!;
 152 $x = <F>; chomp $x;
 153 $chr = v196.172.130;
 154 if (ord('A') == 193) { $chr = v141.83.130; } # EBCDIC
 155 print "not " unless $x eq $chr;
 156 print "ok 23\n";
 157
 158 # Right.
 159 open F, ">:utf8", "a" or die $!;
 160 print F $a;
 161 close F;
 162 open F, ">>", "a" or die $!;
 163 print F chr(130)."\n";
 164 close F;
 165
 166 open F, "<", "a" or die $!;
 167 $x = <F>; chomp $x;
 168 print "not " unless $x eq $chr;
 169 print "ok 24\n";
 170
 171 # Now we have a deformed file.
 172 open F, "<:utf8", "a" or die $!;
 173 $x = <F>; chomp $x;
 174 { local $SIG{__WARN__} = sub { print "ok 25\n"; };
 175 eval { sprintf "%vd\n", $x; }
 176 }
 177
 178 unlink('a');
 179