lib/CPAN/Tarzip.pm

   1 # -*- Mode: cperl; coding: utf-8; cperl-indent-level: 2 -*-
   2 package CPAN::Tarzip;
   3 use strict;
   4 use vars qw($VERSION @ISA $BUGHUNTING);
   5 use CPAN::Debug;
   6 use File::Basename ();
   7 $VERSION = sprintf "%.6f", substr(q$Rev: 858 $,4)/1000000 + 5.4;
   8 # module is internal to CPAN.pm
   9
  10 @ISA = qw(CPAN::Debug);
  11 $BUGHUNTING ||= 0; # released code must have turned off
  12
  13 # it's ok if file doesn't exist, it just matters if it is .gz or .bz2
  14 sub new {
  15   my($class,$file) = @_;
  16   $CPAN::Frontend->mydie("new called without arg") unless defined $file;
  17   if (0) {
  18     # nonono, we get e.g. 01mailrc.txt uncompressed if only wget is available
  19     $CPAN::Frontend->mydie("file[$file] doesn't match /\\.(bz2|gz|zip|tgz)\$/")
  20         unless $file =~ /\.(bz2|gz|zip|tgz)$/i;
  21   }
  22   my $me = { FILE => $file };
  23   if (0) {
  24   } elsif ($file =~ /\.bz2$/i) {
  25     unless ($me->{UNGZIPPRG} = $CPAN::Config->{bzip2}) {
  26       my $bzip2;
  27       if ($CPAN::META->has_inst("File::Which")) {
  28         $bzip2 = File::Which::which("bzip2");
  29       }
  30       if ($bzip2) {
  31         $me->{UNGZIPPRG} = $bzip2 || "bzip2";
  32       } else {
  33         $CPAN::Frontend->mydie(qq{
  34 CPAN.pm needs the external program bzip2 in order to handle '$file'.
  35 Please install it now and run 'o conf init' to register it as external
  36 program.
  37 });
  38       }
  39     }
  40   } else {
  41     # yes, we let gzip figure it out in *any* other case
  42     $me->{UNGZIPPRG} = $CPAN::Config->{gzip} || "gzip";
  43   }
  44   bless $me, $class;
  45 }
  46
  47 sub gzip {
  48   my($self,$read) = @_;
  49   my $write = $self->{FILE};
  50   if ($CPAN::META->has_inst("Compress::Zlib")) {
  51     my($buffer,$fhw);
  52     $fhw = FileHandle->new($read)
  53         or $CPAN::Frontend->mydie("Could not open $read: $!");
  54         my $cwd = `pwd`;
  55     my $gz = Compress::Zlib::gzopen($write, "wb")
  56         or $CPAN::Frontend->mydie("Cannot gzopen $write: $! (pwd is $cwd)\n");
  57     $gz->gzwrite($buffer)
  58         while read($fhw,$buffer,4096) > 0 ;
  59     $gz->gzclose() ;
  60     $fhw->close;
  61     return 1;
  62   } else {
  63     my $command = CPAN::HandleConfig->safe_quote($self->{UNGZIPPRG});
  64     system(qq{$command -c "$read" > "$write"})==0;
  65   }
  66 }
  67
  68
  69 sub gunzip {
  70   my($self,$write) = @_;
  71   my $read = $self->{FILE};
  72   if ($CPAN::META->has_inst("Compress::Zlib")) {
  73     my($buffer,$fhw);
  74     $fhw = FileHandle->new(">$write")
  75         or $CPAN::Frontend->mydie("Could not open >$write: $!");
  76     my $gz = Compress::Zlib::gzopen($read, "rb")
  77         or $CPAN::Frontend->mydie("Cannot gzopen $read: $!\n");
  78     $fhw->print($buffer)
  79         while $gz->gzread($buffer) > 0 ;
  80     $CPAN::Frontend->mydie("Error reading from $read: $!\n")
  81         if $gz->gzerror != Compress::Zlib::Z_STREAM_END();
  82     $gz->gzclose() ;
  83     $fhw->close;
  84     return 1;
  85   } else {
  86     my $command = CPAN::HandleConfig->safe_quote($self->{UNGZIPPRG});
  87     system(qq{$command -dc "$read" > "$write"})==0;
  88   }
  89 }
  90
  91
  92 sub gtest {
  93   my($self) = @_;
  94   return $self->{GTEST} if exists $self->{GTEST};
  95   my $read = $self->{FILE} or die;
  96   my $success;
  97   # After I had reread the documentation in zlib.h, I discovered that
  98   # uncompressed files do not lead to an gzerror (anymore?).
  99   if ( $CPAN::META->has_inst("Compress::Zlib") ) {
 100     my($buffer,$len);
 101     $len = 0;
 102     my $gz = Compress::Zlib::gzopen($read, "rb")
 103         or $CPAN::Frontend->mydie(sprintf("Cannot gzopen %s: %s\n",
 104                                           $read,
 105                                           $Compress::Zlib::gzerrno));
 106     while ($gz->gzread($buffer) > 0 ){
 107         $len += length($buffer);
 108         $buffer = "";
 109     }
 110     my $err = $gz->gzerror;
 111     $success = ! $err || $err == Compress::Zlib::Z_STREAM_END();
 112     if ($len == -s $read){
 113         $success = 0;
 114         CPAN->debug("hit an uncompressed file") if $CPAN::DEBUG;
 115     }
 116     $gz->gzclose();
 117     CPAN->debug("err[$err]success[$success]") if $CPAN::DEBUG;
 118   } else {
 119     my $command = CPAN::HandleConfig->safe_quote($self->{UNGZIPPRG});
 120     $success = 0==system(qq{$command -qdt "$read"});
 121   }
 122   return $self->{GTEST} = $success;
 123 }
 124
 125
 126 sub TIEHANDLE {
 127   my($class,$file) = @_;
 128   my $ret;
 129   $class->debug("file[$file]");
 130   my $self = $class->new($file);
 131   if (0) {
 132   } elsif (!$self->gtest) {
 133     my $fh = FileHandle->new($file) or die "Could not open file[$file]: $!";
 134     binmode $fh;
 135     $self->{FH} = $fh;
 136   } elsif ($CPAN::META->has_inst("Compress::Zlib")) {
 137     my $gz = Compress::Zlib::gzopen($file,"rb") or
 138         die "Could not gzopen $file";
 139     $self->{GZ} = $gz;
 140   } else {
 141     my $gzip = CPAN::HandleConfig->safe_quote($self->{UNGZIPPRG});
 142     my $pipe = "$gzip -dc $file |";
 143     my $fh = FileHandle->new($pipe) or die "Could not pipe[$pipe]: $!";
 144     binmode $fh;
 145     $self->{FH} = $fh;
 146   }
 147   $self;
 148 }
 149
 150
 151 sub READLINE {
 152   my($self) = @_;
 153   if (exists $self->{GZ}) {
 154     my $gz = $self->{GZ};
 155     my($line,$bytesread);
 156     $bytesread = $gz->gzreadline($line);
 157     return undef if $bytesread <= 0;
 158     return $line;
 159   } else {
 160     my $fh = $self->{FH};
 161     return scalar <$fh>;
 162   }
 163 }
 164
 165
 166 sub READ {
 167   my($self,$ref,$length,$offset) = @_;
 168   die "read with offset not implemented" if defined $offset;
 169   if (exists $self->{GZ}) {
 170     my $gz = $self->{GZ};
 171     my $byteread = $gz->gzread($$ref,$length);# 30eaf79e8b446ef52464b5422da328a8
 172     return $byteread;
 173   } else {
 174     my $fh = $self->{FH};
 175     return read($fh,$$ref,$length);
 176   }
 177 }
 178
 179
 180 sub DESTROY {
 181     my($self) = @_;
 182     if (exists $self->{GZ}) {
 183         my $gz = $self->{GZ};
 184         $gz->gzclose() if defined $gz; # hard to say if it is allowed
 185                                        # to be undef ever. AK, 2000-09
 186     } else {
 187         my $fh = $self->{FH};
 188         $fh->close if defined $fh;
 189     }
 190     undef $self;
 191 }
 192
 193
 194 sub untar {
 195   my($self) = @_;
 196   my $file = $self->{FILE};
 197   my($prefer) = 0;
 198
 199   if (0) { # makes changing order easier
 200   } elsif ($BUGHUNTING){
 201     $prefer=2;
 202   } elsif (MM->maybe_command($self->{UNGZIPPRG})
 203            &&
 204            MM->maybe_command($CPAN::Config->{tar})) {
 205     # should be default until Archive::Tar handles bzip2
 206     $prefer = 1;
 207   } elsif (
 208            $CPAN::META->has_inst("Archive::Tar")
 209            &&
 210            $CPAN::META->has_inst("Compress::Zlib") ) {
 211     $prefer = 2;
 212   } else {
 213     $CPAN::Frontend->mydie(qq{
 214 CPAN.pm needs either the external programs tar, gzip and bzip2
 215 installed. Can't continue.
 216 });
 217   }
 218   if ($prefer==1) { # 1 => external gzip+tar
 219     my($system);
 220     my $is_compressed = $self->gtest();
 221     my $tarcommand = CPAN::HandleConfig->safe_quote($CPAN::Config->{tar}) || "tar";
 222     if ($is_compressed) {
 223       my $command = CPAN::HandleConfig->safe_quote($self->{UNGZIPPRG});
 224       $system = qq{$command -dc }.
 225           qq{< "$file" | $tarcommand xvf -};
 226     } else {
 227       $system = qq{$tarcommand xvf "$file"};
 228     }
 229     if (system($system) != 0) {
 230       # people find the most curious tar binaries that cannot handle
 231       # pipes
 232       if ($is_compressed) {
 233         (my $ungzf = $file) =~ s/\.gz(?!\n)\Z//;
 234         $ungzf = File::Basename::basename($ungzf);
 235         my $ct = CPAN::Tarzip->new($file);
 236         if ($ct->gunzip($ungzf)) {
 237           $CPAN::Frontend->myprint(qq{Uncompressed $file successfully\n});
 238         } else {
 239           $CPAN::Frontend->mydie(qq{Couldn\'t uncompress $file\n});
 240         }
 241         $file = $ungzf;
 242       }
 243       $system = qq{$tarcommand xvf "$file"};
 244       $CPAN::Frontend->myprint(qq{Using Tar:$system:\n});
 245       if (system($system)==0) {
 246         $CPAN::Frontend->myprint(qq{Untarred $file successfully\n});
 247       } else {
 248         $CPAN::Frontend->mydie(qq{Couldn\'t untar $file\n});
 249       }
 250       return 1;
 251     } else {
 252       return 1;
 253     }
 254   } elsif ($prefer==2) { # 2 => modules
 255     unless ($CPAN::META->has_inst("Archive::Tar")) {
 256       $CPAN::Frontend->mydie("Archive::Tar not installed, please install it to continue");
 257     }
 258     my $tar = Archive::Tar->new($file,1);
 259     my $af; # archive file
 260     my @af;
 261     if ($BUGHUNTING) {
 262       # RCS 1.337 had this code, it turned out unacceptable slow but
 263       # it revealed a bug in Archive::Tar. Code is only here to hunt
 264       # the bug again. It should never be enabled in published code.
 265       # GDGraph3d-0.53 was an interesting case according to Larry
 266       # Virden.
 267       warn(">>>Bughunting code enabled<<< " x 20);
 268       for $af ($tar->list_files) {
 269         if ($af =~ m!^(/|\.\./)!) {
 270           $CPAN::Frontend->mydie("ALERT: Archive contains ".
 271                                  "illegal member [$af]");
 272         }
 273         $CPAN::Frontend->myprint("$af\n");
 274         $tar->extract($af); # slow but effective for finding the bug
 275         return if $CPAN::Signal;
 276       }
 277     } else {
 278       for $af ($tar->list_files) {
 279         if ($af =~ m!^(/|\.\./)!) {
 280           $CPAN::Frontend->mydie("ALERT: Archive contains ".
 281                                  "illegal member [$af]");
 282         }
 283         $CPAN::Frontend->myprint("$af\n");
 284         push @af, $af;
 285         return if $CPAN::Signal;
 286       }
 287       $tar->extract(@af) or
 288           $CPAN::Frontend->mydie("Could not untar with Archive::Tar.");
 289     }
 290
 291     Mac::BuildTools::convert_files([$tar->list_files], 1)
 292           if ($^O eq 'MacOS');
 293
 294     return 1;
 295   }
 296 }
 297
 298 sub unzip {
 299   my($self) = @_;
 300   my $file = $self->{FILE};
 301   if ($CPAN::META->has_inst("Archive::Zip")) {
 302     # blueprint of the code from Archive::Zip::Tree::extractTree();
 303     my $zip = Archive::Zip->new();
 304     my $status;
 305     $status = $zip->read($file);
 306     die "Read of file[$file] failed\n" if $status != Archive::Zip::AZ_OK();
 307     $CPAN::META->debug("Successfully read file[$file]") if $CPAN::DEBUG;
 308     my @members = $zip->members();
 309     for my $member ( @members ) {
 310       my $af = $member->fileName();
 311       if ($af =~ m!^(/|\.\./)!) {
 312         $CPAN::Frontend->mydie("ALERT: Archive contains ".
 313                                "illegal member [$af]");
 314       }
 315       $status = $member->extractToFileNamed( $af );
 316       $CPAN::META->debug("af[$af]status[$status]") if $CPAN::DEBUG;
 317       die "Extracting of file[$af] from zipfile[$file] failed\n" if
 318           $status != Archive::Zip::AZ_OK();
 319       return if $CPAN::Signal;
 320     }
 321     return 1;
 322   } else {
 323     my $unzip = $CPAN::Config->{unzip} or
 324         $CPAN::Frontend->mydie("Cannot unzip, no unzip program available");
 325     my @system = ($unzip, $file);
 326     return system(@system) == 0;
 327   }
 328 }
 329
 330 1;
 331
 332 __END__
 333
 334 =head1 LICENSE
 335
 336 This program is free software; you can redistribute it and/or
 337 modify it under the same terms as Perl itself.
 338
 339 =cut