perlio.c

   1 /*
   2  * perlio.c Copyright (c) 1996-2002, Nick Ing-Simmons You may distribute
   3  * under the terms of either the GNU General Public License or the
   4  * Artistic License, as specified in the README file.
   5  */
   6
   7 /*
   8  * Hour after hour for nearly three weary days he had jogged up and down,
   9  * over passes, and through long dales, and across many streams.
  10  */
  11
  12 /*
  13  * If we have ActivePerl-like PERL_IMPLICIT_SYS then we need a dTHX to get
  14  * at the dispatch tables, even when we do not need it for other reasons.
  15  * Invent a dSYS macro to abstract this out
  16  */
  17 #ifdef PERL_IMPLICIT_SYS
  18 #define dSYS dTHX
  19 #else
  20 #define dSYS dNOOP
  21 #endif
  22
  23 #define VOIDUSED 1
  24 #ifdef PERL_MICRO
  25 #   include "uconfig.h"
  26 #else
  27 #   include "config.h"
  28 #endif
  29
  30 #define PERLIO_NOT_STDIO 0
  31 #if !defined(PERLIO_IS_STDIO) && !defined(USE_SFIO)
  32 /*
  33  * #define PerlIO FILE
  34  */
  35 #endif
  36 /*
  37  * This file provides those parts of PerlIO abstraction
  38  * which are not #defined in perlio.h.
  39  * Which these are depends on various Configure #ifdef's
  40  */
  41
  42 #include "EXTERN.h"
  43 #define PERL_IN_PERLIO_C
  44 #include "perl.h"
  45
  46 #ifdef PERL_IMPLICIT_CONTEXT
  47 #undef dSYS
  48 #define dSYS dTHX
  49 #endif
  50
  51 #include "XSUB.h"
  52
  53 int
  54 perlsio_binmode(FILE *fp, int iotype, int mode)
  55 {
  56     /*
  57      * This used to be contents of do_binmode in doio.c
  58      */
  59 #ifdef DOSISH
  60 #  if defined(atarist) || defined(__MINT__)
  61     if (!fflush(fp)) {
  62         if (mode & O_BINARY)
  63             ((FILE *) fp)->_flag |= _IOBIN;
  64         else
  65             ((FILE *) fp)->_flag &= ~_IOBIN;
  66         return 1;
  67     }
  68     return 0;
  69 #  else
  70     dTHX;
  71 #ifdef NETWARE
  72     if (PerlLIO_setmode(fp, mode) != -1) {
  73 #else
  74     if (PerlLIO_setmode(fileno(fp), mode) != -1) {
  75 #endif
  76 #    if defined(WIN32) && defined(__BORLANDC__)
  77         /*
  78          * The translation mode of the stream is maintained independent of
  79          * the translation mode of the fd in the Borland RTL (heavy
  80          * digging through their runtime sources reveal).  User has to set
  81          * the mode explicitly for the stream (though they don't document
  82          * this anywhere). GSAR 97-5-24
  83          */
  84         fseek(fp, 0L, 0);
  85         if (mode & O_BINARY)
  86             fp->flags |= _F_BIN;
  87         else
  88             fp->flags &= ~_F_BIN;
  89 #    endif
  90         return 1;
  91     }
  92     else
  93         return 0;
  94 #  endif
  95 #else
  96 #  if defined(USEMYBINMODE)
  97     dTHX;
  98     if (my_binmode(fp, iotype, mode) != FALSE)
  99         return 1;
 100     else
 101         return 0;
 102 #  else
 103     return 1;
 104 #  endif
 105 #endif
 106 }
 107
 108 #ifndef O_ACCMODE
 109 #define O_ACCMODE 3             /* Assume traditional implementation */
 110 #endif
 111
 112 int
 113 PerlIO_intmode2str(int rawmode, char *mode, int *writing)
 114 {
 115     int result = rawmode & O_ACCMODE;
 116     int ix = 0;
 117     int ptype;
 118     switch (result) {
 119     case O_RDONLY:
 120         ptype = IoTYPE_RDONLY;
 121         break;
 122     case O_WRONLY:
 123         ptype = IoTYPE_WRONLY;
 124         break;
 125     case O_RDWR:
 126     default:
 127         ptype = IoTYPE_RDWR;
 128         break;
 129     }
 130     if (writing)
 131         *writing = (result != O_RDONLY);
 132
 133     if (result == O_RDONLY) {
 134         mode[ix++] = 'r';
 135     }
 136 #ifdef O_APPEND
 137     else if (rawmode & O_APPEND) {
 138         mode[ix++] = 'a';
 139         if (result != O_WRONLY)
 140             mode[ix++] = '+';
 141     }
 142 #endif
 143     else {
 144         if (result == O_WRONLY)
 145             mode[ix++] = 'w';
 146         else {
 147             mode[ix++] = 'r';
 148             mode[ix++] = '+';
 149         }
 150     }
 151     if (rawmode & O_BINARY)
 152         mode[ix++] = 'b';
 153     mode[ix] = '\0';
 154     return ptype;
 155 }
 156
 157 #ifndef PERLIO_LAYERS
 158 int
 159 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
 160 {
 161     if (!names || !*names
 162         || strEQ(names, ":crlf")
 163         || strEQ(names, ":raw")
 164         || strEQ(names, ":bytes")
 165        ) {
 166         return 0;
 167     }
 168     Perl_croak(aTHX_ "Cannot apply \"%s\" in non-PerlIO perl", names);
 169     /*
 170      * NOTREACHED
 171      */
 172     return -1;
 173 }
 174
 175 void
 176 PerlIO_destruct(pTHX)
 177 {
 178 }
 179
 180 int
 181 PerlIO_binmode(pTHX_ PerlIO *fp, int iotype, int mode, const char *names)
 182 {
 183 #ifdef USE_SFIO
 184     return 1;
 185 #else
 186     return perlsio_binmode(fp, iotype, mode);
 187 #endif
 188 }
 189
 190 PerlIO *
 191 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
 192 {
 193 #ifdef PERL_MICRO
 194     return NULL;
 195 #else
 196 #ifdef PERL_IMPLICIT_SYS
 197     return PerlSIO_fdupopen(f);
 198 #else
 199 #ifdef WIN32
 200     return win32_fdupopen(f);
 201 #else
 202     if (f) {
 203         int fd = PerlLIO_dup(PerlIO_fileno(f));
 204         if (fd >= 0) {
 205             char mode[8];
 206             int omode = fcntl(fd, F_GETFL);
 207 #ifdef DJGPP
 208             omode = djgpp_get_stream_mode(f);
 209 #endif
 210             PerlIO_intmode2str(omode,mode,NULL);
 211             /* the r+ is a hack */
 212             return PerlIO_fdopen(fd, mode);
 213         }
 214         return NULL;
 215     }
 216     else {
 217         SETERRNO(EBADF, SS_IVCHAN);
 218     }
 219 #endif
 220     return NULL;
 221 #endif
 222 #endif
 223 }
 224
 225
 226 /*
 227  * De-mux PerlIO_openn() into fdopen, freopen and fopen type entries
 228  */
 229
 230 PerlIO *
 231 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
 232              int imode, int perm, PerlIO *old, int narg, SV **args)
 233 {
 234     if (narg) {
 235         if (narg > 1) {
 236             Perl_croak(aTHX_ "More than one argument to open");
 237         }
 238         if (*args == &PL_sv_undef)
 239             return PerlIO_tmpfile();
 240         else {
 241             char *name = SvPV_nolen(*args);
 242             if (*mode == '#') {
 243                 fd = PerlLIO_open3(name, imode, perm);
 244                 if (fd >= 0)
 245                     return PerlIO_fdopen(fd, (char *) mode + 1);
 246             }
 247             else if (old) {
 248                 return PerlIO_reopen(name, mode, old);
 249             }
 250             else {
 251                 return PerlIO_open(name, mode);
 252             }
 253         }
 254     }
 255     else {
 256         return PerlIO_fdopen(fd, (char *) mode);
 257     }
 258     return NULL;
 259 }
 260
 261 XS(XS_PerlIO__Layer__find)
 262 {
 263     dXSARGS;
 264     if (items < 2)
 265         Perl_croak(aTHX_ "Usage class->find(name[,load])");
 266     else {
 267         char *name = SvPV_nolen(ST(1));
 268         ST(0) = (strEQ(name, "crlf")
 269                  || strEQ(name, "raw")) ? &PL_sv_yes : &PL_sv_undef;
 270         XSRETURN(1);
 271     }
 272 }
 273
 274
 275 void
 276 Perl_boot_core_PerlIO(pTHX)
 277 {
 278     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
 279 }
 280
 281 #endif
 282
 283
 284 #ifdef PERLIO_IS_STDIO
 285
 286 void
 287 PerlIO_init(pTHX)
 288 {
 289     /*
 290      * Does nothing (yet) except force this file to be included in perl
 291      * binary. That allows this file to force inclusion of other functions
 292      * that may be required by loadable extensions e.g. for
 293      * FileHandle::tmpfile
 294      */
 295 }
 296
 297 #undef PerlIO_tmpfile
 298 PerlIO *
 299 PerlIO_tmpfile(void)
 300 {
 301     return tmpfile();
 302 }
 303
 304 #else                           /* PERLIO_IS_STDIO */
 305
 306 #ifdef USE_SFIO
 307
 308 #undef HAS_FSETPOS
 309 #undef HAS_FGETPOS
 310
 311 /*
 312  * This section is just to make sure these functions get pulled in from
 313  * libsfio.a
 314  */
 315
 316 #undef PerlIO_tmpfile
 317 PerlIO *
 318 PerlIO_tmpfile(void)
 319 {
 320     return sftmp(0);
 321 }
 322
 323 void
 324 PerlIO_init(pTHX)
 325 {
 326     /*
 327      * Force this file to be included in perl binary. Which allows this
 328      * file to force inclusion of other functions that may be required by
 329      * loadable extensions e.g. for FileHandle::tmpfile
 330      */
 331
 332     /*
 333      * Hack sfio does its own 'autoflush' on stdout in common cases. Flush
 334      * results in a lot of lseek()s to regular files and lot of small
 335      * writes to pipes.
 336      */
 337     sfset(sfstdout, SF_SHARE, 0);
 338 }
 339
 340 /* This is not the reverse of PerlIO_exportFILE(), PerlIO_releaseFILE() is. */
 341 PerlIO *
 342 PerlIO_importFILE(FILE *stdio, const char *mode)
 343 {
 344     int fd = fileno(stdio);
 345     if (!mode || !*mode) {
 346         mode = "r+";
 347     }
 348     return PerlIO_fdopen(fd, mode);
 349 }
 350
 351 FILE *
 352 PerlIO_findFILE(PerlIO *pio)
 353 {
 354     int fd = PerlIO_fileno(pio);
 355     FILE *f = fdopen(fd, "r+");
 356     PerlIO_flush(pio);
 357     if (!f && errno == EINVAL)
 358         f = fdopen(fd, "w");
 359     if (!f && errno == EINVAL)
 360         f = fdopen(fd, "r");
 361     return f;
 362 }
 363
 364
 365 #else                           /* USE_SFIO */
 366 /*======================================================================================*/
 367 /*
 368  * Implement all the PerlIO interface ourselves.
 369  */
 370
 371 #include "perliol.h"
 372
 373 /*
 374  * We _MUST_ have <unistd.h> if we are using lseek() and may have large
 375  * files
 376  */
 377 #ifdef I_UNISTD
 378 #include <unistd.h>
 379 #endif
 380 #ifdef HAS_MMAP
 381 #include <sys/mman.h>
 382 #endif
 383
 384
 385 void PerlIO_debug(const char *fmt, ...)
 386     __attribute__ ((format(__printf__, 1, 2)));
 387
 388 void
 389 PerlIO_debug(const char *fmt, ...)
 390 {
 391     static int dbg = 0;
 392     va_list ap;
 393     dSYS;
 394     va_start(ap, fmt);
 395     if (!dbg) {
 396         char *s = PerlEnv_getenv("PERLIO_DEBUG");
 397         if (s && *s)
 398             dbg = PerlLIO_open3(s, O_WRONLY | O_CREAT | O_APPEND, 0666);
 399         else
 400             dbg = -1;
 401     }
 402     if (dbg > 0) {
 403         dTHX;
 404 #ifdef USE_ITHREADS
 405         /* Use fixed buffer as sv_catpvf etc. needs SVs */
 406         char buffer[1024];
 407         char *s;
 408         STRLEN len;
 409         s = CopFILE(PL_curcop);
 410         if (!s)
 411             s = "(none)";
 412         sprintf(buffer, "%s:%" IVdf " ", s, (IV) CopLINE(PL_curcop));
 413         len = strlen(buffer);
 414         vsprintf(buffer+len, fmt, ap);
 415         PerlLIO_write(dbg, buffer, strlen(buffer));
 416 #else
 417         SV *sv = newSVpvn("", 0);
 418         char *s;
 419         STRLEN len;
 420         s = CopFILE(PL_curcop);
 421         if (!s)
 422             s = "(none)";
 423         Perl_sv_catpvf(aTHX_ sv, "%s:%" IVdf " ", s,
 424                        (IV) CopLINE(PL_curcop));
 425         Perl_sv_vcatpvf(aTHX_ sv, fmt, &ap);
 426
 427         s = SvPV(sv, len);
 428         PerlLIO_write(dbg, s, len);
 429         SvREFCNT_dec(sv);
 430 #endif
 431     }
 432     va_end(ap);
 433 }
 434
 435 /*--------------------------------------------------------------------------------------*/
 436
 437 /*
 438  * Inner level routines
 439  */
 440
 441 /*
 442  * Table of pointers to the PerlIO structs (malloc'ed)
 443  */
 444 #define PERLIO_TABLE_SIZE 64
 445
 446 PerlIO *
 447 PerlIO_allocate(pTHX)
 448 {
 449     /*
 450      * Find a free slot in the table, allocating new table as necessary
 451      */
 452     PerlIO **last;
 453     PerlIO *f;
 454     last = &PL_perlio;
 455     while ((f = *last)) {
 456         int i;
 457         last = (PerlIO **) (f);
 458         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
 459             if (!*++f) {
 460                 return f;
 461             }
 462         }
 463     }
 464     Newz('I',f,PERLIO_TABLE_SIZE,PerlIO);
 465     if (!f) {
 466         return NULL;
 467     }
 468     *last = f;
 469     return f + 1;
 470 }
 471
 472 #undef PerlIO_fdupopen
 473 PerlIO *
 474 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
 475 {
 476     if (PerlIOValid(f)) {
 477         PerlIO_funcs *tab = PerlIOBase(f)->tab;
 478         PerlIO *new;
 479         PerlIO_debug("fdupopen f=%p param=%p\n",(void*)f,(void*)param);
 480         new = (*tab->Dup)(aTHX_ PerlIO_allocate(aTHX),f,param, flags);
 481         return new;
 482     }
 483     else {
 484         SETERRNO(EBADF, SS_IVCHAN);
 485         return NULL;
 486     }
 487 }
 488
 489 void
 490 PerlIO_cleantable(pTHX_ PerlIO **tablep)
 491 {
 492     PerlIO *table = *tablep;
 493     if (table) {
 494         int i;
 495         PerlIO_cleantable(aTHX_(PerlIO **) & (table[0]));
 496         for (i = PERLIO_TABLE_SIZE - 1; i > 0; i--) {
 497             PerlIO *f = table + i;
 498             if (*f) {
 499                 PerlIO_close(f);
 500             }
 501         }
 502         Safefree(table);
 503         *tablep = NULL;
 504     }
 505 }
 506
 507
 508 PerlIO_list_t *
 509 PerlIO_list_alloc(pTHX)
 510 {
 511     PerlIO_list_t *list;
 512     Newz('L', list, 1, PerlIO_list_t);
 513     list->refcnt = 1;
 514     return list;
 515 }
 516
 517 void
 518 PerlIO_list_free(pTHX_ PerlIO_list_t *list)
 519 {
 520     if (list) {
 521         if (--list->refcnt == 0) {
 522             if (list->array) {
 523                 IV i;
 524                 for (i = 0; i < list->cur; i++) {
 525                     if (list->array[i].arg)
 526                         SvREFCNT_dec(list->array[i].arg);
 527                 }
 528                 Safefree(list->array);
 529             }
 530             Safefree(list);
 531         }
 532     }
 533 }
 534
 535 void
 536 PerlIO_list_push(pTHX_ PerlIO_list_t *list, PerlIO_funcs *funcs, SV *arg)
 537 {
 538     PerlIO_pair_t *p;
 539     if (list->cur >= list->len) {
 540         list->len += 8;
 541         if (list->array)
 542             Renew(list->array, list->len, PerlIO_pair_t);
 543         else
 544             New('l', list->array, list->len, PerlIO_pair_t);
 545     }
 546     p = &(list->array[list->cur++]);
 547     p->funcs = funcs;
 548     if ((p->arg = arg)) {
 549         SvREFCNT_inc(arg);
 550     }
 551 }
 552
 553 PerlIO_list_t *
 554 PerlIO_clone_list(pTHX_ PerlIO_list_t *proto, CLONE_PARAMS *param)
 555 {
 556     PerlIO_list_t *list = (PerlIO_list_t *) NULL;
 557     if (proto) {
 558         int i;
 559         list = PerlIO_list_alloc(aTHX);
 560         for (i=0; i < proto->cur; i++) {
 561             SV *arg = Nullsv;
 562             if (proto->array[i].arg)
 563                 arg = PerlIO_sv_dup(aTHX_ proto->array[i].arg,param);
 564             PerlIO_list_push(aTHX_ list, proto->array[i].funcs, arg);
 565         }
 566     }
 567     return list;
 568 }
 569
 570 void
 571 PerlIO_clone(pTHX_ PerlInterpreter *proto, CLONE_PARAMS *param)
 572 {
 573 #ifdef USE_ITHREADS
 574     PerlIO **table = &proto->Iperlio;
 575     PerlIO *f;
 576     PL_perlio = NULL;
 577     PL_known_layers = PerlIO_clone_list(aTHX_ proto->Iknown_layers, param);
 578     PL_def_layerlist = PerlIO_clone_list(aTHX_ proto->Idef_layerlist, param);
 579     PerlIO_allocate(aTHX); /* root slot is never used */
 580     PerlIO_debug("Clone %p from %p\n",aTHX,proto);
 581     while ((f = *table)) {
 582             int i;
 583             table = (PerlIO **) (f++);
 584             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
 585                 if (*f) {
 586                     (void) fp_dup(f, 0, param);
 587                 }
 588                 f++;
 589             }
 590         }
 591 #endif
 592 }
 593
 594 void
 595 PerlIO_destruct(pTHX)
 596 {
 597     PerlIO **table = &PL_perlio;
 598     PerlIO *f;
 599 #ifdef USE_ITHREADS
 600     PerlIO_debug("Destruct %p\n",aTHX);
 601 #endif
 602     while ((f = *table)) {
 603         int i;
 604         table = (PerlIO **) (f++);
 605         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
 606             PerlIO *x = f;
 607             PerlIOl *l;
 608             while ((l = *x)) {
 609                 if (l->tab->kind & PERLIO_K_DESTRUCT) {
 610                     PerlIO_debug("Destruct popping %s\n", l->tab->name);
 611                     PerlIO_flush(x);
 612                     PerlIO_pop(aTHX_ x);
 613                 }
 614                 else {
 615                     x = PerlIONext(x);
 616                 }
 617             }
 618             f++;
 619         }
 620     }
 621 }
 622
 623 void
 624 PerlIO_pop(pTHX_ PerlIO *f)
 625 {
 626     PerlIOl *l = *f;
 627     if (l) {
 628         PerlIO_debug("PerlIO_pop f=%p %s\n", (void*)f, l->tab->name);
 629         if (l->tab->Popped) {
 630             /*
 631              * If popped returns non-zero do not free its layer structure
 632              * it has either done so itself, or it is shared and still in
 633              * use
 634              */
 635             if ((*l->tab->Popped) (aTHX_ f) != 0)
 636                 return;
 637         }
 638         *f = l->next;
 639         Safefree(l);
 640     }
 641 }
 642
 643 /*--------------------------------------------------------------------------------------*/
 644 /*
 645  * XS Interface for perl code
 646  */
 647
 648 PerlIO_funcs *
 649 PerlIO_find_layer(pTHX_ const char *name, STRLEN len, int load)
 650 {
 651     IV i;
 652     if ((SSize_t) len <= 0)
 653         len = strlen(name);
 654     for (i = 0; i < PL_known_layers->cur; i++) {
 655         PerlIO_funcs *f = PL_known_layers->array[i].funcs;
 656         if (memEQ(f->name, name, len)) {
 657             PerlIO_debug("%.*s => %p\n", (int) len, name, (void*)f);
 658             return f;
 659         }
 660     }
 661     if (load && PL_subname && PL_def_layerlist
 662         && PL_def_layerlist->cur >= 2) {
 663         if (PL_in_load_module) {
 664             Perl_croak(aTHX_ "Recursive call to Perl_load_module in PerlIO_find_layer");
 665             return NULL;
 666         } else {
 667             SV *pkgsv = newSVpvn("PerlIO", 6);
 668             SV *layer = newSVpvn(name, len);
 669             ENTER;
 670             SAVEINT(PL_in_load_module);
 671             PL_in_load_module++;
 672             /*
 673              * The two SVs are magically freed by load_module
 674              */
 675             Perl_load_module(aTHX_ 0, pkgsv, Nullsv, layer, Nullsv);
 676             PL_in_load_module--;
 677             LEAVE;
 678             return PerlIO_find_layer(aTHX_ name, len, 0);
 679         }
 680     }
 681     PerlIO_debug("Cannot find %.*s\n", (int) len, name);
 682     return NULL;
 683 }
 684
 685 #ifdef USE_ATTRIBUTES_FOR_PERLIO
 686
 687 static int
 688 perlio_mg_set(pTHX_ SV *sv, MAGIC *mg)
 689 {
 690     if (SvROK(sv)) {
 691         IO *io = GvIOn((GV *) SvRV(sv));
 692         PerlIO *ifp = IoIFP(io);
 693         PerlIO *ofp = IoOFP(io);
 694         Perl_warn(aTHX_ "set %" SVf " %p %p %p", sv, io, ifp, ofp);
 695     }
 696     return 0;
 697 }
 698
 699 static int
 700 perlio_mg_get(pTHX_ SV *sv, MAGIC *mg)
 701 {
 702     if (SvROK(sv)) {
 703         IO *io = GvIOn((GV *) SvRV(sv));
 704         PerlIO *ifp = IoIFP(io);
 705         PerlIO *ofp = IoOFP(io);
 706         Perl_warn(aTHX_ "get %" SVf " %p %p %p", sv, io, ifp, ofp);
 707     }
 708     return 0;
 709 }
 710
 711 static int
 712 perlio_mg_clear(pTHX_ SV *sv, MAGIC *mg)
 713 {
 714     Perl_warn(aTHX_ "clear %" SVf, sv);
 715     return 0;
 716 }
 717
 718 static int
 719 perlio_mg_free(pTHX_ SV *sv, MAGIC *mg)
 720 {
 721     Perl_warn(aTHX_ "free %" SVf, sv);
 722     return 0;
 723 }
 724
 725 MGVTBL perlio_vtab = {
 726     perlio_mg_get,
 727     perlio_mg_set,
 728     NULL,                       /* len */
 729     perlio_mg_clear,
 730     perlio_mg_free
 731 };
 732
 733 XS(XS_io_MODIFY_SCALAR_ATTRIBUTES)
 734 {
 735     dXSARGS;
 736     SV *sv = SvRV(ST(1));
 737     AV *av = newAV();
 738     MAGIC *mg;
 739     int count = 0;
 740     int i;
 741     sv_magic(sv, (SV *) av, PERL_MAGIC_ext, NULL, 0);
 742     SvRMAGICAL_off(sv);
 743     mg = mg_find(sv, PERL_MAGIC_ext);
 744     mg->mg_virtual = &perlio_vtab;
 745     mg_magical(sv);
 746     Perl_warn(aTHX_ "attrib %" SVf, sv);
 747     for (i = 2; i < items; i++) {
 748         STRLEN len;
 749         const char *name = SvPV(ST(i), len);
 750         SV *layer = PerlIO_find_layer(aTHX_ name, len, 1);
 751         if (layer) {
 752             av_push(av, SvREFCNT_inc(layer));
 753         }
 754         else {
 755             ST(count) = ST(i);
 756             count++;
 757         }
 758     }
 759     SvREFCNT_dec(av);
 760     XSRETURN(count);
 761 }
 762
 763 #endif                          /* USE_ATTIBUTES_FOR_PERLIO */
 764
 765 SV *
 766 PerlIO_tab_sv(pTHX_ PerlIO_funcs *tab)
 767 {
 768     HV *stash = gv_stashpv("PerlIO::Layer", TRUE);
 769     SV *sv = sv_bless(newRV_noinc(newSViv(PTR2IV(tab))), stash);
 770     return sv;
 771 }
 772
 773 XS(XS_PerlIO__Layer__find)
 774 {
 775     dXSARGS;
 776     if (items < 2)
 777         Perl_croak(aTHX_ "Usage class->find(name[,load])");
 778     else {
 779         STRLEN len = 0;
 780         char *name = SvPV(ST(1), len);
 781         bool load = (items > 2) ? SvTRUE(ST(2)) : 0;
 782         PerlIO_funcs *layer = PerlIO_find_layer(aTHX_ name, len, load);
 783         ST(0) =
 784             (layer) ? sv_2mortal(PerlIO_tab_sv(aTHX_ layer)) :
 785             &PL_sv_undef;
 786         XSRETURN(1);
 787     }
 788 }
 789
 790 void
 791 PerlIO_define_layer(pTHX_ PerlIO_funcs *tab)
 792 {
 793     if (!PL_known_layers)
 794         PL_known_layers = PerlIO_list_alloc(aTHX);
 795     PerlIO_list_push(aTHX_ PL_known_layers, tab, Nullsv);
 796     PerlIO_debug("define %s %p\n", tab->name, (void*)tab);
 797 }
 798
 799 int
 800 PerlIO_parse_layers(pTHX_ PerlIO_list_t *av, const char *names)
 801 {
 802     if (names) {
 803         const char *s = names;
 804         while (*s) {
 805             while (isSPACE(*s) || *s == ':')
 806                 s++;
 807             if (*s) {
 808                 STRLEN llen = 0;
 809                 const char *e = s;
 810                 const char *as = Nullch;
 811                 STRLEN alen = 0;
 812                 if (!isIDFIRST(*s)) {
 813                     /*
 814                      * Message is consistent with how attribute lists are
 815                      * passed. Even though this means "foo : : bar" is
 816                      * seen as an invalid separator character.
 817                      */
 818                     char q = ((*s == '\'') ? '"' : '\'');
 819                     if (ckWARN(WARN_LAYER))
 820                         Perl_warner(aTHX_ packWARN(WARN_LAYER),
 821                               "perlio: invalid separator character %c%c%c in layer specification list %s",
 822                               q, *s, q, s);
 823                     SETERRNO(EINVAL, LIB_INVARG);
 824                     return -1;
 825                 }
 826                 do {
 827                     e++;
 828                 } while (isALNUM(*e));
 829                 llen = e - s;
 830                 if (*e == '(') {
 831                     int nesting = 1;
 832                     as = ++e;
 833                     while (nesting) {
 834                         switch (*e++) {
 835                         case ')':
 836                             if (--nesting == 0)
 837                                 alen = (e - 1) - as;
 838                             break;
 839                         case '(':
 840                             ++nesting;
 841                             break;
 842                         case '\\':
 843                             /*
 844                              * It's a nul terminated string, not allowed
 845                              * to \ the terminating null. Anything other
 846                              * character is passed over.
 847                              */
 848                             if (*e++) {
 849                                 break;
 850                             }
 851                             /*
 852                              * Drop through
 853                              */
 854                         case '\0':
 855                             e--;
 856                             if (ckWARN(WARN_LAYER))
 857                                 Perl_warner(aTHX_ packWARN(WARN_LAYER),
 858                                       "perlio: argument list not closed for layer \"%.*s\"",
 859                                       (int) (e - s), s);
 860                             return -1;
 861                         default:
 862                             /*
 863                              * boring.
 864                              */
 865                             break;
 866                         }
 867                     }
 868                 }
 869                 if (e > s) {
 870                     bool warn_layer = ckWARN(WARN_LAYER);
 871                     PerlIO_funcs *layer =
 872                         PerlIO_find_layer(aTHX_ s, llen, 1);
 873                     if (layer) {
 874                         PerlIO_list_push(aTHX_ av, layer,
 875                                          (as) ? newSVpvn(as,
 876                                                          alen) :
 877                                          &PL_sv_undef);
 878                     }
 879                     else {
 880                         if (warn_layer)
 881                             Perl_warner(aTHX_ packWARN(WARN_LAYER), "perlio: unknown layer \"%.*s\"",
 882                                   (int) llen, s);
 883                         return -1;
 884                     }
 885                 }
 886                 s = e;
 887             }
 888         }
 889     }
 890     return 0;
 891 }
 892
 893 void
 894 PerlIO_default_buffer(pTHX_ PerlIO_list_t *av)
 895 {
 896     PerlIO_funcs *tab = &PerlIO_perlio;
 897 #ifdef PERLIO_USING_CRLF
 898     tab = &PerlIO_crlf;
 899 #else
 900     if (PerlIO_stdio.Set_ptrcnt)
 901         tab = &PerlIO_stdio;
 902 #endif
 903     PerlIO_debug("Pushing %s\n", tab->name);
 904     PerlIO_list_push(aTHX_ av, PerlIO_find_layer(aTHX_ tab->name, 0, 0),
 905                      &PL_sv_undef);
 906 }
 907
 908 SV *
 909 PerlIO_arg_fetch(PerlIO_list_t *av, IV n)
 910 {
 911     return av->array[n].arg;
 912 }
 913
 914 PerlIO_funcs *
 915 PerlIO_layer_fetch(pTHX_ PerlIO_list_t *av, IV n, PerlIO_funcs *def)
 916 {
 917     if (n >= 0 && n < av->cur) {
 918         PerlIO_debug("Layer %" IVdf " is %s\n", n,
 919                      av->array[n].funcs->name);
 920         return av->array[n].funcs;
 921     }
 922     if (!def)
 923         Perl_croak(aTHX_ "panic: PerlIO layer array corrupt");
 924     return def;
 925 }
 926
 927 IV
 928 PerlIOPop_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
 929 {
 930     if (PerlIOValid(f)) {
 931         PerlIO_flush(f);
 932         PerlIO_pop(aTHX_ f);
 933         return 0;
 934     }
 935     return -1;
 936 }
 937
 938 PerlIO_funcs PerlIO_remove = {
 939     sizeof(PerlIO_funcs),
 940     "pop",
 941     0,
 942     PERLIO_K_DUMMY | PERLIO_K_UTF8,
 943     PerlIOPop_pushed,
 944     NULL,
 945     NULL,
 946     NULL,
 947     NULL,
 948     NULL,
 949     NULL,
 950     NULL,
 951     NULL,
 952     NULL,
 953     NULL,
 954     NULL,                       /* flush */
 955     NULL,                       /* fill */
 956     NULL,
 957     NULL,
 958     NULL,
 959     NULL,
 960     NULL,                       /* get_base */
 961     NULL,                       /* get_bufsiz */
 962     NULL,                       /* get_ptr */
 963     NULL,                       /* get_cnt */
 964     NULL,                       /* set_ptrcnt */
 965 };
 966
 967 PerlIO_list_t *
 968 PerlIO_default_layers(pTHX)
 969 {
 970     if (!PL_def_layerlist) {
 971         const char *s = (PL_tainting) ? Nullch : PerlEnv_getenv("PERLIO");
 972         PerlIO_funcs *osLayer = &PerlIO_unix;
 973         PL_def_layerlist = PerlIO_list_alloc(aTHX);
 974         PerlIO_define_layer(aTHX_ & PerlIO_unix);
 975 #if defined(WIN32) && !defined(UNDER_CE)
 976         PerlIO_define_layer(aTHX_ & PerlIO_win32);
 977 #if 0
 978         osLayer = &PerlIO_win32;
 979 #endif
 980 #endif
 981         PerlIO_define_layer(aTHX_ & PerlIO_raw);
 982         PerlIO_define_layer(aTHX_ & PerlIO_perlio);
 983         PerlIO_define_layer(aTHX_ & PerlIO_stdio);
 984         PerlIO_define_layer(aTHX_ & PerlIO_crlf);
 985 #ifdef HAS_MMAP
 986         PerlIO_define_layer(aTHX_ & PerlIO_mmap);
 987 #endif
 988         PerlIO_define_layer(aTHX_ & PerlIO_utf8);
 989         PerlIO_define_layer(aTHX_ & PerlIO_remove);
 990         PerlIO_define_layer(aTHX_ & PerlIO_byte);
 991         PerlIO_list_push(aTHX_ PL_def_layerlist,
 992                          PerlIO_find_layer(aTHX_ osLayer->name, 0, 0),
 993                          &PL_sv_undef);
 994         if (s) {
 995             PerlIO_parse_layers(aTHX_ PL_def_layerlist, s);
 996         }
 997         else {
 998             PerlIO_default_buffer(aTHX_ PL_def_layerlist);
 999         }
1000     }
1001     if (PL_def_layerlist->cur < 2) {
1002         PerlIO_default_buffer(aTHX_ PL_def_layerlist);
1003     }
1004     return PL_def_layerlist;
1005 }
1006
1007 void
1008 Perl_boot_core_PerlIO(pTHX)
1009 {
1010 #ifdef USE_ATTRIBUTES_FOR_PERLIO
1011     newXS("io::MODIFY_SCALAR_ATTRIBUTES", XS_io_MODIFY_SCALAR_ATTRIBUTES,
1012           __FILE__);
1013 #endif
1014     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
1015 }
1016
1017 PerlIO_funcs *
1018 PerlIO_default_layer(pTHX_ I32 n)
1019 {
1020     PerlIO_list_t *av = PerlIO_default_layers(aTHX);
1021     if (n < 0)
1022         n += av->cur;
1023     return PerlIO_layer_fetch(aTHX_ av, n, &PerlIO_stdio);
1024 }
1025
1026 #define PerlIO_default_top() PerlIO_default_layer(aTHX_ -1)
1027 #define PerlIO_default_btm() PerlIO_default_layer(aTHX_ 0)
1028
1029 void
1030 PerlIO_stdstreams(pTHX)
1031 {
1032     if (!PL_perlio) {
1033         PerlIO_allocate(aTHX);
1034         PerlIO_fdopen(0, "Ir" PERLIO_STDTEXT);
1035         PerlIO_fdopen(1, "Iw" PERLIO_STDTEXT);
1036         PerlIO_fdopen(2, "Iw" PERLIO_STDTEXT);
1037     }
1038 }
1039
1040 PerlIO *
1041 PerlIO_push(pTHX_ PerlIO *f, PerlIO_funcs *tab, const char *mode, SV *arg)
1042 {
1043     if (tab->fsize != sizeof(PerlIO_funcs)) {
1044       mismatch:
1045         Perl_croak(aTHX_ "Layer does not match this perl");
1046     }
1047     if (tab->size) {
1048         PerlIOl *l = NULL;
1049         if (tab->size < sizeof(PerlIOl)) {
1050             goto mismatch;
1051         }
1052         /* Real layer with a data area */
1053         Newc('L',l,tab->size,char,PerlIOl);
1054         if (l && f) {
1055             Zero(l, tab->size, char);
1056             l->next = *f;
1057             l->tab = tab;
1058             *f = l;
1059             PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1060                         (mode) ? mode : "(Null)", (void*)arg);
1061             if ((*l->tab->Pushed) (aTHX_ f, mode, arg, tab) != 0) {
1062                 PerlIO_pop(aTHX_ f);
1063                 return NULL;
1064             }
1065         }
1066     }
1067     else if (f) {
1068         /* Pseudo-layer where push does its own stack adjust */
1069         PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1070                      (mode) ? mode : "(Null)", (void*)arg);
1071         if ((*tab->Pushed) (aTHX_ f, mode, arg, tab) != 0) {
1072             return NULL;
1073         }
1074     }
1075     return f;
1076 }
1077
1078 IV
1079 PerlIOBase_binmode(pTHX_ PerlIO *f)
1080 {
1081    if (PerlIOValid(f)) {
1082         /* Is layer suitable for raw stream ? */
1083         if (PerlIOBase(f)->tab->kind & PERLIO_K_RAW) {
1084             /* Yes - turn off UTF-8-ness, to undo UTF-8 locale effects */
1085             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1086         }
1087         else {
1088             /* Not suitable - pop it */
1089             PerlIO_pop(aTHX_ f);
1090         }
1091         return 0;
1092    }
1093    return -1;
1094 }
1095
1096 IV
1097 PerlIORaw_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1098 {
1099
1100     if (PerlIOValid(f)) {
1101         PerlIO *t;
1102         PerlIOl *l;
1103         PerlIO_flush(f);
1104         /*
1105          * Strip all layers that are not suitable for a raw stream
1106          */
1107         t = f;
1108         while (t && (l = *t)) {
1109             if (l->tab->Binmode) {
1110                 /* Has a handler - normal case */
1111                 if ((*l->tab->Binmode)(aTHX_ f) == 0) {
1112                     if (*t == l) {
1113                         /* Layer still there - move down a layer */
1114                         t = PerlIONext(t);
1115                     }
1116                 }
1117                 else {
1118                     return -1;
1119                 }
1120             }
1121             else {
1122                 /* No handler - pop it */
1123                 PerlIO_pop(aTHX_ t);
1124             }
1125         }
1126         if (PerlIOValid(f)) {
1127             PerlIO_debug(":raw f=%p :%s\n", (void*)f, PerlIOBase(f)->tab->name);
1128             return 0;
1129         }
1130     }
1131     return -1;
1132 }
1133
1134 int
1135 PerlIO_apply_layera(pTHX_ PerlIO *f, const char *mode,
1136                     PerlIO_list_t *layers, IV n, IV max)
1137 {
1138     int code = 0;
1139     while (n < max) {
1140         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n, NULL);
1141         if (tab) {
1142             if (!PerlIO_push(aTHX_ f, tab, mode, PerlIOArg)) {
1143                 code = -1;
1144                 break;
1145             }
1146         }
1147         n++;
1148     }
1149     return code;
1150 }
1151
1152 int
1153 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
1154 {
1155     int code = 0;
1156     if (f && names) {
1157         PerlIO_list_t *layers = PerlIO_list_alloc(aTHX);
1158         code = PerlIO_parse_layers(aTHX_ layers, names);
1159         if (code == 0) {
1160             code = PerlIO_apply_layera(aTHX_ f, mode, layers, 0, layers->cur);
1161         }
1162         PerlIO_list_free(aTHX_ layers);
1163     }
1164     return code;
1165 }
1166
1167
1168 /*--------------------------------------------------------------------------------------*/
1169 /*
1170  * Given the abstraction above the public API functions
1171  */
1172
1173 int
1174 PerlIO_binmode(pTHX_ PerlIO *f, int iotype, int mode, const char *names)
1175 {
1176     PerlIO_debug("PerlIO_binmode f=%p %s %c %x %s\n",
1177                  (void*)f, PerlIOBase(f)->tab->name, iotype, mode,
1178                  (names) ? names : "(Null)");
1179     if (names) {
1180         /* Do not flush etc. if (e.g.) switching encodings.
1181            if a pushed layer knows it needs to flush lower layers
1182            (for example :unix which is never going to call them)
1183            it can do the flush when it is pushed.
1184          */
1185         return PerlIO_apply_layers(aTHX_ f, NULL, names) == 0 ? TRUE : FALSE;
1186     }
1187     else {
1188         /* Fake 5.6 legacy of using this call to turn ON O_TEXT */
1189 #ifdef PERLIO_USING_CRLF
1190         /* Legacy binmode only has meaning if O_TEXT has a value distinct from
1191            O_BINARY so we can look for it in mode.
1192          */
1193         if (!(mode & O_BINARY)) {
1194             /* Text mode */
1195             /* FIXME?: Looking down the layer stack seems wrong,
1196                but is a way of reaching past (say) an encoding layer
1197                to flip CRLF-ness of the layer(s) below
1198              */
1199             while (*f) {
1200                 /* Perhaps we should turn on bottom-most aware layer
1201                    e.g. Ilya's idea that UNIX TTY could serve
1202                  */
1203                 if (PerlIOBase(f)->tab->kind & PERLIO_K_CANCRLF) {
1204                     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
1205                         /* Not in text mode - flush any pending stuff and flip it */
1206                         PerlIO_flush(f);
1207                         PerlIOBase(f)->flags |= PERLIO_F_CRLF;
1208                     }
1209                     /* Only need to turn it on in one layer so we are done */
1210                     return TRUE;
1211                 }
1212                 f = PerlIONext(f);
1213             }
1214             /* Not finding a CRLF aware layer presumably means we are binary
1215                which is not what was requested - so we failed
1216                We _could_ push :crlf layer but so could caller
1217              */
1218             return FALSE;
1219         }
1220 #endif
1221         /* Legacy binmode is now _defined_ as being equivalent to pushing :raw
1222            So code that used to be here is now in PerlIORaw_pushed().
1223          */
1224         return PerlIO_push(aTHX_ f, &PerlIO_raw, Nullch, Nullsv) ? TRUE : FALSE;
1225     }
1226 }
1227
1228 int
1229 PerlIO__close(pTHX_ PerlIO *f)
1230 {
1231     if (PerlIOValid(f))
1232         return (*PerlIOBase(f)->tab->Close) (aTHX_ f);
1233     else {
1234         SETERRNO(EBADF, SS_IVCHAN);
1235         return -1;
1236     }
1237 }
1238
1239 int
1240 Perl_PerlIO_close(pTHX_ PerlIO *f)
1241 {
1242     int code = -1;
1243     if (PerlIOValid(f)) {
1244         code = (*PerlIOBase(f)->tab->Close) (aTHX_ f);
1245         while (*f) {
1246             PerlIO_pop(aTHX_ f);
1247         }
1248     }
1249     return code;
1250 }
1251
1252 int
1253 Perl_PerlIO_fileno(pTHX_ PerlIO *f)
1254 {
1255     if (PerlIOValid(f))
1256         return (*PerlIOBase(f)->tab->Fileno) (aTHX_ f);
1257     else {
1258         SETERRNO(EBADF, SS_IVCHAN);
1259         return -1;
1260     }
1261 }
1262
1263 static const char *
1264 PerlIO_context_layers(pTHX_ const char *mode)
1265 {
1266     const char *type = NULL;
1267     /*
1268      * Need to supply default layer info from open.pm
1269      */
1270     if (PL_curcop) {
1271         SV *layers = PL_curcop->cop_io;
1272         if (layers) {
1273             STRLEN len;
1274             type = SvPV(layers, len);
1275             if (type && mode[0] != 'r') {
1276                 /*
1277                  * Skip to write part
1278                  */
1279                 const char *s = strchr(type, 0);
1280                 if (s && (STRLEN)(s - type) < len) {
1281                     type = s + 1;
1282                 }
1283             }
1284         }
1285     }
1286     return type;
1287 }
1288
1289 static PerlIO_funcs *
1290 PerlIO_layer_from_ref(pTHX_ SV *sv)
1291 {
1292     /*
1293      * For any scalar type load the handler which is bundled with perl
1294      */
1295     if (SvTYPE(sv) < SVt_PVAV)
1296         return PerlIO_find_layer(aTHX_ "scalar", 6, 1);
1297
1298     /*
1299      * For other types allow if layer is known but don't try and load it
1300      */
1301     switch (SvTYPE(sv)) {
1302     case SVt_PVAV:
1303         return PerlIO_find_layer(aTHX_ "Array", 5, 0);
1304     case SVt_PVHV:
1305         return PerlIO_find_layer(aTHX_ "Hash", 4, 0);
1306     case SVt_PVCV:
1307         return PerlIO_find_layer(aTHX_ "Code", 4, 0);
1308     case SVt_PVGV:
1309         return PerlIO_find_layer(aTHX_ "Glob", 4, 0);
1310     }
1311     return NULL;
1312 }
1313
1314 PerlIO_list_t *
1315 PerlIO_resolve_layers(pTHX_ const char *layers,
1316                       const char *mode, int narg, SV **args)
1317 {
1318     PerlIO_list_t *def = PerlIO_default_layers(aTHX);
1319     int incdef = 1;
1320     if (!PL_perlio)
1321         PerlIO_stdstreams(aTHX);
1322     if (narg) {
1323         SV *arg = *args;
1324         /*
1325          * If it is a reference but not an object see if we have a handler
1326          * for it
1327          */
1328         if (SvROK(arg) && !sv_isobject(arg)) {
1329             PerlIO_funcs *handler = PerlIO_layer_from_ref(aTHX_ SvRV(arg));
1330             if (handler) {
1331                 def = PerlIO_list_alloc(aTHX);
1332                 PerlIO_list_push(aTHX_ def, handler, &PL_sv_undef);
1333                 incdef = 0;
1334             }
1335             /*
1336              * Don't fail if handler cannot be found :via(...) etc. may do
1337              * something sensible else we will just stringfy and open
1338              * resulting string.
1339              */
1340         }
1341     }
1342     if (!layers)
1343         layers = PerlIO_context_layers(aTHX_ mode);
1344     if (layers && *layers) {
1345         PerlIO_list_t *av;
1346         if (incdef) {
1347             IV i = def->cur;
1348             av = PerlIO_list_alloc(aTHX);
1349             for (i = 0; i < def->cur; i++) {
1350                 PerlIO_list_push(aTHX_ av, def->array[i].funcs,
1351                                  def->array[i].arg);
1352             }
1353         }
1354         else {
1355             av = def;
1356         }
1357         if (PerlIO_parse_layers(aTHX_ av, layers) == 0) {
1358              return av;
1359         }
1360         else {
1361             PerlIO_list_free(aTHX_ av);
1362             return (PerlIO_list_t *) NULL;
1363         }
1364     }
1365     else {
1366         if (incdef)
1367             def->refcnt++;
1368         return def;
1369     }
1370 }
1371
1372 PerlIO *
1373 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
1374              int imode, int perm, PerlIO *f, int narg, SV **args)
1375 {
1376     if (!f && narg == 1 && *args == &PL_sv_undef) {
1377         if ((f = PerlIO_tmpfile())) {
1378             if (!layers)
1379                 layers = PerlIO_context_layers(aTHX_ mode);
1380             if (layers && *layers)
1381                 PerlIO_apply_layers(aTHX_ f, mode, layers);
1382         }
1383     }
1384     else {
1385         PerlIO_list_t *layera = NULL;
1386         IV n;
1387         PerlIO_funcs *tab = NULL;
1388         if (PerlIOValid(f)) {
1389             /*
1390              * This is "reopen" - it is not tested as perl does not use it
1391              * yet
1392              */
1393             PerlIOl *l = *f;
1394             layera = PerlIO_list_alloc(aTHX);
1395             while (l) {
1396                 SV *arg = (l->tab->Getarg)
1397                         ? (*l->tab->Getarg) (aTHX_ &l, NULL, 0)
1398                         : &PL_sv_undef;
1399                 PerlIO_list_push(aTHX_ layera, l->tab, arg);
1400                 l = *PerlIONext(&l);
1401             }
1402         }
1403         else {
1404             layera = PerlIO_resolve_layers(aTHX_ layers, mode, narg, args);
1405             if (!layera) {
1406                 return NULL;
1407             }
1408         }
1409         /*
1410          * Start at "top" of layer stack
1411          */
1412         n = layera->cur - 1;
1413         while (n >= 0) {
1414             PerlIO_funcs *t = PerlIO_layer_fetch(aTHX_ layera, n, NULL);
1415             if (t && t->Open) {
1416                 tab = t;
1417                 break;
1418             }
1419             n--;
1420         }
1421         if (tab) {
1422             /*
1423              * Found that layer 'n' can do opens - call it
1424              */
1425             if (narg > 1 && !(tab->kind & PERLIO_K_MULTIARG)) {
1426                 Perl_croak(aTHX_ "More than one argument to open(,':%s')",tab->name);
1427             }
1428             PerlIO_debug("openn(%s,'%s','%s',%d,%x,%o,%p,%d,%p)\n",
1429                          tab->name, layers, mode, fd, imode, perm,
1430                          (void*)f, narg, (void*)args);
1431             f = (*tab->Open) (aTHX_ tab, layera, n, mode, fd, imode, perm,
1432                               f, narg, args);
1433             if (f) {
1434                 if (n + 1 < layera->cur) {
1435                     /*
1436                      * More layers above the one that we used to open -
1437                      * apply them now
1438                      */
1439                     if (PerlIO_apply_layera(aTHX_ f, mode, layera, n + 1, layera->cur) != 0) {
1440                         /* If pushing layers fails close the file */
1441                         PerlIO_close(f);
1442                         f = NULL;
1443                     }
1444                 }
1445             }
1446         }
1447         PerlIO_list_free(aTHX_ layera);
1448     }
1449     return f;
1450 }
1451
1452
1453 SSize_t
1454 Perl_PerlIO_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1455 {
1456     if (PerlIOValid(f))
1457         return (*PerlIOBase(f)->tab->Read) (aTHX_ f, vbuf, count);
1458     else {
1459         SETERRNO(EBADF, SS_IVCHAN);
1460         return -1;
1461     }
1462 }
1463
1464 SSize_t
1465 Perl_PerlIO_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1466 {
1467     if (PerlIOValid(f))
1468         return (*PerlIOBase(f)->tab->Unread) (aTHX_ f, vbuf, count);
1469     else {
1470         SETERRNO(EBADF, SS_IVCHAN);
1471         return -1;
1472     }
1473 }
1474
1475 SSize_t
1476 Perl_PerlIO_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1477 {
1478     if (PerlIOValid(f))
1479         return (*PerlIOBase(f)->tab->Write) (aTHX_ f, vbuf, count);
1480     else {
1481         SETERRNO(EBADF, SS_IVCHAN);
1482         return -1;
1483     }
1484 }
1485
1486 int
1487 Perl_PerlIO_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
1488 {
1489     if (PerlIOValid(f))
1490         return (*PerlIOBase(f)->tab->Seek) (aTHX_ f, offset, whence);
1491     else {
1492         SETERRNO(EBADF, SS_IVCHAN);
1493         return -1;
1494     }
1495 }
1496
1497 Off_t
1498 Perl_PerlIO_tell(pTHX_ PerlIO *f)
1499 {
1500     if (PerlIOValid(f))
1501         return (*PerlIOBase(f)->tab->Tell) (aTHX_ f);
1502     else {
1503         SETERRNO(EBADF, SS_IVCHAN);
1504         return -1;
1505     }
1506 }
1507
1508 int
1509 Perl_PerlIO_flush(pTHX_ PerlIO *f)
1510 {
1511     if (f) {
1512         if (*f) {
1513             PerlIO_funcs *tab = PerlIOBase(f)->tab;
1514             if (tab && tab->Flush) {
1515                 return (*tab->Flush) (aTHX_ f);
1516             }
1517             else {
1518                 PerlIO_debug("Cannot flush f=%p :%s\n", (void*)f, tab->name);
1519                 SETERRNO(EBADF, SS_IVCHAN);
1520                 return -1;
1521             }
1522         }
1523         else {
1524             PerlIO_debug("Cannot flush f=%p\n", (void*)f);
1525             SETERRNO(EBADF, SS_IVCHAN);
1526             return -1;
1527         }
1528     }
1529     else {
1530         /*
1531          * Is it good API design to do flush-all on NULL, a potentially
1532          * errorneous input? Maybe some magical value (PerlIO*
1533          * PERLIO_FLUSH_ALL = (PerlIO*)-1;)? Yes, stdio does similar
1534          * things on fflush(NULL), but should we be bound by their design
1535          * decisions? --jhi
1536          */
1537         PerlIO **table = &PL_perlio;
1538         int code = 0;
1539         while ((f = *table)) {
1540             int i;
1541             table = (PerlIO **) (f++);
1542             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1543                 if (*f && PerlIO_flush(f) != 0)
1544                     code = -1;
1545                 f++;
1546             }
1547         }
1548         return code;
1549     }
1550 }
1551
1552 void
1553 PerlIOBase_flush_linebuf(pTHX)
1554 {
1555     PerlIO **table = &PL_perlio;
1556     PerlIO *f;
1557     while ((f = *table)) {
1558         int i;
1559         table = (PerlIO **) (f++);
1560         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1561             if (*f
1562                 && (PerlIOBase(f)->
1563                     flags & (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1564                 == (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1565                 PerlIO_flush(f);
1566             f++;
1567         }
1568     }
1569 }
1570
1571 int
1572 Perl_PerlIO_fill(pTHX_ PerlIO *f)
1573 {
1574     if (PerlIOValid(f))
1575         return (*PerlIOBase(f)->tab->Fill) (aTHX_ f);
1576     else {
1577         SETERRNO(EBADF, SS_IVCHAN);
1578         return -1;
1579     }
1580 }
1581
1582 int
1583 PerlIO_isutf8(PerlIO *f)
1584 {
1585     if (PerlIOValid(f))
1586         return (PerlIOBase(f)->flags & PERLIO_F_UTF8) != 0;
1587     else {
1588         SETERRNO(EBADF, SS_IVCHAN);
1589         return -1;
1590     }
1591 }
1592
1593 int
1594 Perl_PerlIO_eof(pTHX_ PerlIO *f)
1595 {
1596     if (PerlIOValid(f))
1597         return (*PerlIOBase(f)->tab->Eof) (aTHX_ f);
1598     else {
1599         SETERRNO(EBADF, SS_IVCHAN);
1600         return -1;
1601     }
1602 }
1603
1604 int
1605 Perl_PerlIO_error(pTHX_ PerlIO *f)
1606 {
1607     if (PerlIOValid(f))
1608         return (*PerlIOBase(f)->tab->Error) (aTHX_ f);
1609     else {
1610         SETERRNO(EBADF, SS_IVCHAN);
1611         return -1;
1612     }
1613 }
1614
1615 void
1616 Perl_PerlIO_clearerr(pTHX_ PerlIO *f)
1617 {
1618     if (PerlIOValid(f))
1619         (*PerlIOBase(f)->tab->Clearerr) (aTHX_ f);
1620     else
1621         SETERRNO(EBADF, SS_IVCHAN);
1622 }
1623
1624 void
1625 Perl_PerlIO_setlinebuf(pTHX_ PerlIO *f)
1626 {
1627     if (PerlIOValid(f))
1628         (*PerlIOBase(f)->tab->Setlinebuf) (aTHX_ f);
1629     else
1630         SETERRNO(EBADF, SS_IVCHAN);
1631 }
1632
1633 int
1634 PerlIO_has_base(PerlIO *f)
1635 {
1636     if (PerlIOValid(f)) {
1637         return (PerlIOBase(f)->tab->Get_base != NULL);
1638     }
1639     return 0;
1640 }
1641
1642 int
1643 PerlIO_fast_gets(PerlIO *f)
1644 {
1645     if (PerlIOValid(f) && (PerlIOBase(f)->flags & PERLIO_F_FASTGETS)) {
1646         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1647         return (tab->Set_ptrcnt != NULL);
1648     }
1649     return 0;
1650 }
1651
1652 int
1653 PerlIO_has_cntptr(PerlIO *f)
1654 {
1655     if (PerlIOValid(f)) {
1656         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1657         return (tab->Get_ptr != NULL && tab->Get_cnt != NULL);
1658     }
1659     return 0;
1660 }
1661
1662 int
1663 PerlIO_canset_cnt(PerlIO *f)
1664 {
1665     if (PerlIOValid(f)) {
1666         PerlIOl *l = PerlIOBase(f);
1667         return (l->tab->Set_ptrcnt != NULL);
1668     }
1669     return 0;
1670 }
1671
1672 STDCHAR *
1673 Perl_PerlIO_get_base(pTHX_ PerlIO *f)
1674 {
1675     if (PerlIOValid(f))
1676         return (*PerlIOBase(f)->tab->Get_base) (aTHX_ f);
1677     return NULL;
1678 }
1679
1680 int
1681 Perl_PerlIO_get_bufsiz(pTHX_ PerlIO *f)
1682 {
1683     if (PerlIOValid(f))
1684         return (*PerlIOBase(f)->tab->Get_bufsiz) (aTHX_ f);
1685     return 0;
1686 }
1687
1688 STDCHAR *
1689 Perl_PerlIO_get_ptr(pTHX_ PerlIO *f)
1690 {
1691     if (PerlIOValid(f)) {
1692         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1693         if (tab->Get_ptr == NULL)
1694             return NULL;
1695         return (*tab->Get_ptr) (aTHX_ f);
1696     }
1697     return NULL;
1698 }
1699
1700 int
1701 Perl_PerlIO_get_cnt(pTHX_ PerlIO *f)
1702 {
1703     if (PerlIOValid(f)) {
1704         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1705         if (tab->Get_cnt == NULL)
1706            return 0;
1707         return (*tab->Get_cnt) (aTHX_ f);
1708     }
1709     return 0;
1710 }
1711
1712 void
1713 Perl_PerlIO_set_cnt(pTHX_ PerlIO *f, int cnt)
1714 {
1715     if (PerlIOValid(f)) {
1716         (*PerlIOBase(f)->tab->Set_ptrcnt) (aTHX_ f, NULL, cnt);
1717     }
1718 }
1719
1720 void
1721 Perl_PerlIO_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, int cnt)
1722 {
1723     if (PerlIOValid(f)) {
1724         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1725         if (tab->Set_ptrcnt == NULL) {
1726             Perl_croak(aTHX_ "PerlIO buffer snooping abuse");
1727         }
1728         (*PerlIOBase(f)->tab->Set_ptrcnt) (aTHX_ f, ptr, cnt);
1729     }
1730 }
1731
1732
1733 /*--------------------------------------------------------------------------------------*/
1734 /*
1735  * utf8 and raw dummy layers
1736  */
1737
1738 IV
1739 PerlIOUtf8_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1740 {
1741     if (PerlIOValid(f)) {
1742         if (tab->kind & PERLIO_K_UTF8)
1743             PerlIOBase(f)->flags |= PERLIO_F_UTF8;
1744         else
1745             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1746         return 0;
1747     }
1748     return -1;
1749 }
1750
1751 PerlIO_funcs PerlIO_utf8 = {
1752     sizeof(PerlIO_funcs),
1753     "utf8",
1754     0,
1755     PERLIO_K_DUMMY | PERLIO_K_UTF8,
1756     PerlIOUtf8_pushed,
1757     NULL,
1758     NULL,
1759     NULL,
1760     NULL,
1761     NULL,
1762     NULL,
1763     NULL,
1764     NULL,
1765     NULL,
1766     NULL,
1767     NULL,                       /* flush */
1768     NULL,                       /* fill */
1769     NULL,
1770     NULL,
1771     NULL,
1772     NULL,
1773     NULL,                       /* get_base */
1774     NULL,                       /* get_bufsiz */
1775     NULL,                       /* get_ptr */
1776     NULL,                       /* get_cnt */
1777     NULL,                       /* set_ptrcnt */
1778 };
1779
1780 PerlIO_funcs PerlIO_byte = {
1781     sizeof(PerlIO_funcs),
1782     "bytes",
1783     0,
1784     PERLIO_K_DUMMY,
1785     PerlIOUtf8_pushed,
1786     NULL,
1787     NULL,
1788     NULL,
1789     NULL,
1790     NULL,
1791     NULL,
1792     NULL,
1793     NULL,
1794     NULL,
1795     NULL,
1796     NULL,                       /* flush */
1797     NULL,                       /* fill */
1798     NULL,
1799     NULL,
1800     NULL,
1801     NULL,
1802     NULL,                       /* get_base */
1803     NULL,                       /* get_bufsiz */
1804     NULL,                       /* get_ptr */
1805     NULL,                       /* get_cnt */
1806     NULL,                       /* set_ptrcnt */
1807 };
1808
1809 PerlIO *
1810 PerlIORaw_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
1811                IV n, const char *mode, int fd, int imode, int perm,
1812                PerlIO *old, int narg, SV **args)
1813 {
1814     PerlIO_funcs *tab = PerlIO_default_btm();
1815     return (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
1816                          old, narg, args);
1817 }
1818
1819 PerlIO_funcs PerlIO_raw = {
1820     sizeof(PerlIO_funcs),
1821     "raw",
1822     0,
1823     PERLIO_K_DUMMY,
1824     PerlIORaw_pushed,
1825     PerlIOBase_popped,
1826     PerlIORaw_open,
1827     NULL,
1828     NULL,
1829     NULL,
1830     NULL,
1831     NULL,
1832     NULL,
1833     NULL,
1834     NULL,
1835     NULL,                       /* flush */
1836     NULL,                       /* fill */
1837     NULL,
1838     NULL,
1839     NULL,
1840     NULL,
1841     NULL,                       /* get_base */
1842     NULL,                       /* get_bufsiz */
1843     NULL,                       /* get_ptr */
1844     NULL,                       /* get_cnt */
1845     NULL,                       /* set_ptrcnt */
1846 };
1847 /*--------------------------------------------------------------------------------------*/
1848 /*--------------------------------------------------------------------------------------*/
1849 /*
1850  * "Methods" of the "base class"
1851  */
1852
1853 IV
1854 PerlIOBase_fileno(pTHX_ PerlIO *f)
1855 {
1856     return PerlIOValid(f) ? PerlIO_fileno(PerlIONext(f)) : -1;
1857 }
1858
1859 char *
1860 PerlIO_modestr(PerlIO * f, char *buf)
1861 {
1862     char *s = buf;
1863     if (PerlIOValid(f)) {
1864         IV flags = PerlIOBase(f)->flags;
1865         if (flags & PERLIO_F_APPEND) {
1866             *s++ = 'a';
1867             if (flags & PERLIO_F_CANREAD) {
1868                 *s++ = '+';
1869             }
1870         }
1871         else if (flags & PERLIO_F_CANREAD) {
1872             *s++ = 'r';
1873             if (flags & PERLIO_F_CANWRITE)
1874                 *s++ = '+';
1875         }
1876         else if (flags & PERLIO_F_CANWRITE) {
1877             *s++ = 'w';
1878             if (flags & PERLIO_F_CANREAD) {
1879                 *s++ = '+';
1880             }
1881         }
1882 #ifdef PERLIO_USING_CRLF
1883         if (!(flags & PERLIO_F_CRLF))
1884             *s++ = 'b';
1885 #endif
1886     }
1887     *s = '\0';
1888     return buf;
1889 }
1890
1891
1892 IV
1893 PerlIOBase_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1894 {
1895     PerlIOl *l = PerlIOBase(f);
1896 #if 0
1897     const char *omode = mode;
1898     char temp[8];
1899 #endif
1900     l->flags &= ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE |
1901                   PERLIO_F_TRUNCATE | PERLIO_F_APPEND);
1902     if (tab->Set_ptrcnt != NULL)
1903         l->flags |= PERLIO_F_FASTGETS;
1904     if (mode) {
1905         if (*mode == '#' || *mode == 'I')
1906             mode++;
1907         switch (*mode++) {
1908         case 'r':
1909             l->flags |= PERLIO_F_CANREAD;
1910             break;
1911         case 'a':
1912             l->flags |= PERLIO_F_APPEND | PERLIO_F_CANWRITE;
1913             break;
1914         case 'w':
1915             l->flags |= PERLIO_F_TRUNCATE | PERLIO_F_CANWRITE;
1916             break;
1917         default:
1918             SETERRNO(EINVAL, LIB_INVARG);
1919             return -1;
1920         }
1921         while (*mode) {
1922             switch (*mode++) {
1923             case '+':
1924                 l->flags |= PERLIO_F_CANREAD | PERLIO_F_CANWRITE;
1925                 break;
1926             case 'b':
1927                 l->flags &= ~PERLIO_F_CRLF;
1928                 break;
1929             case 't':
1930                 l->flags |= PERLIO_F_CRLF;
1931                 break;
1932             default:
1933                 SETERRNO(EINVAL, LIB_INVARG);
1934                 return -1;
1935             }
1936         }
1937     }
1938     else {
1939         if (l->next) {
1940             l->flags |= l->next->flags &
1941                 (PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_TRUNCATE |
1942                  PERLIO_F_APPEND);
1943         }
1944     }
1945 #if 0
1946     PerlIO_debug("PerlIOBase_pushed f=%p %s %s fl=%08" UVxf " (%s)\n",
1947                  f, PerlIOBase(f)->tab->name, (omode) ? omode : "(Null)",
1948                  l->flags, PerlIO_modestr(f, temp));
1949 #endif
1950     return 0;
1951 }
1952
1953 IV
1954 PerlIOBase_popped(pTHX_ PerlIO *f)
1955 {
1956     return 0;
1957 }
1958
1959 SSize_t
1960 PerlIOBase_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1961 {
1962     /*
1963      * Save the position as current head considers it
1964      */
1965     Off_t old = PerlIO_tell(f);
1966     SSize_t done;
1967     PerlIO_push(aTHX_ f, &PerlIO_pending, "r", Nullsv);
1968     PerlIOSelf(f, PerlIOBuf)->posn = old;
1969     done = PerlIOBuf_unread(aTHX_ f, vbuf, count);
1970     return done;
1971 }
1972
1973 SSize_t
1974 PerlIOBase_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1975 {
1976     STDCHAR *buf = (STDCHAR *) vbuf;
1977     if (f) {
1978         if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD))
1979             return 0;
1980         while (count > 0) {
1981             SSize_t avail = PerlIO_get_cnt(f);
1982             SSize_t take = 0;
1983             if (avail > 0)
1984                 take = ((SSize_t)count < avail) ? count : avail;
1985             if (take > 0) {
1986                 STDCHAR *ptr = PerlIO_get_ptr(f);
1987                 Copy(ptr, buf, take, STDCHAR);
1988                 PerlIO_set_ptrcnt(f, ptr + take, (avail -= take));
1989                 count -= take;
1990                 buf += take;
1991             }
1992             if (count > 0 && avail <= 0) {
1993                 if (PerlIO_fill(f) != 0)
1994                     break;
1995             }
1996         }
1997         return (buf - (STDCHAR *) vbuf);
1998     }
1999     return 0;
2000 }
2001
2002 IV
2003 PerlIOBase_noop_ok(pTHX_ PerlIO *f)
2004 {
2005     return 0;
2006 }
2007
2008 IV
2009 PerlIOBase_noop_fail(pTHX_ PerlIO *f)
2010 {
2011     return -1;
2012 }
2013
2014 IV
2015 PerlIOBase_close(pTHX_ PerlIO *f)
2016 {
2017     IV code = 0;
2018     PerlIO *n = PerlIONext(f);
2019     if (PerlIO_flush(f) != 0)
2020         code = -1;
2021     if (PerlIOValid(n) && (*PerlIOBase(n)->tab->Close)(aTHX_ n) != 0)
2022         code = -1;
2023     PerlIOBase(f)->flags &=
2024         ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_OPEN);
2025     return code;
2026 }
2027
2028 IV
2029 PerlIOBase_eof(pTHX_ PerlIO *f)
2030 {
2031     if (PerlIOValid(f)) {
2032         return (PerlIOBase(f)->flags & PERLIO_F_EOF) != 0;
2033     }
2034     return 1;
2035 }
2036
2037 IV
2038 PerlIOBase_error(pTHX_ PerlIO *f)
2039 {
2040     if (PerlIOValid(f)) {
2041         return (PerlIOBase(f)->flags & PERLIO_F_ERROR) != 0;
2042     }
2043     return 1;
2044 }
2045
2046 void
2047 PerlIOBase_clearerr(pTHX_ PerlIO *f)
2048 {
2049     if (PerlIOValid(f)) {
2050         PerlIO *n = PerlIONext(f);
2051         PerlIOBase(f)->flags &= ~(PERLIO_F_ERROR | PERLIO_F_EOF);
2052         if (PerlIOValid(n))
2053             PerlIO_clearerr(n);
2054     }
2055 }
2056
2057 void
2058 PerlIOBase_setlinebuf(pTHX_ PerlIO *f)
2059 {
2060     if (PerlIOValid(f)) {
2061         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF;
2062     }
2063 }
2064
2065 SV *
2066 PerlIO_sv_dup(pTHX_ SV *arg, CLONE_PARAMS *param)
2067 {
2068     if (!arg)
2069         return Nullsv;
2070 #ifdef sv_dup
2071     if (param) {
2072         return sv_dup(arg, param);
2073     }
2074     else {
2075         return newSVsv(arg);
2076     }
2077 #else
2078     return newSVsv(arg);
2079 #endif
2080 }
2081
2082 PerlIO *
2083 PerlIOBase_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2084 {
2085     PerlIO *nexto = PerlIONext(o);
2086     if (PerlIOValid(nexto)) {
2087         PerlIO_funcs *tab = PerlIOBase(nexto)->tab;
2088         f = (*tab->Dup)(aTHX_ f, nexto, param, flags);
2089     }
2090     if (f) {
2091         PerlIO_funcs *self = PerlIOBase(o)->tab;
2092         SV *arg = Nullsv;
2093         char buf[8];
2094         PerlIO_debug("PerlIOBase_dup %s f=%p o=%p param=%p\n",
2095                      self->name, (void*)f, (void*)o, (void*)param);
2096         if (self->Getarg) {
2097             arg = (*self->Getarg)(aTHX_ o,param,flags);
2098         }
2099         f = PerlIO_push(aTHX_ f, self, PerlIO_modestr(o,buf), arg);
2100         if (arg) {
2101             SvREFCNT_dec(arg);
2102         }
2103     }
2104     return f;
2105 }
2106
2107 #define PERLIO_MAX_REFCOUNTABLE_FD 2048
2108 #ifdef USE_THREADS
2109 perl_mutex PerlIO_mutex;
2110 #endif
2111 int PerlIO_fd_refcnt[PERLIO_MAX_REFCOUNTABLE_FD];
2112
2113 void
2114 PerlIO_init(pTHX)
2115 {
2116  /* Place holder for stdstreams call ??? */
2117 #ifdef USE_THREADS
2118  MUTEX_INIT(&PerlIO_mutex);
2119 #endif
2120 }
2121
2122 void
2123 PerlIOUnix_refcnt_inc(int fd)
2124 {
2125     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2126 #ifdef USE_THREADS
2127         MUTEX_LOCK(&PerlIO_mutex);
2128 #endif
2129         PerlIO_fd_refcnt[fd]++;
2130         PerlIO_debug("fd %d refcnt=%d\n",fd,PerlIO_fd_refcnt[fd]);
2131 #ifdef USE_THREADS
2132         MUTEX_UNLOCK(&PerlIO_mutex);
2133 #endif
2134     }
2135 }
2136
2137 int
2138 PerlIOUnix_refcnt_dec(int fd)
2139 {
2140     int cnt = 0;
2141     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2142 #ifdef USE_THREADS
2143         MUTEX_LOCK(&PerlIO_mutex);
2144 #endif
2145         cnt = --PerlIO_fd_refcnt[fd];
2146         PerlIO_debug("fd %d refcnt=%d\n",fd,cnt);
2147 #ifdef USE_THREADS
2148         MUTEX_UNLOCK(&PerlIO_mutex);
2149 #endif
2150     }
2151     return cnt;
2152 }
2153
2154 void
2155 PerlIO_cleanup(pTHX)
2156 {
2157     int i;
2158 #ifdef USE_ITHREADS
2159     PerlIO_debug("Cleanup layers for %p\n",aTHX);
2160 #else
2161     PerlIO_debug("Cleanup layers\n");
2162 #endif
2163     /* Raise STDIN..STDERR refcount so we don't close them */
2164     for (i=0; i < 3; i++)
2165         PerlIOUnix_refcnt_inc(i);
2166     PerlIO_cleantable(aTHX_ &PL_perlio);
2167     /* Restore STDIN..STDERR refcount */
2168     for (i=0; i < 3; i++)
2169         PerlIOUnix_refcnt_dec(i);
2170
2171     if (PL_known_layers) {
2172         PerlIO_list_free(aTHX_ PL_known_layers);
2173         PL_known_layers = NULL;
2174     }
2175     if(PL_def_layerlist) {
2176         PerlIO_list_free(aTHX_ PL_def_layerlist);
2177         PL_def_layerlist = NULL;
2178     }
2179 }
2180
2181
2182
2183 /*--------------------------------------------------------------------------------------*/
2184 /*
2185  * Bottom-most level for UNIX-like case
2186  */
2187
2188 typedef struct {
2189     struct _PerlIO base;        /* The generic part */
2190     int fd;                     /* UNIX like file descriptor */
2191     int oflags;                 /* open/fcntl flags */
2192 } PerlIOUnix;
2193
2194 int
2195 PerlIOUnix_oflags(const char *mode)
2196 {
2197     int oflags = -1;
2198     if (*mode == 'I' || *mode == '#')
2199         mode++;
2200     switch (*mode) {
2201     case 'r':
2202         oflags = O_RDONLY;
2203         if (*++mode == '+') {
2204             oflags = O_RDWR;
2205             mode++;
2206         }
2207         break;
2208
2209     case 'w':
2210         oflags = O_CREAT | O_TRUNC;
2211         if (*++mode == '+') {
2212             oflags |= O_RDWR;
2213             mode++;
2214         }
2215         else
2216             oflags |= O_WRONLY;
2217         break;
2218
2219     case 'a':
2220         oflags = O_CREAT | O_APPEND;
2221         if (*++mode == '+') {
2222             oflags |= O_RDWR;
2223             mode++;
2224         }
2225         else
2226             oflags |= O_WRONLY;
2227         break;
2228     }
2229     if (*mode == 'b') {
2230         oflags |= O_BINARY;
2231         oflags &= ~O_TEXT;
2232         mode++;
2233     }
2234     else if (*mode == 't') {
2235         oflags |= O_TEXT;
2236         oflags &= ~O_BINARY;
2237         mode++;
2238     }
2239     /*
2240      * Always open in binary mode
2241      */
2242     oflags |= O_BINARY;
2243     if (*mode || oflags == -1) {
2244         SETERRNO(EINVAL, LIB_INVARG);
2245         oflags = -1;
2246     }
2247     return oflags;
2248 }
2249
2250 IV
2251 PerlIOUnix_fileno(pTHX_ PerlIO *f)
2252 {
2253     return PerlIOSelf(f, PerlIOUnix)->fd;
2254 }
2255
2256 IV
2257 PerlIOUnix_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2258 {
2259     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2260     PerlIOUnix *s = PerlIOSelf(f, PerlIOUnix);
2261     if (*PerlIONext(f)) {
2262         /* We never call down so do any pending stuff now */
2263         PerlIO_flush(PerlIONext(f));
2264         s->fd = PerlIO_fileno(PerlIONext(f));
2265         /*
2266          * XXX could (or should) we retrieve the oflags from the open file
2267          * handle rather than believing the "mode" we are passed in? XXX
2268          * Should the value on NULL mode be 0 or -1?
2269          */
2270         s->oflags = mode ? PerlIOUnix_oflags(mode) : -1;
2271     }
2272     PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2273     return code;
2274 }
2275
2276 PerlIO *
2277 PerlIOUnix_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2278                 IV n, const char *mode, int fd, int imode,
2279                 int perm, PerlIO *f, int narg, SV **args)
2280 {
2281     if (PerlIOValid(f)) {
2282         if (PerlIOBase(f)->flags & PERLIO_F_OPEN)
2283             (*PerlIOBase(f)->tab->Close)(aTHX_ f);
2284     }
2285     if (narg > 0) {
2286         char *path = SvPV_nolen(*args);
2287         if (*mode == '#')
2288             mode++;
2289         else {
2290             imode = PerlIOUnix_oflags(mode);
2291             perm = 0666;
2292         }
2293         if (imode != -1) {
2294             fd = PerlLIO_open3(path, imode, perm);
2295         }
2296     }
2297     if (fd >= 0) {
2298         PerlIOUnix *s;
2299         if (*mode == 'I')
2300             mode++;
2301         if (!f) {
2302             f = PerlIO_allocate(aTHX);
2303         }
2304         if (!PerlIOValid(f)) {
2305             if (!(f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2306                 return NULL;
2307             }
2308         }
2309         s = PerlIOSelf(f, PerlIOUnix);
2310         s->fd = fd;
2311         s->oflags = imode;
2312         PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2313         PerlIOUnix_refcnt_inc(fd);
2314         return f;
2315     }
2316     else {
2317         if (f) {
2318             /*
2319              * FIXME: pop layers ???
2320              */
2321         }
2322         return NULL;
2323     }
2324 }
2325
2326 PerlIO *
2327 PerlIOUnix_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2328 {
2329     PerlIOUnix *os = PerlIOSelf(o, PerlIOUnix);
2330     int fd = os->fd;
2331     if (flags & PERLIO_DUP_FD) {
2332         fd = PerlLIO_dup(fd);
2333     }
2334     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2335         f = PerlIOBase_dup(aTHX_ f, o, param, flags);
2336         if (f) {
2337             /* If all went well overwrite fd in dup'ed lay with the dup()'ed fd */
2338             PerlIOUnix *s = PerlIOSelf(f, PerlIOUnix);
2339             s->fd = fd;
2340             PerlIOUnix_refcnt_inc(fd);
2341             return f;
2342         }
2343     }
2344     return NULL;
2345 }
2346
2347
2348 SSize_t
2349 PerlIOUnix_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2350 {
2351     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2352     if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD) ||
2353          PerlIOBase(f)->flags & (PERLIO_F_EOF|PERLIO_F_ERROR)) {
2354         return 0;
2355     }
2356     while (1) {
2357         SSize_t len = PerlLIO_read(fd, vbuf, count);
2358         if (len >= 0 || errno != EINTR) {
2359             if (len < 0)
2360                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2361             else if (len == 0 && count != 0)
2362                 PerlIOBase(f)->flags |= PERLIO_F_EOF;
2363             return len;
2364         }
2365         PERL_ASYNC_CHECK();
2366     }
2367 }
2368
2369 SSize_t
2370 PerlIOUnix_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2371 {
2372     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2373     while (1) {
2374         SSize_t len = PerlLIO_write(fd, vbuf, count);
2375         if (len >= 0 || errno != EINTR) {
2376             if (len < 0)
2377                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2378             return len;
2379         }
2380         PERL_ASYNC_CHECK();
2381     }
2382 }
2383
2384 IV
2385 PerlIOUnix_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2386 {
2387     Off_t new =
2388         PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, offset, whence);
2389     PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
2390     return (new == (Off_t) - 1) ? -1 : 0;
2391 }
2392
2393 Off_t
2394 PerlIOUnix_tell(pTHX_ PerlIO *f)
2395 {
2396     return PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, 0, SEEK_CUR);
2397 }
2398
2399
2400 IV
2401 PerlIOUnix_close(pTHX_ PerlIO *f)
2402 {
2403     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2404     int code = 0;
2405     if (PerlIOBase(f)->flags & PERLIO_F_OPEN) {
2406         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2407             PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2408             return 0;
2409         }
2410     }
2411     else {
2412         SETERRNO(EBADF,SS_IVCHAN);
2413         return -1;
2414     }
2415     while (PerlLIO_close(fd) != 0) {
2416         if (errno != EINTR) {
2417             code = -1;
2418             break;
2419         }
2420         PERL_ASYNC_CHECK();
2421     }
2422     if (code == 0) {
2423         PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2424     }
2425     return code;
2426 }
2427
2428 PerlIO_funcs PerlIO_unix = {
2429     sizeof(PerlIO_funcs),
2430     "unix",
2431     sizeof(PerlIOUnix),
2432     PERLIO_K_RAW,
2433     PerlIOUnix_pushed,
2434     PerlIOBase_popped,
2435     PerlIOUnix_open,
2436     PerlIOBase_binmode,         /* binmode */
2437     NULL,
2438     PerlIOUnix_fileno,
2439     PerlIOUnix_dup,
2440     PerlIOUnix_read,
2441     PerlIOBase_unread,
2442     PerlIOUnix_write,
2443     PerlIOUnix_seek,
2444     PerlIOUnix_tell,
2445     PerlIOUnix_close,
2446     PerlIOBase_noop_ok,         /* flush */
2447     PerlIOBase_noop_fail,       /* fill */
2448     PerlIOBase_eof,
2449     PerlIOBase_error,
2450     PerlIOBase_clearerr,
2451     PerlIOBase_setlinebuf,
2452     NULL,                       /* get_base */
2453     NULL,                       /* get_bufsiz */
2454     NULL,                       /* get_ptr */
2455     NULL,                       /* get_cnt */
2456     NULL,                       /* set_ptrcnt */
2457 };
2458
2459 /*--------------------------------------------------------------------------------------*/
2460 /*
2461  * stdio as a layer
2462  */
2463
2464 #if defined(VMS) && !defined(STDIO_BUFFER_WRITABLE)
2465 /* perl5.8 - This ensures the last minute VMS ungetc fix is not
2466    broken by the last second glibc 2.3 fix
2467  */
2468 #define STDIO_BUFFER_WRITABLE
2469 #endif
2470
2471
2472 typedef struct {
2473     struct _PerlIO base;
2474     FILE *stdio;                /* The stream */
2475 } PerlIOStdio;
2476
2477 IV
2478 PerlIOStdio_fileno(pTHX_ PerlIO *f)
2479 {
2480     FILE *s;
2481     if (PerlIOValid(f) && (s = PerlIOSelf(f, PerlIOStdio)->stdio)) {
2482         return PerlSIO_fileno(s);
2483     }
2484     errno = EBADF;
2485     return -1;
2486 }
2487
2488 char *
2489 PerlIOStdio_mode(const char *mode, char *tmode)
2490 {
2491     char *ret = tmode;
2492     while (*mode) {
2493         *tmode++ = *mode++;
2494     }
2495 #ifdef PERLIO_USING_CRLF
2496     *tmode++ = 'b';
2497 #endif
2498     *tmode = '\0';
2499     return ret;
2500 }
2501
2502 IV
2503 PerlIOStdio_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2504 {
2505     PerlIO *n;
2506     if (PerlIOValid(f) && PerlIOValid(n = PerlIONext(f))) {
2507         PerlIO_funcs *toptab = PerlIOBase(n)->tab;
2508         if (toptab == tab) {
2509             /* Top is already stdio - pop self (duplicate) and use original */
2510             PerlIO_pop(aTHX_ f);
2511             return 0;
2512         } else {
2513             int fd = PerlIO_fileno(n);
2514             char tmode[8];
2515             FILE *stdio;
2516             if (fd >= 0 && (stdio  = PerlSIO_fdopen(fd,
2517                             mode = PerlIOStdio_mode(mode, tmode)))) {
2518                 PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2519                 /* We never call down so do any pending stuff now */
2520                 PerlIO_flush(PerlIONext(f));
2521             }
2522             else {
2523                 return -1;
2524             }
2525         }
2526     }
2527     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2528 }
2529
2530
2531 PerlIO *
2532 PerlIO_importFILE(FILE *stdio, const char *mode)
2533 {
2534     dTHX;
2535     PerlIO *f = NULL;
2536     if (stdio) {
2537         PerlIOStdio *s;
2538         if (!mode || !*mode) {
2539             /* We need to probe to see how we can open the stream
2540                so start with read/write and then try write and read
2541                we dup() so that we can fclose without loosing the fd.
2542
2543                Note that the errno value set by a failing fdopen
2544                varies between stdio implementations.
2545              */
2546             int fd = PerlLIO_dup(fileno(stdio));
2547             FILE *f2 = PerlSIO_fdopen(fd, (mode = "r+"));
2548             if (!f2) {
2549                 f2 = PerlSIO_fdopen(fd, (mode = "w"));
2550             }
2551             if (!f2) {
2552                 f2 = PerlSIO_fdopen(fd, (mode = "r"));
2553             }
2554             if (!f2) {
2555                 /* Don't seem to be able to open */
2556                 PerlLIO_close(fd);
2557                 return f;
2558             }
2559             fclose(f2);
2560         }
2561         if ((f = PerlIO_push(aTHX_(f = PerlIO_allocate(aTHX)), &PerlIO_stdio, mode, Nullsv))) {
2562             s = PerlIOSelf(f, PerlIOStdio);
2563             s->stdio = stdio;
2564         }
2565     }
2566     return f;
2567 }
2568
2569 PerlIO *
2570 PerlIOStdio_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2571                  IV n, const char *mode, int fd, int imode,
2572                  int perm, PerlIO *f, int narg, SV **args)
2573 {
2574     char tmode[8];
2575     if (PerlIOValid(f)) {
2576         char *path = SvPV_nolen(*args);
2577         PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
2578         FILE *stdio;
2579         PerlIOUnix_refcnt_dec(fileno(s->stdio));
2580         stdio = PerlSIO_freopen(path, (mode = PerlIOStdio_mode(mode, tmode)),
2581                             s->stdio);
2582         if (!s->stdio)
2583             return NULL;
2584         s->stdio = stdio;
2585         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2586         return f;
2587     }
2588     else {
2589         if (narg > 0) {
2590             char *path = SvPV_nolen(*args);
2591             if (*mode == '#') {
2592                 mode++;
2593                 fd = PerlLIO_open3(path, imode, perm);
2594             }
2595             else {
2596                 FILE *stdio = PerlSIO_fopen(path, mode);
2597                 if (stdio) {
2598                     PerlIOStdio *s;
2599                     if (!f) {
2600                         f = PerlIO_allocate(aTHX);
2601                     }
2602                     if ((f = PerlIO_push(aTHX_ f, self,
2603                                     (mode = PerlIOStdio_mode(mode, tmode)),
2604                                     PerlIOArg))) {
2605                         s = PerlIOSelf(f, PerlIOStdio);
2606                         s->stdio = stdio;
2607                         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2608                     }
2609                     return f;
2610                 }
2611                 else {
2612                     return NULL;
2613                 }
2614             }
2615         }
2616         if (fd >= 0) {
2617             FILE *stdio = NULL;
2618             int init = 0;
2619             if (*mode == 'I') {
2620                 init = 1;
2621                 mode++;
2622             }
2623             if (init) {
2624                 switch (fd) {
2625                 case 0:
2626                     stdio = PerlSIO_stdin;
2627                     break;
2628                 case 1:
2629                     stdio = PerlSIO_stdout;
2630                     break;
2631                 case 2:
2632                     stdio = PerlSIO_stderr;
2633                     break;
2634                 }
2635             }
2636             else {
2637                 stdio = PerlSIO_fdopen(fd, mode =
2638                                        PerlIOStdio_mode(mode, tmode));
2639             }
2640             if (stdio) {
2641                 PerlIOStdio *s;
2642                 if (!f) {
2643                     f = PerlIO_allocate(aTHX);
2644                 }
2645                 if ((f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2646                     s = PerlIOSelf(f, PerlIOStdio);
2647                     s->stdio = stdio;
2648                     PerlIOUnix_refcnt_inc(fileno(s->stdio));
2649                 }
2650                 return f;
2651             }
2652         }
2653     }
2654     return NULL;
2655 }
2656
2657 PerlIO *
2658 PerlIOStdio_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2659 {
2660     /* This assumes no layers underneath - which is what
2661        happens, but is not how I remember it. NI-S 2001/10/16
2662      */
2663     if ((f = PerlIOBase_dup(aTHX_ f, o, param, flags))) {
2664         FILE *stdio = PerlIOSelf(o, PerlIOStdio)->stdio;
2665         int fd = fileno(stdio);
2666         char mode[8];
2667         if (flags & PERLIO_DUP_FD) {
2668             int dfd = PerlLIO_dup(fileno(stdio));
2669             if (dfd >= 0) {
2670                 stdio = PerlSIO_fdopen(dfd, PerlIO_modestr(o,mode));
2671                 goto set_this;
2672             }
2673             else {
2674                 /* FIXME: To avoid messy error recovery if dup fails
2675                    re-use the existing stdio as though flag was not set
2676                  */
2677             }
2678         }
2679         stdio = PerlSIO_fdopen(fd, PerlIO_modestr(o,mode));
2680     set_this:
2681         PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2682         PerlIOUnix_refcnt_inc(fileno(stdio));
2683     }
2684     return f;
2685 }
2686
2687 IV
2688 PerlIOStdio_close(pTHX_ PerlIO *f)
2689 {
2690 #ifdef SOCKS5_VERSION_NAME
2691     int optval;
2692     Sock_size_t optlen = sizeof(int);
2693 #endif
2694     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2695     if (!stdio) {
2696         errno = EBADF;
2697         return -1;
2698     }
2699     else {
2700         int fd = fileno(stdio);
2701         int dupfd = -1;
2702         IV result;
2703         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2704             /* File descriptor still in use */
2705             if (fd < 3) {
2706                 /* For STD* handles don't close the stdio at all */
2707                 return PerlIO_flush(f);
2708             }
2709             else {
2710                 /* Tricky - must fclose(stdio) to free memory but not close(fd) */
2711 #ifdef USE_THREADS
2712                 /* Sarathy pointed out that another thread could reuse
2713                    fd after fclose() but before we dup2() below
2714                    so take out a MUTEX to shut them out
2715                  */
2716                 MUTEX_LOCK(&PerlIO_mutex);
2717 #endif
2718                 dupfd = PerlLIO_dup(fd);
2719             }
2720         }
2721         result = (
2722 #ifdef SOCKS5_VERSION_NAME
2723                (getsockopt
2724                 (PerlIO_fileno(f), SOL_SOCKET, SO_TYPE, (void *) &optval,
2725                  &optlen) <
2726                 0) ? PerlSIO_fclose(stdio) : close(PerlIO_fileno(f))
2727 #else
2728                PerlSIO_fclose(stdio)
2729 #endif
2730         );
2731         if (dupfd >= 0) {
2732             /* We need to restore fd from the saved copy */
2733             if (PerlLIO_dup2(dupfd,fd) != fd)
2734               result = -1;
2735 #ifdef USE_THREADS
2736             MUTEX_UNLOCK(&PerlIO_mutex);
2737 #endif
2738             if (PerlLIO_close(dupfd) != 0)
2739               result = -1;
2740         }
2741         return result;
2742     }
2743 }
2744
2745
2746
2747 SSize_t
2748 PerlIOStdio_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2749 {
2750     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
2751     SSize_t got = 0;
2752     if (count == 1) {
2753         STDCHAR *buf = (STDCHAR *) vbuf;
2754         /*
2755          * Perl is expecting PerlIO_getc() to fill the buffer Linux's
2756          * stdio does not do that for fread()
2757          */
2758         int ch = PerlSIO_fgetc(s);
2759         if (ch != EOF) {
2760             *buf = ch;
2761             got = 1;
2762         }
2763     }
2764     else
2765         got = PerlSIO_fread(vbuf, 1, count, s);
2766     return got;
2767 }
2768
2769 SSize_t
2770 PerlIOStdio_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2771 {
2772     SSize_t unread = 0;
2773     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
2774
2775 #ifdef STDIO_BUFFER_WRITABLE
2776     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
2777         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
2778         STDCHAR *base = PerlIO_get_base(f);
2779         SSize_t cnt   = PerlIO_get_cnt(f);
2780         STDCHAR *ptr  = PerlIO_get_ptr(f);
2781         SSize_t avail = ptr - base;
2782         if (avail > 0) {
2783             if (avail > count) {
2784                 avail = count;
2785             }
2786             ptr -= avail;
2787             Move(buf-avail,ptr,avail,STDCHAR);
2788             count -= avail;
2789             unread += avail;
2790             PerlIO_set_ptrcnt(f,ptr,cnt+avail);
2791             if (PerlSIO_feof(s) && unread >= 0)
2792                 PerlSIO_clearerr(s);
2793         }
2794     }
2795     else
2796 #endif
2797     if (PerlIO_has_cntptr(f)) {
2798         /* We can get pointer to buffer but not its base
2799            Do ungetc() but check chars are ending up in the
2800            buffer
2801          */
2802         STDCHAR *eptr = (STDCHAR*)PerlSIO_get_ptr(s);
2803         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
2804         while (count > 0) {
2805             int ch = *--buf & 0xFF;
2806             if (ungetc(ch,s) != ch) {
2807                 /* ungetc did not work */
2808                 break;
2809             }
2810             if ((STDCHAR*)PerlSIO_get_ptr(s) != --eptr || ((*eptr & 0xFF) != ch)) {
2811                 /* Did not change pointer as expected */
2812                 fgetc(s);  /* get char back again */
2813                 break;
2814             }
2815             /* It worked ! */
2816             count--;
2817             unread++;
2818         }
2819     }
2820
2821     if (count > 0) {
2822         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
2823     }
2824     return unread;
2825 }
2826
2827 SSize_t
2828 PerlIOStdio_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2829 {
2830     return PerlSIO_fwrite(vbuf, 1, count,
2831                           PerlIOSelf(f, PerlIOStdio)->stdio);
2832 }
2833
2834 IV
2835 PerlIOStdio_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2836 {
2837     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2838     return PerlSIO_fseek(stdio, offset, whence);
2839 }
2840
2841 Off_t
2842 PerlIOStdio_tell(pTHX_ PerlIO *f)
2843 {
2844     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2845     return PerlSIO_ftell(stdio);
2846 }
2847
2848 IV
2849 PerlIOStdio_flush(pTHX_ PerlIO *f)
2850 {
2851     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2852     if (PerlIOBase(f)->flags & PERLIO_F_CANWRITE) {
2853         return PerlSIO_fflush(stdio);
2854     }
2855     else {
2856 #if 0
2857         /*
2858          * FIXME: This discards ungetc() and pre-read stuff which is not
2859          * right if this is just a "sync" from a layer above Suspect right
2860          * design is to do _this_ but not have layer above flush this
2861          * layer read-to-read
2862          */
2863         /*
2864          * Not writeable - sync by attempting a seek
2865          */
2866         int err = errno;
2867         if (PerlSIO_fseek(stdio, (Off_t) 0, SEEK_CUR) != 0)
2868             errno = err;
2869 #endif
2870     }
2871     return 0;
2872 }
2873
2874 IV
2875 PerlIOStdio_eof(pTHX_ PerlIO *f)
2876 {
2877     return PerlSIO_feof(PerlIOSelf(f, PerlIOStdio)->stdio);
2878 }
2879
2880 IV
2881 PerlIOStdio_error(pTHX_ PerlIO *f)
2882 {
2883     return PerlSIO_ferror(PerlIOSelf(f, PerlIOStdio)->stdio);
2884 }
2885
2886 void
2887 PerlIOStdio_clearerr(pTHX_ PerlIO *f)
2888 {
2889     PerlSIO_clearerr(PerlIOSelf(f, PerlIOStdio)->stdio);
2890 }
2891
2892 void
2893 PerlIOStdio_setlinebuf(pTHX_ PerlIO *f)
2894 {
2895 #ifdef HAS_SETLINEBUF
2896     PerlSIO_setlinebuf(PerlIOSelf(f, PerlIOStdio)->stdio);
2897 #else
2898     PerlSIO_setvbuf(PerlIOSelf(f, PerlIOStdio)->stdio, Nullch, _IOLBF, 0);
2899 #endif
2900 }
2901
2902 #ifdef FILE_base
2903 STDCHAR *
2904 PerlIOStdio_get_base(pTHX_ PerlIO *f)
2905 {
2906     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2907     return (STDCHAR*)PerlSIO_get_base(stdio);
2908 }
2909
2910 Size_t
2911 PerlIOStdio_get_bufsiz(pTHX_ PerlIO *f)
2912 {
2913     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2914     return PerlSIO_get_bufsiz(stdio);
2915 }
2916 #endif
2917
2918 #ifdef USE_STDIO_PTR
2919 STDCHAR *
2920 PerlIOStdio_get_ptr(pTHX_ PerlIO *f)
2921 {
2922     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2923     return (STDCHAR*)PerlSIO_get_ptr(stdio);
2924 }
2925
2926 SSize_t
2927 PerlIOStdio_get_cnt(pTHX_ PerlIO *f)
2928 {
2929     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2930     return PerlSIO_get_cnt(stdio);
2931 }
2932
2933 void
2934 PerlIOStdio_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
2935 {
2936     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2937     if (ptr != NULL) {
2938 #ifdef STDIO_PTR_LVALUE
2939         PerlSIO_set_ptr(stdio, (void*)ptr); /* LHS STDCHAR* cast non-portable */
2940 #ifdef STDIO_PTR_LVAL_SETS_CNT
2941         if (PerlSIO_get_cnt(stdio) != (cnt)) {
2942             assert(PerlSIO_get_cnt(stdio) == (cnt));
2943         }
2944 #endif
2945 #if (!defined(STDIO_PTR_LVAL_NOCHANGE_CNT))
2946         /*
2947          * Setting ptr _does_ change cnt - we are done
2948          */
2949         return;
2950 #endif
2951 #else                           /* STDIO_PTR_LVALUE */
2952         PerlProc_abort();
2953 #endif                          /* STDIO_PTR_LVALUE */
2954     }
2955     /*
2956      * Now (or only) set cnt
2957      */
2958 #ifdef STDIO_CNT_LVALUE
2959     PerlSIO_set_cnt(stdio, cnt);
2960 #else                           /* STDIO_CNT_LVALUE */
2961 #if (defined(STDIO_PTR_LVALUE) && defined(STDIO_PTR_LVAL_SETS_CNT))
2962     PerlSIO_set_ptr(stdio,
2963                     PerlSIO_get_ptr(stdio) + (PerlSIO_get_cnt(stdio) -
2964                                               cnt));
2965 #else                           /* STDIO_PTR_LVAL_SETS_CNT */
2966     PerlProc_abort();
2967 #endif                          /* STDIO_PTR_LVAL_SETS_CNT */
2968 #endif                          /* STDIO_CNT_LVALUE */
2969 }
2970
2971
2972 #endif
2973
2974 IV
2975 PerlIOStdio_fill(pTHX_ PerlIO *f)
2976 {
2977     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2978     int c;
2979     /*
2980      * fflush()ing read-only streams can cause trouble on some stdio-s
2981      */
2982     if ((PerlIOBase(f)->flags & PERLIO_F_CANWRITE)) {
2983         if (PerlSIO_fflush(stdio) != 0)
2984             return EOF;
2985     }
2986     c = PerlSIO_fgetc(stdio);
2987     if (c == EOF)
2988         return EOF;
2989
2990 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
2991
2992 #ifdef STDIO_BUFFER_WRITABLE
2993     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
2994         /* Fake ungetc() to the real buffer in case system's ungetc
2995            goes elsewhere
2996          */
2997         STDCHAR *base = (STDCHAR*)PerlSIO_get_base(stdio);
2998         SSize_t cnt   = PerlSIO_get_cnt(stdio);
2999         STDCHAR *ptr  = (STDCHAR*)PerlSIO_get_ptr(stdio);
3000         if (ptr == base+1) {
3001             *--ptr = (STDCHAR) c;
3002             PerlIOStdio_set_ptrcnt(aTHX_ f,ptr,cnt+1);
3003             if (PerlSIO_feof(stdio))
3004                 PerlSIO_clearerr(stdio);
3005             return 0;
3006         }
3007     }
3008     else
3009 #endif
3010     if (PerlIO_has_cntptr(f)) {
3011         STDCHAR ch = c;
3012         if (PerlIOStdio_unread(aTHX_ f,&ch,1) == 1) {
3013             return 0;
3014         }
3015     }
3016 #endif
3017
3018 #if defined(VMS)
3019     /* An ungetc()d char is handled separately from the regular
3020      * buffer, so we stuff it in the buffer ourselves.
3021      * Should never get called as should hit code above
3022      */
3023     *(--((*stdio)->_ptr)) = (unsigned char) c;
3024     (*stdio)->_cnt++;
3025 #else
3026     /* If buffer snoop scheme above fails fall back to
3027        using ungetc().
3028      */
3029     if (PerlSIO_ungetc(c, stdio) != c)
3030         return EOF;
3031 #endif
3032     return 0;
3033 }
3034
3035
3036
3037 PerlIO_funcs PerlIO_stdio = {
3038     sizeof(PerlIO_funcs),
3039     "stdio",
3040     sizeof(PerlIOStdio),
3041     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3042     PerlIOStdio_pushed,
3043     PerlIOBase_popped,
3044     PerlIOStdio_open,
3045     PerlIOBase_binmode,         /* binmode */
3046     NULL,
3047     PerlIOStdio_fileno,
3048     PerlIOStdio_dup,
3049     PerlIOStdio_read,
3050     PerlIOStdio_unread,
3051     PerlIOStdio_write,
3052     PerlIOStdio_seek,
3053     PerlIOStdio_tell,
3054     PerlIOStdio_close,
3055     PerlIOStdio_flush,
3056     PerlIOStdio_fill,
3057     PerlIOStdio_eof,
3058     PerlIOStdio_error,
3059     PerlIOStdio_clearerr,
3060     PerlIOStdio_setlinebuf,
3061 #ifdef FILE_base
3062     PerlIOStdio_get_base,
3063     PerlIOStdio_get_bufsiz,
3064 #else
3065     NULL,
3066     NULL,
3067 #endif
3068 #ifdef USE_STDIO_PTR
3069     PerlIOStdio_get_ptr,
3070     PerlIOStdio_get_cnt,
3071 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
3072     PerlIOStdio_set_ptrcnt
3073 #else                           /* STDIO_PTR_LVALUE */
3074     NULL
3075 #endif                          /* STDIO_PTR_LVALUE */
3076 #else                           /* USE_STDIO_PTR */
3077     NULL,
3078     NULL,
3079     NULL
3080 #endif                          /* USE_STDIO_PTR */
3081 };
3082
3083 /* Note that calls to PerlIO_exportFILE() are reversed using
3084  * PerlIO_releaseFILE(), not importFILE. */
3085 FILE *
3086 PerlIO_exportFILE(PerlIO * f, const char *mode)
3087 {
3088     dTHX;
3089     FILE *stdio = NULL;
3090     if (PerlIOValid(f)) {
3091         char buf[8];
3092         PerlIO_flush(f);
3093         if (!mode || !*mode) {
3094             mode = PerlIO_modestr(f, buf);
3095         }
3096         stdio = PerlSIO_fdopen(PerlIO_fileno(f), mode);
3097         if (stdio) {
3098             PerlIOl *l = *f;
3099             /* De-link any lower layers so new :stdio sticks */
3100             *f = NULL;
3101             if ((f = PerlIO_push(aTHX_ f, &PerlIO_stdio, buf, Nullsv))) {
3102                 PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
3103                 s->stdio = stdio;
3104                 /* Link previous lower layers under new one */
3105                 *PerlIONext(f) = l;
3106             }
3107             else {
3108                 /* restore layers list */
3109                 *f = l;
3110             }
3111         }
3112     }
3113     return stdio;
3114 }
3115
3116
3117 FILE *
3118 PerlIO_findFILE(PerlIO *f)
3119 {
3120     PerlIOl *l = *f;
3121     while (l) {
3122         if (l->tab == &PerlIO_stdio) {
3123             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3124             return s->stdio;
3125         }
3126         l = *PerlIONext(&l);
3127     }
3128     /* Uses fallback "mode" via PerlIO_modestr() in PerlIO_exportFILE */
3129     return PerlIO_exportFILE(f, Nullch);
3130 }
3131
3132 /* Use this to reverse PerlIO_exportFILE calls. */
3133 void
3134 PerlIO_releaseFILE(PerlIO *p, FILE *f)
3135 {
3136     PerlIOl *l;
3137     while ((l = *p)) {
3138         if (l->tab == &PerlIO_stdio) {
3139             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3140             if (s->stdio == f) {
3141                 dTHX;
3142                 PerlIO_pop(aTHX_ p);
3143                 return;
3144             }
3145         }
3146         p = PerlIONext(p);
3147     }
3148     return;
3149 }
3150
3151 /*--------------------------------------------------------------------------------------*/
3152 /*
3153  * perlio buffer layer
3154  */
3155
3156 IV
3157 PerlIOBuf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3158 {
3159     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3160     int fd = PerlIO_fileno(f);
3161     if (fd >= 0 && PerlLIO_isatty(fd)) {
3162         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF | PERLIO_F_TTY;
3163     }
3164     if (*PerlIONext(f)) {
3165         Off_t posn = PerlIO_tell(PerlIONext(f));
3166         if (posn != (Off_t) - 1) {
3167             b->posn = posn;
3168         }
3169     }
3170     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3171 }
3172
3173 PerlIO *
3174 PerlIOBuf_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
3175                IV n, const char *mode, int fd, int imode, int perm,
3176                PerlIO *f, int narg, SV **args)
3177 {
3178     if (PerlIOValid(f)) {
3179         PerlIO *next = PerlIONext(f);
3180         PerlIO_funcs *tab =  PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIOBase(next)->tab);
3181         next = (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3182                           next, narg, args);
3183         if (!next || (*PerlIOBase(f)->tab->Pushed) (aTHX_ f, mode, PerlIOArg, self) != 0) {
3184             return NULL;
3185         }
3186     }
3187     else {
3188         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIO_default_btm());
3189         int init = 0;
3190         if (*mode == 'I') {
3191             init = 1;
3192             /*
3193              * mode++;
3194              */
3195         }
3196         f = (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3197                           f, narg, args);
3198         if (f) {
3199             if (PerlIO_push(aTHX_ f, self, mode, PerlIOArg) == 0) {
3200                 /*
3201                  * if push fails during open, open fails. close will pop us.
3202                  */
3203                 PerlIO_close (f);
3204                 return NULL;
3205             } else {
3206                 fd = PerlIO_fileno(f);
3207                 if (init && fd == 2) {
3208                     /*
3209                      * Initial stderr is unbuffered
3210                      */
3211                     PerlIOBase(f)->flags |= PERLIO_F_UNBUF;
3212                 }
3213 #ifdef PERLIO_USING_CRLF
3214 #  ifdef PERLIO_IS_BINMODE_FD
3215                 if (PERLIO_IS_BINMODE_FD(fd))
3216                     PerlIO_binmode(f,  '<'/*not used*/, O_BINARY, Nullch);
3217                 else
3218 #  endif
3219                 /*
3220                  * do something about failing setmode()? --jhi
3221                  */
3222                 PerlLIO_setmode(fd, O_BINARY);
3223 #endif
3224             }
3225         }
3226     }
3227     return f;
3228 }
3229
3230 /*
3231  * This "flush" is akin to sfio's sync in that it handles files in either
3232  * read or write state
3233  */
3234 IV
3235 PerlIOBuf_flush(pTHX_ PerlIO *f)
3236 {
3237     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3238     int code = 0;
3239     PerlIO *n = PerlIONext(f);
3240     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF) {
3241         /*
3242          * write() the buffer
3243          */
3244         STDCHAR *buf = b->buf;
3245         STDCHAR *p = buf;
3246         while (p < b->ptr) {
3247             SSize_t count = PerlIO_write(n, p, b->ptr - p);
3248             if (count > 0) {
3249                 p += count;
3250             }
3251             else if (count < 0 || PerlIO_error(n)) {
3252                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3253                 code = -1;
3254                 break;
3255             }
3256         }
3257         b->posn += (p - buf);
3258     }
3259     else if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3260         STDCHAR *buf = PerlIO_get_base(f);
3261         /*
3262          * Note position change
3263          */
3264         b->posn += (b->ptr - buf);
3265         if (b->ptr < b->end) {
3266             /* We did not consume all of it - try and seek downstream to
3267                our logical position
3268              */
3269             if (PerlIOValid(n) && PerlIO_seek(n, b->posn, SEEK_SET) == 0) {
3270                 /* Reload n as some layers may pop themselves on seek */
3271                 b->posn = PerlIO_tell(n = PerlIONext(f));
3272             }
3273             else {
3274                 /* Seek failed (e.g. pipe or tty). Do NOT clear buffer or pre-read
3275                    data is lost for good - so return saying "ok" having undone
3276                    the position adjust
3277                  */
3278                 b->posn -= (b->ptr - buf);
3279                 return code;
3280             }
3281         }
3282     }
3283     b->ptr = b->end = b->buf;
3284     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3285     /* We check for Valid because of dubious decision to make PerlIO_flush(NULL) flush all */
3286     if (PerlIOValid(n) && PerlIO_flush(n) != 0)
3287         code = -1;
3288     return code;
3289 }
3290
3291 IV
3292 PerlIOBuf_fill(pTHX_ PerlIO *f)
3293 {
3294     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3295     PerlIO *n = PerlIONext(f);
3296     SSize_t avail;
3297     /*
3298      * Down-stream flush is defined not to loose read data so is harmless.
3299      * we would not normally be fill'ing if there was data left in anycase.
3300      */
3301     if (PerlIO_flush(f) != 0)
3302         return -1;
3303     if (PerlIOBase(f)->flags & PERLIO_F_TTY)
3304         PerlIOBase_flush_linebuf(aTHX);
3305
3306     if (!b->buf)
3307         PerlIO_get_base(f);     /* allocate via vtable */
3308
3309     b->ptr = b->end = b->buf;
3310
3311     if (!PerlIOValid(n)) {
3312         PerlIOBase(f)->flags |= PERLIO_F_EOF;
3313         return -1;
3314     }
3315
3316     if (PerlIO_fast_gets(n)) {
3317         /*
3318          * Layer below is also buffered. We do _NOT_ want to call its
3319          * ->Read() because that will loop till it gets what we asked for
3320          * which may hang on a pipe etc. Instead take anything it has to
3321          * hand, or ask it to fill _once_.
3322          */
3323         avail = PerlIO_get_cnt(n);
3324         if (avail <= 0) {
3325             avail = PerlIO_fill(n);
3326             if (avail == 0)
3327                 avail = PerlIO_get_cnt(n);
3328             else {
3329                 if (!PerlIO_error(n) && PerlIO_eof(n))
3330                     avail = 0;
3331             }
3332         }
3333         if (avail > 0) {
3334             STDCHAR *ptr = PerlIO_get_ptr(n);
3335             SSize_t cnt = avail;
3336             if (avail > (SSize_t)b->bufsiz)
3337                 avail = b->bufsiz;
3338             Copy(ptr, b->buf, avail, STDCHAR);
3339             PerlIO_set_ptrcnt(n, ptr + avail, cnt - avail);
3340         }
3341     }
3342     else {
3343         avail = PerlIO_read(n, b->ptr, b->bufsiz);
3344     }
3345     if (avail <= 0) {
3346         if (avail == 0)
3347             PerlIOBase(f)->flags |= PERLIO_F_EOF;
3348         else
3349             PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3350         return -1;
3351     }
3352     b->end = b->buf + avail;
3353     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3354     return 0;
3355 }
3356
3357 SSize_t
3358 PerlIOBuf_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3359 {
3360     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3361     if (PerlIOValid(f)) {
3362         if (!b->ptr)
3363             PerlIO_get_base(f);
3364         return PerlIOBase_read(aTHX_ f, vbuf, count);
3365     }
3366     return 0;
3367 }
3368
3369 SSize_t
3370 PerlIOBuf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3371 {
3372     const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3373     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3374     SSize_t unread = 0;
3375     SSize_t avail;
3376     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3377         PerlIO_flush(f);
3378     if (!b->buf)
3379         PerlIO_get_base(f);
3380     if (b->buf) {
3381         if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3382             /*
3383              * Buffer is already a read buffer, we can overwrite any chars
3384              * which have been read back to buffer start
3385              */
3386             avail = (b->ptr - b->buf);
3387         }
3388         else {
3389             /*
3390              * Buffer is idle, set it up so whole buffer is available for
3391              * unread
3392              */
3393             avail = b->bufsiz;
3394             b->end = b->buf + avail;
3395             b->ptr = b->end;
3396             PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3397             /*
3398              * Buffer extends _back_ from where we are now
3399              */
3400             b->posn -= b->bufsiz;
3401         }
3402         if (avail > (SSize_t) count) {
3403             /*
3404              * If we have space for more than count, just move count
3405              */
3406             avail = count;
3407         }
3408         if (avail > 0) {
3409             b->ptr -= avail;
3410             buf -= avail;
3411             /*
3412              * In simple stdio-like ungetc() case chars will be already
3413              * there
3414              */
3415             if (buf != b->ptr) {
3416                 Copy(buf, b->ptr, avail, STDCHAR);
3417             }
3418             count -= avail;
3419             unread += avail;
3420             PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3421         }
3422     }
3423     if (count > 0) {
3424         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
3425     }
3426     return unread;
3427 }
3428
3429 SSize_t
3430 PerlIOBuf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3431 {
3432     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3433     const STDCHAR *buf = (const STDCHAR *) vbuf;
3434     Size_t written = 0;
3435     if (!b->buf)
3436         PerlIO_get_base(f);
3437     if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
3438         return 0;
3439     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3440         if (PerlIO_flush(f) != 0) {
3441             return 0;
3442         }
3443     }
3444     while (count > 0) {
3445         SSize_t avail = b->bufsiz - (b->ptr - b->buf);
3446         if ((SSize_t) count < avail)
3447             avail = count;
3448         PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
3449         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
3450             while (avail > 0) {
3451                 int ch = *buf++;
3452                 *(b->ptr)++ = ch;
3453                 count--;
3454                 avail--;
3455                 written++;
3456                 if (ch == '\n') {
3457                     PerlIO_flush(f);
3458                     break;
3459                 }
3460             }
3461         }
3462         else {
3463             if (avail) {
3464                 Copy(buf, b->ptr, avail, STDCHAR);
3465                 count -= avail;
3466                 buf += avail;
3467                 written += avail;
3468                 b->ptr += avail;
3469             }
3470         }
3471         if (b->ptr >= (b->buf + b->bufsiz))
3472             PerlIO_flush(f);
3473     }
3474     if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
3475         PerlIO_flush(f);
3476     return written;
3477 }
3478
3479 IV
3480 PerlIOBuf_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3481 {
3482     IV code;
3483     if ((code = PerlIO_flush(f)) == 0) {
3484         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3485         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3486         code = PerlIO_seek(PerlIONext(f), offset, whence);
3487         if (code == 0) {
3488             b->posn = PerlIO_tell(PerlIONext(f));
3489         }
3490     }
3491     return code;
3492 }
3493
3494 Off_t
3495 PerlIOBuf_tell(pTHX_ PerlIO *f)
3496 {
3497     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3498     /*
3499      * b->posn is file position where b->buf was read, or will be written
3500      */
3501     Off_t posn = b->posn;
3502     if ((PerlIOBase(f)->flags & PERLIO_F_APPEND) &&
3503         (PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
3504 #if 1
3505         /* As O_APPEND files are normally shared in some sense it is better
3506            to flush :
3507          */
3508         PerlIO_flush(f);
3509 #else
3510         /* when file is NOT shared then this is sufficient */
3511         PerlIO_seek(PerlIONext(f),0, SEEK_END);
3512 #endif
3513         posn = b->posn = PerlIO_tell(PerlIONext(f));
3514     }
3515     if (b->buf) {
3516         /*
3517          * If buffer is valid adjust position by amount in buffer
3518          */
3519         posn += (b->ptr - b->buf);
3520     }
3521     return posn;
3522 }
3523
3524 IV
3525 PerlIOBuf_popped(pTHX_ PerlIO *f)
3526 {
3527     IV code = PerlIOBase_popped(aTHX_ f);
3528     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3529     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3530         Safefree(b->buf);
3531     }
3532     b->buf = NULL;
3533     b->ptr = b->end = b->buf;
3534     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3535     return code;
3536 }
3537
3538 IV
3539 PerlIOBuf_close(pTHX_ PerlIO *f)
3540 {
3541     IV code = PerlIOBase_close(aTHX_ f);
3542     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3543     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3544         Safefree(b->buf);
3545     }
3546     b->buf = NULL;
3547     b->ptr = b->end = b->buf;
3548     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3549     return code;
3550 }
3551
3552 STDCHAR *
3553 PerlIOBuf_get_ptr(pTHX_ PerlIO *f)
3554 {
3555     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3556     if (!b->buf)
3557         PerlIO_get_base(f);
3558     return b->ptr;
3559 }
3560
3561 SSize_t
3562 PerlIOBuf_get_cnt(pTHX_ PerlIO *f)
3563 {
3564     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3565     if (!b->buf)
3566         PerlIO_get_base(f);
3567     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF)
3568         return (b->end - b->ptr);
3569     return 0;
3570 }
3571
3572 STDCHAR *
3573 PerlIOBuf_get_base(pTHX_ PerlIO *f)
3574 {
3575     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3576     if (!b->buf) {
3577         if (!b->bufsiz)
3578             b->bufsiz = 4096;
3579         b->buf =
3580         Newz('B',b->buf,b->bufsiz, STDCHAR);
3581         if (!b->buf) {
3582             b->buf = (STDCHAR *) & b->oneword;
3583             b->bufsiz = sizeof(b->oneword);
3584         }
3585         b->ptr = b->buf;
3586         b->end = b->ptr;
3587     }
3588     return b->buf;
3589 }
3590
3591 Size_t
3592 PerlIOBuf_bufsiz(pTHX_ PerlIO *f)
3593 {
3594     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3595     if (!b->buf)
3596         PerlIO_get_base(f);
3597     return (b->end - b->buf);
3598 }
3599
3600 void
3601 PerlIOBuf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3602 {
3603     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3604     if (!b->buf)
3605         PerlIO_get_base(f);
3606     b->ptr = ptr;
3607     if (PerlIO_get_cnt(f) != cnt || b->ptr < b->buf) {
3608         assert(PerlIO_get_cnt(f) == cnt);
3609         assert(b->ptr >= b->buf);
3610     }
3611     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3612 }
3613
3614 PerlIO *
3615 PerlIOBuf_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
3616 {
3617  return PerlIOBase_dup(aTHX_ f, o, param, flags);
3618 }
3619
3620
3621
3622 PerlIO_funcs PerlIO_perlio = {
3623     sizeof(PerlIO_funcs),
3624     "perlio",
3625     sizeof(PerlIOBuf),
3626     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3627     PerlIOBuf_pushed,
3628     PerlIOBuf_popped,
3629     PerlIOBuf_open,
3630     PerlIOBase_binmode,         /* binmode */
3631     NULL,
3632     PerlIOBase_fileno,
3633     PerlIOBuf_dup,
3634     PerlIOBuf_read,
3635     PerlIOBuf_unread,
3636     PerlIOBuf_write,
3637     PerlIOBuf_seek,
3638     PerlIOBuf_tell,
3639     PerlIOBuf_close,
3640     PerlIOBuf_flush,
3641     PerlIOBuf_fill,
3642     PerlIOBase_eof,
3643     PerlIOBase_error,
3644     PerlIOBase_clearerr,
3645     PerlIOBase_setlinebuf,
3646     PerlIOBuf_get_base,
3647     PerlIOBuf_bufsiz,
3648     PerlIOBuf_get_ptr,
3649     PerlIOBuf_get_cnt,
3650     PerlIOBuf_set_ptrcnt,
3651 };
3652
3653 /*--------------------------------------------------------------------------------------*/
3654 /*
3655  * Temp layer to hold unread chars when cannot do it any other way
3656  */
3657
3658 IV
3659 PerlIOPending_fill(pTHX_ PerlIO *f)
3660 {
3661     /*
3662      * Should never happen
3663      */
3664     PerlIO_flush(f);
3665     return 0;
3666 }
3667
3668 IV
3669 PerlIOPending_close(pTHX_ PerlIO *f)
3670 {
3671     /*
3672      * A tad tricky - flush pops us, then we close new top
3673      */
3674     PerlIO_flush(f);
3675     return PerlIO_close(f);
3676 }
3677
3678 IV
3679 PerlIOPending_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3680 {
3681     /*
3682      * A tad tricky - flush pops us, then we seek new top
3683      */
3684     PerlIO_flush(f);
3685     return PerlIO_seek(f, offset, whence);
3686 }
3687
3688
3689 IV
3690 PerlIOPending_flush(pTHX_ PerlIO *f)
3691 {
3692     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3693     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3694         Safefree(b->buf);
3695         b->buf = NULL;
3696     }
3697     PerlIO_pop(aTHX_ f);
3698     return 0;
3699 }
3700
3701 void
3702 PerlIOPending_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3703 {
3704     if (cnt <= 0) {
3705         PerlIO_flush(f);
3706     }
3707     else {
3708         PerlIOBuf_set_ptrcnt(aTHX_ f, ptr, cnt);
3709     }
3710 }
3711
3712 IV
3713 PerlIOPending_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3714 {
3715     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3716     PerlIOl *l = PerlIOBase(f);
3717     /*
3718      * Our PerlIO_fast_gets must match what we are pushed on, or sv_gets()
3719      * etc. get muddled when it changes mid-string when we auto-pop.
3720      */
3721     l->flags = (l->flags & ~(PERLIO_F_FASTGETS | PERLIO_F_UTF8)) |
3722         (PerlIOBase(PerlIONext(f))->
3723          flags & (PERLIO_F_FASTGETS | PERLIO_F_UTF8));
3724     return code;
3725 }
3726
3727 SSize_t
3728 PerlIOPending_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3729 {
3730     SSize_t avail = PerlIO_get_cnt(f);
3731     SSize_t got = 0;
3732     if ((SSize_t)count < avail)
3733         avail = count;
3734     if (avail > 0)
3735         got = PerlIOBuf_read(aTHX_ f, vbuf, avail);
3736     if (got >= 0 && got < (SSize_t)count) {
3737         SSize_t more =
3738             PerlIO_read(f, ((STDCHAR *) vbuf) + got, count - got);
3739         if (more >= 0 || got == 0)
3740             got += more;
3741     }
3742     return got;
3743 }
3744
3745 PerlIO_funcs PerlIO_pending = {
3746     sizeof(PerlIO_funcs),
3747     "pending",
3748     sizeof(PerlIOBuf),
3749     PERLIO_K_BUFFERED|PERLIO_K_RAW,  /* not sure about RAW here */
3750     PerlIOPending_pushed,
3751     PerlIOBuf_popped,
3752     NULL,
3753     PerlIOBase_binmode,         /* binmode */
3754     NULL,
3755     PerlIOBase_fileno,
3756     PerlIOBuf_dup,
3757     PerlIOPending_read,
3758     PerlIOBuf_unread,
3759     PerlIOBuf_write,
3760     PerlIOPending_seek,
3761     PerlIOBuf_tell,
3762     PerlIOPending_close,
3763     PerlIOPending_flush,
3764     PerlIOPending_fill,
3765     PerlIOBase_eof,
3766     PerlIOBase_error,
3767     PerlIOBase_clearerr,
3768     PerlIOBase_setlinebuf,
3769     PerlIOBuf_get_base,
3770     PerlIOBuf_bufsiz,
3771     PerlIOBuf_get_ptr,
3772     PerlIOBuf_get_cnt,
3773     PerlIOPending_set_ptrcnt,
3774 };
3775
3776
3777
3778 /*--------------------------------------------------------------------------------------*/
3779 /*
3780  * crlf - translation On read translate CR,LF to "\n" we do this by
3781  * overriding ptr/cnt entries to hand back a line at a time and keeping a
3782  * record of which nl we "lied" about. On write translate "\n" to CR,LF
3783  */
3784
3785 typedef struct {
3786     PerlIOBuf base;             /* PerlIOBuf stuff */
3787     STDCHAR *nl;                /* Position of crlf we "lied" about in the
3788                                  * buffer */
3789 } PerlIOCrlf;
3790
3791 IV
3792 PerlIOCrlf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3793 {
3794     IV code;
3795     PerlIOBase(f)->flags |= PERLIO_F_CRLF;
3796     code = PerlIOBuf_pushed(aTHX_ f, mode, arg, tab);
3797 #if 0
3798     PerlIO_debug("PerlIOCrlf_pushed f=%p %s %s fl=%08" UVxf "\n",
3799                  f, PerlIOBase(f)->tab->name, (mode) ? mode : "(Null)",
3800                  PerlIOBase(f)->flags);
3801 #endif
3802     return code;
3803 }
3804
3805
3806 SSize_t
3807 PerlIOCrlf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3808 {
3809     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3810     if (c->nl) {
3811         *(c->nl) = 0xd;
3812         c->nl = NULL;
3813     }
3814     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
3815         return PerlIOBuf_unread(aTHX_ f, vbuf, count);
3816     else {
3817         const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3818         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3819         SSize_t unread = 0;
3820         if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3821             PerlIO_flush(f);
3822         if (!b->buf)
3823             PerlIO_get_base(f);
3824         if (b->buf) {
3825             if (!(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
3826                 b->end = b->ptr = b->buf + b->bufsiz;
3827                 PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3828                 b->posn -= b->bufsiz;
3829             }
3830             while (count > 0 && b->ptr > b->buf) {
3831                 int ch = *--buf;
3832                 if (ch == '\n') {
3833                     if (b->ptr - 2 >= b->buf) {
3834                         *--(b->ptr) = 0xa;
3835                         *--(b->ptr) = 0xd;
3836                         unread++;
3837                         count--;
3838                     }
3839                     else {
3840                         buf++;
3841                         break;
3842                     }
3843                 }
3844                 else {
3845                     *--(b->ptr) = ch;
3846                     unread++;
3847                     count--;
3848                 }
3849             }
3850         }
3851         return unread;
3852     }
3853 }
3854
3855 SSize_t
3856 PerlIOCrlf_get_cnt(pTHX_ PerlIO *f)
3857 {
3858     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3859     if (!b->buf)
3860         PerlIO_get_base(f);
3861     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3862         PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3863         if ((PerlIOBase(f)->flags & PERLIO_F_CRLF) && (!c->nl || *c->nl == 0xd)) {
3864             STDCHAR *nl = (c->nl) ? c->nl : b->ptr;
3865           scan:
3866             while (nl < b->end && *nl != 0xd)
3867                 nl++;
3868             if (nl < b->end && *nl == 0xd) {
3869               test:
3870                 if (nl + 1 < b->end) {
3871                     if (nl[1] == 0xa) {
3872                         *nl = '\n';
3873                         c->nl = nl;
3874                     }
3875                     else {
3876                         /*
3877                          * Not CR,LF but just CR
3878                          */
3879                         nl++;
3880                         goto scan;
3881                     }
3882                 }
3883                 else {
3884                     /*
3885                      * Blast - found CR as last char in buffer
3886                      */
3887
3888                     if (b->ptr < nl) {
3889                         /*
3890                          * They may not care, defer work as long as
3891                          * possible
3892                          */
3893                         c->nl = nl;
3894                         return (nl - b->ptr);
3895                     }
3896                     else {
3897                         int code;
3898                         b->ptr++;       /* say we have read it as far as
3899                                          * flush() is concerned */
3900                         b->buf++;       /* Leave space in front of buffer */
3901                         /* Note as we have moved buf up flush's
3902                            posn += ptr-buf
3903                            will naturally make posn point at CR
3904                          */
3905                         b->bufsiz--;    /* Buffer is thus smaller */
3906                         code = PerlIO_fill(f);  /* Fetch some more */
3907                         b->bufsiz++;    /* Restore size for next time */
3908                         b->buf--;       /* Point at space */
3909                         b->ptr = nl = b->buf;   /* Which is what we hand
3910                                                  * off */
3911                         *nl = 0xd;      /* Fill in the CR */
3912                         if (code == 0)
3913                             goto test;  /* fill() call worked */
3914                         /*
3915                          * CR at EOF - just fall through
3916                          */
3917                         /* Should we clear EOF though ??? */
3918                     }
3919                 }
3920             }
3921         }
3922         return (((c->nl) ? (c->nl + 1) : b->end) - b->ptr);
3923     }
3924     return 0;
3925 }
3926
3927 void
3928 PerlIOCrlf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3929 {
3930     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3931     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3932     if (!b->buf)
3933         PerlIO_get_base(f);
3934     if (!ptr) {
3935         if (c->nl) {
3936             ptr = c->nl + 1;
3937             if (ptr == b->end && *c->nl == 0xd) {
3938                 /* Defered CR at end of buffer case - we lied about count */
3939                 ptr--;
3940             }
3941         }
3942         else {
3943             ptr = b->end;
3944         }
3945         ptr -= cnt;
3946     }
3947     else {
3948 #if 0
3949         /*
3950          * Test code - delete when it works ...
3951          */
3952         IV flags = PerlIOBase(f)->flags;
3953         STDCHAR *chk = (c->nl) ? (c->nl+1) : b->end;
3954         if (ptr+cnt == c->nl && c->nl+1 == b->end && *c->nl == 0xd) {
3955           /* Defered CR at end of buffer case - we lied about count */
3956           chk--;
3957         }
3958         chk -= cnt;
3959
3960         if (ptr != chk ) {
3961             Perl_croak(aTHX_ "ptr wrong %p != %p fl=%08" UVxf
3962                        " nl=%p e=%p for %d", ptr, chk, flags, c->nl,
3963                        b->end, cnt);
3964         }
3965 #endif
3966     }
3967     if (c->nl) {
3968         if (ptr > c->nl) {
3969             /*
3970              * They have taken what we lied about
3971              */
3972             *(c->nl) = 0xd;
3973             c->nl = NULL;
3974             ptr++;
3975         }
3976     }
3977     b->ptr = ptr;
3978     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3979 }
3980
3981 SSize_t
3982 PerlIOCrlf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3983 {
3984     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
3985         return PerlIOBuf_write(aTHX_ f, vbuf, count);
3986     else {
3987         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3988         const STDCHAR *buf = (const STDCHAR *) vbuf;
3989         const STDCHAR *ebuf = buf + count;
3990         if (!b->buf)
3991             PerlIO_get_base(f);
3992         if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
3993             return 0;
3994         while (buf < ebuf) {
3995             STDCHAR *eptr = b->buf + b->bufsiz;
3996             PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
3997             while (buf < ebuf && b->ptr < eptr) {
3998                 if (*buf == '\n') {
3999                     if ((b->ptr + 2) > eptr) {
4000                         /*
4001                          * Not room for both
4002                          */
4003                         PerlIO_flush(f);
4004                         break;
4005                     }
4006                     else {
4007                         *(b->ptr)++ = 0xd;      /* CR */
4008                         *(b->ptr)++ = 0xa;      /* LF */
4009                         buf++;
4010                         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
4011                             PerlIO_flush(f);
4012                             break;
4013                         }
4014                     }
4015                 }
4016                 else {
4017                     int ch = *buf++;
4018                     *(b->ptr)++ = ch;
4019                 }
4020                 if (b->ptr >= eptr) {
4021                     PerlIO_flush(f);
4022                     break;
4023                 }
4024             }
4025         }
4026         if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
4027             PerlIO_flush(f);
4028         return (buf - (STDCHAR *) vbuf);
4029     }
4030 }
4031
4032 IV
4033 PerlIOCrlf_flush(pTHX_ PerlIO *f)
4034 {
4035     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
4036     if (c->nl) {
4037         *(c->nl) = 0xd;
4038         c->nl = NULL;
4039     }
4040     return PerlIOBuf_flush(aTHX_ f);
4041 }
4042
4043 IV
4044 PerlIOCrlf_binmode(pTHX_ PerlIO *f)
4045 {
4046     if ((PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
4047         /* In text mode - flush any pending stuff and flip it */
4048         PerlIOBase(f)->flags &= ~PERLIO_F_CRLF;
4049 #ifndef PERLIO_USING_CRLF
4050         /* CRLF is unusual case - if this is just the :crlf layer pop it */
4051         if (PerlIOBase(f)->tab == &PerlIO_crlf) {
4052                 PerlIO_pop(aTHX_ f);
4053         }
4054 #endif
4055     }
4056     return 0;
4057 }
4058
4059 PerlIO_funcs PerlIO_crlf = {
4060     sizeof(PerlIO_funcs),
4061     "crlf",
4062     sizeof(PerlIOCrlf),
4063     PERLIO_K_BUFFERED | PERLIO_K_CANCRLF | PERLIO_K_RAW,
4064     PerlIOCrlf_pushed,
4065     PerlIOBuf_popped,         /* popped */
4066     PerlIOBuf_open,
4067     PerlIOCrlf_binmode,       /* binmode */
4068     NULL,
4069     PerlIOBase_fileno,
4070     PerlIOBuf_dup,
4071     PerlIOBuf_read,             /* generic read works with ptr/cnt lies
4072                                  * ... */
4073     PerlIOCrlf_unread,          /* Put CR,LF in buffer for each '\n' */
4074     PerlIOCrlf_write,           /* Put CR,LF in buffer for each '\n' */
4075     PerlIOBuf_seek,
4076     PerlIOBuf_tell,
4077     PerlIOBuf_close,
4078     PerlIOCrlf_flush,
4079     PerlIOBuf_fill,
4080     PerlIOBase_eof,
4081     PerlIOBase_error,
4082     PerlIOBase_clearerr,
4083     PerlIOBase_setlinebuf,
4084     PerlIOBuf_get_base,
4085     PerlIOBuf_bufsiz,
4086     PerlIOBuf_get_ptr,
4087     PerlIOCrlf_get_cnt,
4088     PerlIOCrlf_set_ptrcnt,
4089 };
4090
4091 #ifdef HAS_MMAP
4092 /*--------------------------------------------------------------------------------------*/
4093 /*
4094  * mmap as "buffer" layer
4095  */
4096
4097 typedef struct {
4098     PerlIOBuf base;             /* PerlIOBuf stuff */
4099     Mmap_t mptr;                /* Mapped address */
4100     Size_t len;                 /* mapped length */
4101     STDCHAR *bbuf;              /* malloced buffer if map fails */
4102 } PerlIOMmap;
4103
4104 static size_t page_size = 0;
4105
4106 IV
4107 PerlIOMmap_map(pTHX_ PerlIO *f)
4108 {
4109     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4110     IV flags = PerlIOBase(f)->flags;
4111     IV code = 0;
4112     if (m->len)
4113         abort();
4114     if (flags & PERLIO_F_CANREAD) {
4115         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4116         int fd = PerlIO_fileno(f);
4117         Stat_t st;
4118         code = Fstat(fd, &st);
4119         if (code == 0 && S_ISREG(st.st_mode)) {
4120             SSize_t len = st.st_size - b->posn;
4121             if (len > 0) {
4122                 Off_t posn;
4123                 if (!page_size) {
4124 #if defined(HAS_SYSCONF) && (defined(_SC_PAGESIZE) || defined(_SC_PAGE_SIZE))
4125                     {
4126                         SETERRNO(0, SS_NORMAL);
4127 #   ifdef _SC_PAGESIZE
4128                         page_size = sysconf(_SC_PAGESIZE);
4129 #   else
4130                         page_size = sysconf(_SC_PAGE_SIZE);
4131 #   endif
4132                         if ((long) page_size < 0) {
4133                             if (errno) {
4134                                 SV *error = ERRSV;
4135                                 char *msg;
4136                                 STRLEN n_a;
4137                                 (void) SvUPGRADE(error, SVt_PV);
4138                                 msg = SvPVx(error, n_a);
4139                                 Perl_croak(aTHX_ "panic: sysconf: %s",
4140                                            msg);
4141                             }
4142                             else
4143                                 Perl_croak(aTHX_
4144                                            "panic: sysconf: pagesize unknown");
4145                         }
4146                     }
4147 #else
4148 #   ifdef HAS_GETPAGESIZE
4149                     page_size = getpagesize();
4150 #   else
4151 #       if defined(I_SYS_PARAM) && defined(PAGESIZE)
4152                     page_size = PAGESIZE;       /* compiletime, bad */
4153 #       endif
4154 #   endif
4155 #endif
4156                     if ((IV) page_size <= 0)
4157                         Perl_croak(aTHX_ "panic: bad pagesize %" IVdf,
4158                                    (IV) page_size);
4159                 }
4160                 if (b->posn < 0) {
4161                     /*
4162                      * This is a hack - should never happen - open should
4163                      * have set it !
4164                      */
4165                     b->posn = PerlIO_tell(PerlIONext(f));
4166                 }
4167                 posn = (b->posn / page_size) * page_size;
4168                 len = st.st_size - posn;
4169                 m->mptr = mmap(NULL, len, PROT_READ, MAP_SHARED, fd, posn);
4170                 if (m->mptr && m->mptr != (Mmap_t) - 1) {
4171 #if 0 && defined(HAS_MADVISE) && defined(MADV_SEQUENTIAL)
4172                     madvise(m->mptr, len, MADV_SEQUENTIAL);
4173 #endif
4174 #if 0 && defined(HAS_MADVISE) && defined(MADV_WILLNEED)
4175                     madvise(m->mptr, len, MADV_WILLNEED);
4176 #endif
4177                     PerlIOBase(f)->flags =
4178                         (flags & ~PERLIO_F_EOF) | PERLIO_F_RDBUF;
4179                     b->end = ((STDCHAR *) m->mptr) + len;
4180                     b->buf = ((STDCHAR *) m->mptr) + (b->posn - posn);
4181                     b->ptr = b->buf;
4182                     m->len = len;
4183                 }
4184                 else {
4185                     b->buf = NULL;
4186                 }
4187             }
4188             else {
4189                 PerlIOBase(f)->flags =
4190                     flags | PERLIO_F_EOF | PERLIO_F_RDBUF;
4191                 b->buf = NULL;
4192                 b->ptr = b->end = b->ptr;
4193                 code = -1;
4194             }
4195         }
4196     }
4197     return code;
4198 }
4199
4200 IV
4201 PerlIOMmap_unmap(pTHX_ PerlIO *f)
4202 {
4203     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4204     PerlIOBuf *b = &m->base;
4205     IV code = 0;
4206     if (m->len) {
4207         if (b->buf) {
4208             code = munmap(m->mptr, m->len);
4209             b->buf = NULL;
4210             m->len = 0;
4211             m->mptr = NULL;
4212             if (PerlIO_seek(PerlIONext(f), b->posn, SEEK_SET) != 0)
4213                 code = -1;
4214         }
4215         b->ptr = b->end = b->buf;
4216         PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
4217     }
4218     return code;
4219 }
4220
4221 STDCHAR *
4222 PerlIOMmap_get_base(pTHX_ PerlIO *f)
4223 {
4224     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4225     PerlIOBuf *b = &m->base;
4226     if (b->buf && (PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4227         /*
4228          * Already have a readbuffer in progress
4229          */
4230         return b->buf;
4231     }
4232     if (b->buf) {
4233         /*
4234          * We have a write buffer or flushed PerlIOBuf read buffer
4235          */
4236         m->bbuf = b->buf;       /* save it in case we need it again */
4237         b->buf = NULL;          /* Clear to trigger below */
4238     }
4239     if (!b->buf) {
4240         PerlIOMmap_map(aTHX_ f);        /* Try and map it */
4241         if (!b->buf) {
4242             /*
4243              * Map did not work - recover PerlIOBuf buffer if we have one
4244              */
4245             b->buf = m->bbuf;
4246         }
4247     }
4248     b->ptr = b->end = b->buf;
4249     if (b->buf)
4250         return b->buf;
4251     return PerlIOBuf_get_base(aTHX_ f);
4252 }
4253
4254 SSize_t
4255 PerlIOMmap_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4256 {
4257     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4258     PerlIOBuf *b = &m->base;
4259     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
4260         PerlIO_flush(f);
4261     if (b->ptr && (b->ptr - count) >= b->buf
4262         && memEQ(b->ptr - count, vbuf, count)) {
4263         b->ptr -= count;
4264         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
4265         return count;
4266     }
4267     if (m->len) {
4268         /*
4269          * Loose the unwritable mapped buffer
4270          */
4271         PerlIO_flush(f);
4272         /*
4273          * If flush took the "buffer" see if we have one from before
4274          */
4275         if (!b->buf && m->bbuf)
4276             b->buf = m->bbuf;
4277         if (!b->buf) {
4278             PerlIOBuf_get_base(aTHX_ f);
4279             m->bbuf = b->buf;
4280         }
4281     }
4282     return PerlIOBuf_unread(aTHX_ f, vbuf, count);
4283 }
4284
4285 SSize_t
4286 PerlIOMmap_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4287 {
4288     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4289     PerlIOBuf *b = &m->base;
4290     if (!b->buf || !(PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
4291         /*
4292          * No, or wrong sort of, buffer
4293          */
4294         if (m->len) {
4295             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4296                 return 0;
4297         }
4298         /*
4299          * If unmap took the "buffer" see if we have one from before
4300          */
4301         if (!b->buf && m->bbuf)
4302             b->buf = m->bbuf;
4303         if (!b->buf) {
4304             PerlIOBuf_get_base(aTHX_ f);
4305             m->bbuf = b->buf;
4306         }
4307     }
4308     return PerlIOBuf_write(aTHX_ f, vbuf, count);
4309 }
4310
4311 IV
4312 PerlIOMmap_flush(pTHX_ PerlIO *f)
4313 {
4314     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4315     PerlIOBuf *b = &m->base;
4316     IV code = PerlIOBuf_flush(aTHX_ f);
4317     /*
4318      * Now we are "synced" at PerlIOBuf level
4319      */
4320     if (b->buf) {
4321         if (m->len) {
4322             /*
4323              * Unmap the buffer
4324              */
4325             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4326                 code = -1;
4327         }
4328         else {
4329             /*
4330              * We seem to have a PerlIOBuf buffer which was not mapped
4331              * remember it in case we need one later
4332              */
4333             m->bbuf = b->buf;
4334         }
4335     }
4336     return code;
4337 }
4338
4339 IV
4340 PerlIOMmap_fill(pTHX_ PerlIO *f)
4341 {
4342     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4343     IV code = PerlIO_flush(f);
4344     if (code == 0 && !b->buf) {
4345         code = PerlIOMmap_map(aTHX_ f);
4346     }
4347     if (code == 0 && !(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4348         code = PerlIOBuf_fill(aTHX_ f);
4349     }
4350     return code;
4351 }
4352
4353 IV
4354 PerlIOMmap_close(pTHX_ PerlIO *f)
4355 {
4356     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4357     PerlIOBuf *b = &m->base;
4358     IV code = PerlIO_flush(f);
4359     if (m->bbuf) {
4360         b->buf = m->bbuf;
4361         m->bbuf = NULL;
4362         b->ptr = b->end = b->buf;
4363     }
4364     if (PerlIOBuf_close(aTHX_ f) != 0)
4365         code = -1;
4366     return code;
4367 }
4368
4369 PerlIO *
4370 PerlIOMmap_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
4371 {
4372  return PerlIOBase_dup(aTHX_ f, o, param, flags);
4373 }
4374
4375
4376 PerlIO_funcs PerlIO_mmap = {
4377     sizeof(PerlIO_funcs),
4378     "mmap",
4379     sizeof(PerlIOMmap),
4380     PERLIO_K_BUFFERED|PERLIO_K_RAW,
4381     PerlIOBuf_pushed,
4382     PerlIOBuf_popped,
4383     PerlIOBuf_open,
4384     PerlIOBase_binmode,         /* binmode */
4385     NULL,
4386     PerlIOBase_fileno,
4387     PerlIOMmap_dup,
4388     PerlIOBuf_read,
4389     PerlIOMmap_unread,
4390     PerlIOMmap_write,
4391     PerlIOBuf_seek,
4392     PerlIOBuf_tell,
4393     PerlIOBuf_close,
4394     PerlIOMmap_flush,
4395     PerlIOMmap_fill,
4396     PerlIOBase_eof,
4397     PerlIOBase_error,
4398     PerlIOBase_clearerr,
4399     PerlIOBase_setlinebuf,
4400     PerlIOMmap_get_base,
4401     PerlIOBuf_bufsiz,
4402     PerlIOBuf_get_ptr,
4403     PerlIOBuf_get_cnt,
4404     PerlIOBuf_set_ptrcnt,
4405 };
4406
4407 #endif                          /* HAS_MMAP */
4408
4409 PerlIO *
4410 Perl_PerlIO_stdin(pTHX)
4411 {
4412     if (!PL_perlio) {
4413         PerlIO_stdstreams(aTHX);
4414     }
4415     return &PL_perlio[1];
4416 }
4417
4418 PerlIO *
4419 Perl_PerlIO_stdout(pTHX)
4420 {
4421     if (!PL_perlio) {
4422         PerlIO_stdstreams(aTHX);
4423     }
4424     return &PL_perlio[2];
4425 }
4426
4427 PerlIO *
4428 Perl_PerlIO_stderr(pTHX)
4429 {
4430     if (!PL_perlio) {
4431         PerlIO_stdstreams(aTHX);
4432     }
4433     return &PL_perlio[3];
4434 }
4435
4436 /*--------------------------------------------------------------------------------------*/
4437
4438 char *
4439 PerlIO_getname(PerlIO *f, char *buf)
4440 {
4441     dTHX;
4442     char *name = NULL;
4443 #ifdef VMS
4444     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
4445     if (stdio)
4446         name = fgetname(stdio, buf);
4447 #else
4448     Perl_croak(aTHX_ "Don't know how to get file name");
4449 #endif
4450     return name;
4451 }
4452
4453
4454 /*--------------------------------------------------------------------------------------*/
4455 /*
4456  * Functions which can be called on any kind of PerlIO implemented in
4457  * terms of above
4458  */
4459
4460 #undef PerlIO_fdopen
4461 PerlIO *
4462 PerlIO_fdopen(int fd, const char *mode)
4463 {
4464     dTHX;
4465     return PerlIO_openn(aTHX_ Nullch, mode, fd, 0, 0, NULL, 0, NULL);
4466 }
4467
4468 #undef PerlIO_open
4469 PerlIO *
4470 PerlIO_open(const char *path, const char *mode)
4471 {
4472     dTHX;
4473     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4474     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, NULL, 1, &name);
4475 }
4476
4477 #undef Perlio_reopen
4478 PerlIO *
4479 PerlIO_reopen(const char *path, const char *mode, PerlIO *f)
4480 {
4481     dTHX;
4482     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4483     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, f, 1, &name);
4484 }
4485
4486 #undef PerlIO_getc
4487 int
4488 PerlIO_getc(PerlIO *f)
4489 {
4490     dTHX;
4491     STDCHAR buf[1];
4492     SSize_t count = PerlIO_read(f, buf, 1);
4493     if (count == 1) {
4494         return (unsigned char) buf[0];
4495     }
4496     return EOF;
4497 }
4498
4499 #undef PerlIO_ungetc
4500 int
4501 PerlIO_ungetc(PerlIO *f, int ch)
4502 {
4503     dTHX;
4504     if (ch != EOF) {
4505         STDCHAR buf = ch;
4506         if (PerlIO_unread(f, &buf, 1) == 1)
4507             return ch;
4508     }
4509     return EOF;
4510 }
4511
4512 #undef PerlIO_putc
4513 int
4514 PerlIO_putc(PerlIO *f, int ch)
4515 {
4516     dTHX;
4517     STDCHAR buf = ch;
4518     return PerlIO_write(f, &buf, 1);
4519 }
4520
4521 #undef PerlIO_puts
4522 int
4523 PerlIO_puts(PerlIO *f, const char *s)
4524 {
4525     dTHX;
4526     STRLEN len = strlen(s);
4527     return PerlIO_write(f, s, len);
4528 }
4529
4530 #undef PerlIO_rewind
4531 void
4532 PerlIO_rewind(PerlIO *f)
4533 {
4534     dTHX;
4535     PerlIO_seek(f, (Off_t) 0, SEEK_SET);
4536     PerlIO_clearerr(f);
4537 }
4538
4539 #undef PerlIO_vprintf
4540 int
4541 PerlIO_vprintf(PerlIO *f, const char *fmt, va_list ap)
4542 {
4543     dTHX;
4544     SV *sv = newSVpvn("", 0);
4545     char *s;
4546     STRLEN len;
4547     SSize_t wrote;
4548 #ifdef NEED_VA_COPY
4549     va_list apc;
4550     Perl_va_copy(ap, apc);
4551     sv_vcatpvf(sv, fmt, &apc);
4552 #else
4553     sv_vcatpvf(sv, fmt, &ap);
4554 #endif
4555     s = SvPV(sv, len);
4556     wrote = PerlIO_write(f, s, len);
4557     SvREFCNT_dec(sv);
4558     return wrote;
4559 }
4560
4561 #undef PerlIO_printf
4562 int
4563 PerlIO_printf(PerlIO *f, const char *fmt, ...)
4564 {
4565     va_list ap;
4566     int result;
4567     va_start(ap, fmt);
4568     result = PerlIO_vprintf(f, fmt, ap);
4569     va_end(ap);
4570     return result;
4571 }
4572
4573 #undef PerlIO_stdoutf
4574 int
4575 PerlIO_stdoutf(const char *fmt, ...)
4576 {
4577     dTHX;
4578     va_list ap;
4579     int result;
4580     va_start(ap, fmt);
4581     result = PerlIO_vprintf(PerlIO_stdout(), fmt, ap);
4582     va_end(ap);
4583     return result;
4584 }
4585
4586 #undef PerlIO_tmpfile
4587 PerlIO *
4588 PerlIO_tmpfile(void)
4589 {
4590     /*
4591      * I have no idea how portable mkstemp() is ...
4592      */
4593 #if defined(WIN32) || !defined(HAVE_MKSTEMP)
4594     dTHX;
4595     PerlIO *f = NULL;
4596     FILE *stdio = PerlSIO_tmpfile();
4597     if (stdio) {
4598         if ((f = PerlIO_push(aTHX_(PerlIO_allocate(aTHX)), &PerlIO_stdio, "w+", Nullsv))) {
4599             PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
4600             s->stdio = stdio;
4601         }
4602     }
4603     return f;
4604 #else
4605     dTHX;
4606     SV *sv = newSVpv("/tmp/PerlIO_XXXXXX", 0);
4607     int fd = mkstemp(SvPVX(sv));
4608     PerlIO *f = NULL;
4609     if (fd >= 0) {
4610         f = PerlIO_fdopen(fd, "w+");
4611         if (f) {
4612             PerlIOBase(f)->flags |= PERLIO_F_TEMP;
4613         }
4614         PerlLIO_unlink(SvPVX(sv));
4615         SvREFCNT_dec(sv);
4616     }
4617     return f;
4618 #endif
4619 }
4620
4621 #undef HAS_FSETPOS
4622 #undef HAS_FGETPOS
4623
4624 #endif                          /* USE_SFIO */
4625 #endif                          /* PERLIO_IS_STDIO */
4626
4627 /*======================================================================================*/
4628 /*
4629  * Now some functions in terms of above which may be needed even if we are
4630  * not in true PerlIO mode
4631  */
4632
4633 #ifndef HAS_FSETPOS
4634 #undef PerlIO_setpos
4635 int
4636 PerlIO_setpos(PerlIO *f, SV *pos)
4637 {
4638     dTHX;
4639     if (SvOK(pos)) {
4640         STRLEN len;
4641         Off_t *posn = (Off_t *) SvPV(pos, len);
4642         if (f && len == sizeof(Off_t))
4643             return PerlIO_seek(f, *posn, SEEK_SET);
4644     }
4645     SETERRNO(EINVAL, SS_IVCHAN);
4646     return -1;
4647 }
4648 #else
4649 #undef PerlIO_setpos
4650 int
4651 PerlIO_setpos(PerlIO *f, SV *pos)
4652 {
4653     dTHX;
4654     if (SvOK(pos)) {
4655         STRLEN len;
4656         Fpos_t *fpos = (Fpos_t *) SvPV(pos, len);
4657         if (f && len == sizeof(Fpos_t)) {
4658 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4659             return fsetpos64(f, fpos);
4660 #else
4661             return fsetpos(f, fpos);
4662 #endif
4663         }
4664     }
4665     SETERRNO(EINVAL, SS_IVCHAN);
4666     return -1;
4667 }
4668 #endif
4669
4670 #ifndef HAS_FGETPOS
4671 #undef PerlIO_getpos
4672 int
4673 PerlIO_getpos(PerlIO *f, SV *pos)
4674 {
4675     dTHX;
4676     Off_t posn = PerlIO_tell(f);
4677     sv_setpvn(pos, (char *) &posn, sizeof(posn));
4678     return (posn == (Off_t) - 1) ? -1 : 0;
4679 }
4680 #else
4681 #undef PerlIO_getpos
4682 int
4683 PerlIO_getpos(PerlIO *f, SV *pos)
4684 {
4685     dTHX;
4686     Fpos_t fpos;
4687     int code;
4688 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4689     code = fgetpos64(f, &fpos);
4690 #else
4691     code = fgetpos(f, &fpos);
4692 #endif
4693     sv_setpvn(pos, (char *) &fpos, sizeof(fpos));
4694     return code;
4695 }
4696 #endif
4697
4698 #if (defined(PERLIO_IS_STDIO) || !defined(USE_SFIO)) && !defined(HAS_VPRINTF)
4699
4700 int
4701 vprintf(char *pat, char *args)
4702 {
4703     _doprnt(pat, args, stdout);
4704     return 0;                   /* wrong, but perl doesn't use the return
4705                                  * value */
4706 }
4707
4708 int
4709 vfprintf(FILE *fd, char *pat, char *args)
4710 {
4711     _doprnt(pat, args, fd);
4712     return 0;                   /* wrong, but perl doesn't use the return
4713                                  * value */
4714 }
4715
4716 #endif
4717
4718 #ifndef PerlIO_vsprintf
4719 int
4720 PerlIO_vsprintf(char *s, int n, const char *fmt, va_list ap)
4721 {
4722     int val = vsprintf(s, fmt, ap);
4723     if (n >= 0) {
4724         if (strlen(s) >= (STRLEN) n) {
4725             dTHX;
4726             (void) PerlIO_puts(Perl_error_log,
4727                                "panic: sprintf overflow - memory corrupted!\n");
4728             my_exit(1);
4729         }
4730     }
4731     return val;
4732 }
4733 #endif
4734
4735 #ifndef PerlIO_sprintf
4736 int
4737 PerlIO_sprintf(char *s, int n, const char *fmt, ...)
4738 {
4739     va_list ap;
4740     int result;
4741     va_start(ap, fmt);
4742     result = PerlIO_vsprintf(s, n, fmt, ap);
4743     va_end(ap);
4744     return result;
4745 }
4746 #endif
4747
4748
4749
4750
4751
4752
4753
4754