Integrate mainline
[p5sagit/p5-mst-13.2.git] / perlio.c
1 /*
2  * perlio.c Copyright (c) 1996-2002, Nick Ing-Simmons You may distribute
3  * under the terms of either the GNU General Public License or the
4  * Artistic License, as specified in the README file.
5  */
6
7 /*
8  * Hour after hour for nearly three weary days he had jogged up and down,
9  * over passes, and through long dales, and across many streams.
10  */
11
12 /*
13  * If we have ActivePerl-like PERL_IMPLICIT_SYS then we need a dTHX to get
14  * at the dispatch tables, even when we do not need it for other reasons.
15  * Invent a dSYS macro to abstract this out
16  */
17 #ifdef PERL_IMPLICIT_SYS
18 #define dSYS dTHX
19 #else
20 #define dSYS dNOOP
21 #endif
22
23 #define VOIDUSED 1
24 #ifdef PERL_MICRO
25 #   include "uconfig.h"
26 #else
27 #   include "config.h"
28 #endif
29
30 #define PERLIO_NOT_STDIO 0
31 #if !defined(PERLIO_IS_STDIO) && !defined(USE_SFIO)
32 /*
33  * #define PerlIO FILE
34  */
35 #endif
36 /*
37  * This file provides those parts of PerlIO abstraction
38  * which are not #defined in perlio.h.
39  * Which these are depends on various Configure #ifdef's
40  */
41
42 #include "EXTERN.h"
43 #define PERL_IN_PERLIO_C
44 #include "perl.h"
45
46 #ifdef PERL_IMPLICIT_CONTEXT
47 #undef dSYS
48 #define dSYS dTHX
49 #endif
50
51 #include "XSUB.h"
52
53 int
54 perlsio_binmode(FILE *fp, int iotype, int mode)
55 {
56     /*
57      * This used to be contents of do_binmode in doio.c
58      */
59 #ifdef DOSISH
60 #  if defined(atarist) || defined(__MINT__)
61     if (!fflush(fp)) {
62         if (mode & O_BINARY)
63             ((FILE *) fp)->_flag |= _IOBIN;
64         else
65             ((FILE *) fp)->_flag &= ~_IOBIN;
66         return 1;
67     }
68     return 0;
69 #  else
70     dTHX;
71 #ifdef NETWARE
72     if (PerlLIO_setmode(fp, mode) != -1) {
73 #else
74     if (PerlLIO_setmode(fileno(fp), mode) != -1) {
75 #endif
76 #    if defined(WIN32) && defined(__BORLANDC__)
77         /*
78          * The translation mode of the stream is maintained independent of
79          * the translation mode of the fd in the Borland RTL (heavy
80          * digging through their runtime sources reveal).  User has to set
81          * the mode explicitly for the stream (though they don't document
82          * this anywhere). GSAR 97-5-24
83          */
84         fseek(fp, 0L, 0);
85         if (mode & O_BINARY)
86             fp->flags |= _F_BIN;
87         else
88             fp->flags &= ~_F_BIN;
89 #    endif
90         return 1;
91     }
92     else
93         return 0;
94 #  endif
95 #else
96 #  if defined(USEMYBINMODE)
97     dTHX;
98     if (my_binmode(fp, iotype, mode) != FALSE)
99         return 1;
100     else
101         return 0;
102 #  else
103     return 1;
104 #  endif
105 #endif
106 }
107
108 #ifndef O_ACCMODE
109 #define O_ACCMODE 3             /* Assume traditional implementation */
110 #endif
111
112 int
113 PerlIO_intmode2str(int rawmode, char *mode, int *writing)
114 {
115     int result = rawmode & O_ACCMODE;
116     int ix = 0;
117     int ptype;
118     switch (result) {
119     case O_RDONLY:
120         ptype = IoTYPE_RDONLY;
121         break;
122     case O_WRONLY:
123         ptype = IoTYPE_WRONLY;
124         break;
125     case O_RDWR:
126     default:
127         ptype = IoTYPE_RDWR;
128         break;
129     }
130     if (writing)
131         *writing = (result != O_RDONLY);
132
133     if (result == O_RDONLY) {
134         mode[ix++] = 'r';
135     }
136 #ifdef O_APPEND
137     else if (rawmode & O_APPEND) {
138         mode[ix++] = 'a';
139         if (result != O_WRONLY)
140             mode[ix++] = '+';
141     }
142 #endif
143     else {
144         if (result == O_WRONLY)
145             mode[ix++] = 'w';
146         else {
147             mode[ix++] = 'r';
148             mode[ix++] = '+';
149         }
150     }
151     if (rawmode & O_BINARY)
152         mode[ix++] = 'b';
153     mode[ix] = '\0';
154     return ptype;
155 }
156
157 #ifndef PERLIO_LAYERS
158 int
159 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
160 {
161     if (!names || !*names
162         || strEQ(names, ":crlf")
163         || strEQ(names, ":raw")
164         || strEQ(names, ":bytes")
165        ) {
166         return 0;
167     }
168     Perl_croak(aTHX_ "Cannot apply \"%s\" in non-PerlIO perl", names);
169     /*
170      * NOTREACHED
171      */
172     return -1;
173 }
174
175 void
176 PerlIO_destruct(pTHX)
177 {
178 }
179
180 int
181 PerlIO_binmode(pTHX_ PerlIO *fp, int iotype, int mode, const char *names)
182 {
183 #ifdef USE_SFIO
184     return 1;
185 #else
186     return perlsio_binmode(fp, iotype, mode);
187 #endif
188 }
189
190 PerlIO *
191 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
192 {
193 #ifdef PERL_MICRO
194     return NULL;
195 #else
196 #ifdef PERL_IMPLICIT_SYS
197     return PerlSIO_fdupopen(f);
198 #else
199 #ifdef WIN32
200     return win32_fdupopen(f);
201 #else
202     if (f) {
203         int fd = PerlLIO_dup(PerlIO_fileno(f));
204         if (fd >= 0) {
205             char mode[8];
206             int omode = fcntl(fd, F_GETFL);
207 #ifdef DJGPP
208             omode = djgpp_get_stream_mode(f);
209 #endif
210             PerlIO_intmode2str(omode,mode,NULL);
211             /* the r+ is a hack */
212             return PerlIO_fdopen(fd, mode);
213         }
214         return NULL;
215     }
216     else {
217         SETERRNO(EBADF, SS_IVCHAN);
218     }
219 #endif
220     return NULL;
221 #endif
222 #endif
223 }
224
225
226 /*
227  * De-mux PerlIO_openn() into fdopen, freopen and fopen type entries
228  */
229
230 PerlIO *
231 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
232              int imode, int perm, PerlIO *old, int narg, SV **args)
233 {
234     if (narg) {
235         if (narg > 1) {
236             Perl_croak(aTHX_ "More than one argument to open");
237         }
238         if (*args == &PL_sv_undef)
239             return PerlIO_tmpfile();
240         else {
241             char *name = SvPV_nolen(*args);
242             if (*mode == '#') {
243                 fd = PerlLIO_open3(name, imode, perm);
244                 if (fd >= 0)
245                     return PerlIO_fdopen(fd, (char *) mode + 1);
246             }
247             else if (old) {
248                 return PerlIO_reopen(name, mode, old);
249             }
250             else {
251                 return PerlIO_open(name, mode);
252             }
253         }
254     }
255     else {
256         return PerlIO_fdopen(fd, (char *) mode);
257     }
258     return NULL;
259 }
260
261 XS(XS_PerlIO__Layer__find)
262 {
263     dXSARGS;
264     if (items < 2)
265         Perl_croak(aTHX_ "Usage class->find(name[,load])");
266     else {
267         char *name = SvPV_nolen(ST(1));
268         ST(0) = (strEQ(name, "crlf")
269                  || strEQ(name, "raw")) ? &PL_sv_yes : &PL_sv_undef;
270         XSRETURN(1);
271     }
272 }
273
274
275 void
276 Perl_boot_core_PerlIO(pTHX)
277 {
278     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
279 }
280
281 #endif
282
283
284 #ifdef PERLIO_IS_STDIO
285
286 void
287 PerlIO_init(pTHX)
288 {
289     /*
290      * Does nothing (yet) except force this file to be included in perl
291      * binary. That allows this file to force inclusion of other functions
292      * that may be required by loadable extensions e.g. for
293      * FileHandle::tmpfile
294      */
295 }
296
297 #undef PerlIO_tmpfile
298 PerlIO *
299 PerlIO_tmpfile(void)
300 {
301     return tmpfile();
302 }
303
304 #else                           /* PERLIO_IS_STDIO */
305
306 #ifdef USE_SFIO
307
308 #undef HAS_FSETPOS
309 #undef HAS_FGETPOS
310
311 /*
312  * This section is just to make sure these functions get pulled in from
313  * libsfio.a
314  */
315
316 #undef PerlIO_tmpfile
317 PerlIO *
318 PerlIO_tmpfile(void)
319 {
320     return sftmp(0);
321 }
322
323 void
324 PerlIO_init(pTHX)
325 {
326     /*
327      * Force this file to be included in perl binary. Which allows this
328      * file to force inclusion of other functions that may be required by
329      * loadable extensions e.g. for FileHandle::tmpfile
330      */
331
332     /*
333      * Hack sfio does its own 'autoflush' on stdout in common cases. Flush
334      * results in a lot of lseek()s to regular files and lot of small
335      * writes to pipes.
336      */
337     sfset(sfstdout, SF_SHARE, 0);
338 }
339
340 /* This is not the reverse of PerlIO_exportFILE(), PerlIO_releaseFILE() is. */
341 PerlIO *
342 PerlIO_importFILE(FILE *stdio, const char *mode)
343 {
344     int fd = fileno(stdio);
345     if (!mode || !*mode) {
346         mode = "r+";
347     }
348     return PerlIO_fdopen(fd, mode);
349 }
350
351 FILE *
352 PerlIO_findFILE(PerlIO *pio)
353 {
354     int fd = PerlIO_fileno(pio);
355     FILE *f = fdopen(fd, "r+");
356     PerlIO_flush(pio);
357     if (!f && errno == EINVAL)
358         f = fdopen(fd, "w");
359     if (!f && errno == EINVAL)
360         f = fdopen(fd, "r");
361     return f;
362 }
363
364
365 #else                           /* USE_SFIO */
366 /*======================================================================================*/
367 /*
368  * Implement all the PerlIO interface ourselves.
369  */
370
371 #include "perliol.h"
372
373 /*
374  * We _MUST_ have <unistd.h> if we are using lseek() and may have large
375  * files
376  */
377 #ifdef I_UNISTD
378 #include <unistd.h>
379 #endif
380 #ifdef HAS_MMAP
381 #include <sys/mman.h>
382 #endif
383
384
385 void PerlIO_debug(const char *fmt, ...)
386     __attribute__ ((format(__printf__, 1, 2)));
387
388 void
389 PerlIO_debug(const char *fmt, ...)
390 {
391     static int dbg = 0;
392     va_list ap;
393     dSYS;
394     va_start(ap, fmt);
395     if (!dbg) {
396         char *s = PerlEnv_getenv("PERLIO_DEBUG");
397         if (s && *s)
398             dbg = PerlLIO_open3(s, O_WRONLY | O_CREAT | O_APPEND, 0666);
399         else
400             dbg = -1;
401     }
402     if (dbg > 0) {
403         dTHX;
404 #ifdef USE_ITHREADS
405         /* Use fixed buffer as sv_catpvf etc. needs SVs */
406         char buffer[1024];
407         char *s;
408         STRLEN len;
409         s = CopFILE(PL_curcop);
410         if (!s)
411             s = "(none)";
412         sprintf(buffer, "%s:%" IVdf " ", s, (IV) CopLINE(PL_curcop));
413         len = strlen(buffer);
414         vsprintf(buffer+len, fmt, ap);
415         PerlLIO_write(dbg, buffer, strlen(buffer));
416 #else
417         SV *sv = newSVpvn("", 0);
418         char *s;
419         STRLEN len;
420         s = CopFILE(PL_curcop);
421         if (!s)
422             s = "(none)";
423         Perl_sv_catpvf(aTHX_ sv, "%s:%" IVdf " ", s,
424                        (IV) CopLINE(PL_curcop));
425         Perl_sv_vcatpvf(aTHX_ sv, fmt, &ap);
426
427         s = SvPV(sv, len);
428         PerlLIO_write(dbg, s, len);
429         SvREFCNT_dec(sv);
430 #endif
431     }
432     va_end(ap);
433 }
434
435 /*--------------------------------------------------------------------------------------*/
436
437 /*
438  * Inner level routines
439  */
440
441 /*
442  * Table of pointers to the PerlIO structs (malloc'ed)
443  */
444 #define PERLIO_TABLE_SIZE 64
445
446 PerlIO *
447 PerlIO_allocate(pTHX)
448 {
449     /*
450      * Find a free slot in the table, allocating new table as necessary
451      */
452     PerlIO **last;
453     PerlIO *f;
454     last = &PL_perlio;
455     while ((f = *last)) {
456         int i;
457         last = (PerlIO **) (f);
458         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
459             if (!*++f) {
460                 return f;
461             }
462         }
463     }
464     Newz('I',f,PERLIO_TABLE_SIZE,PerlIO);
465     if (!f) {
466         return NULL;
467     }
468     *last = f;
469     return f + 1;
470 }
471
472 #undef PerlIO_fdupopen
473 PerlIO *
474 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
475 {
476     if (PerlIOValid(f)) {
477         PerlIO_funcs *tab = PerlIOBase(f)->tab;
478         PerlIO *new;
479         PerlIO_debug("fdupopen f=%p param=%p\n",(void*)f,(void*)param);
480         new = (*tab->Dup)(aTHX_ PerlIO_allocate(aTHX),f,param, flags);
481         return new;
482     }
483     else {
484         SETERRNO(EBADF, SS_IVCHAN);
485         return NULL;
486     }
487 }
488
489 void
490 PerlIO_cleantable(pTHX_ PerlIO **tablep)
491 {
492     PerlIO *table = *tablep;
493     if (table) {
494         int i;
495         PerlIO_cleantable(aTHX_(PerlIO **) & (table[0]));
496         for (i = PERLIO_TABLE_SIZE - 1; i > 0; i--) {
497             PerlIO *f = table + i;
498             if (*f) {
499                 PerlIO_close(f);
500             }
501         }
502         Safefree(table);
503         *tablep = NULL;
504     }
505 }
506
507
508 PerlIO_list_t *
509 PerlIO_list_alloc(pTHX)
510 {
511     PerlIO_list_t *list;
512     Newz('L', list, 1, PerlIO_list_t);
513     list->refcnt = 1;
514     return list;
515 }
516
517 void
518 PerlIO_list_free(pTHX_ PerlIO_list_t *list)
519 {
520     if (list) {
521         if (--list->refcnt == 0) {
522             if (list->array) {
523                 IV i;
524                 for (i = 0; i < list->cur; i++) {
525                     if (list->array[i].arg)
526                         SvREFCNT_dec(list->array[i].arg);
527                 }
528                 Safefree(list->array);
529             }
530             Safefree(list);
531         }
532     }
533 }
534
535 void
536 PerlIO_list_push(pTHX_ PerlIO_list_t *list, PerlIO_funcs *funcs, SV *arg)
537 {
538     PerlIO_pair_t *p;
539     if (list->cur >= list->len) {
540         list->len += 8;
541         if (list->array)
542             Renew(list->array, list->len, PerlIO_pair_t);
543         else
544             New('l', list->array, list->len, PerlIO_pair_t);
545     }
546     p = &(list->array[list->cur++]);
547     p->funcs = funcs;
548     if ((p->arg = arg)) {
549         SvREFCNT_inc(arg);
550     }
551 }
552
553 PerlIO_list_t *
554 PerlIO_clone_list(pTHX_ PerlIO_list_t *proto, CLONE_PARAMS *param)
555 {
556     PerlIO_list_t *list = (PerlIO_list_t *) NULL;
557     if (proto) {
558         int i;
559         list = PerlIO_list_alloc(aTHX);
560         for (i=0; i < proto->cur; i++) {
561             SV *arg = Nullsv;
562             if (proto->array[i].arg)
563                 arg = PerlIO_sv_dup(aTHX_ proto->array[i].arg,param);
564             PerlIO_list_push(aTHX_ list, proto->array[i].funcs, arg);
565         }
566     }
567     return list;
568 }
569
570 void
571 PerlIO_clone(pTHX_ PerlInterpreter *proto, CLONE_PARAMS *param)
572 {
573 #ifdef USE_ITHREADS
574     PerlIO **table = &proto->Iperlio;
575     PerlIO *f;
576     PL_perlio = NULL;
577     PL_known_layers = PerlIO_clone_list(aTHX_ proto->Iknown_layers, param);
578     PL_def_layerlist = PerlIO_clone_list(aTHX_ proto->Idef_layerlist, param);
579     PerlIO_allocate(aTHX); /* root slot is never used */
580     PerlIO_debug("Clone %p from %p\n",aTHX,proto);
581     while ((f = *table)) {
582             int i;
583             table = (PerlIO **) (f++);
584             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
585                 if (*f) {
586                     (void) fp_dup(f, 0, param);
587                 }
588                 f++;
589             }
590         }
591 #endif
592 }
593
594 void
595 PerlIO_destruct(pTHX)
596 {
597     PerlIO **table = &PL_perlio;
598     PerlIO *f;
599 #ifdef USE_ITHREADS
600     PerlIO_debug("Destruct %p\n",aTHX);
601 #endif
602     while ((f = *table)) {
603         int i;
604         table = (PerlIO **) (f++);
605         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
606             PerlIO *x = f;
607             PerlIOl *l;
608             while ((l = *x)) {
609                 if (l->tab->kind & PERLIO_K_DESTRUCT) {
610                     PerlIO_debug("Destruct popping %s\n", l->tab->name);
611                     PerlIO_flush(x);
612                     PerlIO_pop(aTHX_ x);
613                 }
614                 else {
615                     x = PerlIONext(x);
616                 }
617             }
618             f++;
619         }
620     }
621 }
622
623 void
624 PerlIO_pop(pTHX_ PerlIO *f)
625 {
626     PerlIOl *l = *f;
627     if (l) {
628         PerlIO_debug("PerlIO_pop f=%p %s\n", (void*)f, l->tab->name);
629         if (l->tab->Popped) {
630             /*
631              * If popped returns non-zero do not free its layer structure
632              * it has either done so itself, or it is shared and still in
633              * use
634              */
635             if ((*l->tab->Popped) (aTHX_ f) != 0)
636                 return;
637         }
638         *f = l->next;
639         Safefree(l);
640     }
641 }
642
643 /*--------------------------------------------------------------------------------------*/
644 /*
645  * XS Interface for perl code
646  */
647
648 PerlIO_funcs *
649 PerlIO_find_layer(pTHX_ const char *name, STRLEN len, int load)
650 {
651     IV i;
652     if ((SSize_t) len <= 0)
653         len = strlen(name);
654     for (i = 0; i < PL_known_layers->cur; i++) {
655         PerlIO_funcs *f = PL_known_layers->array[i].funcs;
656         if (memEQ(f->name, name, len)) {
657             PerlIO_debug("%.*s => %p\n", (int) len, name, (void*)f);
658             return f;
659         }
660     }
661     if (load && PL_subname && PL_def_layerlist
662         && PL_def_layerlist->cur >= 2) {
663         if (PL_in_load_module) {
664             Perl_croak(aTHX_ "Recursive call to Perl_load_module in PerlIO_find_layer");
665             return NULL;
666         } else {
667             SV *pkgsv = newSVpvn("PerlIO", 6);
668             SV *layer = newSVpvn(name, len);
669             ENTER;
670             SAVEINT(PL_in_load_module);
671             PL_in_load_module++;
672             /*
673              * The two SVs are magically freed by load_module
674              */
675             Perl_load_module(aTHX_ 0, pkgsv, Nullsv, layer, Nullsv);
676             PL_in_load_module--;
677             LEAVE;
678             return PerlIO_find_layer(aTHX_ name, len, 0);
679         }
680     }
681     PerlIO_debug("Cannot find %.*s\n", (int) len, name);
682     return NULL;
683 }
684
685 #ifdef USE_ATTRIBUTES_FOR_PERLIO
686
687 static int
688 perlio_mg_set(pTHX_ SV *sv, MAGIC *mg)
689 {
690     if (SvROK(sv)) {
691         IO *io = GvIOn((GV *) SvRV(sv));
692         PerlIO *ifp = IoIFP(io);
693         PerlIO *ofp = IoOFP(io);
694         Perl_warn(aTHX_ "set %" SVf " %p %p %p", sv, io, ifp, ofp);
695     }
696     return 0;
697 }
698
699 static int
700 perlio_mg_get(pTHX_ SV *sv, MAGIC *mg)
701 {
702     if (SvROK(sv)) {
703         IO *io = GvIOn((GV *) SvRV(sv));
704         PerlIO *ifp = IoIFP(io);
705         PerlIO *ofp = IoOFP(io);
706         Perl_warn(aTHX_ "get %" SVf " %p %p %p", sv, io, ifp, ofp);
707     }
708     return 0;
709 }
710
711 static int
712 perlio_mg_clear(pTHX_ SV *sv, MAGIC *mg)
713 {
714     Perl_warn(aTHX_ "clear %" SVf, sv);
715     return 0;
716 }
717
718 static int
719 perlio_mg_free(pTHX_ SV *sv, MAGIC *mg)
720 {
721     Perl_warn(aTHX_ "free %" SVf, sv);
722     return 0;
723 }
724
725 MGVTBL perlio_vtab = {
726     perlio_mg_get,
727     perlio_mg_set,
728     NULL,                       /* len */
729     perlio_mg_clear,
730     perlio_mg_free
731 };
732
733 XS(XS_io_MODIFY_SCALAR_ATTRIBUTES)
734 {
735     dXSARGS;
736     SV *sv = SvRV(ST(1));
737     AV *av = newAV();
738     MAGIC *mg;
739     int count = 0;
740     int i;
741     sv_magic(sv, (SV *) av, PERL_MAGIC_ext, NULL, 0);
742     SvRMAGICAL_off(sv);
743     mg = mg_find(sv, PERL_MAGIC_ext);
744     mg->mg_virtual = &perlio_vtab;
745     mg_magical(sv);
746     Perl_warn(aTHX_ "attrib %" SVf, sv);
747     for (i = 2; i < items; i++) {
748         STRLEN len;
749         const char *name = SvPV(ST(i), len);
750         SV *layer = PerlIO_find_layer(aTHX_ name, len, 1);
751         if (layer) {
752             av_push(av, SvREFCNT_inc(layer));
753         }
754         else {
755             ST(count) = ST(i);
756             count++;
757         }
758     }
759     SvREFCNT_dec(av);
760     XSRETURN(count);
761 }
762
763 #endif                          /* USE_ATTIBUTES_FOR_PERLIO */
764
765 SV *
766 PerlIO_tab_sv(pTHX_ PerlIO_funcs *tab)
767 {
768     HV *stash = gv_stashpv("PerlIO::Layer", TRUE);
769     SV *sv = sv_bless(newRV_noinc(newSViv(PTR2IV(tab))), stash);
770     return sv;
771 }
772
773 XS(XS_PerlIO__Layer__find)
774 {
775     dXSARGS;
776     if (items < 2)
777         Perl_croak(aTHX_ "Usage class->find(name[,load])");
778     else {
779         STRLEN len = 0;
780         char *name = SvPV(ST(1), len);
781         bool load = (items > 2) ? SvTRUE(ST(2)) : 0;
782         PerlIO_funcs *layer = PerlIO_find_layer(aTHX_ name, len, load);
783         ST(0) =
784             (layer) ? sv_2mortal(PerlIO_tab_sv(aTHX_ layer)) :
785             &PL_sv_undef;
786         XSRETURN(1);
787     }
788 }
789
790 void
791 PerlIO_define_layer(pTHX_ PerlIO_funcs *tab)
792 {
793     if (!PL_known_layers)
794         PL_known_layers = PerlIO_list_alloc(aTHX);
795     PerlIO_list_push(aTHX_ PL_known_layers, tab, Nullsv);
796     PerlIO_debug("define %s %p\n", tab->name, (void*)tab);
797 }
798
799 int
800 PerlIO_parse_layers(pTHX_ PerlIO_list_t *av, const char *names)
801 {
802     if (names) {
803         const char *s = names;
804         while (*s) {
805             while (isSPACE(*s) || *s == ':')
806                 s++;
807             if (*s) {
808                 STRLEN llen = 0;
809                 const char *e = s;
810                 const char *as = Nullch;
811                 STRLEN alen = 0;
812                 if (!isIDFIRST(*s)) {
813                     /*
814                      * Message is consistent with how attribute lists are
815                      * passed. Even though this means "foo : : bar" is
816                      * seen as an invalid separator character.
817                      */
818                     char q = ((*s == '\'') ? '"' : '\'');
819                     if (ckWARN(WARN_LAYER))
820                         Perl_warner(aTHX_ packWARN(WARN_LAYER),
821                               "perlio: invalid separator character %c%c%c in layer specification list %s",
822                               q, *s, q, s);
823                     SETERRNO(EINVAL, LIB_INVARG);
824                     return -1;
825                 }
826                 do {
827                     e++;
828                 } while (isALNUM(*e));
829                 llen = e - s;
830                 if (*e == '(') {
831                     int nesting = 1;
832                     as = ++e;
833                     while (nesting) {
834                         switch (*e++) {
835                         case ')':
836                             if (--nesting == 0)
837                                 alen = (e - 1) - as;
838                             break;
839                         case '(':
840                             ++nesting;
841                             break;
842                         case '\\':
843                             /*
844                              * It's a nul terminated string, not allowed
845                              * to \ the terminating null. Anything other
846                              * character is passed over.
847                              */
848                             if (*e++) {
849                                 break;
850                             }
851                             /*
852                              * Drop through
853                              */
854                         case '\0':
855                             e--;
856                             if (ckWARN(WARN_LAYER))
857                                 Perl_warner(aTHX_ packWARN(WARN_LAYER),
858                                       "perlio: argument list not closed for layer \"%.*s\"",
859                                       (int) (e - s), s);
860                             return -1;
861                         default:
862                             /*
863                              * boring.
864                              */
865                             break;
866                         }
867                     }
868                 }
869                 if (e > s) {
870                     bool warn_layer = ckWARN(WARN_LAYER);
871                     PerlIO_funcs *layer =
872                         PerlIO_find_layer(aTHX_ s, llen, 1);
873                     if (layer) {
874                         PerlIO_list_push(aTHX_ av, layer,
875                                          (as) ? newSVpvn(as,
876                                                          alen) :
877                                          &PL_sv_undef);
878                     }
879                     else {
880                         if (warn_layer)
881                             Perl_warner(aTHX_ packWARN(WARN_LAYER), "perlio: unknown layer \"%.*s\"",
882                                   (int) llen, s);
883                         return -1;
884                     }
885                 }
886                 s = e;
887             }
888         }
889     }
890     return 0;
891 }
892
893 void
894 PerlIO_default_buffer(pTHX_ PerlIO_list_t *av)
895 {
896     PerlIO_funcs *tab = &PerlIO_perlio;
897 #ifdef PERLIO_USING_CRLF
898     tab = &PerlIO_crlf;
899 #else
900     if (PerlIO_stdio.Set_ptrcnt)
901         tab = &PerlIO_stdio;
902 #endif
903     PerlIO_debug("Pushing %s\n", tab->name);
904     PerlIO_list_push(aTHX_ av, PerlIO_find_layer(aTHX_ tab->name, 0, 0),
905                      &PL_sv_undef);
906 }
907
908 SV *
909 PerlIO_arg_fetch(PerlIO_list_t *av, IV n)
910 {
911     return av->array[n].arg;
912 }
913
914 PerlIO_funcs *
915 PerlIO_layer_fetch(pTHX_ PerlIO_list_t *av, IV n, PerlIO_funcs *def)
916 {
917     if (n >= 0 && n < av->cur) {
918         PerlIO_debug("Layer %" IVdf " is %s\n", n,
919                      av->array[n].funcs->name);
920         return av->array[n].funcs;
921     }
922     if (!def)
923         Perl_croak(aTHX_ "panic: PerlIO layer array corrupt");
924     return def;
925 }
926
927 IV
928 PerlIOPop_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
929 {
930     if (PerlIOValid(f)) {
931         PerlIO_flush(f);
932         PerlIO_pop(aTHX_ f);
933         return 0;
934     }
935     return -1;
936 }
937
938 PerlIO_funcs PerlIO_remove = {
939     sizeof(PerlIO_funcs),
940     "pop",
941     0,
942     PERLIO_K_DUMMY | PERLIO_K_UTF8,
943     PerlIOPop_pushed,
944     NULL,
945     NULL,
946     NULL,
947     NULL,
948     NULL,
949     NULL,
950     NULL,
951     NULL,
952     NULL,
953     NULL,
954     NULL,                       /* flush */
955     NULL,                       /* fill */
956     NULL,
957     NULL,
958     NULL,
959     NULL,
960     NULL,                       /* get_base */
961     NULL,                       /* get_bufsiz */
962     NULL,                       /* get_ptr */
963     NULL,                       /* get_cnt */
964     NULL,                       /* set_ptrcnt */
965 };
966
967 PerlIO_list_t *
968 PerlIO_default_layers(pTHX)
969 {
970     if (!PL_def_layerlist) {
971         const char *s = (PL_tainting) ? Nullch : PerlEnv_getenv("PERLIO");
972         PerlIO_funcs *osLayer = &PerlIO_unix;
973         PL_def_layerlist = PerlIO_list_alloc(aTHX);
974         PerlIO_define_layer(aTHX_ & PerlIO_unix);
975 #if defined(WIN32) && !defined(UNDER_CE)
976         PerlIO_define_layer(aTHX_ & PerlIO_win32);
977 #if 0
978         osLayer = &PerlIO_win32;
979 #endif
980 #endif
981         PerlIO_define_layer(aTHX_ & PerlIO_raw);
982         PerlIO_define_layer(aTHX_ & PerlIO_perlio);
983         PerlIO_define_layer(aTHX_ & PerlIO_stdio);
984         PerlIO_define_layer(aTHX_ & PerlIO_crlf);
985 #ifdef HAS_MMAP
986         PerlIO_define_layer(aTHX_ & PerlIO_mmap);
987 #endif
988         PerlIO_define_layer(aTHX_ & PerlIO_utf8);
989         PerlIO_define_layer(aTHX_ & PerlIO_remove);
990         PerlIO_define_layer(aTHX_ & PerlIO_byte);
991         PerlIO_list_push(aTHX_ PL_def_layerlist,
992                          PerlIO_find_layer(aTHX_ osLayer->name, 0, 0),
993                          &PL_sv_undef);
994         if (s) {
995             PerlIO_parse_layers(aTHX_ PL_def_layerlist, s);
996         }
997         else {
998             PerlIO_default_buffer(aTHX_ PL_def_layerlist);
999         }
1000     }
1001     if (PL_def_layerlist->cur < 2) {
1002         PerlIO_default_buffer(aTHX_ PL_def_layerlist);
1003     }
1004     return PL_def_layerlist;
1005 }
1006
1007 void
1008 Perl_boot_core_PerlIO(pTHX)
1009 {
1010 #ifdef USE_ATTRIBUTES_FOR_PERLIO
1011     newXS("io::MODIFY_SCALAR_ATTRIBUTES", XS_io_MODIFY_SCALAR_ATTRIBUTES,
1012           __FILE__);
1013 #endif
1014     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
1015 }
1016
1017 PerlIO_funcs *
1018 PerlIO_default_layer(pTHX_ I32 n)
1019 {
1020     PerlIO_list_t *av = PerlIO_default_layers(aTHX);
1021     if (n < 0)
1022         n += av->cur;
1023     return PerlIO_layer_fetch(aTHX_ av, n, &PerlIO_stdio);
1024 }
1025
1026 #define PerlIO_default_top() PerlIO_default_layer(aTHX_ -1)
1027 #define PerlIO_default_btm() PerlIO_default_layer(aTHX_ 0)
1028
1029 void
1030 PerlIO_stdstreams(pTHX)
1031 {
1032     if (!PL_perlio) {
1033         PerlIO_allocate(aTHX);
1034         PerlIO_fdopen(0, "Ir" PERLIO_STDTEXT);
1035         PerlIO_fdopen(1, "Iw" PERLIO_STDTEXT);
1036         PerlIO_fdopen(2, "Iw" PERLIO_STDTEXT);
1037     }
1038 }
1039
1040 PerlIO *
1041 PerlIO_push(pTHX_ PerlIO *f, PerlIO_funcs *tab, const char *mode, SV *arg)
1042 {
1043     if (tab->fsize != sizeof(PerlIO_funcs)) {
1044       mismatch:
1045         Perl_croak(aTHX_ "Layer does not match this perl");
1046     }
1047     if (tab->size) {
1048         PerlIOl *l = NULL;
1049         if (tab->size < sizeof(PerlIOl)) {
1050             goto mismatch;
1051         }
1052         /* Real layer with a data area */
1053         Newc('L',l,tab->size,char,PerlIOl);
1054         if (l && f) {
1055             Zero(l, tab->size, char);
1056             l->next = *f;
1057             l->tab = tab;
1058             *f = l;
1059             PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1060                         (mode) ? mode : "(Null)", (void*)arg);
1061             if ((*l->tab->Pushed) (aTHX_ f, mode, arg, tab) != 0) {
1062                 PerlIO_pop(aTHX_ f);
1063                 return NULL;
1064             }
1065         }
1066     }
1067     else if (f) {
1068         /* Pseudo-layer where push does its own stack adjust */
1069         PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1070                      (mode) ? mode : "(Null)", (void*)arg);
1071         if ((*tab->Pushed) (aTHX_ f, mode, arg, tab) != 0) {
1072             return NULL;
1073         }
1074     }
1075     return f;
1076 }
1077
1078 IV
1079 PerlIOBase_binmode(pTHX_ PerlIO *f)
1080 {
1081    if (PerlIOValid(f)) {
1082         /* Is layer suitable for raw stream ? */
1083         if (PerlIOBase(f)->tab->kind & PERLIO_K_RAW) {
1084             /* Yes - turn off UTF-8-ness, to undo UTF-8 locale effects */
1085             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1086         }
1087         else {
1088             /* Not suitable - pop it */
1089             PerlIO_pop(aTHX_ f);
1090         }
1091         return 0;
1092    }
1093    return -1;
1094 }
1095
1096 IV
1097 PerlIORaw_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1098 {
1099
1100     if (PerlIOValid(f)) {
1101         PerlIO *t;
1102         PerlIOl *l;
1103         PerlIO_flush(f);
1104         /*
1105          * Strip all layers that are not suitable for a raw stream
1106          */
1107         t = f;
1108         while (t && (l = *t)) {
1109             if (l->tab->Binmode) {
1110                 /* Has a handler - normal case */
1111                 if ((*l->tab->Binmode)(aTHX_ f) == 0) {
1112                     if (*t == l) {
1113                         /* Layer still there - move down a layer */
1114                         t = PerlIONext(t);
1115                     }
1116                 }
1117                 else {
1118                     return -1;
1119                 }
1120             }
1121             else {
1122                 /* No handler - pop it */
1123                 PerlIO_pop(aTHX_ t);
1124             }
1125         }
1126         if (PerlIOValid(f)) {
1127             PerlIO_debug(":raw f=%p :%s\n", (void*)f, PerlIOBase(f)->tab->name);
1128             return 0;
1129         }
1130     }
1131     return -1;
1132 }
1133
1134 int
1135 PerlIO_apply_layera(pTHX_ PerlIO *f, const char *mode,
1136                     PerlIO_list_t *layers, IV n, IV max)
1137 {
1138     int code = 0;
1139     while (n < max) {
1140         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n, NULL);
1141         if (tab) {
1142             if (!PerlIO_push(aTHX_ f, tab, mode, PerlIOArg)) {
1143                 code = -1;
1144                 break;
1145             }
1146         }
1147         n++;
1148     }
1149     return code;
1150 }
1151
1152 int
1153 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
1154 {
1155     int code = 0;
1156     if (f && names) {
1157         PerlIO_list_t *layers = PerlIO_list_alloc(aTHX);
1158         code = PerlIO_parse_layers(aTHX_ layers, names);
1159         if (code == 0) {
1160             code = PerlIO_apply_layera(aTHX_ f, mode, layers, 0, layers->cur);
1161         }
1162         PerlIO_list_free(aTHX_ layers);
1163     }
1164     return code;
1165 }
1166
1167
1168 /*--------------------------------------------------------------------------------------*/
1169 /*
1170  * Given the abstraction above the public API functions
1171  */
1172
1173 int
1174 PerlIO_binmode(pTHX_ PerlIO *f, int iotype, int mode, const char *names)
1175 {
1176     PerlIO_debug("PerlIO_binmode f=%p %s %c %x %s\n",
1177                  (void*)f, PerlIOBase(f)->tab->name, iotype, mode,
1178                  (names) ? names : "(Null)");
1179     if (names) {
1180         /* Do not flush etc. if (e.g.) switching encodings.
1181            if a pushed layer knows it needs to flush lower layers
1182            (for example :unix which is never going to call them)
1183            it can do the flush when it is pushed.
1184          */
1185         return PerlIO_apply_layers(aTHX_ f, NULL, names) == 0 ? TRUE : FALSE;
1186     }
1187     else {
1188         /* Fake 5.6 legacy of using this call to turn ON O_TEXT */
1189 #ifdef PERLIO_USING_CRLF
1190         /* Legacy binmode only has meaning if O_TEXT has a value distinct from
1191            O_BINARY so we can look for it in mode.
1192          */
1193         if (!(mode & O_BINARY)) {
1194             /* Text mode */
1195             /* FIXME?: Looking down the layer stack seems wrong,
1196                but is a way of reaching past (say) an encoding layer
1197                to flip CRLF-ness of the layer(s) below
1198              */
1199             while (*f) {
1200                 /* Perhaps we should turn on bottom-most aware layer
1201                    e.g. Ilya's idea that UNIX TTY could serve
1202                  */
1203                 if (PerlIOBase(f)->tab->kind & PERLIO_K_CANCRLF) {
1204                     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
1205                         /* Not in text mode - flush any pending stuff and flip it */
1206                         PerlIO_flush(f);
1207                         PerlIOBase(f)->flags |= PERLIO_F_CRLF;
1208                     }
1209                     /* Only need to turn it on in one layer so we are done */
1210                     return TRUE;
1211                 }
1212                 f = PerlIONext(f);
1213             }
1214             /* Not finding a CRLF aware layer presumably means we are binary
1215                which is not what was requested - so we failed
1216                We _could_ push :crlf layer but so could caller
1217              */
1218             return FALSE;
1219         }
1220 #endif
1221         /* Legacy binmode is now _defined_ as being equivalent to pushing :raw
1222            So code that used to be here is now in PerlIORaw_pushed().
1223          */
1224         return PerlIO_push(aTHX_ f, &PerlIO_raw, Nullch, Nullsv) ? TRUE : FALSE;
1225     }
1226 }
1227
1228 int
1229 PerlIO__close(pTHX_ PerlIO *f)
1230 {
1231     if (PerlIOValid(f))
1232         return (*PerlIOBase(f)->tab->Close) (aTHX_ f);
1233     else {
1234         SETERRNO(EBADF, SS_IVCHAN);
1235         return -1;
1236     }
1237 }
1238
1239 int
1240 Perl_PerlIO_close(pTHX_ PerlIO *f)
1241 {
1242     int code = -1;
1243     if (PerlIOValid(f)) {
1244         code = (*PerlIOBase(f)->tab->Close) (aTHX_ f);
1245         while (*f) {
1246             PerlIO_pop(aTHX_ f);
1247         }
1248     }
1249     return code;
1250 }
1251
1252 int
1253 Perl_PerlIO_fileno(pTHX_ PerlIO *f)
1254 {
1255     if (PerlIOValid(f))
1256         return (*PerlIOBase(f)->tab->Fileno) (aTHX_ f);
1257     else {
1258         SETERRNO(EBADF, SS_IVCHAN);
1259         return -1;
1260     }
1261 }
1262
1263 static const char *
1264 PerlIO_context_layers(pTHX_ const char *mode)
1265 {
1266     const char *type = NULL;
1267     /*
1268      * Need to supply default layer info from open.pm
1269      */
1270     if (PL_curcop) {
1271         SV *layers = PL_curcop->cop_io;
1272         if (layers) {
1273             STRLEN len;
1274             type = SvPV(layers, len);
1275             if (type && mode[0] != 'r') {
1276                 /*
1277                  * Skip to write part
1278                  */
1279                 const char *s = strchr(type, 0);
1280                 if (s && (STRLEN)(s - type) < len) {
1281                     type = s + 1;
1282                 }
1283             }
1284         }
1285     }
1286     return type;
1287 }
1288
1289 static PerlIO_funcs *
1290 PerlIO_layer_from_ref(pTHX_ SV *sv)
1291 {
1292     /*
1293      * For any scalar type load the handler which is bundled with perl
1294      */
1295     if (SvTYPE(sv) < SVt_PVAV)
1296         return PerlIO_find_layer(aTHX_ "scalar", 6, 1);
1297
1298     /*
1299      * For other types allow if layer is known but don't try and load it
1300      */
1301     switch (SvTYPE(sv)) {
1302     case SVt_PVAV:
1303         return PerlIO_find_layer(aTHX_ "Array", 5, 0);
1304     case SVt_PVHV:
1305         return PerlIO_find_layer(aTHX_ "Hash", 4, 0);
1306     case SVt_PVCV:
1307         return PerlIO_find_layer(aTHX_ "Code", 4, 0);
1308     case SVt_PVGV:
1309         return PerlIO_find_layer(aTHX_ "Glob", 4, 0);
1310     }
1311     return NULL;
1312 }
1313
1314 PerlIO_list_t *
1315 PerlIO_resolve_layers(pTHX_ const char *layers,
1316                       const char *mode, int narg, SV **args)
1317 {
1318     PerlIO_list_t *def = PerlIO_default_layers(aTHX);
1319     int incdef = 1;
1320     if (!PL_perlio)
1321         PerlIO_stdstreams(aTHX);
1322     if (narg) {
1323         SV *arg = *args;
1324         /*
1325          * If it is a reference but not an object see if we have a handler
1326          * for it
1327          */
1328         if (SvROK(arg) && !sv_isobject(arg)) {
1329             PerlIO_funcs *handler = PerlIO_layer_from_ref(aTHX_ SvRV(arg));
1330             if (handler) {
1331                 def = PerlIO_list_alloc(aTHX);
1332                 PerlIO_list_push(aTHX_ def, handler, &PL_sv_undef);
1333                 incdef = 0;
1334             }
1335             /*
1336              * Don't fail if handler cannot be found :via(...) etc. may do
1337              * something sensible else we will just stringfy and open
1338              * resulting string.
1339              */
1340         }
1341     }
1342     if (!layers)
1343         layers = PerlIO_context_layers(aTHX_ mode);
1344     if (layers && *layers) {
1345         PerlIO_list_t *av;
1346         if (incdef) {
1347             IV i = def->cur;
1348             av = PerlIO_list_alloc(aTHX);
1349             for (i = 0; i < def->cur; i++) {
1350                 PerlIO_list_push(aTHX_ av, def->array[i].funcs,
1351                                  def->array[i].arg);
1352             }
1353         }
1354         else {
1355             av = def;
1356         }
1357         if (PerlIO_parse_layers(aTHX_ av, layers) == 0) {
1358              return av;
1359         }
1360         else {
1361             PerlIO_list_free(aTHX_ av);
1362             return (PerlIO_list_t *) NULL;
1363         }
1364     }
1365     else {
1366         if (incdef)
1367             def->refcnt++;
1368         return def;
1369     }
1370 }
1371
1372 PerlIO *
1373 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
1374              int imode, int perm, PerlIO *f, int narg, SV **args)
1375 {
1376     if (!f && narg == 1 && *args == &PL_sv_undef) {
1377         if ((f = PerlIO_tmpfile())) {
1378             if (!layers)
1379                 layers = PerlIO_context_layers(aTHX_ mode);
1380             if (layers && *layers)
1381                 PerlIO_apply_layers(aTHX_ f, mode, layers);
1382         }
1383     }
1384     else {
1385         PerlIO_list_t *layera = NULL;
1386         IV n;
1387         PerlIO_funcs *tab = NULL;
1388         if (PerlIOValid(f)) {
1389             /*
1390              * This is "reopen" - it is not tested as perl does not use it
1391              * yet
1392              */
1393             PerlIOl *l = *f;
1394             layera = PerlIO_list_alloc(aTHX);
1395             while (l) {
1396                 SV *arg = (l->tab->Getarg)
1397                         ? (*l->tab->Getarg) (aTHX_ &l, NULL, 0)
1398                         : &PL_sv_undef;
1399                 PerlIO_list_push(aTHX_ layera, l->tab, arg);
1400                 l = *PerlIONext(&l);
1401             }
1402         }
1403         else {
1404             layera = PerlIO_resolve_layers(aTHX_ layers, mode, narg, args);
1405             if (!layera) {
1406                 return NULL;
1407             }
1408         }
1409         /*
1410          * Start at "top" of layer stack
1411          */
1412         n = layera->cur - 1;
1413         while (n >= 0) {
1414             PerlIO_funcs *t = PerlIO_layer_fetch(aTHX_ layera, n, NULL);
1415             if (t && t->Open) {
1416                 tab = t;
1417                 break;
1418             }
1419             n--;
1420         }
1421         if (tab) {
1422             /*
1423              * Found that layer 'n' can do opens - call it
1424              */
1425             if (narg > 1 && !(tab->kind & PERLIO_K_MULTIARG)) {
1426                 Perl_croak(aTHX_ "More than one argument to open(,':%s')",tab->name);
1427             }
1428             PerlIO_debug("openn(%s,'%s','%s',%d,%x,%o,%p,%d,%p)\n",
1429                          tab->name, layers, mode, fd, imode, perm,
1430                          (void*)f, narg, (void*)args);
1431             f = (*tab->Open) (aTHX_ tab, layera, n, mode, fd, imode, perm,
1432                               f, narg, args);
1433             if (f) {
1434                 if (n + 1 < layera->cur) {
1435                     /*
1436                      * More layers above the one that we used to open -
1437                      * apply them now
1438                      */
1439                     if (PerlIO_apply_layera(aTHX_ f, mode, layera, n + 1, layera->cur) != 0) {
1440                         /* If pushing layers fails close the file */
1441                         PerlIO_close(f);
1442                         f = NULL;
1443                     }
1444                 }
1445             }
1446         }
1447         PerlIO_list_free(aTHX_ layera);
1448     }
1449     return f;
1450 }
1451
1452
1453 SSize_t
1454 Perl_PerlIO_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1455 {
1456     if (PerlIOValid(f))
1457         return (*PerlIOBase(f)->tab->Read) (aTHX_ f, vbuf, count);
1458     else {
1459         SETERRNO(EBADF, SS_IVCHAN);
1460         return -1;
1461     }
1462 }
1463
1464 SSize_t
1465 Perl_PerlIO_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1466 {
1467     if (PerlIOValid(f))
1468         return (*PerlIOBase(f)->tab->Unread) (aTHX_ f, vbuf, count);
1469     else {
1470         SETERRNO(EBADF, SS_IVCHAN);
1471         return -1;
1472     }
1473 }
1474
1475 SSize_t
1476 Perl_PerlIO_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1477 {
1478     if (PerlIOValid(f))
1479         return (*PerlIOBase(f)->tab->Write) (aTHX_ f, vbuf, count);
1480     else {
1481         SETERRNO(EBADF, SS_IVCHAN);
1482         return -1;
1483     }
1484 }
1485
1486 int
1487 Perl_PerlIO_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
1488 {
1489     if (PerlIOValid(f))
1490         return (*PerlIOBase(f)->tab->Seek) (aTHX_ f, offset, whence);
1491     else {
1492         SETERRNO(EBADF, SS_IVCHAN);
1493         return -1;
1494     }
1495 }
1496
1497 Off_t
1498 Perl_PerlIO_tell(pTHX_ PerlIO *f)
1499 {
1500     if (PerlIOValid(f))
1501         return (*PerlIOBase(f)->tab->Tell) (aTHX_ f);
1502     else {
1503         SETERRNO(EBADF, SS_IVCHAN);
1504         return -1;
1505     }
1506 }
1507
1508 int
1509 Perl_PerlIO_flush(pTHX_ PerlIO *f)
1510 {
1511     if (f) {
1512         if (*f) {
1513             PerlIO_funcs *tab = PerlIOBase(f)->tab;
1514             if (tab && tab->Flush) {
1515                 return (*tab->Flush) (aTHX_ f);
1516             }
1517             else {
1518                 PerlIO_debug("Cannot flush f=%p :%s\n", (void*)f, tab->name);
1519                 SETERRNO(EBADF, SS_IVCHAN);
1520                 return -1;
1521             }
1522         }
1523         else {
1524             PerlIO_debug("Cannot flush f=%p\n", (void*)f);
1525             SETERRNO(EBADF, SS_IVCHAN);
1526             return -1;
1527         }
1528     }
1529     else {
1530         /*
1531          * Is it good API design to do flush-all on NULL, a potentially
1532          * errorneous input? Maybe some magical value (PerlIO*
1533          * PERLIO_FLUSH_ALL = (PerlIO*)-1;)? Yes, stdio does similar
1534          * things on fflush(NULL), but should we be bound by their design
1535          * decisions? --jhi
1536          */
1537         PerlIO **table = &PL_perlio;
1538         int code = 0;
1539         while ((f = *table)) {
1540             int i;
1541             table = (PerlIO **) (f++);
1542             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1543                 if (*f && PerlIO_flush(f) != 0)
1544                     code = -1;
1545                 f++;
1546             }
1547         }
1548         return code;
1549     }
1550 }
1551
1552 void
1553 PerlIOBase_flush_linebuf(pTHX)
1554 {
1555     PerlIO **table = &PL_perlio;
1556     PerlIO *f;
1557     while ((f = *table)) {
1558         int i;
1559         table = (PerlIO **) (f++);
1560         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1561             if (*f
1562                 && (PerlIOBase(f)->
1563                     flags & (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1564                 == (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1565                 PerlIO_flush(f);
1566             f++;
1567         }
1568     }
1569 }
1570
1571 int
1572 Perl_PerlIO_fill(pTHX_ PerlIO *f)
1573 {
1574     if (PerlIOValid(f))
1575         return (*PerlIOBase(f)->tab->Fill) (aTHX_ f);
1576     else {
1577         SETERRNO(EBADF, SS_IVCHAN);
1578         return -1;
1579     }
1580 }
1581
1582 int
1583 PerlIO_isutf8(PerlIO *f)
1584 {
1585     if (PerlIOValid(f))
1586         return (PerlIOBase(f)->flags & PERLIO_F_UTF8) != 0;
1587     else {
1588         SETERRNO(EBADF, SS_IVCHAN);
1589         return -1;
1590     }
1591 }
1592
1593 int
1594 Perl_PerlIO_eof(pTHX_ PerlIO *f)
1595 {
1596     if (PerlIOValid(f))
1597         return (*PerlIOBase(f)->tab->Eof) (aTHX_ f);
1598     else {
1599         SETERRNO(EBADF, SS_IVCHAN);
1600         return -1;
1601     }
1602 }
1603
1604 int
1605 Perl_PerlIO_error(pTHX_ PerlIO *f)
1606 {
1607     if (PerlIOValid(f))
1608         return (*PerlIOBase(f)->tab->Error) (aTHX_ f);
1609     else {
1610         SETERRNO(EBADF, SS_IVCHAN);
1611         return -1;
1612     }
1613 }
1614
1615 void
1616 Perl_PerlIO_clearerr(pTHX_ PerlIO *f)
1617 {
1618     if (PerlIOValid(f))
1619         (*PerlIOBase(f)->tab->Clearerr) (aTHX_ f);
1620     else
1621         SETERRNO(EBADF, SS_IVCHAN);
1622 }
1623
1624 void
1625 Perl_PerlIO_setlinebuf(pTHX_ PerlIO *f)
1626 {
1627     if (PerlIOValid(f))
1628         (*PerlIOBase(f)->tab->Setlinebuf) (aTHX_ f);
1629     else
1630         SETERRNO(EBADF, SS_IVCHAN);
1631 }
1632
1633 int
1634 PerlIO_has_base(PerlIO *f)
1635 {
1636     if (PerlIOValid(f)) {
1637         return (PerlIOBase(f)->tab->Get_base != NULL);
1638     }
1639     return 0;
1640 }
1641
1642 int
1643 PerlIO_fast_gets(PerlIO *f)
1644 {
1645     if (PerlIOValid(f) && (PerlIOBase(f)->flags & PERLIO_F_FASTGETS)) {
1646         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1647         return (tab->Set_ptrcnt != NULL);
1648     }
1649     return 0;
1650 }
1651
1652 int
1653 PerlIO_has_cntptr(PerlIO *f)
1654 {
1655     if (PerlIOValid(f)) {
1656         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1657         return (tab->Get_ptr != NULL && tab->Get_cnt != NULL);
1658     }
1659     return 0;
1660 }
1661
1662 int
1663 PerlIO_canset_cnt(PerlIO *f)
1664 {
1665     if (PerlIOValid(f)) {
1666         PerlIOl *l = PerlIOBase(f);
1667         return (l->tab->Set_ptrcnt != NULL);
1668     }
1669     return 0;
1670 }
1671
1672 STDCHAR *
1673 Perl_PerlIO_get_base(pTHX_ PerlIO *f)
1674 {
1675     if (PerlIOValid(f))
1676         return (*PerlIOBase(f)->tab->Get_base) (aTHX_ f);
1677     return NULL;
1678 }
1679
1680 int
1681 Perl_PerlIO_get_bufsiz(pTHX_ PerlIO *f)
1682 {
1683     if (PerlIOValid(f))
1684         return (*PerlIOBase(f)->tab->Get_bufsiz) (aTHX_ f);
1685     return 0;
1686 }
1687
1688 STDCHAR *
1689 Perl_PerlIO_get_ptr(pTHX_ PerlIO *f)
1690 {
1691     if (PerlIOValid(f)) {
1692         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1693         if (tab->Get_ptr == NULL)
1694             return NULL;
1695         return (*tab->Get_ptr) (aTHX_ f);
1696     }
1697     return NULL;
1698 }
1699
1700 int
1701 Perl_PerlIO_get_cnt(pTHX_ PerlIO *f)
1702 {
1703     if (PerlIOValid(f)) {
1704         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1705         if (tab->Get_cnt == NULL)
1706            return 0;
1707         return (*tab->Get_cnt) (aTHX_ f);
1708     }
1709     return 0;
1710 }
1711
1712 void
1713 Perl_PerlIO_set_cnt(pTHX_ PerlIO *f, int cnt)
1714 {
1715     if (PerlIOValid(f)) {
1716         (*PerlIOBase(f)->tab->Set_ptrcnt) (aTHX_ f, NULL, cnt);
1717     }
1718 }
1719
1720 void
1721 Perl_PerlIO_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, int cnt)
1722 {
1723     if (PerlIOValid(f)) {
1724         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1725         if (tab->Set_ptrcnt == NULL) {
1726             Perl_croak(aTHX_ "PerlIO buffer snooping abuse");
1727         }
1728         (*PerlIOBase(f)->tab->Set_ptrcnt) (aTHX_ f, ptr, cnt);
1729     }
1730 }
1731
1732
1733 /*--------------------------------------------------------------------------------------*/
1734 /*
1735  * utf8 and raw dummy layers
1736  */
1737
1738 IV
1739 PerlIOUtf8_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1740 {
1741     if (PerlIOValid(f)) {
1742         if (tab->kind & PERLIO_K_UTF8)
1743             PerlIOBase(f)->flags |= PERLIO_F_UTF8;
1744         else
1745             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1746         return 0;
1747     }
1748     return -1;
1749 }
1750
1751 PerlIO_funcs PerlIO_utf8 = {
1752     sizeof(PerlIO_funcs),
1753     "utf8",
1754     0,
1755     PERLIO_K_DUMMY | PERLIO_K_UTF8,
1756     PerlIOUtf8_pushed,
1757     NULL,
1758     NULL,
1759     NULL,
1760     NULL,
1761     NULL,
1762     NULL,
1763     NULL,
1764     NULL,
1765     NULL,
1766     NULL,
1767     NULL,                       /* flush */
1768     NULL,                       /* fill */
1769     NULL,
1770     NULL,
1771     NULL,
1772     NULL,
1773     NULL,                       /* get_base */
1774     NULL,                       /* get_bufsiz */
1775     NULL,                       /* get_ptr */
1776     NULL,                       /* get_cnt */
1777     NULL,                       /* set_ptrcnt */
1778 };
1779
1780 PerlIO_funcs PerlIO_byte = {
1781     sizeof(PerlIO_funcs),
1782     "bytes",
1783     0,
1784     PERLIO_K_DUMMY,
1785     PerlIOUtf8_pushed,
1786     NULL,
1787     NULL,
1788     NULL,
1789     NULL,
1790     NULL,
1791     NULL,
1792     NULL,
1793     NULL,
1794     NULL,
1795     NULL,
1796     NULL,                       /* flush */
1797     NULL,                       /* fill */
1798     NULL,
1799     NULL,
1800     NULL,
1801     NULL,
1802     NULL,                       /* get_base */
1803     NULL,                       /* get_bufsiz */
1804     NULL,                       /* get_ptr */
1805     NULL,                       /* get_cnt */
1806     NULL,                       /* set_ptrcnt */
1807 };
1808
1809 PerlIO *
1810 PerlIORaw_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
1811                IV n, const char *mode, int fd, int imode, int perm,
1812                PerlIO *old, int narg, SV **args)
1813 {
1814     PerlIO_funcs *tab = PerlIO_default_btm();
1815     return (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
1816                          old, narg, args);
1817 }
1818
1819 PerlIO_funcs PerlIO_raw = {
1820     sizeof(PerlIO_funcs),
1821     "raw",
1822     0,
1823     PERLIO_K_DUMMY,
1824     PerlIORaw_pushed,
1825     PerlIOBase_popped,
1826     PerlIORaw_open,
1827     NULL,
1828     NULL,
1829     NULL,
1830     NULL,
1831     NULL,
1832     NULL,
1833     NULL,
1834     NULL,
1835     NULL,                       /* flush */
1836     NULL,                       /* fill */
1837     NULL,
1838     NULL,
1839     NULL,
1840     NULL,
1841     NULL,                       /* get_base */
1842     NULL,                       /* get_bufsiz */
1843     NULL,                       /* get_ptr */
1844     NULL,                       /* get_cnt */
1845     NULL,                       /* set_ptrcnt */
1846 };
1847 /*--------------------------------------------------------------------------------------*/
1848 /*--------------------------------------------------------------------------------------*/
1849 /*
1850  * "Methods" of the "base class"
1851  */
1852
1853 IV
1854 PerlIOBase_fileno(pTHX_ PerlIO *f)
1855 {
1856     return PerlIOValid(f) ? PerlIO_fileno(PerlIONext(f)) : -1;
1857 }
1858
1859 char *
1860 PerlIO_modestr(PerlIO * f, char *buf)
1861 {
1862     char *s = buf;
1863     if (PerlIOValid(f)) {
1864         IV flags = PerlIOBase(f)->flags;
1865         if (flags & PERLIO_F_APPEND) {
1866             *s++ = 'a';
1867             if (flags & PERLIO_F_CANREAD) {
1868                 *s++ = '+';
1869             }
1870         }
1871         else if (flags & PERLIO_F_CANREAD) {
1872             *s++ = 'r';
1873             if (flags & PERLIO_F_CANWRITE)
1874                 *s++ = '+';
1875         }
1876         else if (flags & PERLIO_F_CANWRITE) {
1877             *s++ = 'w';
1878             if (flags & PERLIO_F_CANREAD) {
1879                 *s++ = '+';
1880             }
1881         }
1882 #ifdef PERLIO_USING_CRLF
1883         if (!(flags & PERLIO_F_CRLF))
1884             *s++ = 'b';
1885 #endif
1886     }
1887     *s = '\0';
1888     return buf;
1889 }
1890
1891
1892 IV
1893 PerlIOBase_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1894 {
1895     PerlIOl *l = PerlIOBase(f);
1896 #if 0
1897     const char *omode = mode;
1898     char temp[8];
1899 #endif
1900     l->flags &= ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE |
1901                   PERLIO_F_TRUNCATE | PERLIO_F_APPEND);
1902     if (tab->Set_ptrcnt != NULL)
1903         l->flags |= PERLIO_F_FASTGETS;
1904     if (mode) {
1905         if (*mode == '#' || *mode == 'I')
1906             mode++;
1907         switch (*mode++) {
1908         case 'r':
1909             l->flags |= PERLIO_F_CANREAD;
1910             break;
1911         case 'a':
1912             l->flags |= PERLIO_F_APPEND | PERLIO_F_CANWRITE;
1913             break;
1914         case 'w':
1915             l->flags |= PERLIO_F_TRUNCATE | PERLIO_F_CANWRITE;
1916             break;
1917         default:
1918             SETERRNO(EINVAL, LIB_INVARG);
1919             return -1;
1920         }
1921         while (*mode) {
1922             switch (*mode++) {
1923             case '+':
1924                 l->flags |= PERLIO_F_CANREAD | PERLIO_F_CANWRITE;
1925                 break;
1926             case 'b':
1927                 l->flags &= ~PERLIO_F_CRLF;
1928                 break;
1929             case 't':
1930                 l->flags |= PERLIO_F_CRLF;
1931                 break;
1932             default:
1933                 SETERRNO(EINVAL, LIB_INVARG);
1934                 return -1;
1935             }
1936         }
1937     }
1938     else {
1939         if (l->next) {
1940             l->flags |= l->next->flags &
1941                 (PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_TRUNCATE |
1942                  PERLIO_F_APPEND);
1943         }
1944     }
1945 #if 0
1946     PerlIO_debug("PerlIOBase_pushed f=%p %s %s fl=%08" UVxf " (%s)\n",
1947                  f, PerlIOBase(f)->tab->name, (omode) ? omode : "(Null)",
1948                  l->flags, PerlIO_modestr(f, temp));
1949 #endif
1950     return 0;
1951 }
1952
1953 IV
1954 PerlIOBase_popped(pTHX_ PerlIO *f)
1955 {
1956     return 0;
1957 }
1958
1959 SSize_t
1960 PerlIOBase_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1961 {
1962     /*
1963      * Save the position as current head considers it
1964      */
1965     Off_t old = PerlIO_tell(f);
1966     SSize_t done;
1967     PerlIO_push(aTHX_ f, &PerlIO_pending, "r", Nullsv);
1968     PerlIOSelf(f, PerlIOBuf)->posn = old;
1969     done = PerlIOBuf_unread(aTHX_ f, vbuf, count);
1970     return done;
1971 }
1972
1973 SSize_t
1974 PerlIOBase_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1975 {
1976     STDCHAR *buf = (STDCHAR *) vbuf;
1977     if (f) {
1978         if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD))
1979             return 0;
1980         while (count > 0) {
1981             SSize_t avail = PerlIO_get_cnt(f);
1982             SSize_t take = 0;
1983             if (avail > 0)
1984                 take = ((SSize_t)count < avail) ? count : avail;
1985             if (take > 0) {
1986                 STDCHAR *ptr = PerlIO_get_ptr(f);
1987                 Copy(ptr, buf, take, STDCHAR);
1988                 PerlIO_set_ptrcnt(f, ptr + take, (avail -= take));
1989                 count -= take;
1990                 buf += take;
1991             }
1992             if (count > 0 && avail <= 0) {
1993                 if (PerlIO_fill(f) != 0)
1994                     break;
1995             }
1996         }
1997         return (buf - (STDCHAR *) vbuf);
1998     }
1999     return 0;
2000 }
2001
2002 IV
2003 PerlIOBase_noop_ok(pTHX_ PerlIO *f)
2004 {
2005     return 0;
2006 }
2007
2008 IV
2009 PerlIOBase_noop_fail(pTHX_ PerlIO *f)
2010 {
2011     return -1;
2012 }
2013
2014 IV
2015 PerlIOBase_close(pTHX_ PerlIO *f)
2016 {
2017     IV code = 0;
2018     PerlIO *n = PerlIONext(f);
2019     if (PerlIO_flush(f) != 0)
2020         code = -1;
2021     if (PerlIOValid(n) && (*PerlIOBase(n)->tab->Close)(aTHX_ n) != 0)
2022         code = -1;
2023     PerlIOBase(f)->flags &=
2024         ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_OPEN);
2025     return code;
2026 }
2027
2028 IV
2029 PerlIOBase_eof(pTHX_ PerlIO *f)
2030 {
2031     if (PerlIOValid(f)) {
2032         return (PerlIOBase(f)->flags & PERLIO_F_EOF) != 0;
2033     }
2034     return 1;
2035 }
2036
2037 IV
2038 PerlIOBase_error(pTHX_ PerlIO *f)
2039 {
2040     if (PerlIOValid(f)) {
2041         return (PerlIOBase(f)->flags & PERLIO_F_ERROR) != 0;
2042     }
2043     return 1;
2044 }
2045
2046 void
2047 PerlIOBase_clearerr(pTHX_ PerlIO *f)
2048 {
2049     if (PerlIOValid(f)) {
2050         PerlIO *n = PerlIONext(f);
2051         PerlIOBase(f)->flags &= ~(PERLIO_F_ERROR | PERLIO_F_EOF);
2052         if (PerlIOValid(n))
2053             PerlIO_clearerr(n);
2054     }
2055 }
2056
2057 void
2058 PerlIOBase_setlinebuf(pTHX_ PerlIO *f)
2059 {
2060     if (PerlIOValid(f)) {
2061         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF;
2062     }
2063 }
2064
2065 SV *
2066 PerlIO_sv_dup(pTHX_ SV *arg, CLONE_PARAMS *param)
2067 {
2068     if (!arg)
2069         return Nullsv;
2070 #ifdef sv_dup
2071     if (param) {
2072         return sv_dup(arg, param);
2073     }
2074     else {
2075         return newSVsv(arg);
2076     }
2077 #else
2078     return newSVsv(arg);
2079 #endif
2080 }
2081
2082 PerlIO *
2083 PerlIOBase_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2084 {
2085     PerlIO *nexto = PerlIONext(o);
2086     if (PerlIOValid(nexto)) {
2087         PerlIO_funcs *tab = PerlIOBase(nexto)->tab;
2088         f = (*tab->Dup)(aTHX_ f, nexto, param, flags);
2089     }
2090     if (f) {
2091         PerlIO_funcs *self = PerlIOBase(o)->tab;
2092         SV *arg = Nullsv;
2093         char buf[8];
2094         PerlIO_debug("PerlIOBase_dup %s f=%p o=%p param=%p\n",
2095                      self->name, (void*)f, (void*)o, (void*)param);
2096         if (self->Getarg) {
2097             arg = (*self->Getarg)(aTHX_ o,param,flags);
2098         }
2099         f = PerlIO_push(aTHX_ f, self, PerlIO_modestr(o,buf), arg);
2100         if (arg) {
2101             SvREFCNT_dec(arg);
2102         }
2103     }
2104     return f;
2105 }
2106
2107 #define PERLIO_MAX_REFCOUNTABLE_FD 2048
2108 #ifdef USE_THREADS
2109 perl_mutex PerlIO_mutex;
2110 #endif
2111 int PerlIO_fd_refcnt[PERLIO_MAX_REFCOUNTABLE_FD];
2112
2113 void
2114 PerlIO_init(pTHX)
2115 {
2116  /* Place holder for stdstreams call ??? */
2117 #ifdef USE_THREADS
2118  MUTEX_INIT(&PerlIO_mutex);
2119 #endif
2120 }
2121
2122 void
2123 PerlIOUnix_refcnt_inc(int fd)
2124 {
2125     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2126 #ifdef USE_THREADS
2127         MUTEX_LOCK(&PerlIO_mutex);
2128 #endif
2129         PerlIO_fd_refcnt[fd]++;
2130         PerlIO_debug("fd %d refcnt=%d\n",fd,PerlIO_fd_refcnt[fd]);
2131 #ifdef USE_THREADS
2132         MUTEX_UNLOCK(&PerlIO_mutex);
2133 #endif
2134     }
2135 }
2136
2137 int
2138 PerlIOUnix_refcnt_dec(int fd)
2139 {
2140     int cnt = 0;
2141     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2142 #ifdef USE_THREADS
2143         MUTEX_LOCK(&PerlIO_mutex);
2144 #endif
2145         cnt = --PerlIO_fd_refcnt[fd];
2146         PerlIO_debug("fd %d refcnt=%d\n",fd,cnt);
2147 #ifdef USE_THREADS
2148         MUTEX_UNLOCK(&PerlIO_mutex);
2149 #endif
2150     }
2151     return cnt;
2152 }
2153
2154 void
2155 PerlIO_cleanup(pTHX)
2156 {
2157     int i;
2158 #ifdef USE_ITHREADS
2159     PerlIO_debug("Cleanup layers for %p\n",aTHX);
2160 #else
2161     PerlIO_debug("Cleanup layers\n");
2162 #endif
2163     /* Raise STDIN..STDERR refcount so we don't close them */
2164     for (i=0; i < 3; i++)
2165         PerlIOUnix_refcnt_inc(i);
2166     PerlIO_cleantable(aTHX_ &PL_perlio);
2167     /* Restore STDIN..STDERR refcount */
2168     for (i=0; i < 3; i++)
2169         PerlIOUnix_refcnt_dec(i);
2170
2171     if (PL_known_layers) {
2172         PerlIO_list_free(aTHX_ PL_known_layers);
2173         PL_known_layers = NULL;
2174     }
2175     if(PL_def_layerlist) {
2176         PerlIO_list_free(aTHX_ PL_def_layerlist);
2177         PL_def_layerlist = NULL;
2178     }
2179 }
2180
2181
2182
2183 /*--------------------------------------------------------------------------------------*/
2184 /*
2185  * Bottom-most level for UNIX-like case
2186  */
2187
2188 typedef struct {
2189     struct _PerlIO base;        /* The generic part */
2190     int fd;                     /* UNIX like file descriptor */
2191     int oflags;                 /* open/fcntl flags */
2192 } PerlIOUnix;
2193
2194 int
2195 PerlIOUnix_oflags(const char *mode)
2196 {
2197     int oflags = -1;
2198     if (*mode == 'I' || *mode == '#')
2199         mode++;
2200     switch (*mode) {
2201     case 'r':
2202         oflags = O_RDONLY;
2203         if (*++mode == '+') {
2204             oflags = O_RDWR;
2205             mode++;
2206         }
2207         break;
2208
2209     case 'w':
2210         oflags = O_CREAT | O_TRUNC;
2211         if (*++mode == '+') {
2212             oflags |= O_RDWR;
2213             mode++;
2214         }
2215         else
2216             oflags |= O_WRONLY;
2217         break;
2218
2219     case 'a':
2220         oflags = O_CREAT | O_APPEND;
2221         if (*++mode == '+') {
2222             oflags |= O_RDWR;
2223             mode++;
2224         }
2225         else
2226             oflags |= O_WRONLY;
2227         break;
2228     }
2229     if (*mode == 'b') {
2230         oflags |= O_BINARY;
2231         oflags &= ~O_TEXT;
2232         mode++;
2233     }
2234     else if (*mode == 't') {
2235         oflags |= O_TEXT;
2236         oflags &= ~O_BINARY;
2237         mode++;
2238     }
2239     /*
2240      * Always open in binary mode
2241      */
2242     oflags |= O_BINARY;
2243     if (*mode || oflags == -1) {
2244         SETERRNO(EINVAL, LIB_INVARG);
2245         oflags = -1;
2246     }
2247     return oflags;
2248 }
2249
2250 IV
2251 PerlIOUnix_fileno(pTHX_ PerlIO *f)
2252 {
2253     return PerlIOSelf(f, PerlIOUnix)->fd;
2254 }
2255
2256 IV
2257 PerlIOUnix_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2258 {
2259     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2260     PerlIOUnix *s = PerlIOSelf(f, PerlIOUnix);
2261     if (*PerlIONext(f)) {
2262         /* We never call down so do any pending stuff now */
2263         PerlIO_flush(PerlIONext(f));
2264         s->fd = PerlIO_fileno(PerlIONext(f));
2265         /*
2266          * XXX could (or should) we retrieve the oflags from the open file
2267          * handle rather than believing the "mode" we are passed in? XXX
2268          * Should the value on NULL mode be 0 or -1?
2269          */
2270         s->oflags = mode ? PerlIOUnix_oflags(mode) : -1;
2271     }
2272     PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2273     return code;
2274 }
2275
2276 PerlIO *
2277 PerlIOUnix_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2278                 IV n, const char *mode, int fd, int imode,
2279                 int perm, PerlIO *f, int narg, SV **args)
2280 {
2281     if (PerlIOValid(f)) {
2282         if (PerlIOBase(f)->flags & PERLIO_F_OPEN)
2283             (*PerlIOBase(f)->tab->Close)(aTHX_ f);
2284     }
2285     if (narg > 0) {
2286         char *path = SvPV_nolen(*args);
2287         if (*mode == '#')
2288             mode++;
2289         else {
2290             imode = PerlIOUnix_oflags(mode);
2291             perm = 0666;
2292         }
2293         if (imode != -1) {
2294             fd = PerlLIO_open3(path, imode, perm);
2295         }
2296     }
2297     if (fd >= 0) {
2298         PerlIOUnix *s;
2299         if (*mode == 'I')
2300             mode++;
2301         if (!f) {
2302             f = PerlIO_allocate(aTHX);
2303         }
2304         if (!PerlIOValid(f)) {
2305             if (!(f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2306                 return NULL;
2307             }
2308         }
2309         s = PerlIOSelf(f, PerlIOUnix);
2310         s->fd = fd;
2311         s->oflags = imode;
2312         PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2313         PerlIOUnix_refcnt_inc(fd);
2314         return f;
2315     }
2316     else {
2317         if (f) {
2318             /*
2319              * FIXME: pop layers ???
2320              */
2321         }
2322         return NULL;
2323     }
2324 }
2325
2326 PerlIO *
2327 PerlIOUnix_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2328 {
2329     PerlIOUnix *os = PerlIOSelf(o, PerlIOUnix);
2330     int fd = os->fd;
2331     if (flags & PERLIO_DUP_FD) {
2332         fd = PerlLIO_dup(fd);
2333     }
2334     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2335         f = PerlIOBase_dup(aTHX_ f, o, param, flags);
2336         if (f) {
2337             /* If all went well overwrite fd in dup'ed lay with the dup()'ed fd */
2338             PerlIOUnix *s = PerlIOSelf(f, PerlIOUnix);
2339             s->fd = fd;
2340             PerlIOUnix_refcnt_inc(fd);
2341             return f;
2342         }
2343     }
2344     return NULL;
2345 }
2346
2347
2348 SSize_t
2349 PerlIOUnix_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2350 {
2351     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2352     if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD) ||
2353          PerlIOBase(f)->flags & (PERLIO_F_EOF|PERLIO_F_ERROR)) {
2354         return 0;
2355     }
2356     while (1) {
2357         SSize_t len = PerlLIO_read(fd, vbuf, count);
2358         if (len >= 0 || errno != EINTR) {
2359             if (len < 0)
2360                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2361             else if (len == 0 && count != 0)
2362                 PerlIOBase(f)->flags |= PERLIO_F_EOF;
2363             return len;
2364         }
2365         PERL_ASYNC_CHECK();
2366     }
2367 }
2368
2369 SSize_t
2370 PerlIOUnix_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2371 {
2372     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2373     while (1) {
2374         SSize_t len = PerlLIO_write(fd, vbuf, count);
2375         if (len >= 0 || errno != EINTR) {
2376             if (len < 0)
2377                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2378             return len;
2379         }
2380         PERL_ASYNC_CHECK();
2381     }
2382 }
2383
2384 IV
2385 PerlIOUnix_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2386 {
2387     Off_t new =
2388         PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, offset, whence);
2389     PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
2390     return (new == (Off_t) - 1) ? -1 : 0;
2391 }
2392
2393 Off_t
2394 PerlIOUnix_tell(pTHX_ PerlIO *f)
2395 {
2396     return PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, 0, SEEK_CUR);
2397 }
2398
2399
2400 IV
2401 PerlIOUnix_close(pTHX_ PerlIO *f)
2402 {
2403     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2404     int code = 0;
2405     if (PerlIOBase(f)->flags & PERLIO_F_OPEN) {
2406         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2407             PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2408             return 0;
2409         }
2410     }
2411     else {
2412         SETERRNO(EBADF,SS_IVCHAN);
2413         return -1;
2414     }
2415     while (PerlLIO_close(fd) != 0) {
2416         if (errno != EINTR) {
2417             code = -1;
2418             break;
2419         }
2420         PERL_ASYNC_CHECK();
2421     }
2422     if (code == 0) {
2423         PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2424     }
2425     return code;
2426 }
2427
2428 PerlIO_funcs PerlIO_unix = {
2429     sizeof(PerlIO_funcs),
2430     "unix",
2431     sizeof(PerlIOUnix),
2432     PERLIO_K_RAW,
2433     PerlIOUnix_pushed,
2434     PerlIOBase_popped,
2435     PerlIOUnix_open,
2436     PerlIOBase_binmode,         /* binmode */
2437     NULL,
2438     PerlIOUnix_fileno,
2439     PerlIOUnix_dup,
2440     PerlIOUnix_read,
2441     PerlIOBase_unread,
2442     PerlIOUnix_write,
2443     PerlIOUnix_seek,
2444     PerlIOUnix_tell,
2445     PerlIOUnix_close,
2446     PerlIOBase_noop_ok,         /* flush */
2447     PerlIOBase_noop_fail,       /* fill */
2448     PerlIOBase_eof,
2449     PerlIOBase_error,
2450     PerlIOBase_clearerr,
2451     PerlIOBase_setlinebuf,
2452     NULL,                       /* get_base */
2453     NULL,                       /* get_bufsiz */
2454     NULL,                       /* get_ptr */
2455     NULL,                       /* get_cnt */
2456     NULL,                       /* set_ptrcnt */
2457 };
2458
2459 /*--------------------------------------------------------------------------------------*/
2460 /*
2461  * stdio as a layer
2462  */
2463
2464 #if defined(VMS) && !defined(STDIO_BUFFER_WRITABLE)
2465 /* perl5.8 - This ensures the last minute VMS ungetc fix is not
2466    broken by the last second glibc 2.3 fix
2467  */
2468 #define STDIO_BUFFER_WRITABLE
2469 #endif
2470
2471
2472 typedef struct {
2473     struct _PerlIO base;
2474     FILE *stdio;                /* The stream */
2475 } PerlIOStdio;
2476
2477 IV
2478 PerlIOStdio_fileno(pTHX_ PerlIO *f)
2479 {
2480     FILE *s;
2481     if (PerlIOValid(f) && (s = PerlIOSelf(f, PerlIOStdio)->stdio)) {
2482         return PerlSIO_fileno(s);
2483     }
2484     errno = EBADF;
2485     return -1;
2486 }
2487
2488 char *
2489 PerlIOStdio_mode(const char *mode, char *tmode)
2490 {
2491     char *ret = tmode;
2492     while (*mode) {
2493         *tmode++ = *mode++;
2494     }
2495 #ifdef PERLIO_USING_CRLF
2496     *tmode++ = 'b';
2497 #endif
2498     *tmode = '\0';
2499     return ret;
2500 }
2501
2502 IV
2503 PerlIOStdio_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2504 {
2505     PerlIO *n;
2506     if (PerlIOValid(f) && PerlIOValid(n = PerlIONext(f))) {
2507         PerlIO_funcs *toptab = PerlIOBase(n)->tab;
2508         if (toptab == tab) {
2509             /* Top is already stdio - pop self (duplicate) and use original */
2510             PerlIO_pop(aTHX_ f);
2511             return 0;
2512         } else {
2513             int fd = PerlIO_fileno(n);
2514             char tmode[8];
2515             FILE *stdio;
2516             if (fd >= 0 && (stdio  = PerlSIO_fdopen(fd,
2517                             mode = PerlIOStdio_mode(mode, tmode)))) {
2518                 PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2519                 /* We never call down so do any pending stuff now */
2520                 PerlIO_flush(PerlIONext(f));
2521             }
2522             else {
2523                 return -1;
2524             }
2525         }
2526     }
2527     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2528 }
2529
2530
2531 PerlIO *
2532 PerlIO_importFILE(FILE *stdio, const char *mode)
2533 {
2534     dTHX;
2535     PerlIO *f = NULL;
2536     if (stdio) {
2537         PerlIOStdio *s;
2538         if (!mode || !*mode) {
2539             /* We need to probe to see how we can open the stream
2540                so start with read/write and then try write and read
2541                we dup() so that we can fclose without loosing the fd.
2542
2543                Note that the errno value set by a failing fdopen
2544                varies between stdio implementations.
2545              */
2546             int fd = PerlLIO_dup(fileno(stdio));
2547             FILE *f2 = PerlSIO_fdopen(fd, (mode = "r+"));
2548             if (!f2) {
2549                 f2 = PerlSIO_fdopen(fd, (mode = "w"));
2550             }
2551             if (!f2) {
2552                 f2 = PerlSIO_fdopen(fd, (mode = "r"));
2553             }
2554             if (!f2) {
2555                 /* Don't seem to be able to open */
2556                 PerlLIO_close(fd);
2557                 return f;
2558             }
2559             fclose(f2);
2560         }
2561         if ((f = PerlIO_push(aTHX_(f = PerlIO_allocate(aTHX)), &PerlIO_stdio, mode, Nullsv))) {
2562             s = PerlIOSelf(f, PerlIOStdio);
2563             s->stdio = stdio;
2564         }
2565     }
2566     return f;
2567 }
2568
2569 PerlIO *
2570 PerlIOStdio_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2571                  IV n, const char *mode, int fd, int imode,
2572                  int perm, PerlIO *f, int narg, SV **args)
2573 {
2574     char tmode[8];
2575     if (PerlIOValid(f)) {
2576         char *path = SvPV_nolen(*args);
2577         PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
2578         FILE *stdio;
2579         PerlIOUnix_refcnt_dec(fileno(s->stdio));
2580         stdio = PerlSIO_freopen(path, (mode = PerlIOStdio_mode(mode, tmode)),
2581                             s->stdio);
2582         if (!s->stdio)
2583             return NULL;
2584         s->stdio = stdio;
2585         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2586         return f;
2587     }
2588     else {
2589         if (narg > 0) {
2590             char *path = SvPV_nolen(*args);
2591             if (*mode == '#') {
2592                 mode++;
2593                 fd = PerlLIO_open3(path, imode, perm);
2594             }
2595             else {
2596                 FILE *stdio = PerlSIO_fopen(path, mode);
2597                 if (stdio) {
2598                     PerlIOStdio *s;
2599                     if (!f) {
2600                         f = PerlIO_allocate(aTHX);
2601                     }
2602                     if ((f = PerlIO_push(aTHX_ f, self,
2603                                     (mode = PerlIOStdio_mode(mode, tmode)),
2604                                     PerlIOArg))) {
2605                         s = PerlIOSelf(f, PerlIOStdio);
2606                         s->stdio = stdio;
2607                         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2608                     }
2609                     return f;
2610                 }
2611                 else {
2612                     return NULL;
2613                 }
2614             }
2615         }
2616         if (fd >= 0) {
2617             FILE *stdio = NULL;
2618             int init = 0;
2619             if (*mode == 'I') {
2620                 init = 1;
2621                 mode++;
2622             }
2623             if (init) {
2624                 switch (fd) {
2625                 case 0:
2626                     stdio = PerlSIO_stdin;
2627                     break;
2628                 case 1:
2629                     stdio = PerlSIO_stdout;
2630                     break;
2631                 case 2:
2632                     stdio = PerlSIO_stderr;
2633                     break;
2634                 }
2635             }
2636             else {
2637                 stdio = PerlSIO_fdopen(fd, mode =
2638                                        PerlIOStdio_mode(mode, tmode));
2639             }
2640             if (stdio) {
2641                 PerlIOStdio *s;
2642                 if (!f) {
2643                     f = PerlIO_allocate(aTHX);
2644                 }
2645                 if ((f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2646                     s = PerlIOSelf(f, PerlIOStdio);
2647                     s->stdio = stdio;
2648                     PerlIOUnix_refcnt_inc(fileno(s->stdio));
2649                 }
2650                 return f;
2651             }
2652         }
2653     }
2654     return NULL;
2655 }
2656
2657 PerlIO *
2658 PerlIOStdio_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2659 {
2660     /* This assumes no layers underneath - which is what
2661        happens, but is not how I remember it. NI-S 2001/10/16
2662      */
2663     if ((f = PerlIOBase_dup(aTHX_ f, o, param, flags))) {
2664         FILE *stdio = PerlIOSelf(o, PerlIOStdio)->stdio;
2665         int fd = fileno(stdio);
2666         char mode[8];
2667         if (flags & PERLIO_DUP_FD) {
2668             int dfd = PerlLIO_dup(fileno(stdio));
2669             if (dfd >= 0) {
2670                 stdio = PerlSIO_fdopen(dfd, PerlIO_modestr(o,mode));
2671                 goto set_this;
2672             }
2673             else {
2674                 /* FIXME: To avoid messy error recovery if dup fails
2675                    re-use the existing stdio as though flag was not set
2676                  */
2677             }
2678         }
2679         stdio = PerlSIO_fdopen(fd, PerlIO_modestr(o,mode));
2680     set_this:
2681         PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2682         PerlIOUnix_refcnt_inc(fileno(stdio));
2683     }
2684     return f;
2685 }
2686
2687 static int
2688 PerlIOStdio_invalidate_fileno(pTHX_ FILE *f)
2689 {
2690     /* XXX this could use PerlIO_canset_fileno() and
2691      * PerlIO_set_fileno() support from Configure 
2692      */
2693 #  if defined(__GLIBC__)
2694     /* There may be a better way for GLIBC:
2695         - libio.h defines a flag to not close() on cleanup 
2696      */ 
2697     f->_fileno = -1;
2698     return 1;
2699 #  elif defined(__sun__)
2700 #    if defined(_LP64)
2701     /* On solaris, if _LP64 is defined, the FILE structure is this:
2702      *
2703      *  struct FILE {
2704      *      long __pad[16];
2705      *  };
2706      *
2707      * It turns out that the fd is stored in the top 32 bits of 
2708      * file->__pad[4]. The lower 32 bits contain flags. file->pad[5] appears
2709      * to contain a pointer or offset into another structure. All the
2710      * remaining fields are zero.
2711      *
2712      * We set the top bits to -1 (0xFFFFFFFF).
2713      */
2714     f->__pad[4] |= 0xffffffff00000000L;
2715     assert(fileno(f) == 0xffffffff);
2716 #    else /* !defined(_LP64) */
2717     /* _file is just a unsigned char :-( 
2718        Not clear why we dup() rather than using -1 
2719        even if that would be treated as 0xFF - so will 
2720        a dup fail ...
2721      */
2722     f->_file = PerlLIO_dup(fd);
2723 #    endif /* defined(_LP64) */
2724     return 1;
2725 #  elif defined(__hpux)
2726     f->__fileH = 0xff;
2727     f->__fileL = 0xff;
2728     return 1;
2729 #  elif defined(_AIX)
2730     f->_file = -1;
2731     return 1;
2732 #  elif defined(__FreeBSD__)
2733     /* There may be a better way on FreeBSD:
2734         - we could insert a dummy func in the _close function entry 
2735         f->_close = (int (*)(void *)) dummy_close; 
2736      */
2737     f->_file = -1;
2738     return 1;
2739 #  elif defined(__CYGWIN__)
2740     /* There may be a better way on CYGWIN:
2741         - we could insert a dummy func in the _close function entry 
2742         f->_close = (int (*)(void *)) dummy_close; 
2743      */
2744     f->_file = -1;
2745     return 1;
2746 #  elif defined(WIN32)
2747 #    if defined(__BORLANDC__)
2748     f->fd = PerlLIO_dup(fileno(f));
2749 #    else
2750     f->_file = -1;
2751 #    endif
2752     return 1;
2753 #  else
2754 #if 0
2755     /* Sarathy's code did this - we fall back to a dup/dup2 hack 
2756        (which isn't thread safe) instead
2757      */  
2758 #    error "Don't know how to set FILE.fileno on your platform"
2759 #endif
2760     return 0;
2761 #  endif
2762 }
2763
2764 IV
2765 PerlIOStdio_close(pTHX_ PerlIO *f)
2766 {
2767     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2768     if (!stdio) {
2769         errno = EBADF;
2770         return -1;
2771     }
2772     else {
2773         int fd = fileno(stdio);
2774         int socksfd = 0;
2775         int invalidate = 0;
2776         IV result;
2777         int saveerr = 0;
2778         int dupfd = 0;
2779 #ifdef SOCKS5_VERSION_NAME
2780         /* Socks lib overrides close() but stdio isn't linked to 
2781            that library (though we are) - so we must call close() 
2782            on sockets on stdio's behalf. 
2783          */   
2784         int optval;
2785         Sock_size_t optlen = sizeof(int);
2786         if (getsockopt(fd, SOL_SOCKET, SO_TYPE, (void *) &optval, &optlen) == 0) {
2787             socksfd = 1;
2788             invalidate = 1;  
2789         }
2790 #endif
2791         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2792             /* File descriptor still in use */
2793             invalidate = 1;
2794             socksfd = 0;
2795         }    
2796         if (invalidate) {
2797             /* For STD* handles don't close the stdio at all 
2798                this is because we have shared the FILE * too 
2799              */
2800             if (stdio == stdin) {
2801                 /* Some stdios are buggy fflush-ing inputs */
2802                 return 0;
2803             }
2804             else if (stdio == stdout || stdio == stderr) {
2805                 return PerlIO_flush(f);
2806             }
2807             /* Tricky - must fclose(stdio) to free memory but not close(fd) 
2808                Use Sarathy's trick from maint-5.6 to invalidate the 
2809                fileno slot of the FILE * 
2810             */ 
2811             saveerr = errno;
2812             if (!(invalidate = PerlIOStdio_invalidate_fileno(aTHX_ stdio))) {
2813                 dupfd = PerlLIO_dup(fd);
2814             }
2815         } 
2816         result = PerlSIO_fclose(stdio);
2817         /* We treat error from stdio as success if we invalidated 
2818            errno may NOT be expected EBADF 
2819          */
2820         if (invalidate && result != 0) {
2821             errno = saveerr;
2822             result = 0;
2823         } 
2824         if (socksfd) {
2825             /* in SOCKS case let close() determine return value */
2826             result = close(fd);
2827         }
2828         if (dupfd) {
2829             PerlLIO_dup2(dupfd,fd);
2830             close(dupfd);
2831         }
2832         return result;
2833     } 
2834
2835 }
2836
2837 SSize_t
2838 PerlIOStdio_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2839 {
2840     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
2841     SSize_t got = 0;
2842     if (count == 1) {
2843         STDCHAR *buf = (STDCHAR *) vbuf;
2844         /*
2845          * Perl is expecting PerlIO_getc() to fill the buffer Linux's
2846          * stdio does not do that for fread()
2847          */
2848         int ch = PerlSIO_fgetc(s);
2849         if (ch != EOF) {
2850             *buf = ch;
2851             got = 1;
2852         }
2853     }
2854     else
2855         got = PerlSIO_fread(vbuf, 1, count, s);
2856     return got;
2857 }
2858
2859 SSize_t
2860 PerlIOStdio_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2861 {
2862     SSize_t unread = 0;
2863     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
2864
2865 #ifdef STDIO_BUFFER_WRITABLE
2866     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
2867         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
2868         STDCHAR *base = PerlIO_get_base(f);
2869         SSize_t cnt   = PerlIO_get_cnt(f);
2870         STDCHAR *ptr  = PerlIO_get_ptr(f);
2871         SSize_t avail = ptr - base;
2872         if (avail > 0) {
2873             if (avail > count) {
2874                 avail = count;
2875             }
2876             ptr -= avail;
2877             Move(buf-avail,ptr,avail,STDCHAR);
2878             count -= avail;
2879             unread += avail;
2880             PerlIO_set_ptrcnt(f,ptr,cnt+avail);
2881             if (PerlSIO_feof(s) && unread >= 0)
2882                 PerlSIO_clearerr(s);
2883         }
2884     }
2885     else
2886 #endif
2887     if (PerlIO_has_cntptr(f)) {
2888         /* We can get pointer to buffer but not its base
2889            Do ungetc() but check chars are ending up in the
2890            buffer
2891          */
2892         STDCHAR *eptr = (STDCHAR*)PerlSIO_get_ptr(s);
2893         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
2894         while (count > 0) {
2895             int ch = *--buf & 0xFF;
2896             if (ungetc(ch,s) != ch) {
2897                 /* ungetc did not work */
2898                 break;
2899             }
2900             if ((STDCHAR*)PerlSIO_get_ptr(s) != --eptr || ((*eptr & 0xFF) != ch)) {
2901                 /* Did not change pointer as expected */
2902                 fgetc(s);  /* get char back again */
2903                 break;
2904             }
2905             /* It worked ! */
2906             count--;
2907             unread++;
2908         }
2909     }
2910
2911     if (count > 0) {
2912         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
2913     }
2914     return unread;
2915 }
2916
2917 SSize_t
2918 PerlIOStdio_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2919 {
2920     return PerlSIO_fwrite(vbuf, 1, count,
2921                           PerlIOSelf(f, PerlIOStdio)->stdio);
2922 }
2923
2924 IV
2925 PerlIOStdio_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2926 {
2927     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2928     return PerlSIO_fseek(stdio, offset, whence);
2929 }
2930
2931 Off_t
2932 PerlIOStdio_tell(pTHX_ PerlIO *f)
2933 {
2934     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2935     return PerlSIO_ftell(stdio);
2936 }
2937
2938 IV
2939 PerlIOStdio_flush(pTHX_ PerlIO *f)
2940 {
2941     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2942     if (PerlIOBase(f)->flags & PERLIO_F_CANWRITE) {
2943         return PerlSIO_fflush(stdio);
2944     }
2945     else {
2946 #if 0
2947         /*
2948          * FIXME: This discards ungetc() and pre-read stuff which is not
2949          * right if this is just a "sync" from a layer above Suspect right
2950          * design is to do _this_ but not have layer above flush this
2951          * layer read-to-read
2952          */
2953         /*
2954          * Not writeable - sync by attempting a seek
2955          */
2956         int err = errno;
2957         if (PerlSIO_fseek(stdio, (Off_t) 0, SEEK_CUR) != 0)
2958             errno = err;
2959 #endif
2960     }
2961     return 0;
2962 }
2963
2964 IV
2965 PerlIOStdio_eof(pTHX_ PerlIO *f)
2966 {
2967     return PerlSIO_feof(PerlIOSelf(f, PerlIOStdio)->stdio);
2968 }
2969
2970 IV
2971 PerlIOStdio_error(pTHX_ PerlIO *f)
2972 {
2973     return PerlSIO_ferror(PerlIOSelf(f, PerlIOStdio)->stdio);
2974 }
2975
2976 void
2977 PerlIOStdio_clearerr(pTHX_ PerlIO *f)
2978 {
2979     PerlSIO_clearerr(PerlIOSelf(f, PerlIOStdio)->stdio);
2980 }
2981
2982 void
2983 PerlIOStdio_setlinebuf(pTHX_ PerlIO *f)
2984 {
2985 #ifdef HAS_SETLINEBUF
2986     PerlSIO_setlinebuf(PerlIOSelf(f, PerlIOStdio)->stdio);
2987 #else
2988     PerlSIO_setvbuf(PerlIOSelf(f, PerlIOStdio)->stdio, Nullch, _IOLBF, 0);
2989 #endif
2990 }
2991
2992 #ifdef FILE_base
2993 STDCHAR *
2994 PerlIOStdio_get_base(pTHX_ PerlIO *f)
2995 {
2996     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2997     return (STDCHAR*)PerlSIO_get_base(stdio);
2998 }
2999
3000 Size_t
3001 PerlIOStdio_get_bufsiz(pTHX_ PerlIO *f)
3002 {
3003     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3004     return PerlSIO_get_bufsiz(stdio);
3005 }
3006 #endif
3007
3008 #ifdef USE_STDIO_PTR
3009 STDCHAR *
3010 PerlIOStdio_get_ptr(pTHX_ PerlIO *f)
3011 {
3012     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3013     return (STDCHAR*)PerlSIO_get_ptr(stdio);
3014 }
3015
3016 SSize_t
3017 PerlIOStdio_get_cnt(pTHX_ PerlIO *f)
3018 {
3019     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3020     return PerlSIO_get_cnt(stdio);
3021 }
3022
3023 void
3024 PerlIOStdio_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3025 {
3026     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3027     if (ptr != NULL) {
3028 #ifdef STDIO_PTR_LVALUE
3029         PerlSIO_set_ptr(stdio, (void*)ptr); /* LHS STDCHAR* cast non-portable */
3030 #ifdef STDIO_PTR_LVAL_SETS_CNT
3031         if (PerlSIO_get_cnt(stdio) != (cnt)) {
3032             assert(PerlSIO_get_cnt(stdio) == (cnt));
3033         }
3034 #endif
3035 #if (!defined(STDIO_PTR_LVAL_NOCHANGE_CNT))
3036         /*
3037          * Setting ptr _does_ change cnt - we are done
3038          */
3039         return;
3040 #endif
3041 #else                           /* STDIO_PTR_LVALUE */
3042         PerlProc_abort();
3043 #endif                          /* STDIO_PTR_LVALUE */
3044     }
3045     /*
3046      * Now (or only) set cnt
3047      */
3048 #ifdef STDIO_CNT_LVALUE
3049     PerlSIO_set_cnt(stdio, cnt);
3050 #else                           /* STDIO_CNT_LVALUE */
3051 #if (defined(STDIO_PTR_LVALUE) && defined(STDIO_PTR_LVAL_SETS_CNT))
3052     PerlSIO_set_ptr(stdio,
3053                     PerlSIO_get_ptr(stdio) + (PerlSIO_get_cnt(stdio) -
3054                                               cnt));
3055 #else                           /* STDIO_PTR_LVAL_SETS_CNT */
3056     PerlProc_abort();
3057 #endif                          /* STDIO_PTR_LVAL_SETS_CNT */
3058 #endif                          /* STDIO_CNT_LVALUE */
3059 }
3060
3061
3062 #endif
3063
3064 IV
3065 PerlIOStdio_fill(pTHX_ PerlIO *f)
3066 {
3067     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3068     int c;
3069     /*
3070      * fflush()ing read-only streams can cause trouble on some stdio-s
3071      */
3072     if ((PerlIOBase(f)->flags & PERLIO_F_CANWRITE)) {
3073         if (PerlSIO_fflush(stdio) != 0)
3074             return EOF;
3075     }
3076     c = PerlSIO_fgetc(stdio);
3077     if (c == EOF)
3078         return EOF;
3079
3080 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
3081
3082 #ifdef STDIO_BUFFER_WRITABLE
3083     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
3084         /* Fake ungetc() to the real buffer in case system's ungetc
3085            goes elsewhere
3086          */
3087         STDCHAR *base = (STDCHAR*)PerlSIO_get_base(stdio);
3088         SSize_t cnt   = PerlSIO_get_cnt(stdio);
3089         STDCHAR *ptr  = (STDCHAR*)PerlSIO_get_ptr(stdio);
3090         if (ptr == base+1) {
3091             *--ptr = (STDCHAR) c;
3092             PerlIOStdio_set_ptrcnt(aTHX_ f,ptr,cnt+1);
3093             if (PerlSIO_feof(stdio))
3094                 PerlSIO_clearerr(stdio);
3095             return 0;
3096         }
3097     }
3098     else
3099 #endif
3100     if (PerlIO_has_cntptr(f)) {
3101         STDCHAR ch = c;
3102         if (PerlIOStdio_unread(aTHX_ f,&ch,1) == 1) {
3103             return 0;
3104         }
3105     }
3106 #endif
3107
3108 #if defined(VMS)
3109     /* An ungetc()d char is handled separately from the regular
3110      * buffer, so we stuff it in the buffer ourselves.
3111      * Should never get called as should hit code above
3112      */
3113     *(--((*stdio)->_ptr)) = (unsigned char) c;
3114     (*stdio)->_cnt++;
3115 #else
3116     /* If buffer snoop scheme above fails fall back to
3117        using ungetc().
3118      */
3119     if (PerlSIO_ungetc(c, stdio) != c)
3120         return EOF;
3121 #endif
3122     return 0;
3123 }
3124
3125
3126
3127 PerlIO_funcs PerlIO_stdio = {
3128     sizeof(PerlIO_funcs),
3129     "stdio",
3130     sizeof(PerlIOStdio),
3131     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3132     PerlIOStdio_pushed,
3133     PerlIOBase_popped,
3134     PerlIOStdio_open,
3135     PerlIOBase_binmode,         /* binmode */
3136     NULL,
3137     PerlIOStdio_fileno,
3138     PerlIOStdio_dup,
3139     PerlIOStdio_read,
3140     PerlIOStdio_unread,
3141     PerlIOStdio_write,
3142     PerlIOStdio_seek,
3143     PerlIOStdio_tell,
3144     PerlIOStdio_close,
3145     PerlIOStdio_flush,
3146     PerlIOStdio_fill,
3147     PerlIOStdio_eof,
3148     PerlIOStdio_error,
3149     PerlIOStdio_clearerr,
3150     PerlIOStdio_setlinebuf,
3151 #ifdef FILE_base
3152     PerlIOStdio_get_base,
3153     PerlIOStdio_get_bufsiz,
3154 #else
3155     NULL,
3156     NULL,
3157 #endif
3158 #ifdef USE_STDIO_PTR
3159     PerlIOStdio_get_ptr,
3160     PerlIOStdio_get_cnt,
3161 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
3162     PerlIOStdio_set_ptrcnt
3163 #else                           /* STDIO_PTR_LVALUE */
3164     NULL
3165 #endif                          /* STDIO_PTR_LVALUE */
3166 #else                           /* USE_STDIO_PTR */
3167     NULL,
3168     NULL,
3169     NULL
3170 #endif                          /* USE_STDIO_PTR */
3171 };
3172
3173 /* Note that calls to PerlIO_exportFILE() are reversed using
3174  * PerlIO_releaseFILE(), not importFILE. */
3175 FILE *
3176 PerlIO_exportFILE(PerlIO * f, const char *mode)
3177 {
3178     dTHX;
3179     FILE *stdio = NULL;
3180     if (PerlIOValid(f)) {
3181         char buf[8];
3182         PerlIO_flush(f);
3183         if (!mode || !*mode) {
3184             mode = PerlIO_modestr(f, buf);
3185         }
3186         stdio = PerlSIO_fdopen(PerlIO_fileno(f), mode);
3187         if (stdio) {
3188             PerlIOl *l = *f;
3189             /* De-link any lower layers so new :stdio sticks */
3190             *f = NULL;
3191             if ((f = PerlIO_push(aTHX_ f, &PerlIO_stdio, buf, Nullsv))) {
3192                 PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
3193                 s->stdio = stdio;
3194                 /* Link previous lower layers under new one */
3195                 *PerlIONext(f) = l;
3196             }
3197             else {
3198                 /* restore layers list */
3199                 *f = l;
3200             }
3201         }
3202     }
3203     return stdio;
3204 }
3205
3206
3207 FILE *
3208 PerlIO_findFILE(PerlIO *f)
3209 {
3210     PerlIOl *l = *f;
3211     while (l) {
3212         if (l->tab == &PerlIO_stdio) {
3213             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3214             return s->stdio;
3215         }
3216         l = *PerlIONext(&l);
3217     }
3218     /* Uses fallback "mode" via PerlIO_modestr() in PerlIO_exportFILE */
3219     return PerlIO_exportFILE(f, Nullch);
3220 }
3221
3222 /* Use this to reverse PerlIO_exportFILE calls. */
3223 void
3224 PerlIO_releaseFILE(PerlIO *p, FILE *f)
3225 {
3226     PerlIOl *l;
3227     while ((l = *p)) {
3228         if (l->tab == &PerlIO_stdio) {
3229             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3230             if (s->stdio == f) {
3231                 dTHX;
3232                 PerlIO_pop(aTHX_ p);
3233                 return;
3234             }
3235         }
3236         p = PerlIONext(p);
3237     }
3238     return;
3239 }
3240
3241 /*--------------------------------------------------------------------------------------*/
3242 /*
3243  * perlio buffer layer
3244  */
3245
3246 IV
3247 PerlIOBuf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3248 {
3249     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3250     int fd = PerlIO_fileno(f);
3251     if (fd >= 0 && PerlLIO_isatty(fd)) {
3252         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF | PERLIO_F_TTY;
3253     }
3254     if (*PerlIONext(f)) {
3255         Off_t posn = PerlIO_tell(PerlIONext(f));
3256         if (posn != (Off_t) - 1) {
3257             b->posn = posn;
3258         }
3259     }
3260     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3261 }
3262
3263 PerlIO *
3264 PerlIOBuf_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
3265                IV n, const char *mode, int fd, int imode, int perm,
3266                PerlIO *f, int narg, SV **args)
3267 {
3268     if (PerlIOValid(f)) {
3269         PerlIO *next = PerlIONext(f);
3270         PerlIO_funcs *tab =  PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIOBase(next)->tab);
3271         next = (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3272                           next, narg, args);
3273         if (!next || (*PerlIOBase(f)->tab->Pushed) (aTHX_ f, mode, PerlIOArg, self) != 0) {
3274             return NULL;
3275         }
3276     }
3277     else {
3278         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIO_default_btm());
3279         int init = 0;
3280         if (*mode == 'I') {
3281             init = 1;
3282             /*
3283              * mode++;
3284              */
3285         }
3286         f = (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3287                           f, narg, args);
3288         if (f) {
3289             if (PerlIO_push(aTHX_ f, self, mode, PerlIOArg) == 0) {
3290                 /*
3291                  * if push fails during open, open fails. close will pop us.
3292                  */
3293                 PerlIO_close (f);
3294                 return NULL;
3295             } else {
3296                 fd = PerlIO_fileno(f);
3297                 if (init && fd == 2) {
3298                     /*
3299                      * Initial stderr is unbuffered
3300                      */
3301                     PerlIOBase(f)->flags |= PERLIO_F_UNBUF;
3302                 }
3303 #ifdef PERLIO_USING_CRLF
3304 #  ifdef PERLIO_IS_BINMODE_FD
3305                 if (PERLIO_IS_BINMODE_FD(fd))
3306                     PerlIO_binmode(f,  '<'/*not used*/, O_BINARY, Nullch);
3307                 else
3308 #  endif
3309                 /*
3310                  * do something about failing setmode()? --jhi
3311                  */
3312                 PerlLIO_setmode(fd, O_BINARY);
3313 #endif
3314             }
3315         }
3316     }
3317     return f;
3318 }
3319
3320 /*
3321  * This "flush" is akin to sfio's sync in that it handles files in either
3322  * read or write state
3323  */
3324 IV
3325 PerlIOBuf_flush(pTHX_ PerlIO *f)
3326 {
3327     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3328     int code = 0;
3329     PerlIO *n = PerlIONext(f);
3330     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF) {
3331         /*
3332          * write() the buffer
3333          */
3334         STDCHAR *buf = b->buf;
3335         STDCHAR *p = buf;
3336         while (p < b->ptr) {
3337             SSize_t count = PerlIO_write(n, p, b->ptr - p);
3338             if (count > 0) {
3339                 p += count;
3340             }
3341             else if (count < 0 || PerlIO_error(n)) {
3342                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3343                 code = -1;
3344                 break;
3345             }
3346         }
3347         b->posn += (p - buf);
3348     }
3349     else if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3350         STDCHAR *buf = PerlIO_get_base(f);
3351         /*
3352          * Note position change
3353          */
3354         b->posn += (b->ptr - buf);
3355         if (b->ptr < b->end) {
3356             /* We did not consume all of it - try and seek downstream to
3357                our logical position
3358              */
3359             if (PerlIOValid(n) && PerlIO_seek(n, b->posn, SEEK_SET) == 0) {
3360                 /* Reload n as some layers may pop themselves on seek */
3361                 b->posn = PerlIO_tell(n = PerlIONext(f));
3362             }
3363             else {
3364                 /* Seek failed (e.g. pipe or tty). Do NOT clear buffer or pre-read
3365                    data is lost for good - so return saying "ok" having undone
3366                    the position adjust
3367                  */
3368                 b->posn -= (b->ptr - buf);
3369                 return code;
3370             }
3371         }
3372     }
3373     b->ptr = b->end = b->buf;
3374     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3375     /* We check for Valid because of dubious decision to make PerlIO_flush(NULL) flush all */
3376     if (PerlIOValid(n) && PerlIO_flush(n) != 0)
3377         code = -1;
3378     return code;
3379 }
3380
3381 IV
3382 PerlIOBuf_fill(pTHX_ PerlIO *f)
3383 {
3384     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3385     PerlIO *n = PerlIONext(f);
3386     SSize_t avail;
3387     /*
3388      * Down-stream flush is defined not to loose read data so is harmless.
3389      * we would not normally be fill'ing if there was data left in anycase.
3390      */
3391     if (PerlIO_flush(f) != 0)
3392         return -1;
3393     if (PerlIOBase(f)->flags & PERLIO_F_TTY)
3394         PerlIOBase_flush_linebuf(aTHX);
3395
3396     if (!b->buf)
3397         PerlIO_get_base(f);     /* allocate via vtable */
3398
3399     b->ptr = b->end = b->buf;
3400
3401     if (!PerlIOValid(n)) {
3402         PerlIOBase(f)->flags |= PERLIO_F_EOF;
3403         return -1;
3404     }
3405
3406     if (PerlIO_fast_gets(n)) {
3407         /*
3408          * Layer below is also buffered. We do _NOT_ want to call its
3409          * ->Read() because that will loop till it gets what we asked for
3410          * which may hang on a pipe etc. Instead take anything it has to
3411          * hand, or ask it to fill _once_.
3412          */
3413         avail = PerlIO_get_cnt(n);
3414         if (avail <= 0) {
3415             avail = PerlIO_fill(n);
3416             if (avail == 0)
3417                 avail = PerlIO_get_cnt(n);
3418             else {
3419                 if (!PerlIO_error(n) && PerlIO_eof(n))
3420                     avail = 0;
3421             }
3422         }
3423         if (avail > 0) {
3424             STDCHAR *ptr = PerlIO_get_ptr(n);
3425             SSize_t cnt = avail;
3426             if (avail > (SSize_t)b->bufsiz)
3427                 avail = b->bufsiz;
3428             Copy(ptr, b->buf, avail, STDCHAR);
3429             PerlIO_set_ptrcnt(n, ptr + avail, cnt - avail);
3430         }
3431     }
3432     else {
3433         avail = PerlIO_read(n, b->ptr, b->bufsiz);
3434     }
3435     if (avail <= 0) {
3436         if (avail == 0)
3437             PerlIOBase(f)->flags |= PERLIO_F_EOF;
3438         else
3439             PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3440         return -1;
3441     }
3442     b->end = b->buf + avail;
3443     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3444     return 0;
3445 }
3446
3447 SSize_t
3448 PerlIOBuf_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3449 {
3450     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3451     if (PerlIOValid(f)) {
3452         if (!b->ptr)
3453             PerlIO_get_base(f);
3454         return PerlIOBase_read(aTHX_ f, vbuf, count);
3455     }
3456     return 0;
3457 }
3458
3459 SSize_t
3460 PerlIOBuf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3461 {
3462     const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3463     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3464     SSize_t unread = 0;
3465     SSize_t avail;
3466     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3467         PerlIO_flush(f);
3468     if (!b->buf)
3469         PerlIO_get_base(f);
3470     if (b->buf) {
3471         if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3472             /*
3473              * Buffer is already a read buffer, we can overwrite any chars
3474              * which have been read back to buffer start
3475              */
3476             avail = (b->ptr - b->buf);
3477         }
3478         else {
3479             /*
3480              * Buffer is idle, set it up so whole buffer is available for
3481              * unread
3482              */
3483             avail = b->bufsiz;
3484             b->end = b->buf + avail;
3485             b->ptr = b->end;
3486             PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3487             /*
3488              * Buffer extends _back_ from where we are now
3489              */
3490             b->posn -= b->bufsiz;
3491         }
3492         if (avail > (SSize_t) count) {
3493             /*
3494              * If we have space for more than count, just move count
3495              */
3496             avail = count;
3497         }
3498         if (avail > 0) {
3499             b->ptr -= avail;
3500             buf -= avail;
3501             /*
3502              * In simple stdio-like ungetc() case chars will be already
3503              * there
3504              */
3505             if (buf != b->ptr) {
3506                 Copy(buf, b->ptr, avail, STDCHAR);
3507             }
3508             count -= avail;
3509             unread += avail;
3510             PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3511         }
3512     }
3513     if (count > 0) {
3514         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
3515     }
3516     return unread;
3517 }
3518
3519 SSize_t
3520 PerlIOBuf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3521 {
3522     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3523     const STDCHAR *buf = (const STDCHAR *) vbuf;
3524     Size_t written = 0;
3525     if (!b->buf)
3526         PerlIO_get_base(f);
3527     if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
3528         return 0;
3529     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3530         if (PerlIO_flush(f) != 0) {
3531             return 0;
3532         }
3533     }   
3534     while (count > 0) {
3535         SSize_t avail = b->bufsiz - (b->ptr - b->buf);
3536         if ((SSize_t) count < avail)
3537             avail = count;
3538         PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
3539         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
3540             while (avail > 0) {
3541                 int ch = *buf++;
3542                 *(b->ptr)++ = ch;
3543                 count--;
3544                 avail--;
3545                 written++;
3546                 if (ch == '\n') {
3547                     PerlIO_flush(f);
3548                     break;
3549                 }
3550             }
3551         }
3552         else {
3553             if (avail) {
3554                 Copy(buf, b->ptr, avail, STDCHAR);
3555                 count -= avail;
3556                 buf += avail;
3557                 written += avail;
3558                 b->ptr += avail;
3559             }
3560         }
3561         if (b->ptr >= (b->buf + b->bufsiz))
3562             PerlIO_flush(f);
3563     }
3564     if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
3565         PerlIO_flush(f);
3566     return written;
3567 }
3568
3569 IV
3570 PerlIOBuf_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3571 {
3572     IV code;
3573     if ((code = PerlIO_flush(f)) == 0) {
3574         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3575         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3576         code = PerlIO_seek(PerlIONext(f), offset, whence);
3577         if (code == 0) {
3578             b->posn = PerlIO_tell(PerlIONext(f));
3579         }
3580     }
3581     return code;
3582 }
3583
3584 Off_t
3585 PerlIOBuf_tell(pTHX_ PerlIO *f)
3586 {
3587     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3588     /*
3589      * b->posn is file position where b->buf was read, or will be written
3590      */
3591     Off_t posn = b->posn;
3592     if ((PerlIOBase(f)->flags & PERLIO_F_APPEND) && 
3593         (PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
3594 #if 1
3595         /* As O_APPEND files are normally shared in some sense it is better
3596            to flush :
3597          */     
3598         PerlIO_flush(f);
3599 #else   
3600         /* when file is NOT shared then this is sufficient */ 
3601         PerlIO_seek(PerlIONext(f),0, SEEK_END);
3602 #endif
3603         posn = b->posn = PerlIO_tell(PerlIONext(f));
3604     }
3605     if (b->buf) {
3606         /*
3607          * If buffer is valid adjust position by amount in buffer
3608          */
3609         posn += (b->ptr - b->buf);
3610     }
3611     return posn;
3612 }
3613
3614 IV
3615 PerlIOBuf_popped(pTHX_ PerlIO *f)
3616 {
3617     IV code = PerlIOBase_popped(aTHX_ f);
3618     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3619     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3620         Safefree(b->buf);
3621     }
3622     b->buf = NULL;
3623     b->ptr = b->end = b->buf;
3624     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3625     return code;
3626 }
3627
3628 IV
3629 PerlIOBuf_close(pTHX_ PerlIO *f)
3630 {
3631     IV code = PerlIOBase_close(aTHX_ f);
3632     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3633     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3634         Safefree(b->buf);
3635     }
3636     b->buf = NULL;
3637     b->ptr = b->end = b->buf;
3638     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3639     return code;
3640 }
3641
3642 STDCHAR *
3643 PerlIOBuf_get_ptr(pTHX_ PerlIO *f)
3644 {
3645     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3646     if (!b->buf)
3647         PerlIO_get_base(f);
3648     return b->ptr;
3649 }
3650
3651 SSize_t
3652 PerlIOBuf_get_cnt(pTHX_ PerlIO *f)
3653 {
3654     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3655     if (!b->buf)
3656         PerlIO_get_base(f);
3657     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF)
3658         return (b->end - b->ptr);
3659     return 0;
3660 }
3661
3662 STDCHAR *
3663 PerlIOBuf_get_base(pTHX_ PerlIO *f)
3664 {
3665     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3666     if (!b->buf) {
3667         if (!b->bufsiz)
3668             b->bufsiz = 4096;
3669         b->buf =
3670         Newz('B',b->buf,b->bufsiz, STDCHAR);
3671         if (!b->buf) {
3672             b->buf = (STDCHAR *) & b->oneword;
3673             b->bufsiz = sizeof(b->oneword);
3674         }
3675         b->ptr = b->buf;
3676         b->end = b->ptr;
3677     }
3678     return b->buf;
3679 }
3680
3681 Size_t
3682 PerlIOBuf_bufsiz(pTHX_ PerlIO *f)
3683 {
3684     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3685     if (!b->buf)
3686         PerlIO_get_base(f);
3687     return (b->end - b->buf);
3688 }
3689
3690 void
3691 PerlIOBuf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3692 {
3693     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3694     if (!b->buf)
3695         PerlIO_get_base(f);
3696     b->ptr = ptr;
3697     if (PerlIO_get_cnt(f) != cnt || b->ptr < b->buf) {
3698         assert(PerlIO_get_cnt(f) == cnt);
3699         assert(b->ptr >= b->buf);
3700     }
3701     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3702 }
3703
3704 PerlIO *
3705 PerlIOBuf_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
3706 {
3707  return PerlIOBase_dup(aTHX_ f, o, param, flags);
3708 }
3709
3710
3711
3712 PerlIO_funcs PerlIO_perlio = {
3713     sizeof(PerlIO_funcs),
3714     "perlio",
3715     sizeof(PerlIOBuf),
3716     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3717     PerlIOBuf_pushed,
3718     PerlIOBuf_popped,
3719     PerlIOBuf_open,
3720     PerlIOBase_binmode,         /* binmode */
3721     NULL,
3722     PerlIOBase_fileno,
3723     PerlIOBuf_dup,
3724     PerlIOBuf_read,
3725     PerlIOBuf_unread,
3726     PerlIOBuf_write,
3727     PerlIOBuf_seek,
3728     PerlIOBuf_tell,
3729     PerlIOBuf_close,
3730     PerlIOBuf_flush,
3731     PerlIOBuf_fill,
3732     PerlIOBase_eof,
3733     PerlIOBase_error,
3734     PerlIOBase_clearerr,
3735     PerlIOBase_setlinebuf,
3736     PerlIOBuf_get_base,
3737     PerlIOBuf_bufsiz,
3738     PerlIOBuf_get_ptr,
3739     PerlIOBuf_get_cnt,
3740     PerlIOBuf_set_ptrcnt,
3741 };
3742
3743 /*--------------------------------------------------------------------------------------*/
3744 /*
3745  * Temp layer to hold unread chars when cannot do it any other way
3746  */
3747
3748 IV
3749 PerlIOPending_fill(pTHX_ PerlIO *f)
3750 {
3751     /*
3752      * Should never happen
3753      */
3754     PerlIO_flush(f);
3755     return 0;
3756 }
3757
3758 IV
3759 PerlIOPending_close(pTHX_ PerlIO *f)
3760 {
3761     /*
3762      * A tad tricky - flush pops us, then we close new top
3763      */
3764     PerlIO_flush(f);
3765     return PerlIO_close(f);
3766 }
3767
3768 IV
3769 PerlIOPending_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3770 {
3771     /*
3772      * A tad tricky - flush pops us, then we seek new top
3773      */
3774     PerlIO_flush(f);
3775     return PerlIO_seek(f, offset, whence);
3776 }
3777
3778
3779 IV
3780 PerlIOPending_flush(pTHX_ PerlIO *f)
3781 {
3782     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3783     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3784         Safefree(b->buf);
3785         b->buf = NULL;
3786     }
3787     PerlIO_pop(aTHX_ f);
3788     return 0;
3789 }
3790
3791 void
3792 PerlIOPending_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3793 {
3794     if (cnt <= 0) {
3795         PerlIO_flush(f);
3796     }
3797     else {
3798         PerlIOBuf_set_ptrcnt(aTHX_ f, ptr, cnt);
3799     }
3800 }
3801
3802 IV
3803 PerlIOPending_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3804 {
3805     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3806     PerlIOl *l = PerlIOBase(f);
3807     /*
3808      * Our PerlIO_fast_gets must match what we are pushed on, or sv_gets()
3809      * etc. get muddled when it changes mid-string when we auto-pop.
3810      */
3811     l->flags = (l->flags & ~(PERLIO_F_FASTGETS | PERLIO_F_UTF8)) |
3812         (PerlIOBase(PerlIONext(f))->
3813          flags & (PERLIO_F_FASTGETS | PERLIO_F_UTF8));
3814     return code;
3815 }
3816
3817 SSize_t
3818 PerlIOPending_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3819 {
3820     SSize_t avail = PerlIO_get_cnt(f);
3821     SSize_t got = 0;
3822     if ((SSize_t)count < avail)
3823         avail = count;
3824     if (avail > 0)
3825         got = PerlIOBuf_read(aTHX_ f, vbuf, avail);
3826     if (got >= 0 && got < (SSize_t)count) {
3827         SSize_t more =
3828             PerlIO_read(f, ((STDCHAR *) vbuf) + got, count - got);
3829         if (more >= 0 || got == 0)
3830             got += more;
3831     }
3832     return got;
3833 }
3834
3835 PerlIO_funcs PerlIO_pending = {
3836     sizeof(PerlIO_funcs),
3837     "pending",
3838     sizeof(PerlIOBuf),
3839     PERLIO_K_BUFFERED|PERLIO_K_RAW,  /* not sure about RAW here */
3840     PerlIOPending_pushed,
3841     PerlIOBuf_popped,
3842     NULL,
3843     PerlIOBase_binmode,         /* binmode */
3844     NULL,
3845     PerlIOBase_fileno,
3846     PerlIOBuf_dup,
3847     PerlIOPending_read,
3848     PerlIOBuf_unread,
3849     PerlIOBuf_write,
3850     PerlIOPending_seek,
3851     PerlIOBuf_tell,
3852     PerlIOPending_close,
3853     PerlIOPending_flush,
3854     PerlIOPending_fill,
3855     PerlIOBase_eof,
3856     PerlIOBase_error,
3857     PerlIOBase_clearerr,
3858     PerlIOBase_setlinebuf,
3859     PerlIOBuf_get_base,
3860     PerlIOBuf_bufsiz,
3861     PerlIOBuf_get_ptr,
3862     PerlIOBuf_get_cnt,
3863     PerlIOPending_set_ptrcnt,
3864 };
3865
3866
3867
3868 /*--------------------------------------------------------------------------------------*/
3869 /*
3870  * crlf - translation On read translate CR,LF to "\n" we do this by
3871  * overriding ptr/cnt entries to hand back a line at a time and keeping a
3872  * record of which nl we "lied" about. On write translate "\n" to CR,LF
3873  */
3874
3875 typedef struct {
3876     PerlIOBuf base;             /* PerlIOBuf stuff */
3877     STDCHAR *nl;                /* Position of crlf we "lied" about in the
3878                                  * buffer */
3879 } PerlIOCrlf;
3880
3881 IV
3882 PerlIOCrlf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3883 {
3884     IV code;
3885     PerlIOBase(f)->flags |= PERLIO_F_CRLF;
3886     code = PerlIOBuf_pushed(aTHX_ f, mode, arg, tab);
3887 #if 0
3888     PerlIO_debug("PerlIOCrlf_pushed f=%p %s %s fl=%08" UVxf "\n",
3889                  f, PerlIOBase(f)->tab->name, (mode) ? mode : "(Null)",
3890                  PerlIOBase(f)->flags);
3891 #endif
3892     return code;
3893 }
3894
3895
3896 SSize_t
3897 PerlIOCrlf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3898 {
3899     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3900     if (c->nl) {
3901         *(c->nl) = 0xd;
3902         c->nl = NULL;
3903     }
3904     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
3905         return PerlIOBuf_unread(aTHX_ f, vbuf, count);
3906     else {
3907         const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3908         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3909         SSize_t unread = 0;
3910         if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3911             PerlIO_flush(f);
3912         if (!b->buf)
3913             PerlIO_get_base(f);
3914         if (b->buf) {
3915             if (!(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
3916                 b->end = b->ptr = b->buf + b->bufsiz;
3917                 PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3918                 b->posn -= b->bufsiz;
3919             }
3920             while (count > 0 && b->ptr > b->buf) {
3921                 int ch = *--buf;
3922                 if (ch == '\n') {
3923                     if (b->ptr - 2 >= b->buf) {
3924                         *--(b->ptr) = 0xa;
3925                         *--(b->ptr) = 0xd;
3926                         unread++;
3927                         count--;
3928                     }
3929                     else {
3930                         buf++;
3931                         break;
3932                     }
3933                 }
3934                 else {
3935                     *--(b->ptr) = ch;
3936                     unread++;
3937                     count--;
3938                 }
3939             }
3940         }
3941         return unread;
3942     }
3943 }
3944
3945 SSize_t
3946 PerlIOCrlf_get_cnt(pTHX_ PerlIO *f)
3947 {
3948     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3949     if (!b->buf)
3950         PerlIO_get_base(f);
3951     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3952         PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3953         if ((PerlIOBase(f)->flags & PERLIO_F_CRLF) && (!c->nl || *c->nl == 0xd)) {
3954             STDCHAR *nl = (c->nl) ? c->nl : b->ptr;
3955           scan:
3956             while (nl < b->end && *nl != 0xd)
3957                 nl++;
3958             if (nl < b->end && *nl == 0xd) {
3959               test:
3960                 if (nl + 1 < b->end) {
3961                     if (nl[1] == 0xa) {
3962                         *nl = '\n';
3963                         c->nl = nl;
3964                     }
3965                     else {
3966                         /*
3967                          * Not CR,LF but just CR
3968                          */
3969                         nl++;
3970                         goto scan;
3971                     }
3972                 }
3973                 else {
3974                     /*
3975                      * Blast - found CR as last char in buffer
3976                      */
3977
3978                     if (b->ptr < nl) {
3979                         /*
3980                          * They may not care, defer work as long as
3981                          * possible
3982                          */
3983                         c->nl = nl;
3984                         return (nl - b->ptr);
3985                     }
3986                     else {
3987                         int code;
3988                         b->ptr++;       /* say we have read it as far as
3989                                          * flush() is concerned */
3990                         b->buf++;       /* Leave space in front of buffer */
3991                         /* Note as we have moved buf up flush's
3992                            posn += ptr-buf
3993                            will naturally make posn point at CR
3994                          */
3995                         b->bufsiz--;    /* Buffer is thus smaller */
3996                         code = PerlIO_fill(f);  /* Fetch some more */
3997                         b->bufsiz++;    /* Restore size for next time */
3998                         b->buf--;       /* Point at space */
3999                         b->ptr = nl = b->buf;   /* Which is what we hand
4000                                                  * off */
4001                         *nl = 0xd;      /* Fill in the CR */
4002                         if (code == 0)
4003                             goto test;  /* fill() call worked */
4004                         /*
4005                          * CR at EOF - just fall through
4006                          */
4007                         /* Should we clear EOF though ??? */
4008                     }
4009                 }
4010             }
4011         }
4012         return (((c->nl) ? (c->nl + 1) : b->end) - b->ptr);
4013     }
4014     return 0;
4015 }
4016
4017 void
4018 PerlIOCrlf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
4019 {
4020     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4021     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
4022     if (!b->buf)
4023         PerlIO_get_base(f);
4024     if (!ptr) {
4025         if (c->nl) {
4026             ptr = c->nl + 1;
4027             if (ptr == b->end && *c->nl == 0xd) {
4028                 /* Defered CR at end of buffer case - we lied about count */
4029                 ptr--;
4030             }
4031         }
4032         else {
4033             ptr = b->end;
4034         }
4035         ptr -= cnt;
4036     }
4037     else {
4038 #if 0
4039         /*
4040          * Test code - delete when it works ...
4041          */
4042         IV flags = PerlIOBase(f)->flags;
4043         STDCHAR *chk = (c->nl) ? (c->nl+1) : b->end;
4044         if (ptr+cnt == c->nl && c->nl+1 == b->end && *c->nl == 0xd) {
4045           /* Defered CR at end of buffer case - we lied about count */
4046           chk--;
4047         }
4048         chk -= cnt;
4049
4050         if (ptr != chk ) {
4051             Perl_croak(aTHX_ "ptr wrong %p != %p fl=%08" UVxf
4052                        " nl=%p e=%p for %d", ptr, chk, flags, c->nl,
4053                        b->end, cnt);
4054         }
4055 #endif
4056     }
4057     if (c->nl) {
4058         if (ptr > c->nl) {
4059             /*
4060              * They have taken what we lied about
4061              */
4062             *(c->nl) = 0xd;
4063             c->nl = NULL;
4064             ptr++;
4065         }
4066     }
4067     b->ptr = ptr;
4068     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
4069 }
4070
4071 SSize_t
4072 PerlIOCrlf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4073 {
4074     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
4075         return PerlIOBuf_write(aTHX_ f, vbuf, count);
4076     else {
4077         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4078         const STDCHAR *buf = (const STDCHAR *) vbuf;
4079         const STDCHAR *ebuf = buf + count;
4080         if (!b->buf)
4081             PerlIO_get_base(f);
4082         if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
4083             return 0;
4084         while (buf < ebuf) {
4085             STDCHAR *eptr = b->buf + b->bufsiz;
4086             PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
4087             while (buf < ebuf && b->ptr < eptr) {
4088                 if (*buf == '\n') {
4089                     if ((b->ptr + 2) > eptr) {
4090                         /*
4091                          * Not room for both
4092                          */
4093                         PerlIO_flush(f);
4094                         break;
4095                     }
4096                     else {
4097                         *(b->ptr)++ = 0xd;      /* CR */
4098                         *(b->ptr)++ = 0xa;      /* LF */
4099                         buf++;
4100                         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
4101                             PerlIO_flush(f);
4102                             break;
4103                         }
4104                     }
4105                 }
4106                 else {
4107                     int ch = *buf++;
4108                     *(b->ptr)++ = ch;
4109                 }
4110                 if (b->ptr >= eptr) {
4111                     PerlIO_flush(f);
4112                     break;
4113                 }
4114             }
4115         }
4116         if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
4117             PerlIO_flush(f);
4118         return (buf - (STDCHAR *) vbuf);
4119     }
4120 }
4121
4122 IV
4123 PerlIOCrlf_flush(pTHX_ PerlIO *f)
4124 {
4125     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
4126     if (c->nl) {
4127         *(c->nl) = 0xd;
4128         c->nl = NULL;
4129     }
4130     return PerlIOBuf_flush(aTHX_ f);
4131 }
4132
4133 IV
4134 PerlIOCrlf_binmode(pTHX_ PerlIO *f)
4135 {
4136     if ((PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
4137         /* In text mode - flush any pending stuff and flip it */
4138         PerlIOBase(f)->flags &= ~PERLIO_F_CRLF;
4139 #ifndef PERLIO_USING_CRLF
4140         /* CRLF is unusual case - if this is just the :crlf layer pop it */
4141         if (PerlIOBase(f)->tab == &PerlIO_crlf) {
4142                 PerlIO_pop(aTHX_ f);
4143         }
4144 #endif
4145     }
4146     return 0;
4147 }
4148
4149 PerlIO_funcs PerlIO_crlf = {
4150     sizeof(PerlIO_funcs),
4151     "crlf",
4152     sizeof(PerlIOCrlf),
4153     PERLIO_K_BUFFERED | PERLIO_K_CANCRLF | PERLIO_K_RAW,
4154     PerlIOCrlf_pushed,
4155     PerlIOBuf_popped,         /* popped */
4156     PerlIOBuf_open,
4157     PerlIOCrlf_binmode,       /* binmode */
4158     NULL,
4159     PerlIOBase_fileno,
4160     PerlIOBuf_dup,
4161     PerlIOBuf_read,             /* generic read works with ptr/cnt lies
4162                                  * ... */
4163     PerlIOCrlf_unread,          /* Put CR,LF in buffer for each '\n' */
4164     PerlIOCrlf_write,           /* Put CR,LF in buffer for each '\n' */
4165     PerlIOBuf_seek,
4166     PerlIOBuf_tell,
4167     PerlIOBuf_close,
4168     PerlIOCrlf_flush,
4169     PerlIOBuf_fill,
4170     PerlIOBase_eof,
4171     PerlIOBase_error,
4172     PerlIOBase_clearerr,
4173     PerlIOBase_setlinebuf,
4174     PerlIOBuf_get_base,
4175     PerlIOBuf_bufsiz,
4176     PerlIOBuf_get_ptr,
4177     PerlIOCrlf_get_cnt,
4178     PerlIOCrlf_set_ptrcnt,
4179 };
4180
4181 #ifdef HAS_MMAP
4182 /*--------------------------------------------------------------------------------------*/
4183 /*
4184  * mmap as "buffer" layer
4185  */
4186
4187 typedef struct {
4188     PerlIOBuf base;             /* PerlIOBuf stuff */
4189     Mmap_t mptr;                /* Mapped address */
4190     Size_t len;                 /* mapped length */
4191     STDCHAR *bbuf;              /* malloced buffer if map fails */
4192 } PerlIOMmap;
4193
4194 static size_t page_size = 0;
4195
4196 IV
4197 PerlIOMmap_map(pTHX_ PerlIO *f)
4198 {
4199     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4200     IV flags = PerlIOBase(f)->flags;
4201     IV code = 0;
4202     if (m->len)
4203         abort();
4204     if (flags & PERLIO_F_CANREAD) {
4205         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4206         int fd = PerlIO_fileno(f);
4207         Stat_t st;
4208         code = Fstat(fd, &st);
4209         if (code == 0 && S_ISREG(st.st_mode)) {
4210             SSize_t len = st.st_size - b->posn;
4211             if (len > 0) {
4212                 Off_t posn;
4213                 if (!page_size) {
4214 #if defined(HAS_SYSCONF) && (defined(_SC_PAGESIZE) || defined(_SC_PAGE_SIZE))
4215                     {
4216                         SETERRNO(0, SS_NORMAL);
4217 #   ifdef _SC_PAGESIZE
4218                         page_size = sysconf(_SC_PAGESIZE);
4219 #   else
4220                         page_size = sysconf(_SC_PAGE_SIZE);
4221 #   endif
4222                         if ((long) page_size < 0) {
4223                             if (errno) {
4224                                 SV *error = ERRSV;
4225                                 char *msg;
4226                                 STRLEN n_a;
4227                                 (void) SvUPGRADE(error, SVt_PV);
4228                                 msg = SvPVx(error, n_a);
4229                                 Perl_croak(aTHX_ "panic: sysconf: %s",
4230                                            msg);
4231                             }
4232                             else
4233                                 Perl_croak(aTHX_
4234                                            "panic: sysconf: pagesize unknown");
4235                         }
4236                     }
4237 #else
4238 #   ifdef HAS_GETPAGESIZE
4239                     page_size = getpagesize();
4240 #   else
4241 #       if defined(I_SYS_PARAM) && defined(PAGESIZE)
4242                     page_size = PAGESIZE;       /* compiletime, bad */
4243 #       endif
4244 #   endif
4245 #endif
4246                     if ((IV) page_size <= 0)
4247                         Perl_croak(aTHX_ "panic: bad pagesize %" IVdf,
4248                                    (IV) page_size);
4249                 }
4250                 if (b->posn < 0) {
4251                     /*
4252                      * This is a hack - should never happen - open should
4253                      * have set it !
4254                      */
4255                     b->posn = PerlIO_tell(PerlIONext(f));
4256                 }
4257                 posn = (b->posn / page_size) * page_size;
4258                 len = st.st_size - posn;
4259                 m->mptr = mmap(NULL, len, PROT_READ, MAP_SHARED, fd, posn);
4260                 if (m->mptr && m->mptr != (Mmap_t) - 1) {
4261 #if 0 && defined(HAS_MADVISE) && defined(MADV_SEQUENTIAL)
4262                     madvise(m->mptr, len, MADV_SEQUENTIAL);
4263 #endif
4264 #if 0 && defined(HAS_MADVISE) && defined(MADV_WILLNEED)
4265                     madvise(m->mptr, len, MADV_WILLNEED);
4266 #endif
4267                     PerlIOBase(f)->flags =
4268                         (flags & ~PERLIO_F_EOF) | PERLIO_F_RDBUF;
4269                     b->end = ((STDCHAR *) m->mptr) + len;
4270                     b->buf = ((STDCHAR *) m->mptr) + (b->posn - posn);
4271                     b->ptr = b->buf;
4272                     m->len = len;
4273                 }
4274                 else {
4275                     b->buf = NULL;
4276                 }
4277             }
4278             else {
4279                 PerlIOBase(f)->flags =
4280                     flags | PERLIO_F_EOF | PERLIO_F_RDBUF;
4281                 b->buf = NULL;
4282                 b->ptr = b->end = b->ptr;
4283                 code = -1;
4284             }
4285         }
4286     }
4287     return code;
4288 }
4289
4290 IV
4291 PerlIOMmap_unmap(pTHX_ PerlIO *f)
4292 {
4293     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4294     PerlIOBuf *b = &m->base;
4295     IV code = 0;
4296     if (m->len) {
4297         if (b->buf) {
4298             code = munmap(m->mptr, m->len);
4299             b->buf = NULL;
4300             m->len = 0;
4301             m->mptr = NULL;
4302             if (PerlIO_seek(PerlIONext(f), b->posn, SEEK_SET) != 0)
4303                 code = -1;
4304         }
4305         b->ptr = b->end = b->buf;
4306         PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
4307     }
4308     return code;
4309 }
4310
4311 STDCHAR *
4312 PerlIOMmap_get_base(pTHX_ PerlIO *f)
4313 {
4314     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4315     PerlIOBuf *b = &m->base;
4316     if (b->buf && (PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4317         /*
4318          * Already have a readbuffer in progress
4319          */
4320         return b->buf;
4321     }
4322     if (b->buf) {
4323         /*
4324          * We have a write buffer or flushed PerlIOBuf read buffer
4325          */
4326         m->bbuf = b->buf;       /* save it in case we need it again */
4327         b->buf = NULL;          /* Clear to trigger below */
4328     }
4329     if (!b->buf) {
4330         PerlIOMmap_map(aTHX_ f);        /* Try and map it */
4331         if (!b->buf) {
4332             /*
4333              * Map did not work - recover PerlIOBuf buffer if we have one
4334              */
4335             b->buf = m->bbuf;
4336         }
4337     }
4338     b->ptr = b->end = b->buf;
4339     if (b->buf)
4340         return b->buf;
4341     return PerlIOBuf_get_base(aTHX_ f);
4342 }
4343
4344 SSize_t
4345 PerlIOMmap_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4346 {
4347     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4348     PerlIOBuf *b = &m->base;
4349     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
4350         PerlIO_flush(f);
4351     if (b->ptr && (b->ptr - count) >= b->buf
4352         && memEQ(b->ptr - count, vbuf, count)) {
4353         b->ptr -= count;
4354         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
4355         return count;
4356     }
4357     if (m->len) {
4358         /*
4359          * Loose the unwritable mapped buffer
4360          */
4361         PerlIO_flush(f);
4362         /*
4363          * If flush took the "buffer" see if we have one from before
4364          */
4365         if (!b->buf && m->bbuf)
4366             b->buf = m->bbuf;
4367         if (!b->buf) {
4368             PerlIOBuf_get_base(aTHX_ f);
4369             m->bbuf = b->buf;
4370         }
4371     }
4372     return PerlIOBuf_unread(aTHX_ f, vbuf, count);
4373 }
4374
4375 SSize_t
4376 PerlIOMmap_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4377 {
4378     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4379     PerlIOBuf *b = &m->base;
4380     if (!b->buf || !(PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
4381         /*
4382          * No, or wrong sort of, buffer
4383          */
4384         if (m->len) {
4385             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4386                 return 0;
4387         }
4388         /*
4389          * If unmap took the "buffer" see if we have one from before
4390          */
4391         if (!b->buf && m->bbuf)
4392             b->buf = m->bbuf;
4393         if (!b->buf) {
4394             PerlIOBuf_get_base(aTHX_ f);
4395             m->bbuf = b->buf;
4396         }
4397     }
4398     return PerlIOBuf_write(aTHX_ f, vbuf, count);
4399 }
4400
4401 IV
4402 PerlIOMmap_flush(pTHX_ PerlIO *f)
4403 {
4404     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4405     PerlIOBuf *b = &m->base;
4406     IV code = PerlIOBuf_flush(aTHX_ f);
4407     /*
4408      * Now we are "synced" at PerlIOBuf level
4409      */
4410     if (b->buf) {
4411         if (m->len) {
4412             /*
4413              * Unmap the buffer
4414              */
4415             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4416                 code = -1;
4417         }
4418         else {
4419             /*
4420              * We seem to have a PerlIOBuf buffer which was not mapped
4421              * remember it in case we need one later
4422              */
4423             m->bbuf = b->buf;
4424         }
4425     }
4426     return code;
4427 }
4428
4429 IV
4430 PerlIOMmap_fill(pTHX_ PerlIO *f)
4431 {
4432     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4433     IV code = PerlIO_flush(f);
4434     if (code == 0 && !b->buf) {
4435         code = PerlIOMmap_map(aTHX_ f);
4436     }
4437     if (code == 0 && !(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4438         code = PerlIOBuf_fill(aTHX_ f);
4439     }
4440     return code;
4441 }
4442
4443 IV
4444 PerlIOMmap_close(pTHX_ PerlIO *f)
4445 {
4446     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4447     PerlIOBuf *b = &m->base;
4448     IV code = PerlIO_flush(f);
4449     if (m->bbuf) {
4450         b->buf = m->bbuf;
4451         m->bbuf = NULL;
4452         b->ptr = b->end = b->buf;
4453     }
4454     if (PerlIOBuf_close(aTHX_ f) != 0)
4455         code = -1;
4456     return code;
4457 }
4458
4459 PerlIO *
4460 PerlIOMmap_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
4461 {
4462  return PerlIOBase_dup(aTHX_ f, o, param, flags);
4463 }
4464
4465
4466 PerlIO_funcs PerlIO_mmap = {
4467     sizeof(PerlIO_funcs),
4468     "mmap",
4469     sizeof(PerlIOMmap),
4470     PERLIO_K_BUFFERED|PERLIO_K_RAW,
4471     PerlIOBuf_pushed,
4472     PerlIOBuf_popped,
4473     PerlIOBuf_open,
4474     PerlIOBase_binmode,         /* binmode */
4475     NULL,
4476     PerlIOBase_fileno,
4477     PerlIOMmap_dup,
4478     PerlIOBuf_read,
4479     PerlIOMmap_unread,
4480     PerlIOMmap_write,
4481     PerlIOBuf_seek,
4482     PerlIOBuf_tell,
4483     PerlIOBuf_close,
4484     PerlIOMmap_flush,
4485     PerlIOMmap_fill,
4486     PerlIOBase_eof,
4487     PerlIOBase_error,
4488     PerlIOBase_clearerr,
4489     PerlIOBase_setlinebuf,
4490     PerlIOMmap_get_base,
4491     PerlIOBuf_bufsiz,
4492     PerlIOBuf_get_ptr,
4493     PerlIOBuf_get_cnt,
4494     PerlIOBuf_set_ptrcnt,
4495 };
4496
4497 #endif                          /* HAS_MMAP */
4498
4499 PerlIO *
4500 Perl_PerlIO_stdin(pTHX)
4501 {
4502     if (!PL_perlio) {
4503         PerlIO_stdstreams(aTHX);
4504     }
4505     return &PL_perlio[1];
4506 }
4507
4508 PerlIO *
4509 Perl_PerlIO_stdout(pTHX)
4510 {
4511     if (!PL_perlio) {
4512         PerlIO_stdstreams(aTHX);
4513     }
4514     return &PL_perlio[2];
4515 }
4516
4517 PerlIO *
4518 Perl_PerlIO_stderr(pTHX)
4519 {
4520     if (!PL_perlio) {
4521         PerlIO_stdstreams(aTHX);
4522     }
4523     return &PL_perlio[3];
4524 }
4525
4526 /*--------------------------------------------------------------------------------------*/
4527
4528 char *
4529 PerlIO_getname(PerlIO *f, char *buf)
4530 {
4531     dTHX;
4532     char *name = NULL;
4533 #ifdef VMS
4534     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
4535     if (stdio)
4536         name = fgetname(stdio, buf);
4537 #else
4538     Perl_croak(aTHX_ "Don't know how to get file name");
4539 #endif
4540     return name;
4541 }
4542
4543
4544 /*--------------------------------------------------------------------------------------*/
4545 /*
4546  * Functions which can be called on any kind of PerlIO implemented in
4547  * terms of above
4548  */
4549
4550 #undef PerlIO_fdopen
4551 PerlIO *
4552 PerlIO_fdopen(int fd, const char *mode)
4553 {
4554     dTHX;
4555     return PerlIO_openn(aTHX_ Nullch, mode, fd, 0, 0, NULL, 0, NULL);
4556 }
4557
4558 #undef PerlIO_open
4559 PerlIO *
4560 PerlIO_open(const char *path, const char *mode)
4561 {
4562     dTHX;
4563     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4564     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, NULL, 1, &name);
4565 }
4566
4567 #undef Perlio_reopen
4568 PerlIO *
4569 PerlIO_reopen(const char *path, const char *mode, PerlIO *f)
4570 {
4571     dTHX;
4572     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4573     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, f, 1, &name);
4574 }
4575
4576 #undef PerlIO_getc
4577 int
4578 PerlIO_getc(PerlIO *f)
4579 {
4580     dTHX;
4581     STDCHAR buf[1];
4582     SSize_t count = PerlIO_read(f, buf, 1);
4583     if (count == 1) {
4584         return (unsigned char) buf[0];
4585     }
4586     return EOF;
4587 }
4588
4589 #undef PerlIO_ungetc
4590 int
4591 PerlIO_ungetc(PerlIO *f, int ch)
4592 {
4593     dTHX;
4594     if (ch != EOF) {
4595         STDCHAR buf = ch;
4596         if (PerlIO_unread(f, &buf, 1) == 1)
4597             return ch;
4598     }
4599     return EOF;
4600 }
4601
4602 #undef PerlIO_putc
4603 int
4604 PerlIO_putc(PerlIO *f, int ch)
4605 {
4606     dTHX;
4607     STDCHAR buf = ch;
4608     return PerlIO_write(f, &buf, 1);
4609 }
4610
4611 #undef PerlIO_puts
4612 int
4613 PerlIO_puts(PerlIO *f, const char *s)
4614 {
4615     dTHX;
4616     STRLEN len = strlen(s);
4617     return PerlIO_write(f, s, len);
4618 }
4619
4620 #undef PerlIO_rewind
4621 void
4622 PerlIO_rewind(PerlIO *f)
4623 {
4624     dTHX;
4625     PerlIO_seek(f, (Off_t) 0, SEEK_SET);
4626     PerlIO_clearerr(f);
4627 }
4628
4629 #undef PerlIO_vprintf
4630 int
4631 PerlIO_vprintf(PerlIO *f, const char *fmt, va_list ap)
4632 {
4633     dTHX;
4634     SV *sv = newSVpvn("", 0);
4635     char *s;
4636     STRLEN len;
4637     SSize_t wrote;
4638 #ifdef NEED_VA_COPY
4639     va_list apc;
4640     Perl_va_copy(ap, apc);
4641     sv_vcatpvf(sv, fmt, &apc);
4642 #else
4643     sv_vcatpvf(sv, fmt, &ap);
4644 #endif
4645     s = SvPV(sv, len);
4646     wrote = PerlIO_write(f, s, len);
4647     SvREFCNT_dec(sv);
4648     return wrote;
4649 }
4650
4651 #undef PerlIO_printf
4652 int
4653 PerlIO_printf(PerlIO *f, const char *fmt, ...)
4654 {
4655     va_list ap;
4656     int result;
4657     va_start(ap, fmt);
4658     result = PerlIO_vprintf(f, fmt, ap);
4659     va_end(ap);
4660     return result;
4661 }
4662
4663 #undef PerlIO_stdoutf
4664 int
4665 PerlIO_stdoutf(const char *fmt, ...)
4666 {
4667     dTHX;
4668     va_list ap;
4669     int result;
4670     va_start(ap, fmt);
4671     result = PerlIO_vprintf(PerlIO_stdout(), fmt, ap);
4672     va_end(ap);
4673     return result;
4674 }
4675
4676 #undef PerlIO_tmpfile
4677 PerlIO *
4678 PerlIO_tmpfile(void)
4679 {
4680     /*
4681      * I have no idea how portable mkstemp() is ...
4682      */
4683 #if defined(WIN32) || !defined(HAVE_MKSTEMP)
4684     dTHX;
4685     PerlIO *f = NULL;
4686     FILE *stdio = PerlSIO_tmpfile();
4687     if (stdio) {
4688         if ((f = PerlIO_push(aTHX_(PerlIO_allocate(aTHX)), &PerlIO_stdio, "w+", Nullsv))) {
4689             PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
4690             s->stdio = stdio;
4691         }
4692     }
4693     return f;
4694 #else
4695     dTHX;
4696     SV *sv = newSVpv("/tmp/PerlIO_XXXXXX", 0);
4697     int fd = mkstemp(SvPVX(sv));
4698     PerlIO *f = NULL;
4699     if (fd >= 0) {
4700         f = PerlIO_fdopen(fd, "w+");
4701         if (f) {
4702             PerlIOBase(f)->flags |= PERLIO_F_TEMP;
4703         }
4704         PerlLIO_unlink(SvPVX(sv));
4705         SvREFCNT_dec(sv);
4706     }
4707     return f;
4708 #endif
4709 }
4710
4711 #undef HAS_FSETPOS
4712 #undef HAS_FGETPOS
4713
4714 #endif                          /* USE_SFIO */
4715 #endif                          /* PERLIO_IS_STDIO */
4716
4717 /*======================================================================================*/
4718 /*
4719  * Now some functions in terms of above which may be needed even if we are
4720  * not in true PerlIO mode
4721  */
4722
4723 #ifndef HAS_FSETPOS
4724 #undef PerlIO_setpos
4725 int
4726 PerlIO_setpos(PerlIO *f, SV *pos)
4727 {
4728     dTHX;
4729     if (SvOK(pos)) {
4730         STRLEN len;
4731         Off_t *posn = (Off_t *) SvPV(pos, len);
4732         if (f && len == sizeof(Off_t))
4733             return PerlIO_seek(f, *posn, SEEK_SET);
4734     }
4735     SETERRNO(EINVAL, SS_IVCHAN);
4736     return -1;
4737 }
4738 #else
4739 #undef PerlIO_setpos
4740 int
4741 PerlIO_setpos(PerlIO *f, SV *pos)
4742 {
4743     dTHX;
4744     if (SvOK(pos)) {
4745         STRLEN len;
4746         Fpos_t *fpos = (Fpos_t *) SvPV(pos, len);
4747         if (f && len == sizeof(Fpos_t)) {
4748 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4749             return fsetpos64(f, fpos);
4750 #else
4751             return fsetpos(f, fpos);
4752 #endif
4753         }
4754     }
4755     SETERRNO(EINVAL, SS_IVCHAN);
4756     return -1;
4757 }
4758 #endif
4759
4760 #ifndef HAS_FGETPOS
4761 #undef PerlIO_getpos
4762 int
4763 PerlIO_getpos(PerlIO *f, SV *pos)
4764 {
4765     dTHX;
4766     Off_t posn = PerlIO_tell(f);
4767     sv_setpvn(pos, (char *) &posn, sizeof(posn));
4768     return (posn == (Off_t) - 1) ? -1 : 0;
4769 }
4770 #else
4771 #undef PerlIO_getpos
4772 int
4773 PerlIO_getpos(PerlIO *f, SV *pos)
4774 {
4775     dTHX;
4776     Fpos_t fpos;
4777     int code;
4778 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4779     code = fgetpos64(f, &fpos);
4780 #else
4781     code = fgetpos(f, &fpos);
4782 #endif
4783     sv_setpvn(pos, (char *) &fpos, sizeof(fpos));
4784     return code;
4785 }
4786 #endif
4787
4788 #if (defined(PERLIO_IS_STDIO) || !defined(USE_SFIO)) && !defined(HAS_VPRINTF)
4789
4790 int
4791 vprintf(char *pat, char *args)
4792 {
4793     _doprnt(pat, args, stdout);
4794     return 0;                   /* wrong, but perl doesn't use the return
4795                                  * value */
4796 }
4797
4798 int
4799 vfprintf(FILE *fd, char *pat, char *args)
4800 {
4801     _doprnt(pat, args, fd);
4802     return 0;                   /* wrong, but perl doesn't use the return
4803                                  * value */
4804 }
4805
4806 #endif
4807
4808 #ifndef PerlIO_vsprintf
4809 int
4810 PerlIO_vsprintf(char *s, int n, const char *fmt, va_list ap)
4811 {
4812     int val = vsprintf(s, fmt, ap);
4813     if (n >= 0) {
4814         if (strlen(s) >= (STRLEN) n) {
4815             dTHX;
4816             (void) PerlIO_puts(Perl_error_log,
4817                                "panic: sprintf overflow - memory corrupted!\n");
4818             my_exit(1);
4819         }
4820     }
4821     return val;
4822 }
4823 #endif
4824
4825 #ifndef PerlIO_sprintf
4826 int
4827 PerlIO_sprintf(char *s, int n, const char *fmt, ...)
4828 {
4829     va_list ap;
4830     int result;
4831     va_start(ap, fmt);
4832     result = PerlIO_vsprintf(s, n, fmt, ap);
4833     va_end(ap);
4834     return result;
4835 }
4836 #endif
4837
4838
4839
4840
4841
4842
4843
4844