996b893e2223176f1db7990464e07cc9f5603f37
[p5sagit/p5-mst-13.2.git] / perlio.c
1 /*
2  * perlio.c Copyright (c) 1996-2002, Nick Ing-Simmons You may distribute
3  * under the terms of either the GNU General Public License or the
4  * Artistic License, as specified in the README file.
5  */
6
7 /*
8  * Hour after hour for nearly three weary days he had jogged up and down,
9  * over passes, and through long dales, and across many streams.
10  */
11
12 /*
13  * If we have ActivePerl-like PERL_IMPLICIT_SYS then we need a dTHX to get
14  * at the dispatch tables, even when we do not need it for other reasons.
15  * Invent a dSYS macro to abstract this out
16  */
17 #ifdef PERL_IMPLICIT_SYS
18 #define dSYS dTHX
19 #else
20 #define dSYS dNOOP
21 #endif
22
23 #define VOIDUSED 1
24 #ifdef PERL_MICRO
25 #   include "uconfig.h"
26 #else
27 #   include "config.h"
28 #endif
29
30 #define PERLIO_NOT_STDIO 0
31 #if !defined(PERLIO_IS_STDIO) && !defined(USE_SFIO)
32 /*
33  * #define PerlIO FILE
34  */
35 #endif
36 /*
37  * This file provides those parts of PerlIO abstraction
38  * which are not #defined in perlio.h.
39  * Which these are depends on various Configure #ifdef's
40  */
41
42 #include "EXTERN.h"
43 #define PERL_IN_PERLIO_C
44 #include "perl.h"
45
46 #ifdef PERL_IMPLICIT_CONTEXT
47 #undef dSYS
48 #define dSYS dTHX
49 #endif
50
51 #include "XSUB.h"
52
53 int
54 perlsio_binmode(FILE *fp, int iotype, int mode)
55 {
56     /*
57      * This used to be contents of do_binmode in doio.c
58      */
59 #ifdef DOSISH
60 #  if defined(atarist) || defined(__MINT__)
61     if (!fflush(fp)) {
62         if (mode & O_BINARY)
63             ((FILE *) fp)->_flag |= _IOBIN;
64         else
65             ((FILE *) fp)->_flag &= ~_IOBIN;
66         return 1;
67     }
68     return 0;
69 #  else
70     dTHX;
71 #ifdef NETWARE
72     if (PerlLIO_setmode(fp, mode) != -1) {
73 #else
74     if (PerlLIO_setmode(fileno(fp), mode) != -1) {
75 #endif
76 #    if defined(WIN32) && defined(__BORLANDC__)
77         /*
78          * The translation mode of the stream is maintained independent of
79          * the translation mode of the fd in the Borland RTL (heavy
80          * digging through their runtime sources reveal).  User has to set
81          * the mode explicitly for the stream (though they don't document
82          * this anywhere). GSAR 97-5-24
83          */
84         fseek(fp, 0L, 0);
85         if (mode & O_BINARY)
86             fp->flags |= _F_BIN;
87         else
88             fp->flags &= ~_F_BIN;
89 #    endif
90         return 1;
91     }
92     else
93         return 0;
94 #  endif
95 #else
96 #  if defined(USEMYBINMODE)
97     dTHX;
98     if (my_binmode(fp, iotype, mode) != FALSE)
99         return 1;
100     else
101         return 0;
102 #  else
103     return 1;
104 #  endif
105 #endif
106 }
107
108 #ifndef O_ACCMODE
109 #define O_ACCMODE 3             /* Assume traditional implementation */
110 #endif
111
112 int
113 PerlIO_intmode2str(int rawmode, char *mode, int *writing)
114 {
115     int result = rawmode & O_ACCMODE;
116     int ix = 0;
117     int ptype;
118     switch (result) {
119     case O_RDONLY:
120         ptype = IoTYPE_RDONLY;
121         break;
122     case O_WRONLY:
123         ptype = IoTYPE_WRONLY;
124         break;
125     case O_RDWR:
126     default:
127         ptype = IoTYPE_RDWR;
128         break;
129     }
130     if (writing)
131         *writing = (result != O_RDONLY);
132
133     if (result == O_RDONLY) {
134         mode[ix++] = 'r';
135     }
136 #ifdef O_APPEND
137     else if (rawmode & O_APPEND) {
138         mode[ix++] = 'a';
139         if (result != O_WRONLY)
140             mode[ix++] = '+';
141     }
142 #endif
143     else {
144         if (result == O_WRONLY)
145             mode[ix++] = 'w';
146         else {
147             mode[ix++] = 'r';
148             mode[ix++] = '+';
149         }
150     }
151     if (rawmode & O_BINARY)
152         mode[ix++] = 'b';
153     mode[ix] = '\0';
154     return ptype;
155 }
156
157 #ifndef PERLIO_LAYERS
158 int
159 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
160 {
161     if (!names || !*names
162         || strEQ(names, ":crlf")
163         || strEQ(names, ":raw")
164         || strEQ(names, ":bytes")
165        ) {
166         return 0;
167     }
168     Perl_croak(aTHX_ "Cannot apply \"%s\" in non-PerlIO perl", names);
169     /*
170      * NOTREACHED
171      */
172     return -1;
173 }
174
175 void
176 PerlIO_destruct(pTHX)
177 {
178 }
179
180 int
181 PerlIO_binmode(pTHX_ PerlIO *fp, int iotype, int mode, const char *names)
182 {
183 #ifdef USE_SFIO
184     return 1;
185 #else
186     return perlsio_binmode(fp, iotype, mode);
187 #endif
188 }
189
190 PerlIO *
191 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
192 {
193 #ifdef PERL_MICRO
194     return NULL;
195 #else
196 #ifdef PERL_IMPLICIT_SYS
197     return PerlSIO_fdupopen(f);
198 #else
199 #ifdef WIN32
200     return win32_fdupopen(f);
201 #else
202     if (f) {
203         int fd = PerlLIO_dup(PerlIO_fileno(f));
204         if (fd >= 0) {
205             char mode[8];
206             int omode = fcntl(fd, F_GETFL);
207 #ifdef DJGPP
208             omode = djgpp_get_stream_mode(f);
209 #endif
210             PerlIO_intmode2str(omode,mode,NULL);
211             /* the r+ is a hack */
212             return PerlIO_fdopen(fd, mode);
213         }
214         return NULL;
215     }
216     else {
217         SETERRNO(EBADF, SS_IVCHAN);
218     }
219 #endif
220     return NULL;
221 #endif
222 #endif
223 }
224
225
226 /*
227  * De-mux PerlIO_openn() into fdopen, freopen and fopen type entries
228  */
229
230 PerlIO *
231 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
232              int imode, int perm, PerlIO *old, int narg, SV **args)
233 {
234     if (narg) {
235         if (narg > 1) {
236             Perl_croak(aTHX_ "More than one argument to open");
237         }
238         if (*args == &PL_sv_undef)
239             return PerlIO_tmpfile();
240         else {
241             char *name = SvPV_nolen(*args);
242             if (*mode == '#') {
243                 fd = PerlLIO_open3(name, imode, perm);
244                 if (fd >= 0)
245                     return PerlIO_fdopen(fd, (char *) mode + 1);
246             }
247             else if (old) {
248                 return PerlIO_reopen(name, mode, old);
249             }
250             else {
251                 return PerlIO_open(name, mode);
252             }
253         }
254     }
255     else {
256         return PerlIO_fdopen(fd, (char *) mode);
257     }
258     return NULL;
259 }
260
261 XS(XS_PerlIO__Layer__find)
262 {
263     dXSARGS;
264     if (items < 2)
265         Perl_croak(aTHX_ "Usage class->find(name[,load])");
266     else {
267         char *name = SvPV_nolen(ST(1));
268         ST(0) = (strEQ(name, "crlf")
269                  || strEQ(name, "raw")) ? &PL_sv_yes : &PL_sv_undef;
270         XSRETURN(1);
271     }
272 }
273
274
275 void
276 Perl_boot_core_PerlIO(pTHX)
277 {
278     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
279 }
280
281 #endif
282
283
284 #ifdef PERLIO_IS_STDIO
285
286 void
287 PerlIO_init(pTHX)
288 {
289     /*
290      * Does nothing (yet) except force this file to be included in perl
291      * binary. That allows this file to force inclusion of other functions
292      * that may be required by loadable extensions e.g. for
293      * FileHandle::tmpfile
294      */
295 }
296
297 #undef PerlIO_tmpfile
298 PerlIO *
299 PerlIO_tmpfile(void)
300 {
301     return tmpfile();
302 }
303
304 #else                           /* PERLIO_IS_STDIO */
305
306 #ifdef USE_SFIO
307
308 #undef HAS_FSETPOS
309 #undef HAS_FGETPOS
310
311 /*
312  * This section is just to make sure these functions get pulled in from
313  * libsfio.a
314  */
315
316 #undef PerlIO_tmpfile
317 PerlIO *
318 PerlIO_tmpfile(void)
319 {
320     return sftmp(0);
321 }
322
323 void
324 PerlIO_init(pTHX)
325 {
326     /*
327      * Force this file to be included in perl binary. Which allows this
328      * file to force inclusion of other functions that may be required by
329      * loadable extensions e.g. for FileHandle::tmpfile
330      */
331
332     /*
333      * Hack sfio does its own 'autoflush' on stdout in common cases. Flush
334      * results in a lot of lseek()s to regular files and lot of small
335      * writes to pipes.
336      */
337     sfset(sfstdout, SF_SHARE, 0);
338 }
339
340 /* This is not the reverse of PerlIO_exportFILE(), PerlIO_releaseFILE() is. */
341 PerlIO *
342 PerlIO_importFILE(FILE *stdio, const char *mode)
343 {
344     int fd = fileno(stdio);
345     if (!mode || !*mode) {
346         mode = "r+";
347     }
348     return PerlIO_fdopen(fd, mode);
349 }
350
351 FILE *
352 PerlIO_findFILE(PerlIO *pio)
353 {
354     int fd = PerlIO_fileno(pio);
355     FILE *f = fdopen(fd, "r+");
356     PerlIO_flush(pio);
357     if (!f && errno == EINVAL)
358         f = fdopen(fd, "w");
359     if (!f && errno == EINVAL)
360         f = fdopen(fd, "r");
361     return f;
362 }
363
364
365 #else                           /* USE_SFIO */
366 /*======================================================================================*/
367 /*
368  * Implement all the PerlIO interface ourselves.
369  */
370
371 #include "perliol.h"
372
373 /*
374  * We _MUST_ have <unistd.h> if we are using lseek() and may have large
375  * files
376  */
377 #ifdef I_UNISTD
378 #include <unistd.h>
379 #endif
380 #ifdef HAS_MMAP
381 #include <sys/mman.h>
382 #endif
383
384
385 void PerlIO_debug(const char *fmt, ...)
386     __attribute__ ((format(__printf__, 1, 2)));
387
388 void
389 PerlIO_debug(const char *fmt, ...)
390 {
391     static int dbg = 0;
392     va_list ap;
393     dSYS;
394     va_start(ap, fmt);
395     if (!dbg) {
396         char *s = PerlEnv_getenv("PERLIO_DEBUG");
397         if (s && *s)
398             dbg = PerlLIO_open3(s, O_WRONLY | O_CREAT | O_APPEND, 0666);
399         else
400             dbg = -1;
401     }
402     if (dbg > 0) {
403         dTHX;
404 #ifdef USE_ITHREADS
405         /* Use fixed buffer as sv_catpvf etc. needs SVs */
406         char buffer[1024];
407         char *s;
408         STRLEN len;
409         s = CopFILE(PL_curcop);
410         if (!s)
411             s = "(none)";
412         sprintf(buffer, "%s:%" IVdf " ", s, (IV) CopLINE(PL_curcop));
413         len = strlen(buffer);
414         vsprintf(buffer+len, fmt, ap);
415         PerlLIO_write(dbg, buffer, strlen(buffer));
416 #else
417         SV *sv = newSVpvn("", 0);
418         char *s;
419         STRLEN len;
420         s = CopFILE(PL_curcop);
421         if (!s)
422             s = "(none)";
423         Perl_sv_catpvf(aTHX_ sv, "%s:%" IVdf " ", s,
424                        (IV) CopLINE(PL_curcop));
425         Perl_sv_vcatpvf(aTHX_ sv, fmt, &ap);
426
427         s = SvPV(sv, len);
428         PerlLIO_write(dbg, s, len);
429         SvREFCNT_dec(sv);
430 #endif
431     }
432     va_end(ap);
433 }
434
435 /*--------------------------------------------------------------------------------------*/
436
437 /*
438  * Inner level routines
439  */
440
441 /*
442  * Table of pointers to the PerlIO structs (malloc'ed)
443  */
444 #define PERLIO_TABLE_SIZE 64
445
446 PerlIO *
447 PerlIO_allocate(pTHX)
448 {
449     /*
450      * Find a free slot in the table, allocating new table as necessary
451      */
452     PerlIO **last;
453     PerlIO *f;
454     last = &PL_perlio;
455     while ((f = *last)) {
456         int i;
457         last = (PerlIO **) (f);
458         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
459             if (!*++f) {
460                 return f;
461             }
462         }
463     }
464     Newz('I',f,PERLIO_TABLE_SIZE,PerlIO);
465     if (!f) {
466         return NULL;
467     }
468     *last = f;
469     return f + 1;
470 }
471
472 #undef PerlIO_fdupopen
473 PerlIO *
474 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
475 {
476     if (PerlIOValid(f)) {
477         PerlIO_funcs *tab = PerlIOBase(f)->tab;
478         PerlIO *new;
479         PerlIO_debug("fdupopen f=%p param=%p\n",(void*)f,(void*)param);
480         new = (*tab->Dup)(aTHX_ PerlIO_allocate(aTHX),f,param, flags);
481         return new;
482     }
483     else {
484         SETERRNO(EBADF, SS_IVCHAN);
485         return NULL;
486     }
487 }
488
489 void
490 PerlIO_cleantable(pTHX_ PerlIO **tablep)
491 {
492     PerlIO *table = *tablep;
493     if (table) {
494         int i;
495         PerlIO_cleantable(aTHX_(PerlIO **) & (table[0]));
496         for (i = PERLIO_TABLE_SIZE - 1; i > 0; i--) {
497             PerlIO *f = table + i;
498             if (*f) {
499                 PerlIO_close(f);
500             }
501         }
502         Safefree(table);
503         *tablep = NULL;
504     }
505 }
506
507
508 PerlIO_list_t *
509 PerlIO_list_alloc(pTHX)
510 {
511     PerlIO_list_t *list;
512     Newz('L', list, 1, PerlIO_list_t);
513     list->refcnt = 1;
514     return list;
515 }
516
517 void
518 PerlIO_list_free(pTHX_ PerlIO_list_t *list)
519 {
520     if (list) {
521         if (--list->refcnt == 0) {
522             if (list->array) {
523                 IV i;
524                 for (i = 0; i < list->cur; i++) {
525                     if (list->array[i].arg)
526                         SvREFCNT_dec(list->array[i].arg);
527                 }
528                 Safefree(list->array);
529             }
530             Safefree(list);
531         }
532     }
533 }
534
535 void
536 PerlIO_list_push(pTHX_ PerlIO_list_t *list, PerlIO_funcs *funcs, SV *arg)
537 {
538     PerlIO_pair_t *p;
539     if (list->cur >= list->len) {
540         list->len += 8;
541         if (list->array)
542             Renew(list->array, list->len, PerlIO_pair_t);
543         else
544             New('l', list->array, list->len, PerlIO_pair_t);
545     }
546     p = &(list->array[list->cur++]);
547     p->funcs = funcs;
548     if ((p->arg = arg)) {
549         SvREFCNT_inc(arg);
550     }
551 }
552
553 PerlIO_list_t *
554 PerlIO_clone_list(pTHX_ PerlIO_list_t *proto, CLONE_PARAMS *param)
555 {
556     PerlIO_list_t *list = (PerlIO_list_t *) NULL;
557     if (proto) {
558         int i;
559         list = PerlIO_list_alloc(aTHX);
560         for (i=0; i < proto->cur; i++) {
561             SV *arg = Nullsv;
562             if (proto->array[i].arg)
563                 arg = PerlIO_sv_dup(aTHX_ proto->array[i].arg,param);
564             PerlIO_list_push(aTHX_ list, proto->array[i].funcs, arg);
565         }
566     }
567     return list;
568 }
569
570 void
571 PerlIO_clone(pTHX_ PerlInterpreter *proto, CLONE_PARAMS *param)
572 {
573 #ifdef USE_ITHREADS
574     PerlIO **table = &proto->Iperlio;
575     PerlIO *f;
576     PL_perlio = NULL;
577     PL_known_layers = PerlIO_clone_list(aTHX_ proto->Iknown_layers, param);
578     PL_def_layerlist = PerlIO_clone_list(aTHX_ proto->Idef_layerlist, param);
579     PerlIO_allocate(aTHX); /* root slot is never used */
580     PerlIO_debug("Clone %p from %p\n",aTHX,proto);
581     while ((f = *table)) {
582             int i;
583             table = (PerlIO **) (f++);
584             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
585                 if (*f) {
586                     (void) fp_dup(f, 0, param);
587                 }
588                 f++;
589             }
590         }
591 #endif
592 }
593
594 void
595 PerlIO_destruct(pTHX)
596 {
597     PerlIO **table = &PL_perlio;
598     PerlIO *f;
599 #ifdef USE_ITHREADS
600     PerlIO_debug("Destruct %p\n",aTHX);
601 #endif
602     while ((f = *table)) {
603         int i;
604         table = (PerlIO **) (f++);
605         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
606             PerlIO *x = f;
607             PerlIOl *l;
608             while ((l = *x)) {
609                 if (l->tab->kind & PERLIO_K_DESTRUCT) {
610                     PerlIO_debug("Destruct popping %s\n", l->tab->name);
611                     PerlIO_flush(x);
612                     PerlIO_pop(aTHX_ x);
613                 }
614                 else {
615                     x = PerlIONext(x);
616                 }
617             }
618             f++;
619         }
620     }
621 }
622
623 void
624 PerlIO_pop(pTHX_ PerlIO *f)
625 {
626     PerlIOl *l = *f;
627     if (l) {
628         PerlIO_debug("PerlIO_pop f=%p %s\n", (void*)f, l->tab->name);
629         if (l->tab->Popped) {
630             /*
631              * If popped returns non-zero do not free its layer structure
632              * it has either done so itself, or it is shared and still in
633              * use
634              */
635             if ((*l->tab->Popped) (aTHX_ f) != 0)
636                 return;
637         }
638         *f = l->next;
639         Safefree(l);
640     }
641 }
642
643 /*--------------------------------------------------------------------------------------*/
644 /*
645  * XS Interface for perl code
646  */
647
648 PerlIO_funcs *
649 PerlIO_find_layer(pTHX_ const char *name, STRLEN len, int load)
650 {
651     IV i;
652     if ((SSize_t) len <= 0)
653         len = strlen(name);
654     for (i = 0; i < PL_known_layers->cur; i++) {
655         PerlIO_funcs *f = PL_known_layers->array[i].funcs;
656         if (memEQ(f->name, name, len)) {
657             PerlIO_debug("%.*s => %p\n", (int) len, name, (void*)f);
658             return f;
659         }
660     }
661     if (load && PL_subname && PL_def_layerlist
662         && PL_def_layerlist->cur >= 2) {
663         if (PL_in_load_module) {
664             Perl_croak(aTHX_ "Recursive call to Perl_load_module in PerlIO_find_layer");
665             return NULL;
666         } else {
667             SV *pkgsv = newSVpvn("PerlIO", 6);
668             SV *layer = newSVpvn(name, len);
669             ENTER;
670             SAVEINT(PL_in_load_module);
671             PL_in_load_module++;
672             /*
673              * The two SVs are magically freed by load_module
674              */
675             Perl_load_module(aTHX_ 0, pkgsv, Nullsv, layer, Nullsv);
676             PL_in_load_module--;
677             LEAVE;
678             return PerlIO_find_layer(aTHX_ name, len, 0);
679         }
680     }
681     PerlIO_debug("Cannot find %.*s\n", (int) len, name);
682     return NULL;
683 }
684
685 #ifdef USE_ATTRIBUTES_FOR_PERLIO
686
687 static int
688 perlio_mg_set(pTHX_ SV *sv, MAGIC *mg)
689 {
690     if (SvROK(sv)) {
691         IO *io = GvIOn((GV *) SvRV(sv));
692         PerlIO *ifp = IoIFP(io);
693         PerlIO *ofp = IoOFP(io);
694         Perl_warn(aTHX_ "set %" SVf " %p %p %p", sv, io, ifp, ofp);
695     }
696     return 0;
697 }
698
699 static int
700 perlio_mg_get(pTHX_ SV *sv, MAGIC *mg)
701 {
702     if (SvROK(sv)) {
703         IO *io = GvIOn((GV *) SvRV(sv));
704         PerlIO *ifp = IoIFP(io);
705         PerlIO *ofp = IoOFP(io);
706         Perl_warn(aTHX_ "get %" SVf " %p %p %p", sv, io, ifp, ofp);
707     }
708     return 0;
709 }
710
711 static int
712 perlio_mg_clear(pTHX_ SV *sv, MAGIC *mg)
713 {
714     Perl_warn(aTHX_ "clear %" SVf, sv);
715     return 0;
716 }
717
718 static int
719 perlio_mg_free(pTHX_ SV *sv, MAGIC *mg)
720 {
721     Perl_warn(aTHX_ "free %" SVf, sv);
722     return 0;
723 }
724
725 MGVTBL perlio_vtab = {
726     perlio_mg_get,
727     perlio_mg_set,
728     NULL,                       /* len */
729     perlio_mg_clear,
730     perlio_mg_free
731 };
732
733 XS(XS_io_MODIFY_SCALAR_ATTRIBUTES)
734 {
735     dXSARGS;
736     SV *sv = SvRV(ST(1));
737     AV *av = newAV();
738     MAGIC *mg;
739     int count = 0;
740     int i;
741     sv_magic(sv, (SV *) av, PERL_MAGIC_ext, NULL, 0);
742     SvRMAGICAL_off(sv);
743     mg = mg_find(sv, PERL_MAGIC_ext);
744     mg->mg_virtual = &perlio_vtab;
745     mg_magical(sv);
746     Perl_warn(aTHX_ "attrib %" SVf, sv);
747     for (i = 2; i < items; i++) {
748         STRLEN len;
749         const char *name = SvPV(ST(i), len);
750         SV *layer = PerlIO_find_layer(aTHX_ name, len, 1);
751         if (layer) {
752             av_push(av, SvREFCNT_inc(layer));
753         }
754         else {
755             ST(count) = ST(i);
756             count++;
757         }
758     }
759     SvREFCNT_dec(av);
760     XSRETURN(count);
761 }
762
763 #endif                          /* USE_ATTIBUTES_FOR_PERLIO */
764
765 SV *
766 PerlIO_tab_sv(pTHX_ PerlIO_funcs *tab)
767 {
768     HV *stash = gv_stashpv("PerlIO::Layer", TRUE);
769     SV *sv = sv_bless(newRV_noinc(newSViv(PTR2IV(tab))), stash);
770     return sv;
771 }
772
773 XS(XS_PerlIO__Layer__find)
774 {
775     dXSARGS;
776     if (items < 2)
777         Perl_croak(aTHX_ "Usage class->find(name[,load])");
778     else {
779         STRLEN len = 0;
780         char *name = SvPV(ST(1), len);
781         bool load = (items > 2) ? SvTRUE(ST(2)) : 0;
782         PerlIO_funcs *layer = PerlIO_find_layer(aTHX_ name, len, load);
783         ST(0) =
784             (layer) ? sv_2mortal(PerlIO_tab_sv(aTHX_ layer)) :
785             &PL_sv_undef;
786         XSRETURN(1);
787     }
788 }
789
790 void
791 PerlIO_define_layer(pTHX_ PerlIO_funcs *tab)
792 {
793     if (!PL_known_layers)
794         PL_known_layers = PerlIO_list_alloc(aTHX);
795     PerlIO_list_push(aTHX_ PL_known_layers, tab, Nullsv);
796     PerlIO_debug("define %s %p\n", tab->name, (void*)tab);
797 }
798
799 int
800 PerlIO_parse_layers(pTHX_ PerlIO_list_t *av, const char *names)
801 {
802     if (names) {
803         const char *s = names;
804         while (*s) {
805             while (isSPACE(*s) || *s == ':')
806                 s++;
807             if (*s) {
808                 STRLEN llen = 0;
809                 const char *e = s;
810                 const char *as = Nullch;
811                 STRLEN alen = 0;
812                 if (!isIDFIRST(*s)) {
813                     /*
814                      * Message is consistent with how attribute lists are
815                      * passed. Even though this means "foo : : bar" is
816                      * seen as an invalid separator character.
817                      */
818                     char q = ((*s == '\'') ? '"' : '\'');
819                     if (ckWARN(WARN_LAYER))
820                         Perl_warner(aTHX_ packWARN(WARN_LAYER),
821                               "perlio: invalid separator character %c%c%c in layer specification list %s",
822                               q, *s, q, s);
823                     SETERRNO(EINVAL, LIB_INVARG);
824                     return -1;
825                 }
826                 do {
827                     e++;
828                 } while (isALNUM(*e));
829                 llen = e - s;
830                 if (*e == '(') {
831                     int nesting = 1;
832                     as = ++e;
833                     while (nesting) {
834                         switch (*e++) {
835                         case ')':
836                             if (--nesting == 0)
837                                 alen = (e - 1) - as;
838                             break;
839                         case '(':
840                             ++nesting;
841                             break;
842                         case '\\':
843                             /*
844                              * It's a nul terminated string, not allowed
845                              * to \ the terminating null. Anything other
846                              * character is passed over.
847                              */
848                             if (*e++) {
849                                 break;
850                             }
851                             /*
852                              * Drop through
853                              */
854                         case '\0':
855                             e--;
856                             if (ckWARN(WARN_LAYER))
857                                 Perl_warner(aTHX_ packWARN(WARN_LAYER),
858                                       "perlio: argument list not closed for layer \"%.*s\"",
859                                       (int) (e - s), s);
860                             return -1;
861                         default:
862                             /*
863                              * boring.
864                              */
865                             break;
866                         }
867                     }
868                 }
869                 if (e > s) {
870                     bool warn_layer = ckWARN(WARN_LAYER);
871                     PerlIO_funcs *layer =
872                         PerlIO_find_layer(aTHX_ s, llen, 1);
873                     if (layer) {
874                         PerlIO_list_push(aTHX_ av, layer,
875                                          (as) ? newSVpvn(as,
876                                                          alen) :
877                                          &PL_sv_undef);
878                     }
879                     else {
880                         if (warn_layer)
881                             Perl_warner(aTHX_ packWARN(WARN_LAYER), "perlio: unknown layer \"%.*s\"",
882                                   (int) llen, s);
883                         return -1;
884                     }
885                 }
886                 s = e;
887             }
888         }
889     }
890     return 0;
891 }
892
893 void
894 PerlIO_default_buffer(pTHX_ PerlIO_list_t *av)
895 {
896     PerlIO_funcs *tab = &PerlIO_perlio;
897 #ifdef PERLIO_USING_CRLF
898     tab = &PerlIO_crlf;
899 #else
900     if (PerlIO_stdio.Set_ptrcnt)
901         tab = &PerlIO_stdio;
902 #endif
903     PerlIO_debug("Pushing %s\n", tab->name);
904     PerlIO_list_push(aTHX_ av, PerlIO_find_layer(aTHX_ tab->name, 0, 0),
905                      &PL_sv_undef);
906 }
907
908 SV *
909 PerlIO_arg_fetch(PerlIO_list_t *av, IV n)
910 {
911     return av->array[n].arg;
912 }
913
914 PerlIO_funcs *
915 PerlIO_layer_fetch(pTHX_ PerlIO_list_t *av, IV n, PerlIO_funcs *def)
916 {
917     if (n >= 0 && n < av->cur) {
918         PerlIO_debug("Layer %" IVdf " is %s\n", n,
919                      av->array[n].funcs->name);
920         return av->array[n].funcs;
921     }
922     if (!def)
923         Perl_croak(aTHX_ "panic: PerlIO layer array corrupt");
924     return def;
925 }
926
927 IV
928 PerlIOPop_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
929 {
930     if (PerlIOValid(f)) {
931         PerlIO_flush(f);
932         PerlIO_pop(aTHX_ f);
933         return 0;
934     }
935     return -1;
936 }
937
938 PerlIO_funcs PerlIO_remove = {
939     sizeof(PerlIO_funcs),
940     "pop",
941     0,
942     PERLIO_K_DUMMY | PERLIO_K_UTF8,
943     PerlIOPop_pushed,
944     NULL,
945     NULL,
946     NULL,
947     NULL,
948     NULL,
949     NULL,
950     NULL,
951     NULL,
952     NULL,
953     NULL,
954     NULL,                       /* flush */
955     NULL,                       /* fill */
956     NULL,
957     NULL,
958     NULL,
959     NULL,
960     NULL,                       /* get_base */
961     NULL,                       /* get_bufsiz */
962     NULL,                       /* get_ptr */
963     NULL,                       /* get_cnt */
964     NULL,                       /* set_ptrcnt */
965 };
966
967 PerlIO_list_t *
968 PerlIO_default_layers(pTHX)
969 {
970     if (!PL_def_layerlist) {
971         const char *s = (PL_tainting) ? Nullch : PerlEnv_getenv("PERLIO");
972         PerlIO_funcs *osLayer = &PerlIO_unix;
973         PL_def_layerlist = PerlIO_list_alloc(aTHX);
974         PerlIO_define_layer(aTHX_ & PerlIO_unix);
975 #if defined(WIN32) && !defined(UNDER_CE)
976         PerlIO_define_layer(aTHX_ & PerlIO_win32);
977 #if 0
978         osLayer = &PerlIO_win32;
979 #endif
980 #endif
981         PerlIO_define_layer(aTHX_ & PerlIO_raw);
982         PerlIO_define_layer(aTHX_ & PerlIO_perlio);
983         PerlIO_define_layer(aTHX_ & PerlIO_stdio);
984         PerlIO_define_layer(aTHX_ & PerlIO_crlf);
985 #ifdef HAS_MMAP
986         PerlIO_define_layer(aTHX_ & PerlIO_mmap);
987 #endif
988         PerlIO_define_layer(aTHX_ & PerlIO_utf8);
989         PerlIO_define_layer(aTHX_ & PerlIO_remove);
990         PerlIO_define_layer(aTHX_ & PerlIO_byte);
991         PerlIO_list_push(aTHX_ PL_def_layerlist,
992                          PerlIO_find_layer(aTHX_ osLayer->name, 0, 0),
993                          &PL_sv_undef);
994         if (s) {
995             PerlIO_parse_layers(aTHX_ PL_def_layerlist, s);
996         }
997         else {
998             PerlIO_default_buffer(aTHX_ PL_def_layerlist);
999         }
1000     }
1001     if (PL_def_layerlist->cur < 2) {
1002         PerlIO_default_buffer(aTHX_ PL_def_layerlist);
1003     }
1004     return PL_def_layerlist;
1005 }
1006
1007 void
1008 Perl_boot_core_PerlIO(pTHX)
1009 {
1010 #ifdef USE_ATTRIBUTES_FOR_PERLIO
1011     newXS("io::MODIFY_SCALAR_ATTRIBUTES", XS_io_MODIFY_SCALAR_ATTRIBUTES,
1012           __FILE__);
1013 #endif
1014     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
1015 }
1016
1017 PerlIO_funcs *
1018 PerlIO_default_layer(pTHX_ I32 n)
1019 {
1020     PerlIO_list_t *av = PerlIO_default_layers(aTHX);
1021     if (n < 0)
1022         n += av->cur;
1023     return PerlIO_layer_fetch(aTHX_ av, n, &PerlIO_stdio);
1024 }
1025
1026 #define PerlIO_default_top() PerlIO_default_layer(aTHX_ -1)
1027 #define PerlIO_default_btm() PerlIO_default_layer(aTHX_ 0)
1028
1029 void
1030 PerlIO_stdstreams(pTHX)
1031 {
1032     if (!PL_perlio) {
1033         PerlIO_allocate(aTHX);
1034         PerlIO_fdopen(0, "Ir" PERLIO_STDTEXT);
1035         PerlIO_fdopen(1, "Iw" PERLIO_STDTEXT);
1036         PerlIO_fdopen(2, "Iw" PERLIO_STDTEXT);
1037     }
1038 }
1039
1040 PerlIO *
1041 PerlIO_push(pTHX_ PerlIO *f, PerlIO_funcs *tab, const char *mode, SV *arg)
1042 {
1043     if (tab->fsize != sizeof(PerlIO_funcs)) {
1044       mismatch:
1045         Perl_croak(aTHX_ "Layer does not match this perl");
1046     }
1047     if (tab->size) {
1048         PerlIOl *l = NULL;
1049         if (tab->size < sizeof(PerlIOl)) {
1050             goto mismatch;
1051         }
1052         /* Real layer with a data area */
1053         Newc('L',l,tab->size,char,PerlIOl);
1054         if (l && f) {
1055             Zero(l, tab->size, char);
1056             l->next = *f;
1057             l->tab = tab;
1058             *f = l;
1059             PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1060                         (mode) ? mode : "(Null)", (void*)arg);
1061             if ((*l->tab->Pushed) (aTHX_ f, mode, arg, tab) != 0) {
1062                 PerlIO_pop(aTHX_ f);
1063                 return NULL;
1064             }
1065         }
1066     }
1067     else if (f) {
1068         /* Pseudo-layer where push does its own stack adjust */
1069         PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1070                      (mode) ? mode : "(Null)", (void*)arg);
1071         if ((*tab->Pushed) (aTHX_ f, mode, arg, tab) != 0) {
1072             return NULL;
1073         }
1074     }
1075     return f;
1076 }
1077
1078 IV
1079 PerlIOBase_binmode(pTHX_ PerlIO *f)
1080 {
1081    if (PerlIOValid(f)) {
1082         /* Is layer suitable for raw stream ? */
1083         if (PerlIOBase(f)->tab->kind & PERLIO_K_RAW) {
1084             /* Yes - turn off UTF-8-ness, to undo UTF-8 locale effects */
1085             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1086         }
1087         else {
1088             /* Not suitable - pop it */
1089             PerlIO_pop(aTHX_ f);
1090         }
1091         return 0;
1092    }
1093    return -1;
1094 }
1095
1096 IV
1097 PerlIORaw_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1098 {
1099
1100     if (PerlIOValid(f)) {
1101         PerlIO *t;
1102         PerlIOl *l;
1103         PerlIO_flush(f);
1104         /*
1105          * Strip all layers that are not suitable for a raw stream
1106          */
1107         t = f;
1108         while (t && (l = *t)) {
1109             if (l->tab->Binmode) {
1110                 /* Has a handler - normal case */
1111                 if ((*l->tab->Binmode)(aTHX_ f) == 0) {
1112                     if (*t == l) {
1113                         /* Layer still there - move down a layer */
1114                         t = PerlIONext(t);
1115                     }
1116                 }
1117                 else {
1118                     return -1;
1119                 }
1120             }
1121             else {
1122                 /* No handler - pop it */
1123                 PerlIO_pop(aTHX_ t);
1124             }
1125         }
1126         if (PerlIOValid(f)) {
1127             PerlIO_debug(":raw f=%p :%s\n", (void*)f, PerlIOBase(f)->tab->name);
1128             return 0;
1129         }
1130     }
1131     return -1;
1132 }
1133
1134 int
1135 PerlIO_apply_layera(pTHX_ PerlIO *f, const char *mode,
1136                     PerlIO_list_t *layers, IV n, IV max)
1137 {
1138     int code = 0;
1139     while (n < max) {
1140         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n, NULL);
1141         if (tab) {
1142             if (!PerlIO_push(aTHX_ f, tab, mode, PerlIOArg)) {
1143                 code = -1;
1144                 break;
1145             }
1146         }
1147         n++;
1148     }
1149     return code;
1150 }
1151
1152 int
1153 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
1154 {
1155     int code = 0;
1156     if (f && names) {
1157         PerlIO_list_t *layers = PerlIO_list_alloc(aTHX);
1158         code = PerlIO_parse_layers(aTHX_ layers, names);
1159         if (code == 0) {
1160             code = PerlIO_apply_layera(aTHX_ f, mode, layers, 0, layers->cur);
1161         }
1162         PerlIO_list_free(aTHX_ layers);
1163     }
1164     return code;
1165 }
1166
1167
1168 /*--------------------------------------------------------------------------------------*/
1169 /*
1170  * Given the abstraction above the public API functions
1171  */
1172
1173 int
1174 PerlIO_binmode(pTHX_ PerlIO *f, int iotype, int mode, const char *names)
1175 {
1176     PerlIO_debug("PerlIO_binmode f=%p %s %c %x %s\n",
1177                  (void*)f, PerlIOBase(f)->tab->name, iotype, mode,
1178                  (names) ? names : "(Null)");
1179     if (names) {
1180         /* Do not flush etc. if (e.g.) switching encodings.
1181            if a pushed layer knows it needs to flush lower layers
1182            (for example :unix which is never going to call them)
1183            it can do the flush when it is pushed.
1184          */
1185         return PerlIO_apply_layers(aTHX_ f, NULL, names) == 0 ? TRUE : FALSE;
1186     }
1187     else {
1188         /* Fake 5.6 legacy of using this call to turn ON O_TEXT */
1189 #ifdef PERLIO_USING_CRLF
1190         /* Legacy binmode only has meaning if O_TEXT has a value distinct from
1191            O_BINARY so we can look for it in mode.
1192          */
1193         if (!(mode & O_BINARY)) {
1194             /* Text mode */
1195             /* FIXME?: Looking down the layer stack seems wrong,
1196                but is a way of reaching past (say) an encoding layer
1197                to flip CRLF-ness of the layer(s) below
1198              */
1199             while (*f) {
1200                 /* Perhaps we should turn on bottom-most aware layer
1201                    e.g. Ilya's idea that UNIX TTY could serve
1202                  */
1203                 if (PerlIOBase(f)->tab->kind & PERLIO_K_CANCRLF) {
1204                     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
1205                         /* Not in text mode - flush any pending stuff and flip it */
1206                         PerlIO_flush(f);
1207                         PerlIOBase(f)->flags |= PERLIO_F_CRLF;
1208                     }
1209                     /* Only need to turn it on in one layer so we are done */
1210                     return TRUE;
1211                 }
1212                 f = PerlIONext(f);
1213             }
1214             /* Not finding a CRLF aware layer presumably means we are binary
1215                which is not what was requested - so we failed
1216                We _could_ push :crlf layer but so could caller
1217              */
1218             return FALSE;
1219         }
1220 #endif
1221         /* Legacy binmode is now _defined_ as being equivalent to pushing :raw
1222            So code that used to be here is now in PerlIORaw_pushed().
1223          */
1224         return PerlIO_push(aTHX_ f, &PerlIO_raw, Nullch, Nullsv) ? TRUE : FALSE;
1225     }
1226 }
1227
1228 int
1229 PerlIO__close(pTHX_ PerlIO *f)
1230 {
1231     if (PerlIOValid(f))
1232         return (*PerlIOBase(f)->tab->Close) (aTHX_ f);
1233     else {
1234         SETERRNO(EBADF, SS_IVCHAN);
1235         return -1;
1236     }
1237 }
1238
1239 int
1240 Perl_PerlIO_close(pTHX_ PerlIO *f)
1241 {
1242     int code = -1;
1243     if (PerlIOValid(f)) {
1244         code = (*PerlIOBase(f)->tab->Close) (aTHX_ f);
1245         while (*f) {
1246             PerlIO_pop(aTHX_ f);
1247         }
1248     }
1249     return code;
1250 }
1251
1252 int
1253 Perl_PerlIO_fileno(pTHX_ PerlIO *f)
1254 {
1255     if (PerlIOValid(f))
1256         return (*PerlIOBase(f)->tab->Fileno) (aTHX_ f);
1257     else {
1258         SETERRNO(EBADF, SS_IVCHAN);
1259         return -1;
1260     }
1261 }
1262
1263 static const char *
1264 PerlIO_context_layers(pTHX_ const char *mode)
1265 {
1266     const char *type = NULL;
1267     /*
1268      * Need to supply default layer info from open.pm
1269      */
1270     if (PL_curcop) {
1271         SV *layers = PL_curcop->cop_io;
1272         if (layers) {
1273             STRLEN len;
1274             type = SvPV(layers, len);
1275             if (type && mode[0] != 'r') {
1276                 /*
1277                  * Skip to write part
1278                  */
1279                 const char *s = strchr(type, 0);
1280                 if (s && (STRLEN)(s - type) < len) {
1281                     type = s + 1;
1282                 }
1283             }
1284         }
1285     }
1286     return type;
1287 }
1288
1289 static PerlIO_funcs *
1290 PerlIO_layer_from_ref(pTHX_ SV *sv)
1291 {
1292     /*
1293      * For any scalar type load the handler which is bundled with perl
1294      */
1295     if (SvTYPE(sv) < SVt_PVAV)
1296         return PerlIO_find_layer(aTHX_ "scalar", 6, 1);
1297
1298     /*
1299      * For other types allow if layer is known but don't try and load it
1300      */
1301     switch (SvTYPE(sv)) {
1302     case SVt_PVAV:
1303         return PerlIO_find_layer(aTHX_ "Array", 5, 0);
1304     case SVt_PVHV:
1305         return PerlIO_find_layer(aTHX_ "Hash", 4, 0);
1306     case SVt_PVCV:
1307         return PerlIO_find_layer(aTHX_ "Code", 4, 0);
1308     case SVt_PVGV:
1309         return PerlIO_find_layer(aTHX_ "Glob", 4, 0);
1310     }
1311     return NULL;
1312 }
1313
1314 PerlIO_list_t *
1315 PerlIO_resolve_layers(pTHX_ const char *layers,
1316                       const char *mode, int narg, SV **args)
1317 {
1318     PerlIO_list_t *def = PerlIO_default_layers(aTHX);
1319     int incdef = 1;
1320     if (!PL_perlio)
1321         PerlIO_stdstreams(aTHX);
1322     if (narg) {
1323         SV *arg = *args;
1324         /*
1325          * If it is a reference but not an object see if we have a handler
1326          * for it
1327          */
1328         if (SvROK(arg) && !sv_isobject(arg)) {
1329             PerlIO_funcs *handler = PerlIO_layer_from_ref(aTHX_ SvRV(arg));
1330             if (handler) {
1331                 def = PerlIO_list_alloc(aTHX);
1332                 PerlIO_list_push(aTHX_ def, handler, &PL_sv_undef);
1333                 incdef = 0;
1334             }
1335             /*
1336              * Don't fail if handler cannot be found :via(...) etc. may do
1337              * something sensible else we will just stringfy and open
1338              * resulting string.
1339              */
1340         }
1341     }
1342     if (!layers)
1343         layers = PerlIO_context_layers(aTHX_ mode);
1344     if (layers && *layers) {
1345         PerlIO_list_t *av;
1346         if (incdef) {
1347             IV i = def->cur;
1348             av = PerlIO_list_alloc(aTHX);
1349             for (i = 0; i < def->cur; i++) {
1350                 PerlIO_list_push(aTHX_ av, def->array[i].funcs,
1351                                  def->array[i].arg);
1352             }
1353         }
1354         else {
1355             av = def;
1356         }
1357         if (PerlIO_parse_layers(aTHX_ av, layers) == 0) {
1358              return av;
1359         }
1360         else {
1361             PerlIO_list_free(aTHX_ av);
1362             return (PerlIO_list_t *) NULL;
1363         }
1364     }
1365     else {
1366         if (incdef)
1367             def->refcnt++;
1368         return def;
1369     }
1370 }
1371
1372 PerlIO *
1373 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
1374              int imode, int perm, PerlIO *f, int narg, SV **args)
1375 {
1376     if (!f && narg == 1 && *args == &PL_sv_undef) {
1377         if ((f = PerlIO_tmpfile())) {
1378             if (!layers)
1379                 layers = PerlIO_context_layers(aTHX_ mode);
1380             if (layers && *layers)
1381                 PerlIO_apply_layers(aTHX_ f, mode, layers);
1382         }
1383     }
1384     else {
1385         PerlIO_list_t *layera = NULL;
1386         IV n;
1387         PerlIO_funcs *tab = NULL;
1388         if (PerlIOValid(f)) {
1389             /*
1390              * This is "reopen" - it is not tested as perl does not use it
1391              * yet
1392              */
1393             PerlIOl *l = *f;
1394             layera = PerlIO_list_alloc(aTHX);
1395             while (l) {
1396                 SV *arg = (l->tab->Getarg)
1397                         ? (*l->tab->Getarg) (aTHX_ &l, NULL, 0)
1398                         : &PL_sv_undef;
1399                 PerlIO_list_push(aTHX_ layera, l->tab, arg);
1400                 l = *PerlIONext(&l);
1401             }
1402         }
1403         else {
1404             layera = PerlIO_resolve_layers(aTHX_ layers, mode, narg, args);
1405             if (!layera) {
1406                 return NULL;
1407             }
1408         }
1409         /*
1410          * Start at "top" of layer stack
1411          */
1412         n = layera->cur - 1;
1413         while (n >= 0) {
1414             PerlIO_funcs *t = PerlIO_layer_fetch(aTHX_ layera, n, NULL);
1415             if (t && t->Open) {
1416                 tab = t;
1417                 break;
1418             }
1419             n--;
1420         }
1421         if (tab) {
1422             /*
1423              * Found that layer 'n' can do opens - call it
1424              */
1425             if (narg > 1 && !(tab->kind & PERLIO_K_MULTIARG)) {
1426                 Perl_croak(aTHX_ "More than one argument to open(,':%s')",tab->name);
1427             }
1428             PerlIO_debug("openn(%s,'%s','%s',%d,%x,%o,%p,%d,%p)\n",
1429                          tab->name, layers, mode, fd, imode, perm,
1430                          (void*)f, narg, (void*)args);
1431             f = (*tab->Open) (aTHX_ tab, layera, n, mode, fd, imode, perm,
1432                               f, narg, args);
1433             if (f) {
1434                 if (n + 1 < layera->cur) {
1435                     /*
1436                      * More layers above the one that we used to open -
1437                      * apply them now
1438                      */
1439                     if (PerlIO_apply_layera(aTHX_ f, mode, layera, n + 1, layera->cur) != 0) {
1440                         /* If pushing layers fails close the file */
1441                         PerlIO_close(f);
1442                         f = NULL;
1443                     }
1444                 }
1445             }
1446         }
1447         PerlIO_list_free(aTHX_ layera);
1448     }
1449     return f;
1450 }
1451
1452
1453 SSize_t
1454 Perl_PerlIO_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1455 {
1456     if (PerlIOValid(f))
1457         return (*PerlIOBase(f)->tab->Read) (aTHX_ f, vbuf, count);
1458     else {
1459         SETERRNO(EBADF, SS_IVCHAN);
1460         return -1;
1461     }
1462 }
1463
1464 SSize_t
1465 Perl_PerlIO_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1466 {
1467     if (PerlIOValid(f))
1468         return (*PerlIOBase(f)->tab->Unread) (aTHX_ f, vbuf, count);
1469     else {
1470         SETERRNO(EBADF, SS_IVCHAN);
1471         return -1;
1472     }
1473 }
1474
1475 SSize_t
1476 Perl_PerlIO_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1477 {
1478     if (PerlIOValid(f))
1479         return (*PerlIOBase(f)->tab->Write) (aTHX_ f, vbuf, count);
1480     else {
1481         SETERRNO(EBADF, SS_IVCHAN);
1482         return -1;
1483     }
1484 }
1485
1486 int
1487 Perl_PerlIO_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
1488 {
1489     if (PerlIOValid(f))
1490         return (*PerlIOBase(f)->tab->Seek) (aTHX_ f, offset, whence);
1491     else {
1492         SETERRNO(EBADF, SS_IVCHAN);
1493         return -1;
1494     }
1495 }
1496
1497 Off_t
1498 Perl_PerlIO_tell(pTHX_ PerlIO *f)
1499 {
1500     if (PerlIOValid(f))
1501         return (*PerlIOBase(f)->tab->Tell) (aTHX_ f);
1502     else {
1503         SETERRNO(EBADF, SS_IVCHAN);
1504         return -1;
1505     }
1506 }
1507
1508 int
1509 Perl_PerlIO_flush(pTHX_ PerlIO *f)
1510 {
1511     if (f) {
1512         if (*f) {
1513             PerlIO_funcs *tab = PerlIOBase(f)->tab;
1514             if (tab && tab->Flush) {
1515                 return (*tab->Flush) (aTHX_ f);
1516             }
1517             else {
1518                 PerlIO_debug("Cannot flush f=%p :%s\n", (void*)f, tab->name);
1519                 SETERRNO(EBADF, SS_IVCHAN);
1520                 return -1;
1521             }
1522         }
1523         else {
1524             PerlIO_debug("Cannot flush f=%p\n", (void*)f);
1525             SETERRNO(EBADF, SS_IVCHAN);
1526             return -1;
1527         }
1528     }
1529     else {
1530         /*
1531          * Is it good API design to do flush-all on NULL, a potentially
1532          * errorneous input? Maybe some magical value (PerlIO*
1533          * PERLIO_FLUSH_ALL = (PerlIO*)-1;)? Yes, stdio does similar
1534          * things on fflush(NULL), but should we be bound by their design
1535          * decisions? --jhi
1536          */
1537         PerlIO **table = &PL_perlio;
1538         int code = 0;
1539         while ((f = *table)) {
1540             int i;
1541             table = (PerlIO **) (f++);
1542             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1543                 if (*f && PerlIO_flush(f) != 0)
1544                     code = -1;
1545                 f++;
1546             }
1547         }
1548         return code;
1549     }
1550 }
1551
1552 void
1553 PerlIOBase_flush_linebuf(pTHX)
1554 {
1555     PerlIO **table = &PL_perlio;
1556     PerlIO *f;
1557     while ((f = *table)) {
1558         int i;
1559         table = (PerlIO **) (f++);
1560         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1561             if (*f
1562                 && (PerlIOBase(f)->
1563                     flags & (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1564                 == (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1565                 PerlIO_flush(f);
1566             f++;
1567         }
1568     }
1569 }
1570
1571 int
1572 Perl_PerlIO_fill(pTHX_ PerlIO *f)
1573 {
1574     if (PerlIOValid(f))
1575         return (*PerlIOBase(f)->tab->Fill) (aTHX_ f);
1576     else {
1577         SETERRNO(EBADF, SS_IVCHAN);
1578         return -1;
1579     }
1580 }
1581
1582 int
1583 PerlIO_isutf8(PerlIO *f)
1584 {
1585     if (PerlIOValid(f))
1586         return (PerlIOBase(f)->flags & PERLIO_F_UTF8) != 0;
1587     else {
1588         SETERRNO(EBADF, SS_IVCHAN);
1589         return -1;
1590     }
1591 }
1592
1593 int
1594 Perl_PerlIO_eof(pTHX_ PerlIO *f)
1595 {
1596     if (PerlIOValid(f))
1597         return (*PerlIOBase(f)->tab->Eof) (aTHX_ f);
1598     else {
1599         SETERRNO(EBADF, SS_IVCHAN);
1600         return -1;
1601     }
1602 }
1603
1604 int
1605 Perl_PerlIO_error(pTHX_ PerlIO *f)
1606 {
1607     if (PerlIOValid(f))
1608         return (*PerlIOBase(f)->tab->Error) (aTHX_ f);
1609     else {
1610         SETERRNO(EBADF, SS_IVCHAN);
1611         return -1;
1612     }
1613 }
1614
1615 void
1616 Perl_PerlIO_clearerr(pTHX_ PerlIO *f)
1617 {
1618     if (PerlIOValid(f))
1619         (*PerlIOBase(f)->tab->Clearerr) (aTHX_ f);
1620     else
1621         SETERRNO(EBADF, SS_IVCHAN);
1622 }
1623
1624 void
1625 Perl_PerlIO_setlinebuf(pTHX_ PerlIO *f)
1626 {
1627     if (PerlIOValid(f))
1628         (*PerlIOBase(f)->tab->Setlinebuf) (aTHX_ f);
1629     else
1630         SETERRNO(EBADF, SS_IVCHAN);
1631 }
1632
1633 int
1634 PerlIO_has_base(PerlIO *f)
1635 {
1636     if (PerlIOValid(f)) {
1637         return (PerlIOBase(f)->tab->Get_base != NULL);
1638     }
1639     return 0;
1640 }
1641
1642 int
1643 PerlIO_fast_gets(PerlIO *f)
1644 {
1645     if (PerlIOValid(f) && (PerlIOBase(f)->flags & PERLIO_F_FASTGETS)) {
1646         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1647         return (tab->Set_ptrcnt != NULL);
1648     }
1649     return 0;
1650 }
1651
1652 int
1653 PerlIO_has_cntptr(PerlIO *f)
1654 {
1655     if (PerlIOValid(f)) {
1656         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1657         return (tab->Get_ptr != NULL && tab->Get_cnt != NULL);
1658     }
1659     return 0;
1660 }
1661
1662 int
1663 PerlIO_canset_cnt(PerlIO *f)
1664 {
1665     if (PerlIOValid(f)) {
1666         PerlIOl *l = PerlIOBase(f);
1667         return (l->tab->Set_ptrcnt != NULL);
1668     }
1669     return 0;
1670 }
1671
1672 STDCHAR *
1673 Perl_PerlIO_get_base(pTHX_ PerlIO *f)
1674 {
1675     if (PerlIOValid(f))
1676         return (*PerlIOBase(f)->tab->Get_base) (aTHX_ f);
1677     return NULL;
1678 }
1679
1680 int
1681 Perl_PerlIO_get_bufsiz(pTHX_ PerlIO *f)
1682 {
1683     if (PerlIOValid(f))
1684         return (*PerlIOBase(f)->tab->Get_bufsiz) (aTHX_ f);
1685     return 0;
1686 }
1687
1688 STDCHAR *
1689 Perl_PerlIO_get_ptr(pTHX_ PerlIO *f)
1690 {
1691     if (PerlIOValid(f)) {
1692         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1693         if (tab->Get_ptr == NULL)
1694             return NULL;
1695         return (*tab->Get_ptr) (aTHX_ f);
1696     }
1697     return NULL;
1698 }
1699
1700 int
1701 Perl_PerlIO_get_cnt(pTHX_ PerlIO *f)
1702 {
1703     if (PerlIOValid(f)) {
1704         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1705         if (tab->Get_cnt == NULL)
1706            return 0;
1707         return (*tab->Get_cnt) (aTHX_ f);
1708     }
1709     return 0;
1710 }
1711
1712 void
1713 Perl_PerlIO_set_cnt(pTHX_ PerlIO *f, int cnt)
1714 {
1715     if (PerlIOValid(f)) {
1716         (*PerlIOBase(f)->tab->Set_ptrcnt) (aTHX_ f, NULL, cnt);
1717     }
1718 }
1719
1720 void
1721 Perl_PerlIO_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, int cnt)
1722 {
1723     if (PerlIOValid(f)) {
1724         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1725         if (tab->Set_ptrcnt == NULL) {
1726             Perl_croak(aTHX_ "PerlIO buffer snooping abuse");
1727         }
1728         (*PerlIOBase(f)->tab->Set_ptrcnt) (aTHX_ f, ptr, cnt);
1729     }
1730 }
1731
1732
1733 /*--------------------------------------------------------------------------------------*/
1734 /*
1735  * utf8 and raw dummy layers
1736  */
1737
1738 IV
1739 PerlIOUtf8_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1740 {
1741     if (PerlIOValid(f)) {
1742         if (tab->kind & PERLIO_K_UTF8)
1743             PerlIOBase(f)->flags |= PERLIO_F_UTF8;
1744         else
1745             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1746         return 0;
1747     }
1748     return -1;
1749 }
1750
1751 PerlIO_funcs PerlIO_utf8 = {
1752     sizeof(PerlIO_funcs),
1753     "utf8",
1754     0,
1755     PERLIO_K_DUMMY | PERLIO_K_UTF8,
1756     PerlIOUtf8_pushed,
1757     NULL,
1758     NULL,
1759     NULL,
1760     NULL,
1761     NULL,
1762     NULL,
1763     NULL,
1764     NULL,
1765     NULL,
1766     NULL,
1767     NULL,                       /* flush */
1768     NULL,                       /* fill */
1769     NULL,
1770     NULL,
1771     NULL,
1772     NULL,
1773     NULL,                       /* get_base */
1774     NULL,                       /* get_bufsiz */
1775     NULL,                       /* get_ptr */
1776     NULL,                       /* get_cnt */
1777     NULL,                       /* set_ptrcnt */
1778 };
1779
1780 PerlIO_funcs PerlIO_byte = {
1781     sizeof(PerlIO_funcs),
1782     "bytes",
1783     0,
1784     PERLIO_K_DUMMY,
1785     PerlIOUtf8_pushed,
1786     NULL,
1787     NULL,
1788     NULL,
1789     NULL,
1790     NULL,
1791     NULL,
1792     NULL,
1793     NULL,
1794     NULL,
1795     NULL,
1796     NULL,                       /* flush */
1797     NULL,                       /* fill */
1798     NULL,
1799     NULL,
1800     NULL,
1801     NULL,
1802     NULL,                       /* get_base */
1803     NULL,                       /* get_bufsiz */
1804     NULL,                       /* get_ptr */
1805     NULL,                       /* get_cnt */
1806     NULL,                       /* set_ptrcnt */
1807 };
1808
1809 PerlIO *
1810 PerlIORaw_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
1811                IV n, const char *mode, int fd, int imode, int perm,
1812                PerlIO *old, int narg, SV **args)
1813 {
1814     PerlIO_funcs *tab = PerlIO_default_btm();
1815     return (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
1816                          old, narg, args);
1817 }
1818
1819 PerlIO_funcs PerlIO_raw = {
1820     sizeof(PerlIO_funcs),
1821     "raw",
1822     0,
1823     PERLIO_K_DUMMY,
1824     PerlIORaw_pushed,
1825     PerlIOBase_popped,
1826     PerlIORaw_open,
1827     NULL,
1828     NULL,
1829     NULL,
1830     NULL,
1831     NULL,
1832     NULL,
1833     NULL,
1834     NULL,
1835     NULL,                       /* flush */
1836     NULL,                       /* fill */
1837     NULL,
1838     NULL,
1839     NULL,
1840     NULL,
1841     NULL,                       /* get_base */
1842     NULL,                       /* get_bufsiz */
1843     NULL,                       /* get_ptr */
1844     NULL,                       /* get_cnt */
1845     NULL,                       /* set_ptrcnt */
1846 };
1847 /*--------------------------------------------------------------------------------------*/
1848 /*--------------------------------------------------------------------------------------*/
1849 /*
1850  * "Methods" of the "base class"
1851  */
1852
1853 IV
1854 PerlIOBase_fileno(pTHX_ PerlIO *f)
1855 {
1856     return PerlIOValid(f) ? PerlIO_fileno(PerlIONext(f)) : -1;
1857 }
1858
1859 char *
1860 PerlIO_modestr(PerlIO * f, char *buf)
1861 {
1862     char *s = buf;
1863     if (PerlIOValid(f)) {
1864         IV flags = PerlIOBase(f)->flags;
1865         if (flags & PERLIO_F_APPEND) {
1866             *s++ = 'a';
1867             if (flags & PERLIO_F_CANREAD) {
1868                 *s++ = '+';
1869             }
1870         }
1871         else if (flags & PERLIO_F_CANREAD) {
1872             *s++ = 'r';
1873             if (flags & PERLIO_F_CANWRITE)
1874                 *s++ = '+';
1875         }
1876         else if (flags & PERLIO_F_CANWRITE) {
1877             *s++ = 'w';
1878             if (flags & PERLIO_F_CANREAD) {
1879                 *s++ = '+';
1880             }
1881         }
1882 #ifdef PERLIO_USING_CRLF
1883         if (!(flags & PERLIO_F_CRLF))
1884             *s++ = 'b';
1885 #endif
1886     }
1887     *s = '\0';
1888     return buf;
1889 }
1890
1891
1892 IV
1893 PerlIOBase_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1894 {
1895     PerlIOl *l = PerlIOBase(f);
1896 #if 0
1897     const char *omode = mode;
1898     char temp[8];
1899 #endif
1900     l->flags &= ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE |
1901                   PERLIO_F_TRUNCATE | PERLIO_F_APPEND);
1902     if (tab->Set_ptrcnt != NULL)
1903         l->flags |= PERLIO_F_FASTGETS;
1904     if (mode) {
1905         if (*mode == '#' || *mode == 'I')
1906             mode++;
1907         switch (*mode++) {
1908         case 'r':
1909             l->flags |= PERLIO_F_CANREAD;
1910             break;
1911         case 'a':
1912             l->flags |= PERLIO_F_APPEND | PERLIO_F_CANWRITE;
1913             break;
1914         case 'w':
1915             l->flags |= PERLIO_F_TRUNCATE | PERLIO_F_CANWRITE;
1916             break;
1917         default:
1918             SETERRNO(EINVAL, LIB_INVARG);
1919             return -1;
1920         }
1921         while (*mode) {
1922             switch (*mode++) {
1923             case '+':
1924                 l->flags |= PERLIO_F_CANREAD | PERLIO_F_CANWRITE;
1925                 break;
1926             case 'b':
1927                 l->flags &= ~PERLIO_F_CRLF;
1928                 break;
1929             case 't':
1930                 l->flags |= PERLIO_F_CRLF;
1931                 break;
1932             default:
1933                 SETERRNO(EINVAL, LIB_INVARG);
1934                 return -1;
1935             }
1936         }
1937     }
1938     else {
1939         if (l->next) {
1940             l->flags |= l->next->flags &
1941                 (PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_TRUNCATE |
1942                  PERLIO_F_APPEND);
1943         }
1944     }
1945 #if 0
1946     PerlIO_debug("PerlIOBase_pushed f=%p %s %s fl=%08" UVxf " (%s)\n",
1947                  f, PerlIOBase(f)->tab->name, (omode) ? omode : "(Null)",
1948                  l->flags, PerlIO_modestr(f, temp));
1949 #endif
1950     return 0;
1951 }
1952
1953 IV
1954 PerlIOBase_popped(pTHX_ PerlIO *f)
1955 {
1956     return 0;
1957 }
1958
1959 SSize_t
1960 PerlIOBase_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1961 {
1962     /*
1963      * Save the position as current head considers it
1964      */
1965     Off_t old = PerlIO_tell(f);
1966     SSize_t done;
1967     PerlIO_push(aTHX_ f, &PerlIO_pending, "r", Nullsv);
1968     PerlIOSelf(f, PerlIOBuf)->posn = old;
1969     done = PerlIOBuf_unread(aTHX_ f, vbuf, count);
1970     return done;
1971 }
1972
1973 SSize_t
1974 PerlIOBase_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1975 {
1976     STDCHAR *buf = (STDCHAR *) vbuf;
1977     if (f) {
1978         if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD))
1979             return 0;
1980         while (count > 0) {
1981             SSize_t avail = PerlIO_get_cnt(f);
1982             SSize_t take = 0;
1983             if (avail > 0)
1984                 take = ((SSize_t)count < avail) ? count : avail;
1985             if (take > 0) {
1986                 STDCHAR *ptr = PerlIO_get_ptr(f);
1987                 Copy(ptr, buf, take, STDCHAR);
1988                 PerlIO_set_ptrcnt(f, ptr + take, (avail -= take));
1989                 count -= take;
1990                 buf += take;
1991             }
1992             if (count > 0 && avail <= 0) {
1993                 if (PerlIO_fill(f) != 0)
1994                     break;
1995             }
1996         }
1997         return (buf - (STDCHAR *) vbuf);
1998     }
1999     return 0;
2000 }
2001
2002 IV
2003 PerlIOBase_noop_ok(pTHX_ PerlIO *f)
2004 {
2005     return 0;
2006 }
2007
2008 IV
2009 PerlIOBase_noop_fail(pTHX_ PerlIO *f)
2010 {
2011     return -1;
2012 }
2013
2014 IV
2015 PerlIOBase_close(pTHX_ PerlIO *f)
2016 {
2017     IV code = 0;
2018     PerlIO *n = PerlIONext(f);
2019     if (PerlIO_flush(f) != 0)
2020         code = -1;
2021     if (PerlIOValid(n) && (*PerlIOBase(n)->tab->Close)(aTHX_ n) != 0)
2022         code = -1;
2023     PerlIOBase(f)->flags &=
2024         ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_OPEN);
2025     return code;
2026 }
2027
2028 IV
2029 PerlIOBase_eof(pTHX_ PerlIO *f)
2030 {
2031     if (PerlIOValid(f)) {
2032         return (PerlIOBase(f)->flags & PERLIO_F_EOF) != 0;
2033     }
2034     return 1;
2035 }
2036
2037 IV
2038 PerlIOBase_error(pTHX_ PerlIO *f)
2039 {
2040     if (PerlIOValid(f)) {
2041         return (PerlIOBase(f)->flags & PERLIO_F_ERROR) != 0;
2042     }
2043     return 1;
2044 }
2045
2046 void
2047 PerlIOBase_clearerr(pTHX_ PerlIO *f)
2048 {
2049     if (PerlIOValid(f)) {
2050         PerlIO *n = PerlIONext(f);
2051         PerlIOBase(f)->flags &= ~(PERLIO_F_ERROR | PERLIO_F_EOF);
2052         if (PerlIOValid(n))
2053             PerlIO_clearerr(n);
2054     }
2055 }
2056
2057 void
2058 PerlIOBase_setlinebuf(pTHX_ PerlIO *f)
2059 {
2060     if (PerlIOValid(f)) {
2061         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF;
2062     }
2063 }
2064
2065 SV *
2066 PerlIO_sv_dup(pTHX_ SV *arg, CLONE_PARAMS *param)
2067 {
2068     if (!arg)
2069         return Nullsv;
2070 #ifdef sv_dup
2071     if (param) {
2072         return sv_dup(arg, param);
2073     }
2074     else {
2075         return newSVsv(arg);
2076     }
2077 #else
2078     return newSVsv(arg);
2079 #endif
2080 }
2081
2082 PerlIO *
2083 PerlIOBase_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2084 {
2085     PerlIO *nexto = PerlIONext(o);
2086     if (PerlIOValid(nexto)) {
2087         PerlIO_funcs *tab = PerlIOBase(nexto)->tab;
2088         f = (*tab->Dup)(aTHX_ f, nexto, param, flags);
2089     }
2090     if (f) {
2091         PerlIO_funcs *self = PerlIOBase(o)->tab;
2092         SV *arg = Nullsv;
2093         char buf[8];
2094         PerlIO_debug("PerlIOBase_dup %s f=%p o=%p param=%p\n",
2095                      self->name, (void*)f, (void*)o, (void*)param);
2096         if (self->Getarg) {
2097             arg = (*self->Getarg)(aTHX_ o,param,flags);
2098         }
2099         f = PerlIO_push(aTHX_ f, self, PerlIO_modestr(o,buf), arg);
2100         if (arg) {
2101             SvREFCNT_dec(arg);
2102         }
2103     }
2104     return f;
2105 }
2106
2107 #define PERLIO_MAX_REFCOUNTABLE_FD 2048
2108 #ifdef USE_THREADS
2109 perl_mutex PerlIO_mutex;
2110 #endif
2111 int PerlIO_fd_refcnt[PERLIO_MAX_REFCOUNTABLE_FD];
2112
2113 void
2114 PerlIO_init(pTHX)
2115 {
2116  /* Place holder for stdstreams call ??? */
2117 #ifdef USE_THREADS
2118  MUTEX_INIT(&PerlIO_mutex);
2119 #endif
2120 }
2121
2122 void
2123 PerlIOUnix_refcnt_inc(int fd)
2124 {
2125     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2126 #ifdef USE_THREADS
2127         MUTEX_LOCK(&PerlIO_mutex);
2128 #endif
2129         PerlIO_fd_refcnt[fd]++;
2130         PerlIO_debug("fd %d refcnt=%d\n",fd,PerlIO_fd_refcnt[fd]);
2131 #ifdef USE_THREADS
2132         MUTEX_UNLOCK(&PerlIO_mutex);
2133 #endif
2134     }
2135 }
2136
2137 int
2138 PerlIOUnix_refcnt_dec(int fd)
2139 {
2140     int cnt = 0;
2141     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2142 #ifdef USE_THREADS
2143         MUTEX_LOCK(&PerlIO_mutex);
2144 #endif
2145         cnt = --PerlIO_fd_refcnt[fd];
2146         PerlIO_debug("fd %d refcnt=%d\n",fd,cnt);
2147 #ifdef USE_THREADS
2148         MUTEX_UNLOCK(&PerlIO_mutex);
2149 #endif
2150     }
2151     return cnt;
2152 }
2153
2154 void
2155 PerlIO_cleanup(pTHX)
2156 {
2157     int i;
2158 #ifdef USE_ITHREADS
2159     PerlIO_debug("Cleanup layers for %p\n",aTHX);
2160 #else
2161     PerlIO_debug("Cleanup layers\n");
2162 #endif
2163     /* Raise STDIN..STDERR refcount so we don't close them */
2164     for (i=0; i < 3; i++)
2165         PerlIOUnix_refcnt_inc(i);
2166     PerlIO_cleantable(aTHX_ &PL_perlio);
2167     /* Restore STDIN..STDERR refcount */
2168     for (i=0; i < 3; i++)
2169         PerlIOUnix_refcnt_dec(i);
2170
2171     if (PL_known_layers) {
2172         PerlIO_list_free(aTHX_ PL_known_layers);
2173         PL_known_layers = NULL;
2174     }
2175     if(PL_def_layerlist) {
2176         PerlIO_list_free(aTHX_ PL_def_layerlist);
2177         PL_def_layerlist = NULL;
2178     }
2179 }
2180
2181
2182
2183 /*--------------------------------------------------------------------------------------*/
2184 /*
2185  * Bottom-most level for UNIX-like case
2186  */
2187
2188 typedef struct {
2189     struct _PerlIO base;        /* The generic part */
2190     int fd;                     /* UNIX like file descriptor */
2191     int oflags;                 /* open/fcntl flags */
2192 } PerlIOUnix;
2193
2194 int
2195 PerlIOUnix_oflags(const char *mode)
2196 {
2197     int oflags = -1;
2198     if (*mode == 'I' || *mode == '#')
2199         mode++;
2200     switch (*mode) {
2201     case 'r':
2202         oflags = O_RDONLY;
2203         if (*++mode == '+') {
2204             oflags = O_RDWR;
2205             mode++;
2206         }
2207         break;
2208
2209     case 'w':
2210         oflags = O_CREAT | O_TRUNC;
2211         if (*++mode == '+') {
2212             oflags |= O_RDWR;
2213             mode++;
2214         }
2215         else
2216             oflags |= O_WRONLY;
2217         break;
2218
2219     case 'a':
2220         oflags = O_CREAT | O_APPEND;
2221         if (*++mode == '+') {
2222             oflags |= O_RDWR;
2223             mode++;
2224         }
2225         else
2226             oflags |= O_WRONLY;
2227         break;
2228     }
2229     if (*mode == 'b') {
2230         oflags |= O_BINARY;
2231         oflags &= ~O_TEXT;
2232         mode++;
2233     }
2234     else if (*mode == 't') {
2235         oflags |= O_TEXT;
2236         oflags &= ~O_BINARY;
2237         mode++;
2238     }
2239     /*
2240      * Always open in binary mode
2241      */
2242     oflags |= O_BINARY;
2243     if (*mode || oflags == -1) {
2244         SETERRNO(EINVAL, LIB_INVARG);
2245         oflags = -1;
2246     }
2247     return oflags;
2248 }
2249
2250 IV
2251 PerlIOUnix_fileno(pTHX_ PerlIO *f)
2252 {
2253     return PerlIOSelf(f, PerlIOUnix)->fd;
2254 }
2255
2256 IV
2257 PerlIOUnix_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2258 {
2259     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2260     PerlIOUnix *s = PerlIOSelf(f, PerlIOUnix);
2261     if (*PerlIONext(f)) {
2262         /* We never call down so do any pending stuff now */
2263         PerlIO_flush(PerlIONext(f));
2264         s->fd = PerlIO_fileno(PerlIONext(f));
2265         /*
2266          * XXX could (or should) we retrieve the oflags from the open file
2267          * handle rather than believing the "mode" we are passed in? XXX
2268          * Should the value on NULL mode be 0 or -1?
2269          */
2270         s->oflags = mode ? PerlIOUnix_oflags(mode) : -1;
2271     }
2272     PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2273     return code;
2274 }
2275
2276 PerlIO *
2277 PerlIOUnix_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2278                 IV n, const char *mode, int fd, int imode,
2279                 int perm, PerlIO *f, int narg, SV **args)
2280 {
2281     if (PerlIOValid(f)) {
2282         if (PerlIOBase(f)->flags & PERLIO_F_OPEN)
2283             (*PerlIOBase(f)->tab->Close)(aTHX_ f);
2284     }
2285     if (narg > 0) {
2286         char *path = SvPV_nolen(*args);
2287         if (*mode == '#')
2288             mode++;
2289         else {
2290             imode = PerlIOUnix_oflags(mode);
2291             perm = 0666;
2292         }
2293         if (imode != -1) {
2294             fd = PerlLIO_open3(path, imode, perm);
2295         }
2296     }
2297     if (fd >= 0) {
2298         PerlIOUnix *s;
2299         if (*mode == 'I')
2300             mode++;
2301         if (!f) {
2302             f = PerlIO_allocate(aTHX);
2303         }
2304         if (!PerlIOValid(f)) {
2305             if (!(f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2306                 return NULL;
2307             }
2308         }
2309         s = PerlIOSelf(f, PerlIOUnix);
2310         s->fd = fd;
2311         s->oflags = imode;
2312         PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2313         PerlIOUnix_refcnt_inc(fd);
2314         return f;
2315     }
2316     else {
2317         if (f) {
2318             /*
2319              * FIXME: pop layers ???
2320              */
2321         }
2322         return NULL;
2323     }
2324 }
2325
2326 PerlIO *
2327 PerlIOUnix_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2328 {
2329     PerlIOUnix *os = PerlIOSelf(o, PerlIOUnix);
2330     int fd = os->fd;
2331     if (flags & PERLIO_DUP_FD) {
2332         fd = PerlLIO_dup(fd);
2333     }
2334     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2335         f = PerlIOBase_dup(aTHX_ f, o, param, flags);
2336         if (f) {
2337             /* If all went well overwrite fd in dup'ed lay with the dup()'ed fd */
2338             PerlIOUnix *s = PerlIOSelf(f, PerlIOUnix);
2339             s->fd = fd;
2340             PerlIOUnix_refcnt_inc(fd);
2341             return f;
2342         }
2343     }
2344     return NULL;
2345 }
2346
2347
2348 SSize_t
2349 PerlIOUnix_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2350 {
2351     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2352     if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD) ||
2353          PerlIOBase(f)->flags & (PERLIO_F_EOF|PERLIO_F_ERROR)) {
2354         return 0;
2355     }
2356     while (1) {
2357         SSize_t len = PerlLIO_read(fd, vbuf, count);
2358         if (len >= 0 || errno != EINTR) {
2359             if (len < 0)
2360                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2361             else if (len == 0 && count != 0)
2362                 PerlIOBase(f)->flags |= PERLIO_F_EOF;
2363             return len;
2364         }
2365         PERL_ASYNC_CHECK();
2366     }
2367 }
2368
2369 SSize_t
2370 PerlIOUnix_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2371 {
2372     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2373     while (1) {
2374         SSize_t len = PerlLIO_write(fd, vbuf, count);
2375         if (len >= 0 || errno != EINTR) {
2376             if (len < 0)
2377                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2378             return len;
2379         }
2380         PERL_ASYNC_CHECK();
2381     }
2382 }
2383
2384 IV
2385 PerlIOUnix_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2386 {
2387     Off_t new =
2388         PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, offset, whence);
2389     PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
2390     return (new == (Off_t) - 1) ? -1 : 0;
2391 }
2392
2393 Off_t
2394 PerlIOUnix_tell(pTHX_ PerlIO *f)
2395 {
2396     return PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, 0, SEEK_CUR);
2397 }
2398
2399
2400 IV
2401 PerlIOUnix_close(pTHX_ PerlIO *f)
2402 {
2403     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2404     int code = 0;
2405     if (PerlIOBase(f)->flags & PERLIO_F_OPEN) {
2406         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2407             PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2408             return 0;
2409         }
2410     }
2411     else {
2412         SETERRNO(EBADF,SS_IVCHAN);
2413         return -1;
2414     }
2415     while (PerlLIO_close(fd) != 0) {
2416         if (errno != EINTR) {
2417             code = -1;
2418             break;
2419         }
2420         PERL_ASYNC_CHECK();
2421     }
2422     if (code == 0) {
2423         PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2424     }
2425     return code;
2426 }
2427
2428 PerlIO_funcs PerlIO_unix = {
2429     sizeof(PerlIO_funcs),
2430     "unix",
2431     sizeof(PerlIOUnix),
2432     PERLIO_K_RAW,
2433     PerlIOUnix_pushed,
2434     PerlIOBase_popped,
2435     PerlIOUnix_open,
2436     PerlIOBase_binmode,         /* binmode */
2437     NULL,
2438     PerlIOUnix_fileno,
2439     PerlIOUnix_dup,
2440     PerlIOUnix_read,
2441     PerlIOBase_unread,
2442     PerlIOUnix_write,
2443     PerlIOUnix_seek,
2444     PerlIOUnix_tell,
2445     PerlIOUnix_close,
2446     PerlIOBase_noop_ok,         /* flush */
2447     PerlIOBase_noop_fail,       /* fill */
2448     PerlIOBase_eof,
2449     PerlIOBase_error,
2450     PerlIOBase_clearerr,
2451     PerlIOBase_setlinebuf,
2452     NULL,                       /* get_base */
2453     NULL,                       /* get_bufsiz */
2454     NULL,                       /* get_ptr */
2455     NULL,                       /* get_cnt */
2456     NULL,                       /* set_ptrcnt */
2457 };
2458
2459 /*--------------------------------------------------------------------------------------*/
2460 /*
2461  * stdio as a layer
2462  */
2463
2464 #if defined(VMS) && !defined(STDIO_BUFFER_WRITABLE)
2465 /* perl5.8 - This ensures the last minute VMS ungetc fix is not
2466    broken by the last second glibc 2.3 fix
2467  */
2468 #define STDIO_BUFFER_WRITABLE
2469 #endif
2470
2471
2472 typedef struct {
2473     struct _PerlIO base;
2474     FILE *stdio;                /* The stream */
2475 } PerlIOStdio;
2476
2477 IV
2478 PerlIOStdio_fileno(pTHX_ PerlIO *f)
2479 {
2480     FILE *s;
2481     if (PerlIOValid(f) && (s = PerlIOSelf(f, PerlIOStdio)->stdio)) {
2482         return PerlSIO_fileno(s);
2483     }
2484     errno = EBADF;
2485     return -1;
2486 }
2487
2488 char *
2489 PerlIOStdio_mode(const char *mode, char *tmode)
2490 {
2491     char *ret = tmode;
2492     while (*mode) {
2493         *tmode++ = *mode++;
2494     }
2495 #ifdef PERLIO_USING_CRLF
2496     *tmode++ = 'b';
2497 #endif
2498     *tmode = '\0';
2499     return ret;
2500 }
2501
2502 IV
2503 PerlIOStdio_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2504 {
2505     PerlIO *n;
2506     if (PerlIOValid(f) && PerlIOValid(n = PerlIONext(f))) {
2507         PerlIO_funcs *toptab = PerlIOBase(n)->tab;
2508         if (toptab == tab) {
2509             /* Top is already stdio - pop self (duplicate) and use original */
2510             PerlIO_pop(aTHX_ f);
2511             return 0;
2512         } else {
2513             int fd = PerlIO_fileno(n);
2514             char tmode[8];
2515             FILE *stdio;
2516             if (fd >= 0 && (stdio  = PerlSIO_fdopen(fd,
2517                             mode = PerlIOStdio_mode(mode, tmode)))) {
2518                 PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2519                 /* We never call down so do any pending stuff now */
2520                 PerlIO_flush(PerlIONext(f));
2521             }
2522             else {
2523                 return -1;
2524             }
2525         }
2526     }
2527     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2528 }
2529
2530
2531 PerlIO *
2532 PerlIO_importFILE(FILE *stdio, const char *mode)
2533 {
2534     dTHX;
2535     PerlIO *f = NULL;
2536     if (stdio) {
2537         PerlIOStdio *s;
2538         if (!mode || !*mode) {
2539             /* We need to probe to see how we can open the stream
2540                so start with read/write and then try write and read
2541                we dup() so that we can fclose without loosing the fd.
2542
2543                Note that the errno value set by a failing fdopen
2544                varies between stdio implementations.
2545              */
2546             int fd = PerlLIO_dup(fileno(stdio));
2547             FILE *f2 = PerlSIO_fdopen(fd, (mode = "r+"));
2548             if (!f2) {
2549                 f2 = PerlSIO_fdopen(fd, (mode = "w"));
2550             }
2551             if (!f2) {
2552                 f2 = PerlSIO_fdopen(fd, (mode = "r"));
2553             }
2554             if (!f2) {
2555                 /* Don't seem to be able to open */
2556                 PerlLIO_close(fd);
2557                 return f;
2558             }
2559             fclose(f2);
2560         }
2561         if ((f = PerlIO_push(aTHX_(f = PerlIO_allocate(aTHX)), &PerlIO_stdio, mode, Nullsv))) {
2562             s = PerlIOSelf(f, PerlIOStdio);
2563             s->stdio = stdio;
2564         }
2565     }
2566     return f;
2567 }
2568
2569 PerlIO *
2570 PerlIOStdio_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2571                  IV n, const char *mode, int fd, int imode,
2572                  int perm, PerlIO *f, int narg, SV **args)
2573 {
2574     char tmode[8];
2575     if (PerlIOValid(f)) {
2576         char *path = SvPV_nolen(*args);
2577         PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
2578         FILE *stdio;
2579         PerlIOUnix_refcnt_dec(fileno(s->stdio));
2580         stdio = PerlSIO_freopen(path, (mode = PerlIOStdio_mode(mode, tmode)),
2581                             s->stdio);
2582         if (!s->stdio)
2583             return NULL;
2584         s->stdio = stdio;
2585         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2586         return f;
2587     }
2588     else {
2589         if (narg > 0) {
2590             char *path = SvPV_nolen(*args);
2591             if (*mode == '#') {
2592                 mode++;
2593                 fd = PerlLIO_open3(path, imode, perm);
2594             }
2595             else {
2596                 FILE *stdio = PerlSIO_fopen(path, mode);
2597                 if (stdio) {
2598                     PerlIOStdio *s;
2599                     if (!f) {
2600                         f = PerlIO_allocate(aTHX);
2601                     }
2602                     if ((f = PerlIO_push(aTHX_ f, self,
2603                                     (mode = PerlIOStdio_mode(mode, tmode)),
2604                                     PerlIOArg))) {
2605                         s = PerlIOSelf(f, PerlIOStdio);
2606                         s->stdio = stdio;
2607                         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2608                     }
2609                     return f;
2610                 }
2611                 else {
2612                     return NULL;
2613                 }
2614             }
2615         }
2616         if (fd >= 0) {
2617             FILE *stdio = NULL;
2618             int init = 0;
2619             if (*mode == 'I') {
2620                 init = 1;
2621                 mode++;
2622             }
2623             if (init) {
2624                 switch (fd) {
2625                 case 0:
2626                     stdio = PerlSIO_stdin;
2627                     break;
2628                 case 1:
2629                     stdio = PerlSIO_stdout;
2630                     break;
2631                 case 2:
2632                     stdio = PerlSIO_stderr;
2633                     break;
2634                 }
2635             }
2636             else {
2637                 stdio = PerlSIO_fdopen(fd, mode =
2638                                        PerlIOStdio_mode(mode, tmode));
2639             }
2640             if (stdio) {
2641                 PerlIOStdio *s;
2642                 if (!f) {
2643                     f = PerlIO_allocate(aTHX);
2644                 }
2645                 if ((f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2646                     s = PerlIOSelf(f, PerlIOStdio);
2647                     s->stdio = stdio;
2648                     PerlIOUnix_refcnt_inc(fileno(s->stdio));
2649                 }
2650                 return f;
2651             }
2652         }
2653     }
2654     return NULL;
2655 }
2656
2657 PerlIO *
2658 PerlIOStdio_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2659 {
2660     /* This assumes no layers underneath - which is what
2661        happens, but is not how I remember it. NI-S 2001/10/16
2662      */
2663     if ((f = PerlIOBase_dup(aTHX_ f, o, param, flags))) {
2664         FILE *stdio = PerlIOSelf(o, PerlIOStdio)->stdio;
2665         int fd = fileno(stdio);
2666         char mode[8];
2667         if (flags & PERLIO_DUP_FD) {
2668             int dfd = PerlLIO_dup(fileno(stdio));
2669             if (dfd >= 0) {
2670                 stdio = PerlSIO_fdopen(dfd, PerlIO_modestr(o,mode));
2671                 goto set_this;
2672             }
2673             else {
2674                 /* FIXME: To avoid messy error recovery if dup fails
2675                    re-use the existing stdio as though flag was not set
2676                  */
2677             }
2678         }
2679         stdio = PerlSIO_fdopen(fd, PerlIO_modestr(o,mode));
2680     set_this:
2681         PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2682         PerlIOUnix_refcnt_inc(fileno(stdio));
2683     }
2684     return f;
2685 }
2686
2687 static int
2688 PerlIOStdio_invalidate_fileno(pTHX_ FILE *f)
2689 {
2690     /* XXX this could use PerlIO_canset_fileno() and
2691      * PerlIO_set_fileno() support from Configure 
2692      */
2693 #  if defined(__GLIBC__)
2694     /* There may be a better way for GLIBC:
2695         - libio.h defines a flag to not close() on cleanup 
2696      */ 
2697     f->_fileno = -1;
2698     return 1;
2699 #  elif defined(__sun__)
2700 #    if defined(_LP64)
2701     /* On solaris, if _LP64 is defined, the FILE structure is this:
2702      *
2703      *  struct FILE {
2704      *      long __pad[16];
2705      *  };
2706      *
2707      * It turns out that the fd is stored in the top 32 bits of 
2708      * file->__pad[4]. The lower 32 bits contain flags. file->pad[5] appears
2709      * to contain a pointer or offset into another structure. All the
2710      * remaining fields are zero.
2711      *
2712      * We set the top bits to -1 (0xFFFFFFFF).
2713      */
2714     f->__pad[4] |= 0xffffffff00000000L;
2715     assert(fileno(f) == 0xffffffff);
2716 #    else /* !defined(_LP64) */
2717     /* _file is just a unsigned char :-( 
2718        Not clear why we dup() rather than using -1 
2719        even if that would be treated as 0xFF - so will 
2720        a dup fail ...
2721      */
2722     f->_file = PerlLIO_dup(fd);
2723 #    endif /* defined(_LP64) */
2724     return 1;
2725 #  elif defined(__hpux)
2726     f->__fileH = 0xff;
2727     f->__fileL = 0xff;
2728     return 1;
2729 #  elif defined(_AIX)
2730     f->_file = -1;
2731     return 1;
2732 #  elif defined(__FreeBSD__)
2733     /* There may be a better way on FreeBSD:
2734         - we could insert a dummy func in the _close function entry 
2735         f->_close = (int (*)(void *)) dummy_close; 
2736      */
2737     f->_file = -1;
2738     return 1;
2739 #  elif defined(__CYGWIN__)
2740     /* There may be a better way on CYGWIN:
2741         - we could insert a dummy func in the _close function entry 
2742         f->_close = (int (*)(void *)) dummy_close; 
2743      */
2744     f->_file = -1;
2745     return 1;
2746 #  elif defined(WIN32)
2747 #    if defined(__BORLANDC__)
2748     f->fd = PerlLIO_dup(fileno(f));
2749 #    else
2750     f->_file = -1;
2751 #    endif
2752     return 1;
2753 #  else
2754 #if 0
2755     /* Sarathy's code did this - we fall back to a dup/dup2 hack 
2756        (which isn't thread safe) instead
2757      */  
2758 #    error "Don't know how to set FILE.fileno on your platform"
2759 #endif
2760     return 0;
2761 #  endif
2762 }
2763
2764 IV
2765 PerlIOStdio_close(pTHX_ PerlIO *f)
2766 {
2767     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2768     if (!stdio) {
2769         errno = EBADF;
2770         return -1;
2771     }
2772     else {
2773         int fd = fileno(stdio);
2774         int socksfd = 0;
2775         int invalidate = 0;
2776         IV result;
2777         int saveerr = 0;
2778         int dupfd = 0;
2779 #ifdef SOCKS5_VERSION_NAME
2780         /* Socks lib overrides close() but stdio isn't linked to 
2781            that library (though we are) - so we must call close() 
2782            on sockets on stdio's behalf. 
2783          */   
2784         int optval;
2785         Sock_size_t optlen = sizeof(int);
2786         if (getsockopt(fd, SOL_SOCKET, SO_TYPE, (void *) &optval, &optlen) == 0) {
2787             socksfd = 1;
2788             invalidate = 1;  
2789         }
2790 #endif
2791         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2792             /* File descriptor still in use */
2793             invalidate = 1;
2794             socksfd = 0;
2795         }    
2796         if (invalidate) {
2797             /* For STD* handles don't close the stdio at all 
2798                this is because we have shared the FILE * too 
2799              */
2800             if (stdio == stdin) {
2801                 /* Some stdios are buggy fflush-ing inputs */
2802                 return 0;
2803             }
2804             else if (stdio == stdout || stdio == stderr) {
2805                 return PerlIO_flush(f);
2806             }
2807             /* Tricky - must fclose(stdio) to free memory but not close(fd) 
2808                Use Sarathy's trick from maint-5.6 to invalidate the 
2809                fileno slot of the FILE * 
2810             */ 
2811             saveerr = errno;
2812             if (!(invalidate = PerlIOStdio_invalidate_fileno(aTHX_ stdio))) {
2813                 dupfd = PerlLIO_dup(fd);
2814             }
2815         } 
2816         result = PerlSIO_fclose(stdio);
2817         /* We treat EBADF from stdio as success if we invalidated */
2818         if (invalidate && result != 0 && errno == EBADF) {
2819             errno = saveerr;
2820             result = 0;
2821         } 
2822         if (socksfd) {
2823             /* in SOCKS case let close() determine return value */
2824             result = close(fd);
2825         }
2826         if (dupfd) {
2827             PerlLIO_dup2(dupfd,fd);
2828             close(dupfd);
2829         }
2830         return result;
2831     } 
2832 }
2833
2834 SSize_t
2835 PerlIOStdio_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2836 {
2837     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
2838     SSize_t got = 0;
2839     if (count == 1) {
2840         STDCHAR *buf = (STDCHAR *) vbuf;
2841         /*
2842          * Perl is expecting PerlIO_getc() to fill the buffer Linux's
2843          * stdio does not do that for fread()
2844          */
2845         int ch = PerlSIO_fgetc(s);
2846         if (ch != EOF) {
2847             *buf = ch;
2848             got = 1;
2849         }
2850     }
2851     else
2852         got = PerlSIO_fread(vbuf, 1, count, s);
2853     return got;
2854 }
2855
2856 SSize_t
2857 PerlIOStdio_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2858 {
2859     SSize_t unread = 0;
2860     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
2861
2862 #ifdef STDIO_BUFFER_WRITABLE
2863     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
2864         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
2865         STDCHAR *base = PerlIO_get_base(f);
2866         SSize_t cnt   = PerlIO_get_cnt(f);
2867         STDCHAR *ptr  = PerlIO_get_ptr(f);
2868         SSize_t avail = ptr - base;
2869         if (avail > 0) {
2870             if (avail > count) {
2871                 avail = count;
2872             }
2873             ptr -= avail;
2874             Move(buf-avail,ptr,avail,STDCHAR);
2875             count -= avail;
2876             unread += avail;
2877             PerlIO_set_ptrcnt(f,ptr,cnt+avail);
2878             if (PerlSIO_feof(s) && unread >= 0)
2879                 PerlSIO_clearerr(s);
2880         }
2881     }
2882     else
2883 #endif
2884     if (PerlIO_has_cntptr(f)) {
2885         /* We can get pointer to buffer but not its base
2886            Do ungetc() but check chars are ending up in the
2887            buffer
2888          */
2889         STDCHAR *eptr = (STDCHAR*)PerlSIO_get_ptr(s);
2890         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
2891         while (count > 0) {
2892             int ch = *--buf & 0xFF;
2893             if (ungetc(ch,s) != ch) {
2894                 /* ungetc did not work */
2895                 break;
2896             }
2897             if ((STDCHAR*)PerlSIO_get_ptr(s) != --eptr || ((*eptr & 0xFF) != ch)) {
2898                 /* Did not change pointer as expected */
2899                 fgetc(s);  /* get char back again */
2900                 break;
2901             }
2902             /* It worked ! */
2903             count--;
2904             unread++;
2905         }
2906     }
2907
2908     if (count > 0) {
2909         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
2910     }
2911     return unread;
2912 }
2913
2914 SSize_t
2915 PerlIOStdio_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2916 {
2917     return PerlSIO_fwrite(vbuf, 1, count,
2918                           PerlIOSelf(f, PerlIOStdio)->stdio);
2919 }
2920
2921 IV
2922 PerlIOStdio_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2923 {
2924     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2925     return PerlSIO_fseek(stdio, offset, whence);
2926 }
2927
2928 Off_t
2929 PerlIOStdio_tell(pTHX_ PerlIO *f)
2930 {
2931     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2932     return PerlSIO_ftell(stdio);
2933 }
2934
2935 IV
2936 PerlIOStdio_flush(pTHX_ PerlIO *f)
2937 {
2938     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2939     if (PerlIOBase(f)->flags & PERLIO_F_CANWRITE) {
2940         return PerlSIO_fflush(stdio);
2941     }
2942     else {
2943 #if 0
2944         /*
2945          * FIXME: This discards ungetc() and pre-read stuff which is not
2946          * right if this is just a "sync" from a layer above Suspect right
2947          * design is to do _this_ but not have layer above flush this
2948          * layer read-to-read
2949          */
2950         /*
2951          * Not writeable - sync by attempting a seek
2952          */
2953         int err = errno;
2954         if (PerlSIO_fseek(stdio, (Off_t) 0, SEEK_CUR) != 0)
2955             errno = err;
2956 #endif
2957     }
2958     return 0;
2959 }
2960
2961 IV
2962 PerlIOStdio_eof(pTHX_ PerlIO *f)
2963 {
2964     return PerlSIO_feof(PerlIOSelf(f, PerlIOStdio)->stdio);
2965 }
2966
2967 IV
2968 PerlIOStdio_error(pTHX_ PerlIO *f)
2969 {
2970     return PerlSIO_ferror(PerlIOSelf(f, PerlIOStdio)->stdio);
2971 }
2972
2973 void
2974 PerlIOStdio_clearerr(pTHX_ PerlIO *f)
2975 {
2976     PerlSIO_clearerr(PerlIOSelf(f, PerlIOStdio)->stdio);
2977 }
2978
2979 void
2980 PerlIOStdio_setlinebuf(pTHX_ PerlIO *f)
2981 {
2982 #ifdef HAS_SETLINEBUF
2983     PerlSIO_setlinebuf(PerlIOSelf(f, PerlIOStdio)->stdio);
2984 #else
2985     PerlSIO_setvbuf(PerlIOSelf(f, PerlIOStdio)->stdio, Nullch, _IOLBF, 0);
2986 #endif
2987 }
2988
2989 #ifdef FILE_base
2990 STDCHAR *
2991 PerlIOStdio_get_base(pTHX_ PerlIO *f)
2992 {
2993     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2994     return (STDCHAR*)PerlSIO_get_base(stdio);
2995 }
2996
2997 Size_t
2998 PerlIOStdio_get_bufsiz(pTHX_ PerlIO *f)
2999 {
3000     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3001     return PerlSIO_get_bufsiz(stdio);
3002 }
3003 #endif
3004
3005 #ifdef USE_STDIO_PTR
3006 STDCHAR *
3007 PerlIOStdio_get_ptr(pTHX_ PerlIO *f)
3008 {
3009     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3010     return (STDCHAR*)PerlSIO_get_ptr(stdio);
3011 }
3012
3013 SSize_t
3014 PerlIOStdio_get_cnt(pTHX_ PerlIO *f)
3015 {
3016     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3017     return PerlSIO_get_cnt(stdio);
3018 }
3019
3020 void
3021 PerlIOStdio_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3022 {
3023     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3024     if (ptr != NULL) {
3025 #ifdef STDIO_PTR_LVALUE
3026         PerlSIO_set_ptr(stdio, (void*)ptr); /* LHS STDCHAR* cast non-portable */
3027 #ifdef STDIO_PTR_LVAL_SETS_CNT
3028         if (PerlSIO_get_cnt(stdio) != (cnt)) {
3029             assert(PerlSIO_get_cnt(stdio) == (cnt));
3030         }
3031 #endif
3032 #if (!defined(STDIO_PTR_LVAL_NOCHANGE_CNT))
3033         /*
3034          * Setting ptr _does_ change cnt - we are done
3035          */
3036         return;
3037 #endif
3038 #else                           /* STDIO_PTR_LVALUE */
3039         PerlProc_abort();
3040 #endif                          /* STDIO_PTR_LVALUE */
3041     }
3042     /*
3043      * Now (or only) set cnt
3044      */
3045 #ifdef STDIO_CNT_LVALUE
3046     PerlSIO_set_cnt(stdio, cnt);
3047 #else                           /* STDIO_CNT_LVALUE */
3048 #if (defined(STDIO_PTR_LVALUE) && defined(STDIO_PTR_LVAL_SETS_CNT))
3049     PerlSIO_set_ptr(stdio,
3050                     PerlSIO_get_ptr(stdio) + (PerlSIO_get_cnt(stdio) -
3051                                               cnt));
3052 #else                           /* STDIO_PTR_LVAL_SETS_CNT */
3053     PerlProc_abort();
3054 #endif                          /* STDIO_PTR_LVAL_SETS_CNT */
3055 #endif                          /* STDIO_CNT_LVALUE */
3056 }
3057
3058
3059 #endif
3060
3061 IV
3062 PerlIOStdio_fill(pTHX_ PerlIO *f)
3063 {
3064     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3065     int c;
3066     /*
3067      * fflush()ing read-only streams can cause trouble on some stdio-s
3068      */
3069     if ((PerlIOBase(f)->flags & PERLIO_F_CANWRITE)) {
3070         if (PerlSIO_fflush(stdio) != 0)
3071             return EOF;
3072     }
3073     c = PerlSIO_fgetc(stdio);
3074     if (c == EOF)
3075         return EOF;
3076
3077 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
3078
3079 #ifdef STDIO_BUFFER_WRITABLE
3080     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
3081         /* Fake ungetc() to the real buffer in case system's ungetc
3082            goes elsewhere
3083          */
3084         STDCHAR *base = (STDCHAR*)PerlSIO_get_base(stdio);
3085         SSize_t cnt   = PerlSIO_get_cnt(stdio);
3086         STDCHAR *ptr  = (STDCHAR*)PerlSIO_get_ptr(stdio);
3087         if (ptr == base+1) {
3088             *--ptr = (STDCHAR) c;
3089             PerlIOStdio_set_ptrcnt(aTHX_ f,ptr,cnt+1);
3090             if (PerlSIO_feof(stdio))
3091                 PerlSIO_clearerr(stdio);
3092             return 0;
3093         }
3094     }
3095     else
3096 #endif
3097     if (PerlIO_has_cntptr(f)) {
3098         STDCHAR ch = c;
3099         if (PerlIOStdio_unread(aTHX_ f,&ch,1) == 1) {
3100             return 0;
3101         }
3102     }
3103 #endif
3104
3105 #if defined(VMS)
3106     /* An ungetc()d char is handled separately from the regular
3107      * buffer, so we stuff it in the buffer ourselves.
3108      * Should never get called as should hit code above
3109      */
3110     *(--((*stdio)->_ptr)) = (unsigned char) c;
3111     (*stdio)->_cnt++;
3112 #else
3113     /* If buffer snoop scheme above fails fall back to
3114        using ungetc().
3115      */
3116     if (PerlSIO_ungetc(c, stdio) != c)
3117         return EOF;
3118 #endif
3119     return 0;
3120 }
3121
3122
3123
3124 PerlIO_funcs PerlIO_stdio = {
3125     sizeof(PerlIO_funcs),
3126     "stdio",
3127     sizeof(PerlIOStdio),
3128     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3129     PerlIOStdio_pushed,
3130     PerlIOBase_popped,
3131     PerlIOStdio_open,
3132     PerlIOBase_binmode,         /* binmode */
3133     NULL,
3134     PerlIOStdio_fileno,
3135     PerlIOStdio_dup,
3136     PerlIOStdio_read,
3137     PerlIOStdio_unread,
3138     PerlIOStdio_write,
3139     PerlIOStdio_seek,
3140     PerlIOStdio_tell,
3141     PerlIOStdio_close,
3142     PerlIOStdio_flush,
3143     PerlIOStdio_fill,
3144     PerlIOStdio_eof,
3145     PerlIOStdio_error,
3146     PerlIOStdio_clearerr,
3147     PerlIOStdio_setlinebuf,
3148 #ifdef FILE_base
3149     PerlIOStdio_get_base,
3150     PerlIOStdio_get_bufsiz,
3151 #else
3152     NULL,
3153     NULL,
3154 #endif
3155 #ifdef USE_STDIO_PTR
3156     PerlIOStdio_get_ptr,
3157     PerlIOStdio_get_cnt,
3158 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
3159     PerlIOStdio_set_ptrcnt
3160 #else                           /* STDIO_PTR_LVALUE */
3161     NULL
3162 #endif                          /* STDIO_PTR_LVALUE */
3163 #else                           /* USE_STDIO_PTR */
3164     NULL,
3165     NULL,
3166     NULL
3167 #endif                          /* USE_STDIO_PTR */
3168 };
3169
3170 /* Note that calls to PerlIO_exportFILE() are reversed using
3171  * PerlIO_releaseFILE(), not importFILE. */
3172 FILE *
3173 PerlIO_exportFILE(PerlIO * f, const char *mode)
3174 {
3175     dTHX;
3176     FILE *stdio = NULL;
3177     if (PerlIOValid(f)) {
3178         char buf[8];
3179         PerlIO_flush(f);
3180         if (!mode || !*mode) {
3181             mode = PerlIO_modestr(f, buf);
3182         }
3183         stdio = PerlSIO_fdopen(PerlIO_fileno(f), mode);
3184         if (stdio) {
3185             PerlIOl *l = *f;
3186             /* De-link any lower layers so new :stdio sticks */
3187             *f = NULL;
3188             if ((f = PerlIO_push(aTHX_ f, &PerlIO_stdio, buf, Nullsv))) {
3189                 PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
3190                 s->stdio = stdio;
3191                 /* Link previous lower layers under new one */
3192                 *PerlIONext(f) = l;
3193             }
3194             else {
3195                 /* restore layers list */
3196                 *f = l;
3197             }
3198         }
3199     }
3200     return stdio;
3201 }
3202
3203
3204 FILE *
3205 PerlIO_findFILE(PerlIO *f)
3206 {
3207     PerlIOl *l = *f;
3208     while (l) {
3209         if (l->tab == &PerlIO_stdio) {
3210             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3211             return s->stdio;
3212         }
3213         l = *PerlIONext(&l);
3214     }
3215     /* Uses fallback "mode" via PerlIO_modestr() in PerlIO_exportFILE */
3216     return PerlIO_exportFILE(f, Nullch);
3217 }
3218
3219 /* Use this to reverse PerlIO_exportFILE calls. */
3220 void
3221 PerlIO_releaseFILE(PerlIO *p, FILE *f)
3222 {
3223     PerlIOl *l;
3224     while ((l = *p)) {
3225         if (l->tab == &PerlIO_stdio) {
3226             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3227             if (s->stdio == f) {
3228                 dTHX;
3229                 PerlIO_pop(aTHX_ p);
3230                 return;
3231             }
3232         }
3233         p = PerlIONext(p);
3234     }
3235     return;
3236 }
3237
3238 /*--------------------------------------------------------------------------------------*/
3239 /*
3240  * perlio buffer layer
3241  */
3242
3243 IV
3244 PerlIOBuf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3245 {
3246     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3247     int fd = PerlIO_fileno(f);
3248     if (fd >= 0 && PerlLIO_isatty(fd)) {
3249         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF | PERLIO_F_TTY;
3250     }
3251     if (*PerlIONext(f)) {
3252         Off_t posn = PerlIO_tell(PerlIONext(f));
3253         if (posn != (Off_t) - 1) {
3254             b->posn = posn;
3255         }
3256     }
3257     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3258 }
3259
3260 PerlIO *
3261 PerlIOBuf_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
3262                IV n, const char *mode, int fd, int imode, int perm,
3263                PerlIO *f, int narg, SV **args)
3264 {
3265     if (PerlIOValid(f)) {
3266         PerlIO *next = PerlIONext(f);
3267         PerlIO_funcs *tab =  PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIOBase(next)->tab);
3268         next = (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3269                           next, narg, args);
3270         if (!next || (*PerlIOBase(f)->tab->Pushed) (aTHX_ f, mode, PerlIOArg, self) != 0) {
3271             return NULL;
3272         }
3273     }
3274     else {
3275         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIO_default_btm());
3276         int init = 0;
3277         if (*mode == 'I') {
3278             init = 1;
3279             /*
3280              * mode++;
3281              */
3282         }
3283         f = (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3284                           f, narg, args);
3285         if (f) {
3286             if (PerlIO_push(aTHX_ f, self, mode, PerlIOArg) == 0) {
3287                 /*
3288                  * if push fails during open, open fails. close will pop us.
3289                  */
3290                 PerlIO_close (f);
3291                 return NULL;
3292             } else {
3293                 fd = PerlIO_fileno(f);
3294                 if (init && fd == 2) {
3295                     /*
3296                      * Initial stderr is unbuffered
3297                      */
3298                     PerlIOBase(f)->flags |= PERLIO_F_UNBUF;
3299                 }
3300 #ifdef PERLIO_USING_CRLF
3301 #  ifdef PERLIO_IS_BINMODE_FD
3302                 if (PERLIO_IS_BINMODE_FD(fd))
3303                     PerlIO_binmode(f,  '<'/*not used*/, O_BINARY, Nullch);
3304                 else
3305 #  endif
3306                 /*
3307                  * do something about failing setmode()? --jhi
3308                  */
3309                 PerlLIO_setmode(fd, O_BINARY);
3310 #endif
3311             }
3312         }
3313     }
3314     return f;
3315 }
3316
3317 /*
3318  * This "flush" is akin to sfio's sync in that it handles files in either
3319  * read or write state
3320  */
3321 IV
3322 PerlIOBuf_flush(pTHX_ PerlIO *f)
3323 {
3324     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3325     int code = 0;
3326     PerlIO *n = PerlIONext(f);
3327     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF) {
3328         /*
3329          * write() the buffer
3330          */
3331         STDCHAR *buf = b->buf;
3332         STDCHAR *p = buf;
3333         while (p < b->ptr) {
3334             SSize_t count = PerlIO_write(n, p, b->ptr - p);
3335             if (count > 0) {
3336                 p += count;
3337             }
3338             else if (count < 0 || PerlIO_error(n)) {
3339                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3340                 code = -1;
3341                 break;
3342             }
3343         }
3344         b->posn += (p - buf);
3345     }
3346     else if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3347         STDCHAR *buf = PerlIO_get_base(f);
3348         /*
3349          * Note position change
3350          */
3351         b->posn += (b->ptr - buf);
3352         if (b->ptr < b->end) {
3353             /* We did not consume all of it - try and seek downstream to
3354                our logical position
3355              */
3356             if (PerlIOValid(n) && PerlIO_seek(n, b->posn, SEEK_SET) == 0) {
3357                 /* Reload n as some layers may pop themselves on seek */
3358                 b->posn = PerlIO_tell(n = PerlIONext(f));
3359             }
3360             else {
3361                 /* Seek failed (e.g. pipe or tty). Do NOT clear buffer or pre-read
3362                    data is lost for good - so return saying "ok" having undone
3363                    the position adjust
3364                  */
3365                 b->posn -= (b->ptr - buf);
3366                 return code;
3367             }
3368         }
3369     }
3370     b->ptr = b->end = b->buf;
3371     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3372     /* We check for Valid because of dubious decision to make PerlIO_flush(NULL) flush all */
3373     if (PerlIOValid(n) && PerlIO_flush(n) != 0)
3374         code = -1;
3375     return code;
3376 }
3377
3378 IV
3379 PerlIOBuf_fill(pTHX_ PerlIO *f)
3380 {
3381     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3382     PerlIO *n = PerlIONext(f);
3383     SSize_t avail;
3384     /*
3385      * Down-stream flush is defined not to loose read data so is harmless.
3386      * we would not normally be fill'ing if there was data left in anycase.
3387      */
3388     if (PerlIO_flush(f) != 0)
3389         return -1;
3390     if (PerlIOBase(f)->flags & PERLIO_F_TTY)
3391         PerlIOBase_flush_linebuf(aTHX);
3392
3393     if (!b->buf)
3394         PerlIO_get_base(f);     /* allocate via vtable */
3395
3396     b->ptr = b->end = b->buf;
3397
3398     if (!PerlIOValid(n)) {
3399         PerlIOBase(f)->flags |= PERLIO_F_EOF;
3400         return -1;
3401     }
3402
3403     if (PerlIO_fast_gets(n)) {
3404         /*
3405          * Layer below is also buffered. We do _NOT_ want to call its
3406          * ->Read() because that will loop till it gets what we asked for
3407          * which may hang on a pipe etc. Instead take anything it has to
3408          * hand, or ask it to fill _once_.
3409          */
3410         avail = PerlIO_get_cnt(n);
3411         if (avail <= 0) {
3412             avail = PerlIO_fill(n);
3413             if (avail == 0)
3414                 avail = PerlIO_get_cnt(n);
3415             else {
3416                 if (!PerlIO_error(n) && PerlIO_eof(n))
3417                     avail = 0;
3418             }
3419         }
3420         if (avail > 0) {
3421             STDCHAR *ptr = PerlIO_get_ptr(n);
3422             SSize_t cnt = avail;
3423             if (avail > (SSize_t)b->bufsiz)
3424                 avail = b->bufsiz;
3425             Copy(ptr, b->buf, avail, STDCHAR);
3426             PerlIO_set_ptrcnt(n, ptr + avail, cnt - avail);
3427         }
3428     }
3429     else {
3430         avail = PerlIO_read(n, b->ptr, b->bufsiz);
3431     }
3432     if (avail <= 0) {
3433         if (avail == 0)
3434             PerlIOBase(f)->flags |= PERLIO_F_EOF;
3435         else
3436             PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3437         return -1;
3438     }
3439     b->end = b->buf + avail;
3440     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3441     return 0;
3442 }
3443
3444 SSize_t
3445 PerlIOBuf_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3446 {
3447     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3448     if (PerlIOValid(f)) {
3449         if (!b->ptr)
3450             PerlIO_get_base(f);
3451         return PerlIOBase_read(aTHX_ f, vbuf, count);
3452     }
3453     return 0;
3454 }
3455
3456 SSize_t
3457 PerlIOBuf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3458 {
3459     const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3460     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3461     SSize_t unread = 0;
3462     SSize_t avail;
3463     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3464         PerlIO_flush(f);
3465     if (!b->buf)
3466         PerlIO_get_base(f);
3467     if (b->buf) {
3468         if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3469             /*
3470              * Buffer is already a read buffer, we can overwrite any chars
3471              * which have been read back to buffer start
3472              */
3473             avail = (b->ptr - b->buf);
3474         }
3475         else {
3476             /*
3477              * Buffer is idle, set it up so whole buffer is available for
3478              * unread
3479              */
3480             avail = b->bufsiz;
3481             b->end = b->buf + avail;
3482             b->ptr = b->end;
3483             PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3484             /*
3485              * Buffer extends _back_ from where we are now
3486              */
3487             b->posn -= b->bufsiz;
3488         }
3489         if (avail > (SSize_t) count) {
3490             /*
3491              * If we have space for more than count, just move count
3492              */
3493             avail = count;
3494         }
3495         if (avail > 0) {
3496             b->ptr -= avail;
3497             buf -= avail;
3498             /*
3499              * In simple stdio-like ungetc() case chars will be already
3500              * there
3501              */
3502             if (buf != b->ptr) {
3503                 Copy(buf, b->ptr, avail, STDCHAR);
3504             }
3505             count -= avail;
3506             unread += avail;
3507             PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3508         }
3509     }
3510     if (count > 0) {
3511         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
3512     }
3513     return unread;
3514 }
3515
3516 SSize_t
3517 PerlIOBuf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3518 {
3519     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3520     const STDCHAR *buf = (const STDCHAR *) vbuf;
3521     Size_t written = 0;
3522     if (!b->buf)
3523         PerlIO_get_base(f);
3524     if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
3525         return 0;
3526     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3527         if (PerlIO_flush(f) != 0) {
3528             return 0;
3529         }
3530     }   
3531     while (count > 0) {
3532         SSize_t avail = b->bufsiz - (b->ptr - b->buf);
3533         if ((SSize_t) count < avail)
3534             avail = count;
3535         PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
3536         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
3537             while (avail > 0) {
3538                 int ch = *buf++;
3539                 *(b->ptr)++ = ch;
3540                 count--;
3541                 avail--;
3542                 written++;
3543                 if (ch == '\n') {
3544                     PerlIO_flush(f);
3545                     break;
3546                 }
3547             }
3548         }
3549         else {
3550             if (avail) {
3551                 Copy(buf, b->ptr, avail, STDCHAR);
3552                 count -= avail;
3553                 buf += avail;
3554                 written += avail;
3555                 b->ptr += avail;
3556             }
3557         }
3558         if (b->ptr >= (b->buf + b->bufsiz))
3559             PerlIO_flush(f);
3560     }
3561     if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
3562         PerlIO_flush(f);
3563     return written;
3564 }
3565
3566 IV
3567 PerlIOBuf_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3568 {
3569     IV code;
3570     if ((code = PerlIO_flush(f)) == 0) {
3571         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3572         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3573         code = PerlIO_seek(PerlIONext(f), offset, whence);
3574         if (code == 0) {
3575             b->posn = PerlIO_tell(PerlIONext(f));
3576         }
3577     }
3578     return code;
3579 }
3580
3581 Off_t
3582 PerlIOBuf_tell(pTHX_ PerlIO *f)
3583 {
3584     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3585     /*
3586      * b->posn is file position where b->buf was read, or will be written
3587      */
3588     Off_t posn = b->posn;
3589     if ((PerlIOBase(f)->flags & PERLIO_F_APPEND) && 
3590         (PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
3591 #if 1
3592         /* As O_APPEND files are normally shared in some sense it is better
3593            to flush :
3594          */     
3595         PerlIO_flush(f);
3596 #else   
3597         /* when file is NOT shared then this is sufficient */ 
3598         PerlIO_seek(PerlIONext(f),0, SEEK_END);
3599 #endif
3600         posn = b->posn = PerlIO_tell(PerlIONext(f));
3601     }
3602     if (b->buf) {
3603         /*
3604          * If buffer is valid adjust position by amount in buffer
3605          */
3606         posn += (b->ptr - b->buf);
3607     }
3608     return posn;
3609 }
3610
3611 IV
3612 PerlIOBuf_popped(pTHX_ PerlIO *f)
3613 {
3614     IV code = PerlIOBase_popped(aTHX_ f);
3615     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3616     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3617         Safefree(b->buf);
3618     }
3619     b->buf = NULL;
3620     b->ptr = b->end = b->buf;
3621     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3622     return code;
3623 }
3624
3625 IV
3626 PerlIOBuf_close(pTHX_ PerlIO *f)
3627 {
3628     IV code = PerlIOBase_close(aTHX_ f);
3629     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3630     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3631         Safefree(b->buf);
3632     }
3633     b->buf = NULL;
3634     b->ptr = b->end = b->buf;
3635     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3636     return code;
3637 }
3638
3639 STDCHAR *
3640 PerlIOBuf_get_ptr(pTHX_ PerlIO *f)
3641 {
3642     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3643     if (!b->buf)
3644         PerlIO_get_base(f);
3645     return b->ptr;
3646 }
3647
3648 SSize_t
3649 PerlIOBuf_get_cnt(pTHX_ PerlIO *f)
3650 {
3651     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3652     if (!b->buf)
3653         PerlIO_get_base(f);
3654     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF)
3655         return (b->end - b->ptr);
3656     return 0;
3657 }
3658
3659 STDCHAR *
3660 PerlIOBuf_get_base(pTHX_ PerlIO *f)
3661 {
3662     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3663     if (!b->buf) {
3664         if (!b->bufsiz)
3665             b->bufsiz = 4096;
3666         b->buf =
3667         Newz('B',b->buf,b->bufsiz, STDCHAR);
3668         if (!b->buf) {
3669             b->buf = (STDCHAR *) & b->oneword;
3670             b->bufsiz = sizeof(b->oneword);
3671         }
3672         b->ptr = b->buf;
3673         b->end = b->ptr;
3674     }
3675     return b->buf;
3676 }
3677
3678 Size_t
3679 PerlIOBuf_bufsiz(pTHX_ PerlIO *f)
3680 {
3681     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3682     if (!b->buf)
3683         PerlIO_get_base(f);
3684     return (b->end - b->buf);
3685 }
3686
3687 void
3688 PerlIOBuf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3689 {
3690     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3691     if (!b->buf)
3692         PerlIO_get_base(f);
3693     b->ptr = ptr;
3694     if (PerlIO_get_cnt(f) != cnt || b->ptr < b->buf) {
3695         assert(PerlIO_get_cnt(f) == cnt);
3696         assert(b->ptr >= b->buf);
3697     }
3698     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3699 }
3700
3701 PerlIO *
3702 PerlIOBuf_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
3703 {
3704  return PerlIOBase_dup(aTHX_ f, o, param, flags);
3705 }
3706
3707
3708
3709 PerlIO_funcs PerlIO_perlio = {
3710     sizeof(PerlIO_funcs),
3711     "perlio",
3712     sizeof(PerlIOBuf),
3713     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3714     PerlIOBuf_pushed,
3715     PerlIOBuf_popped,
3716     PerlIOBuf_open,
3717     PerlIOBase_binmode,         /* binmode */
3718     NULL,
3719     PerlIOBase_fileno,
3720     PerlIOBuf_dup,
3721     PerlIOBuf_read,
3722     PerlIOBuf_unread,
3723     PerlIOBuf_write,
3724     PerlIOBuf_seek,
3725     PerlIOBuf_tell,
3726     PerlIOBuf_close,
3727     PerlIOBuf_flush,
3728     PerlIOBuf_fill,
3729     PerlIOBase_eof,
3730     PerlIOBase_error,
3731     PerlIOBase_clearerr,
3732     PerlIOBase_setlinebuf,
3733     PerlIOBuf_get_base,
3734     PerlIOBuf_bufsiz,
3735     PerlIOBuf_get_ptr,
3736     PerlIOBuf_get_cnt,
3737     PerlIOBuf_set_ptrcnt,
3738 };
3739
3740 /*--------------------------------------------------------------------------------------*/
3741 /*
3742  * Temp layer to hold unread chars when cannot do it any other way
3743  */
3744
3745 IV
3746 PerlIOPending_fill(pTHX_ PerlIO *f)
3747 {
3748     /*
3749      * Should never happen
3750      */
3751     PerlIO_flush(f);
3752     return 0;
3753 }
3754
3755 IV
3756 PerlIOPending_close(pTHX_ PerlIO *f)
3757 {
3758     /*
3759      * A tad tricky - flush pops us, then we close new top
3760      */
3761     PerlIO_flush(f);
3762     return PerlIO_close(f);
3763 }
3764
3765 IV
3766 PerlIOPending_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3767 {
3768     /*
3769      * A tad tricky - flush pops us, then we seek new top
3770      */
3771     PerlIO_flush(f);
3772     return PerlIO_seek(f, offset, whence);
3773 }
3774
3775
3776 IV
3777 PerlIOPending_flush(pTHX_ PerlIO *f)
3778 {
3779     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3780     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3781         Safefree(b->buf);
3782         b->buf = NULL;
3783     }
3784     PerlIO_pop(aTHX_ f);
3785     return 0;
3786 }
3787
3788 void
3789 PerlIOPending_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3790 {
3791     if (cnt <= 0) {
3792         PerlIO_flush(f);
3793     }
3794     else {
3795         PerlIOBuf_set_ptrcnt(aTHX_ f, ptr, cnt);
3796     }
3797 }
3798
3799 IV
3800 PerlIOPending_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3801 {
3802     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3803     PerlIOl *l = PerlIOBase(f);
3804     /*
3805      * Our PerlIO_fast_gets must match what we are pushed on, or sv_gets()
3806      * etc. get muddled when it changes mid-string when we auto-pop.
3807      */
3808     l->flags = (l->flags & ~(PERLIO_F_FASTGETS | PERLIO_F_UTF8)) |
3809         (PerlIOBase(PerlIONext(f))->
3810          flags & (PERLIO_F_FASTGETS | PERLIO_F_UTF8));
3811     return code;
3812 }
3813
3814 SSize_t
3815 PerlIOPending_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3816 {
3817     SSize_t avail = PerlIO_get_cnt(f);
3818     SSize_t got = 0;
3819     if ((SSize_t)count < avail)
3820         avail = count;
3821     if (avail > 0)
3822         got = PerlIOBuf_read(aTHX_ f, vbuf, avail);
3823     if (got >= 0 && got < (SSize_t)count) {
3824         SSize_t more =
3825             PerlIO_read(f, ((STDCHAR *) vbuf) + got, count - got);
3826         if (more >= 0 || got == 0)
3827             got += more;
3828     }
3829     return got;
3830 }
3831
3832 PerlIO_funcs PerlIO_pending = {
3833     sizeof(PerlIO_funcs),
3834     "pending",
3835     sizeof(PerlIOBuf),
3836     PERLIO_K_BUFFERED|PERLIO_K_RAW,  /* not sure about RAW here */
3837     PerlIOPending_pushed,
3838     PerlIOBuf_popped,
3839     NULL,
3840     PerlIOBase_binmode,         /* binmode */
3841     NULL,
3842     PerlIOBase_fileno,
3843     PerlIOBuf_dup,
3844     PerlIOPending_read,
3845     PerlIOBuf_unread,
3846     PerlIOBuf_write,
3847     PerlIOPending_seek,
3848     PerlIOBuf_tell,
3849     PerlIOPending_close,
3850     PerlIOPending_flush,
3851     PerlIOPending_fill,
3852     PerlIOBase_eof,
3853     PerlIOBase_error,
3854     PerlIOBase_clearerr,
3855     PerlIOBase_setlinebuf,
3856     PerlIOBuf_get_base,
3857     PerlIOBuf_bufsiz,
3858     PerlIOBuf_get_ptr,
3859     PerlIOBuf_get_cnt,
3860     PerlIOPending_set_ptrcnt,
3861 };
3862
3863
3864
3865 /*--------------------------------------------------------------------------------------*/
3866 /*
3867  * crlf - translation On read translate CR,LF to "\n" we do this by
3868  * overriding ptr/cnt entries to hand back a line at a time and keeping a
3869  * record of which nl we "lied" about. On write translate "\n" to CR,LF
3870  */
3871
3872 typedef struct {
3873     PerlIOBuf base;             /* PerlIOBuf stuff */
3874     STDCHAR *nl;                /* Position of crlf we "lied" about in the
3875                                  * buffer */
3876 } PerlIOCrlf;
3877
3878 IV
3879 PerlIOCrlf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3880 {
3881     IV code;
3882     PerlIOBase(f)->flags |= PERLIO_F_CRLF;
3883     code = PerlIOBuf_pushed(aTHX_ f, mode, arg, tab);
3884 #if 0
3885     PerlIO_debug("PerlIOCrlf_pushed f=%p %s %s fl=%08" UVxf "\n",
3886                  f, PerlIOBase(f)->tab->name, (mode) ? mode : "(Null)",
3887                  PerlIOBase(f)->flags);
3888 #endif
3889     return code;
3890 }
3891
3892
3893 SSize_t
3894 PerlIOCrlf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3895 {
3896     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3897     if (c->nl) {
3898         *(c->nl) = 0xd;
3899         c->nl = NULL;
3900     }
3901     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
3902         return PerlIOBuf_unread(aTHX_ f, vbuf, count);
3903     else {
3904         const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3905         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3906         SSize_t unread = 0;
3907         if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3908             PerlIO_flush(f);
3909         if (!b->buf)
3910             PerlIO_get_base(f);
3911         if (b->buf) {
3912             if (!(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
3913                 b->end = b->ptr = b->buf + b->bufsiz;
3914                 PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3915                 b->posn -= b->bufsiz;
3916             }
3917             while (count > 0 && b->ptr > b->buf) {
3918                 int ch = *--buf;
3919                 if (ch == '\n') {
3920                     if (b->ptr - 2 >= b->buf) {
3921                         *--(b->ptr) = 0xa;
3922                         *--(b->ptr) = 0xd;
3923                         unread++;
3924                         count--;
3925                     }
3926                     else {
3927                         buf++;
3928                         break;
3929                     }
3930                 }
3931                 else {
3932                     *--(b->ptr) = ch;
3933                     unread++;
3934                     count--;
3935                 }
3936             }
3937         }
3938         return unread;
3939     }
3940 }
3941
3942 SSize_t
3943 PerlIOCrlf_get_cnt(pTHX_ PerlIO *f)
3944 {
3945     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3946     if (!b->buf)
3947         PerlIO_get_base(f);
3948     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3949         PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3950         if ((PerlIOBase(f)->flags & PERLIO_F_CRLF) && (!c->nl || *c->nl == 0xd)) {
3951             STDCHAR *nl = (c->nl) ? c->nl : b->ptr;
3952           scan:
3953             while (nl < b->end && *nl != 0xd)
3954                 nl++;
3955             if (nl < b->end && *nl == 0xd) {
3956               test:
3957                 if (nl + 1 < b->end) {
3958                     if (nl[1] == 0xa) {
3959                         *nl = '\n';
3960                         c->nl = nl;
3961                     }
3962                     else {
3963                         /*
3964                          * Not CR,LF but just CR
3965                          */
3966                         nl++;
3967                         goto scan;
3968                     }
3969                 }
3970                 else {
3971                     /*
3972                      * Blast - found CR as last char in buffer
3973                      */
3974
3975                     if (b->ptr < nl) {
3976                         /*
3977                          * They may not care, defer work as long as
3978                          * possible
3979                          */
3980                         c->nl = nl;
3981                         return (nl - b->ptr);
3982                     }
3983                     else {
3984                         int code;
3985                         b->ptr++;       /* say we have read it as far as
3986                                          * flush() is concerned */
3987                         b->buf++;       /* Leave space in front of buffer */
3988                         /* Note as we have moved buf up flush's
3989                            posn += ptr-buf
3990                            will naturally make posn point at CR
3991                          */
3992                         b->bufsiz--;    /* Buffer is thus smaller */
3993                         code = PerlIO_fill(f);  /* Fetch some more */
3994                         b->bufsiz++;    /* Restore size for next time */
3995                         b->buf--;       /* Point at space */
3996                         b->ptr = nl = b->buf;   /* Which is what we hand
3997                                                  * off */
3998                         *nl = 0xd;      /* Fill in the CR */
3999                         if (code == 0)
4000                             goto test;  /* fill() call worked */
4001                         /*
4002                          * CR at EOF - just fall through
4003                          */
4004                         /* Should we clear EOF though ??? */
4005                     }
4006                 }
4007             }
4008         }
4009         return (((c->nl) ? (c->nl + 1) : b->end) - b->ptr);
4010     }
4011     return 0;
4012 }
4013
4014 void
4015 PerlIOCrlf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
4016 {
4017     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4018     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
4019     if (!b->buf)
4020         PerlIO_get_base(f);
4021     if (!ptr) {
4022         if (c->nl) {
4023             ptr = c->nl + 1;
4024             if (ptr == b->end && *c->nl == 0xd) {
4025                 /* Defered CR at end of buffer case - we lied about count */
4026                 ptr--;
4027             }
4028         }
4029         else {
4030             ptr = b->end;
4031         }
4032         ptr -= cnt;
4033     }
4034     else {
4035 #if 0
4036         /*
4037          * Test code - delete when it works ...
4038          */
4039         IV flags = PerlIOBase(f)->flags;
4040         STDCHAR *chk = (c->nl) ? (c->nl+1) : b->end;
4041         if (ptr+cnt == c->nl && c->nl+1 == b->end && *c->nl == 0xd) {
4042           /* Defered CR at end of buffer case - we lied about count */
4043           chk--;
4044         }
4045         chk -= cnt;
4046
4047         if (ptr != chk ) {
4048             Perl_croak(aTHX_ "ptr wrong %p != %p fl=%08" UVxf
4049                        " nl=%p e=%p for %d", ptr, chk, flags, c->nl,
4050                        b->end, cnt);
4051         }
4052 #endif
4053     }
4054     if (c->nl) {
4055         if (ptr > c->nl) {
4056             /*
4057              * They have taken what we lied about
4058              */
4059             *(c->nl) = 0xd;
4060             c->nl = NULL;
4061             ptr++;
4062         }
4063     }
4064     b->ptr = ptr;
4065     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
4066 }
4067
4068 SSize_t
4069 PerlIOCrlf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4070 {
4071     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
4072         return PerlIOBuf_write(aTHX_ f, vbuf, count);
4073     else {
4074         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4075         const STDCHAR *buf = (const STDCHAR *) vbuf;
4076         const STDCHAR *ebuf = buf + count;
4077         if (!b->buf)
4078             PerlIO_get_base(f);
4079         if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
4080             return 0;
4081         while (buf < ebuf) {
4082             STDCHAR *eptr = b->buf + b->bufsiz;
4083             PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
4084             while (buf < ebuf && b->ptr < eptr) {
4085                 if (*buf == '\n') {
4086                     if ((b->ptr + 2) > eptr) {
4087                         /*
4088                          * Not room for both
4089                          */
4090                         PerlIO_flush(f);
4091                         break;
4092                     }
4093                     else {
4094                         *(b->ptr)++ = 0xd;      /* CR */
4095                         *(b->ptr)++ = 0xa;      /* LF */
4096                         buf++;
4097                         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
4098                             PerlIO_flush(f);
4099                             break;
4100                         }
4101                     }
4102                 }
4103                 else {
4104                     int ch = *buf++;
4105                     *(b->ptr)++ = ch;
4106                 }
4107                 if (b->ptr >= eptr) {
4108                     PerlIO_flush(f);
4109                     break;
4110                 }
4111             }
4112         }
4113         if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
4114             PerlIO_flush(f);
4115         return (buf - (STDCHAR *) vbuf);
4116     }
4117 }
4118
4119 IV
4120 PerlIOCrlf_flush(pTHX_ PerlIO *f)
4121 {
4122     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
4123     if (c->nl) {
4124         *(c->nl) = 0xd;
4125         c->nl = NULL;
4126     }
4127     return PerlIOBuf_flush(aTHX_ f);
4128 }
4129
4130 IV
4131 PerlIOCrlf_binmode(pTHX_ PerlIO *f)
4132 {
4133     if ((PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
4134         /* In text mode - flush any pending stuff and flip it */
4135         PerlIOBase(f)->flags &= ~PERLIO_F_CRLF;
4136 #ifndef PERLIO_USING_CRLF
4137         /* CRLF is unusual case - if this is just the :crlf layer pop it */
4138         if (PerlIOBase(f)->tab == &PerlIO_crlf) {
4139                 PerlIO_pop(aTHX_ f);
4140         }
4141 #endif
4142     }
4143     return 0;
4144 }
4145
4146 PerlIO_funcs PerlIO_crlf = {
4147     sizeof(PerlIO_funcs),
4148     "crlf",
4149     sizeof(PerlIOCrlf),
4150     PERLIO_K_BUFFERED | PERLIO_K_CANCRLF | PERLIO_K_RAW,
4151     PerlIOCrlf_pushed,
4152     PerlIOBuf_popped,         /* popped */
4153     PerlIOBuf_open,
4154     PerlIOCrlf_binmode,       /* binmode */
4155     NULL,
4156     PerlIOBase_fileno,
4157     PerlIOBuf_dup,
4158     PerlIOBuf_read,             /* generic read works with ptr/cnt lies
4159                                  * ... */
4160     PerlIOCrlf_unread,          /* Put CR,LF in buffer for each '\n' */
4161     PerlIOCrlf_write,           /* Put CR,LF in buffer for each '\n' */
4162     PerlIOBuf_seek,
4163     PerlIOBuf_tell,
4164     PerlIOBuf_close,
4165     PerlIOCrlf_flush,
4166     PerlIOBuf_fill,
4167     PerlIOBase_eof,
4168     PerlIOBase_error,
4169     PerlIOBase_clearerr,
4170     PerlIOBase_setlinebuf,
4171     PerlIOBuf_get_base,
4172     PerlIOBuf_bufsiz,
4173     PerlIOBuf_get_ptr,
4174     PerlIOCrlf_get_cnt,
4175     PerlIOCrlf_set_ptrcnt,
4176 };
4177
4178 #ifdef HAS_MMAP
4179 /*--------------------------------------------------------------------------------------*/
4180 /*
4181  * mmap as "buffer" layer
4182  */
4183
4184 typedef struct {
4185     PerlIOBuf base;             /* PerlIOBuf stuff */
4186     Mmap_t mptr;                /* Mapped address */
4187     Size_t len;                 /* mapped length */
4188     STDCHAR *bbuf;              /* malloced buffer if map fails */
4189 } PerlIOMmap;
4190
4191 static size_t page_size = 0;
4192
4193 IV
4194 PerlIOMmap_map(pTHX_ PerlIO *f)
4195 {
4196     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4197     IV flags = PerlIOBase(f)->flags;
4198     IV code = 0;
4199     if (m->len)
4200         abort();
4201     if (flags & PERLIO_F_CANREAD) {
4202         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4203         int fd = PerlIO_fileno(f);
4204         Stat_t st;
4205         code = Fstat(fd, &st);
4206         if (code == 0 && S_ISREG(st.st_mode)) {
4207             SSize_t len = st.st_size - b->posn;
4208             if (len > 0) {
4209                 Off_t posn;
4210                 if (!page_size) {
4211 #if defined(HAS_SYSCONF) && (defined(_SC_PAGESIZE) || defined(_SC_PAGE_SIZE))
4212                     {
4213                         SETERRNO(0, SS_NORMAL);
4214 #   ifdef _SC_PAGESIZE
4215                         page_size = sysconf(_SC_PAGESIZE);
4216 #   else
4217                         page_size = sysconf(_SC_PAGE_SIZE);
4218 #   endif
4219                         if ((long) page_size < 0) {
4220                             if (errno) {
4221                                 SV *error = ERRSV;
4222                                 char *msg;
4223                                 STRLEN n_a;
4224                                 (void) SvUPGRADE(error, SVt_PV);
4225                                 msg = SvPVx(error, n_a);
4226                                 Perl_croak(aTHX_ "panic: sysconf: %s",
4227                                            msg);
4228                             }
4229                             else
4230                                 Perl_croak(aTHX_
4231                                            "panic: sysconf: pagesize unknown");
4232                         }
4233                     }
4234 #else
4235 #   ifdef HAS_GETPAGESIZE
4236                     page_size = getpagesize();
4237 #   else
4238 #       if defined(I_SYS_PARAM) && defined(PAGESIZE)
4239                     page_size = PAGESIZE;       /* compiletime, bad */
4240 #       endif
4241 #   endif
4242 #endif
4243                     if ((IV) page_size <= 0)
4244                         Perl_croak(aTHX_ "panic: bad pagesize %" IVdf,
4245                                    (IV) page_size);
4246                 }
4247                 if (b->posn < 0) {
4248                     /*
4249                      * This is a hack - should never happen - open should
4250                      * have set it !
4251                      */
4252                     b->posn = PerlIO_tell(PerlIONext(f));
4253                 }
4254                 posn = (b->posn / page_size) * page_size;
4255                 len = st.st_size - posn;
4256                 m->mptr = mmap(NULL, len, PROT_READ, MAP_SHARED, fd, posn);
4257                 if (m->mptr && m->mptr != (Mmap_t) - 1) {
4258 #if 0 && defined(HAS_MADVISE) && defined(MADV_SEQUENTIAL)
4259                     madvise(m->mptr, len, MADV_SEQUENTIAL);
4260 #endif
4261 #if 0 && defined(HAS_MADVISE) && defined(MADV_WILLNEED)
4262                     madvise(m->mptr, len, MADV_WILLNEED);
4263 #endif
4264                     PerlIOBase(f)->flags =
4265                         (flags & ~PERLIO_F_EOF) | PERLIO_F_RDBUF;
4266                     b->end = ((STDCHAR *) m->mptr) + len;
4267                     b->buf = ((STDCHAR *) m->mptr) + (b->posn - posn);
4268                     b->ptr = b->buf;
4269                     m->len = len;
4270                 }
4271                 else {
4272                     b->buf = NULL;
4273                 }
4274             }
4275             else {
4276                 PerlIOBase(f)->flags =
4277                     flags | PERLIO_F_EOF | PERLIO_F_RDBUF;
4278                 b->buf = NULL;
4279                 b->ptr = b->end = b->ptr;
4280                 code = -1;
4281             }
4282         }
4283     }
4284     return code;
4285 }
4286
4287 IV
4288 PerlIOMmap_unmap(pTHX_ PerlIO *f)
4289 {
4290     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4291     PerlIOBuf *b = &m->base;
4292     IV code = 0;
4293     if (m->len) {
4294         if (b->buf) {
4295             code = munmap(m->mptr, m->len);
4296             b->buf = NULL;
4297             m->len = 0;
4298             m->mptr = NULL;
4299             if (PerlIO_seek(PerlIONext(f), b->posn, SEEK_SET) != 0)
4300                 code = -1;
4301         }
4302         b->ptr = b->end = b->buf;
4303         PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
4304     }
4305     return code;
4306 }
4307
4308 STDCHAR *
4309 PerlIOMmap_get_base(pTHX_ PerlIO *f)
4310 {
4311     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4312     PerlIOBuf *b = &m->base;
4313     if (b->buf && (PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4314         /*
4315          * Already have a readbuffer in progress
4316          */
4317         return b->buf;
4318     }
4319     if (b->buf) {
4320         /*
4321          * We have a write buffer or flushed PerlIOBuf read buffer
4322          */
4323         m->bbuf = b->buf;       /* save it in case we need it again */
4324         b->buf = NULL;          /* Clear to trigger below */
4325     }
4326     if (!b->buf) {
4327         PerlIOMmap_map(aTHX_ f);        /* Try and map it */
4328         if (!b->buf) {
4329             /*
4330              * Map did not work - recover PerlIOBuf buffer if we have one
4331              */
4332             b->buf = m->bbuf;
4333         }
4334     }
4335     b->ptr = b->end = b->buf;
4336     if (b->buf)
4337         return b->buf;
4338     return PerlIOBuf_get_base(aTHX_ f);
4339 }
4340
4341 SSize_t
4342 PerlIOMmap_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4343 {
4344     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4345     PerlIOBuf *b = &m->base;
4346     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
4347         PerlIO_flush(f);
4348     if (b->ptr && (b->ptr - count) >= b->buf
4349         && memEQ(b->ptr - count, vbuf, count)) {
4350         b->ptr -= count;
4351         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
4352         return count;
4353     }
4354     if (m->len) {
4355         /*
4356          * Loose the unwritable mapped buffer
4357          */
4358         PerlIO_flush(f);
4359         /*
4360          * If flush took the "buffer" see if we have one from before
4361          */
4362         if (!b->buf && m->bbuf)
4363             b->buf = m->bbuf;
4364         if (!b->buf) {
4365             PerlIOBuf_get_base(aTHX_ f);
4366             m->bbuf = b->buf;
4367         }
4368     }
4369     return PerlIOBuf_unread(aTHX_ f, vbuf, count);
4370 }
4371
4372 SSize_t
4373 PerlIOMmap_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4374 {
4375     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4376     PerlIOBuf *b = &m->base;
4377     if (!b->buf || !(PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
4378         /*
4379          * No, or wrong sort of, buffer
4380          */
4381         if (m->len) {
4382             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4383                 return 0;
4384         }
4385         /*
4386          * If unmap took the "buffer" see if we have one from before
4387          */
4388         if (!b->buf && m->bbuf)
4389             b->buf = m->bbuf;
4390         if (!b->buf) {
4391             PerlIOBuf_get_base(aTHX_ f);
4392             m->bbuf = b->buf;
4393         }
4394     }
4395     return PerlIOBuf_write(aTHX_ f, vbuf, count);
4396 }
4397
4398 IV
4399 PerlIOMmap_flush(pTHX_ PerlIO *f)
4400 {
4401     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4402     PerlIOBuf *b = &m->base;
4403     IV code = PerlIOBuf_flush(aTHX_ f);
4404     /*
4405      * Now we are "synced" at PerlIOBuf level
4406      */
4407     if (b->buf) {
4408         if (m->len) {
4409             /*
4410              * Unmap the buffer
4411              */
4412             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4413                 code = -1;
4414         }
4415         else {
4416             /*
4417              * We seem to have a PerlIOBuf buffer which was not mapped
4418              * remember it in case we need one later
4419              */
4420             m->bbuf = b->buf;
4421         }
4422     }
4423     return code;
4424 }
4425
4426 IV
4427 PerlIOMmap_fill(pTHX_ PerlIO *f)
4428 {
4429     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4430     IV code = PerlIO_flush(f);
4431     if (code == 0 && !b->buf) {
4432         code = PerlIOMmap_map(aTHX_ f);
4433     }
4434     if (code == 0 && !(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4435         code = PerlIOBuf_fill(aTHX_ f);
4436     }
4437     return code;
4438 }
4439
4440 IV
4441 PerlIOMmap_close(pTHX_ PerlIO *f)
4442 {
4443     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4444     PerlIOBuf *b = &m->base;
4445     IV code = PerlIO_flush(f);
4446     if (m->bbuf) {
4447         b->buf = m->bbuf;
4448         m->bbuf = NULL;
4449         b->ptr = b->end = b->buf;
4450     }
4451     if (PerlIOBuf_close(aTHX_ f) != 0)
4452         code = -1;
4453     return code;
4454 }
4455
4456 PerlIO *
4457 PerlIOMmap_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
4458 {
4459  return PerlIOBase_dup(aTHX_ f, o, param, flags);
4460 }
4461
4462
4463 PerlIO_funcs PerlIO_mmap = {
4464     sizeof(PerlIO_funcs),
4465     "mmap",
4466     sizeof(PerlIOMmap),
4467     PERLIO_K_BUFFERED|PERLIO_K_RAW,
4468     PerlIOBuf_pushed,
4469     PerlIOBuf_popped,
4470     PerlIOBuf_open,
4471     PerlIOBase_binmode,         /* binmode */
4472     NULL,
4473     PerlIOBase_fileno,
4474     PerlIOMmap_dup,
4475     PerlIOBuf_read,
4476     PerlIOMmap_unread,
4477     PerlIOMmap_write,
4478     PerlIOBuf_seek,
4479     PerlIOBuf_tell,
4480     PerlIOBuf_close,
4481     PerlIOMmap_flush,
4482     PerlIOMmap_fill,
4483     PerlIOBase_eof,
4484     PerlIOBase_error,
4485     PerlIOBase_clearerr,
4486     PerlIOBase_setlinebuf,
4487     PerlIOMmap_get_base,
4488     PerlIOBuf_bufsiz,
4489     PerlIOBuf_get_ptr,
4490     PerlIOBuf_get_cnt,
4491     PerlIOBuf_set_ptrcnt,
4492 };
4493
4494 #endif                          /* HAS_MMAP */
4495
4496 PerlIO *
4497 Perl_PerlIO_stdin(pTHX)
4498 {
4499     if (!PL_perlio) {
4500         PerlIO_stdstreams(aTHX);
4501     }
4502     return &PL_perlio[1];
4503 }
4504
4505 PerlIO *
4506 Perl_PerlIO_stdout(pTHX)
4507 {
4508     if (!PL_perlio) {
4509         PerlIO_stdstreams(aTHX);
4510     }
4511     return &PL_perlio[2];
4512 }
4513
4514 PerlIO *
4515 Perl_PerlIO_stderr(pTHX)
4516 {
4517     if (!PL_perlio) {
4518         PerlIO_stdstreams(aTHX);
4519     }
4520     return &PL_perlio[3];
4521 }
4522
4523 /*--------------------------------------------------------------------------------------*/
4524
4525 char *
4526 PerlIO_getname(PerlIO *f, char *buf)
4527 {
4528     dTHX;
4529     char *name = NULL;
4530 #ifdef VMS
4531     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
4532     if (stdio)
4533         name = fgetname(stdio, buf);
4534 #else
4535     Perl_croak(aTHX_ "Don't know how to get file name");
4536 #endif
4537     return name;
4538 }
4539
4540
4541 /*--------------------------------------------------------------------------------------*/
4542 /*
4543  * Functions which can be called on any kind of PerlIO implemented in
4544  * terms of above
4545  */
4546
4547 #undef PerlIO_fdopen
4548 PerlIO *
4549 PerlIO_fdopen(int fd, const char *mode)
4550 {
4551     dTHX;
4552     return PerlIO_openn(aTHX_ Nullch, mode, fd, 0, 0, NULL, 0, NULL);
4553 }
4554
4555 #undef PerlIO_open
4556 PerlIO *
4557 PerlIO_open(const char *path, const char *mode)
4558 {
4559     dTHX;
4560     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4561     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, NULL, 1, &name);
4562 }
4563
4564 #undef Perlio_reopen
4565 PerlIO *
4566 PerlIO_reopen(const char *path, const char *mode, PerlIO *f)
4567 {
4568     dTHX;
4569     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4570     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, f, 1, &name);
4571 }
4572
4573 #undef PerlIO_getc
4574 int
4575 PerlIO_getc(PerlIO *f)
4576 {
4577     dTHX;
4578     STDCHAR buf[1];
4579     SSize_t count = PerlIO_read(f, buf, 1);
4580     if (count == 1) {
4581         return (unsigned char) buf[0];
4582     }
4583     return EOF;
4584 }
4585
4586 #undef PerlIO_ungetc
4587 int
4588 PerlIO_ungetc(PerlIO *f, int ch)
4589 {
4590     dTHX;
4591     if (ch != EOF) {
4592         STDCHAR buf = ch;
4593         if (PerlIO_unread(f, &buf, 1) == 1)
4594             return ch;
4595     }
4596     return EOF;
4597 }
4598
4599 #undef PerlIO_putc
4600 int
4601 PerlIO_putc(PerlIO *f, int ch)
4602 {
4603     dTHX;
4604     STDCHAR buf = ch;
4605     return PerlIO_write(f, &buf, 1);
4606 }
4607
4608 #undef PerlIO_puts
4609 int
4610 PerlIO_puts(PerlIO *f, const char *s)
4611 {
4612     dTHX;
4613     STRLEN len = strlen(s);
4614     return PerlIO_write(f, s, len);
4615 }
4616
4617 #undef PerlIO_rewind
4618 void
4619 PerlIO_rewind(PerlIO *f)
4620 {
4621     dTHX;
4622     PerlIO_seek(f, (Off_t) 0, SEEK_SET);
4623     PerlIO_clearerr(f);
4624 }
4625
4626 #undef PerlIO_vprintf
4627 int
4628 PerlIO_vprintf(PerlIO *f, const char *fmt, va_list ap)
4629 {
4630     dTHX;
4631     SV *sv = newSVpvn("", 0);
4632     char *s;
4633     STRLEN len;
4634     SSize_t wrote;
4635 #ifdef NEED_VA_COPY
4636     va_list apc;
4637     Perl_va_copy(ap, apc);
4638     sv_vcatpvf(sv, fmt, &apc);
4639 #else
4640     sv_vcatpvf(sv, fmt, &ap);
4641 #endif
4642     s = SvPV(sv, len);
4643     wrote = PerlIO_write(f, s, len);
4644     SvREFCNT_dec(sv);
4645     return wrote;
4646 }
4647
4648 #undef PerlIO_printf
4649 int
4650 PerlIO_printf(PerlIO *f, const char *fmt, ...)
4651 {
4652     va_list ap;
4653     int result;
4654     va_start(ap, fmt);
4655     result = PerlIO_vprintf(f, fmt, ap);
4656     va_end(ap);
4657     return result;
4658 }
4659
4660 #undef PerlIO_stdoutf
4661 int
4662 PerlIO_stdoutf(const char *fmt, ...)
4663 {
4664     dTHX;
4665     va_list ap;
4666     int result;
4667     va_start(ap, fmt);
4668     result = PerlIO_vprintf(PerlIO_stdout(), fmt, ap);
4669     va_end(ap);
4670     return result;
4671 }
4672
4673 #undef PerlIO_tmpfile
4674 PerlIO *
4675 PerlIO_tmpfile(void)
4676 {
4677     /*
4678      * I have no idea how portable mkstemp() is ...
4679      */
4680 #if defined(WIN32) || !defined(HAVE_MKSTEMP)
4681     dTHX;
4682     PerlIO *f = NULL;
4683     FILE *stdio = PerlSIO_tmpfile();
4684     if (stdio) {
4685         if ((f = PerlIO_push(aTHX_(PerlIO_allocate(aTHX)), &PerlIO_stdio, "w+", Nullsv))) {
4686             PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
4687             s->stdio = stdio;
4688         }
4689     }
4690     return f;
4691 #else
4692     dTHX;
4693     SV *sv = newSVpv("/tmp/PerlIO_XXXXXX", 0);
4694     int fd = mkstemp(SvPVX(sv));
4695     PerlIO *f = NULL;
4696     if (fd >= 0) {
4697         f = PerlIO_fdopen(fd, "w+");
4698         if (f) {
4699             PerlIOBase(f)->flags |= PERLIO_F_TEMP;
4700         }
4701         PerlLIO_unlink(SvPVX(sv));
4702         SvREFCNT_dec(sv);
4703     }
4704     return f;
4705 #endif
4706 }
4707
4708 #undef HAS_FSETPOS
4709 #undef HAS_FGETPOS
4710
4711 #endif                          /* USE_SFIO */
4712 #endif                          /* PERLIO_IS_STDIO */
4713
4714 /*======================================================================================*/
4715 /*
4716  * Now some functions in terms of above which may be needed even if we are
4717  * not in true PerlIO mode
4718  */
4719
4720 #ifndef HAS_FSETPOS
4721 #undef PerlIO_setpos
4722 int
4723 PerlIO_setpos(PerlIO *f, SV *pos)
4724 {
4725     dTHX;
4726     if (SvOK(pos)) {
4727         STRLEN len;
4728         Off_t *posn = (Off_t *) SvPV(pos, len);
4729         if (f && len == sizeof(Off_t))
4730             return PerlIO_seek(f, *posn, SEEK_SET);
4731     }
4732     SETERRNO(EINVAL, SS_IVCHAN);
4733     return -1;
4734 }
4735 #else
4736 #undef PerlIO_setpos
4737 int
4738 PerlIO_setpos(PerlIO *f, SV *pos)
4739 {
4740     dTHX;
4741     if (SvOK(pos)) {
4742         STRLEN len;
4743         Fpos_t *fpos = (Fpos_t *) SvPV(pos, len);
4744         if (f && len == sizeof(Fpos_t)) {
4745 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4746             return fsetpos64(f, fpos);
4747 #else
4748             return fsetpos(f, fpos);
4749 #endif
4750         }
4751     }
4752     SETERRNO(EINVAL, SS_IVCHAN);
4753     return -1;
4754 }
4755 #endif
4756
4757 #ifndef HAS_FGETPOS
4758 #undef PerlIO_getpos
4759 int
4760 PerlIO_getpos(PerlIO *f, SV *pos)
4761 {
4762     dTHX;
4763     Off_t posn = PerlIO_tell(f);
4764     sv_setpvn(pos, (char *) &posn, sizeof(posn));
4765     return (posn == (Off_t) - 1) ? -1 : 0;
4766 }
4767 #else
4768 #undef PerlIO_getpos
4769 int
4770 PerlIO_getpos(PerlIO *f, SV *pos)
4771 {
4772     dTHX;
4773     Fpos_t fpos;
4774     int code;
4775 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4776     code = fgetpos64(f, &fpos);
4777 #else
4778     code = fgetpos(f, &fpos);
4779 #endif
4780     sv_setpvn(pos, (char *) &fpos, sizeof(fpos));
4781     return code;
4782 }
4783 #endif
4784
4785 #if (defined(PERLIO_IS_STDIO) || !defined(USE_SFIO)) && !defined(HAS_VPRINTF)
4786
4787 int
4788 vprintf(char *pat, char *args)
4789 {
4790     _doprnt(pat, args, stdout);
4791     return 0;                   /* wrong, but perl doesn't use the return
4792                                  * value */
4793 }
4794
4795 int
4796 vfprintf(FILE *fd, char *pat, char *args)
4797 {
4798     _doprnt(pat, args, fd);
4799     return 0;                   /* wrong, but perl doesn't use the return
4800                                  * value */
4801 }
4802
4803 #endif
4804
4805 #ifndef PerlIO_vsprintf
4806 int
4807 PerlIO_vsprintf(char *s, int n, const char *fmt, va_list ap)
4808 {
4809     int val = vsprintf(s, fmt, ap);
4810     if (n >= 0) {
4811         if (strlen(s) >= (STRLEN) n) {
4812             dTHX;
4813             (void) PerlIO_puts(Perl_error_log,
4814                                "panic: sprintf overflow - memory corrupted!\n");
4815             my_exit(1);
4816         }
4817     }
4818     return val;
4819 }
4820 #endif
4821
4822 #ifndef PerlIO_sprintf
4823 int
4824 PerlIO_sprintf(char *s, int n, const char *fmt, ...)
4825 {
4826     va_list ap;
4827     int result;
4828     va_start(ap, fmt);
4829     result = PerlIO_vsprintf(s, n, fmt, ap);
4830     va_end(ap);
4831     return result;
4832 }
4833 #endif
4834
4835
4836
4837
4838
4839
4840
4841