perlio-two.patch: More warnings squashed, more consts
[p5sagit/p5-mst-13.2.git] / perlio.c
1 /*
2  * perlio.c Copyright (c) 1996-2005, Nick Ing-Simmons You may distribute
3  * under the terms of either the GNU General Public License or the
4  * Artistic License, as specified in the README file.
5  */
6
7 /*
8  * Hour after hour for nearly three weary days he had jogged up and down,
9  * over passes, and through long dales, and across many streams.
10  */
11
12 /* This file contains the functions needed to implement PerlIO, which
13  * is Perl's private replacement for the C stdio library. This is used
14  * by default unless you compile with -Uuseperlio or run with
15  * PERLIO=:stdio (but don't do this unless you know what you're doing)
16  */
17
18 /*
19  * If we have ActivePerl-like PERL_IMPLICIT_SYS then we need a dTHX to get
20  * at the dispatch tables, even when we do not need it for other reasons.
21  * Invent a dSYS macro to abstract this out
22  */
23 #ifdef PERL_IMPLICIT_SYS
24 #define dSYS dTHX
25 #else
26 #define dSYS dNOOP
27 #endif
28
29 #define VOIDUSED 1
30 #ifdef PERL_MICRO
31 #   include "uconfig.h"
32 #else
33 #   include "config.h"
34 #endif
35
36 #define PERLIO_NOT_STDIO 0
37 #if !defined(PERLIO_IS_STDIO) && !defined(USE_SFIO)
38 /*
39  * #define PerlIO FILE
40  */
41 #endif
42 /*
43  * This file provides those parts of PerlIO abstraction
44  * which are not #defined in perlio.h.
45  * Which these are depends on various Configure #ifdef's
46  */
47
48 #include "EXTERN.h"
49 #define PERL_IN_PERLIO_C
50 #include "perl.h"
51
52 #ifdef PERL_IMPLICIT_CONTEXT
53 #undef dSYS
54 #define dSYS dTHX
55 #endif
56
57 #include "XSUB.h"
58
59 #define PERLIO_MAX_REFCOUNTABLE_FD 2048
60
61 #ifdef __Lynx__
62 /* Missing proto on LynxOS */
63 int mkstemp(char*);
64 #endif
65
66 /* Call the callback or PerlIOBase, and return failure. */
67 #define Perl_PerlIO_or_Base(f, callback, base, failure, args)   \
68         if (PerlIOValid(f)) {                                   \
69                 const PerlIO_funcs *tab = PerlIOBase(f)->tab;   \
70                 if (tab && tab->callback)                       \
71                         return (*tab->callback) args;           \
72                 else                                            \
73                         return PerlIOBase_ ## base args;        \
74         }                                                       \
75         else                                                    \
76                 SETERRNO(EBADF, SS_IVCHAN);                     \
77         return failure
78
79 /* Call the callback or fail, and return failure. */
80 #define Perl_PerlIO_or_fail(f, callback, failure, args)         \
81         if (PerlIOValid(f)) {                                   \
82                 const PerlIO_funcs *tab = PerlIOBase(f)->tab;   \
83                 if (tab && tab->callback)                       \
84                         return (*tab->callback) args;           \
85                 SETERRNO(EINVAL, LIB_INVARG);                   \
86         }                                                       \
87         else                                                    \
88                 SETERRNO(EBADF, SS_IVCHAN);                     \
89         return failure
90
91 /* Call the callback or PerlIOBase, and be void. */
92 #define Perl_PerlIO_or_Base_void(f, callback, base, args)       \
93         if (PerlIOValid(f)) {                                   \
94                 const PerlIO_funcs *tab = PerlIOBase(f)->tab;   \
95                 if (tab && tab->callback)                       \
96                         (*tab->callback) args;                  \
97                 else                                            \
98                         PerlIOBase_ ## base args;               \
99         }                                                       \
100         else                                                    \
101                 SETERRNO(EBADF, SS_IVCHAN)
102
103 /* Call the callback or fail, and be void. */
104 #define Perl_PerlIO_or_fail_void(f, callback, args)             \
105         if (PerlIOValid(f)) {                                   \
106                 const PerlIO_funcs *tab = PerlIOBase(f)->tab;   \
107                 if (tab && tab->callback)                       \
108                         (*tab->callback) args;                  \
109                 else                                            \
110                         SETERRNO(EINVAL, LIB_INVARG);           \
111         }                                                       \
112         else                                                    \
113                 SETERRNO(EBADF, SS_IVCHAN)
114
115 #ifdef USE_SFIO
116 static int
117 perlsio_binmode(FILE *fp, int iotype, int mode)
118 {
119     /*
120      * This used to be contents of do_binmode in doio.c
121      */
122 #ifdef DOSISH
123 #  if defined(atarist) || defined(__MINT__)
124     if (!fflush(fp)) {
125         if (mode & O_BINARY)
126             ((FILE *) fp)->_flag |= _IOBIN;
127         else
128             ((FILE *) fp)->_flag &= ~_IOBIN;
129         return 1;
130     }
131     return 0;
132 #  else
133     dTHX;
134 #ifdef NETWARE
135     if (PerlLIO_setmode(fp, mode) != -1) {
136 #else
137     if (PerlLIO_setmode(fileno(fp), mode) != -1) {
138 #endif
139 #    if defined(WIN32) && defined(__BORLANDC__)
140         /*
141          * The translation mode of the stream is maintained independent of
142          * the translation mode of the fd in the Borland RTL (heavy
143          * digging through their runtime sources reveal).  User has to set
144          * the mode explicitly for the stream (though they don't document
145          * this anywhere). GSAR 97-5-24
146          */
147         fseek(fp, 0L, 0);
148         if (mode & O_BINARY)
149             fp->flags |= _F_BIN;
150         else
151             fp->flags &= ~_F_BIN;
152 #    endif
153         return 1;
154     }
155     else
156         return 0;
157 #  endif
158 #else
159 #  if defined(USEMYBINMODE)
160     dTHX;
161     if (my_binmode(fp, iotype, mode) != FALSE)
162         return 1;
163     else
164         return 0;
165 #  else
166     return 1;
167 #  endif
168 #endif
169 }
170 #endif /* sfio */
171
172 #ifndef O_ACCMODE
173 #define O_ACCMODE 3             /* Assume traditional implementation */
174 #endif
175
176 int
177 PerlIO_intmode2str(int rawmode, char *mode, int *writing)
178 {
179     const int result = rawmode & O_ACCMODE;
180     int ix = 0;
181     int ptype;
182     switch (result) {
183     case O_RDONLY:
184         ptype = IoTYPE_RDONLY;
185         break;
186     case O_WRONLY:
187         ptype = IoTYPE_WRONLY;
188         break;
189     case O_RDWR:
190     default:
191         ptype = IoTYPE_RDWR;
192         break;
193     }
194     if (writing)
195         *writing = (result != O_RDONLY);
196
197     if (result == O_RDONLY) {
198         mode[ix++] = 'r';
199     }
200 #ifdef O_APPEND
201     else if (rawmode & O_APPEND) {
202         mode[ix++] = 'a';
203         if (result != O_WRONLY)
204             mode[ix++] = '+';
205     }
206 #endif
207     else {
208         if (result == O_WRONLY)
209             mode[ix++] = 'w';
210         else {
211             mode[ix++] = 'r';
212             mode[ix++] = '+';
213         }
214     }
215     if (rawmode & O_BINARY)
216         mode[ix++] = 'b';
217     mode[ix] = '\0';
218     return ptype;
219 }
220
221 #ifndef PERLIO_LAYERS
222 int
223 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
224 {
225     if (!names || !*names
226         || strEQ(names, ":crlf")
227         || strEQ(names, ":raw")
228         || strEQ(names, ":bytes")
229        ) {
230         return 0;
231     }
232     Perl_croak(aTHX_ "Cannot apply \"%s\" in non-PerlIO perl", names);
233     /*
234      * NOTREACHED
235      */
236     return -1;
237 }
238
239 void
240 PerlIO_destruct(pTHX)
241 {
242 }
243
244 int
245 PerlIO_binmode(pTHX_ PerlIO *fp, int iotype, int mode, const char *names)
246 {
247 #ifdef USE_SFIO
248     return 1;
249 #else
250     return perlsio_binmode(fp, iotype, mode);
251 #endif
252 }
253
254 PerlIO *
255 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
256 {
257 #if defined(PERL_MICRO) || defined(SYMBIAN)
258     return NULL;
259 #else
260 #ifdef PERL_IMPLICIT_SYS
261     return PerlSIO_fdupopen(f);
262 #else
263 #ifdef WIN32
264     return win32_fdupopen(f);
265 #else
266     if (f) {
267         int fd = PerlLIO_dup(PerlIO_fileno(f));
268         if (fd >= 0) {
269             char mode[8];
270             int omode = fcntl(fd, F_GETFL);
271 #ifdef DJGPP
272             omode = djgpp_get_stream_mode(f);
273 #endif
274             PerlIO_intmode2str(omode,mode,NULL);
275             /* the r+ is a hack */
276             return PerlIO_fdopen(fd, mode);
277         }
278         return NULL;
279     }
280     else {
281         SETERRNO(EBADF, SS_IVCHAN);
282     }
283 #endif
284     return NULL;
285 #endif
286 #endif
287 }
288
289
290 /*
291  * De-mux PerlIO_openn() into fdopen, freopen and fopen type entries
292  */
293
294 PerlIO *
295 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
296              int imode, int perm, PerlIO *old, int narg, SV **args)
297 {
298     if (narg) {
299         if (narg > 1) {
300             Perl_croak(aTHX_ "More than one argument to open");
301         }
302         if (*args == &PL_sv_undef)
303             return PerlIO_tmpfile();
304         else {
305             const char *name = SvPV_nolen(*args);
306             if (*mode == IoTYPE_NUMERIC) {
307                 fd = PerlLIO_open3(name, imode, perm);
308                 if (fd >= 0)
309                     return PerlIO_fdopen(fd, mode + 1);
310             }
311             else if (old) {
312                 return PerlIO_reopen(name, mode, old);
313             }
314             else {
315                 return PerlIO_open(name, mode);
316             }
317         }
318     }
319     else {
320         return PerlIO_fdopen(fd, (char *) mode);
321     }
322     return NULL;
323 }
324
325 XS(XS_PerlIO__Layer__find)
326 {
327     dXSARGS;
328     if (items < 2)
329         Perl_croak(aTHX_ "Usage class->find(name[,load])");
330     else {
331         const char *name = SvPV_nolen(ST(1));
332         ST(0) = (strEQ(name, "crlf")
333                  || strEQ(name, "raw")) ? &PL_sv_yes : &PL_sv_undef;
334         XSRETURN(1);
335     }
336 }
337
338
339 void
340 Perl_boot_core_PerlIO(pTHX)
341 {
342     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
343 }
344
345 #endif
346
347
348 #ifdef PERLIO_IS_STDIO
349
350 void
351 PerlIO_init(pTHX)
352 {
353     /*
354      * Does nothing (yet) except force this file to be included in perl
355      * binary. That allows this file to force inclusion of other functions
356      * that may be required by loadable extensions e.g. for
357      * FileHandle::tmpfile
358      */
359 }
360
361 #undef PerlIO_tmpfile
362 PerlIO *
363 PerlIO_tmpfile(void)
364 {
365     return tmpfile();
366 }
367
368 #else                           /* PERLIO_IS_STDIO */
369
370 #ifdef USE_SFIO
371
372 #undef HAS_FSETPOS
373 #undef HAS_FGETPOS
374
375 /*
376  * This section is just to make sure these functions get pulled in from
377  * libsfio.a
378  */
379
380 #undef PerlIO_tmpfile
381 PerlIO *
382 PerlIO_tmpfile(void)
383 {
384     return sftmp(0);
385 }
386
387 void
388 PerlIO_init(pTHX)
389 {
390     /*
391      * Force this file to be included in perl binary. Which allows this
392      * file to force inclusion of other functions that may be required by
393      * loadable extensions e.g. for FileHandle::tmpfile
394      */
395
396     /*
397      * Hack sfio does its own 'autoflush' on stdout in common cases. Flush
398      * results in a lot of lseek()s to regular files and lot of small
399      * writes to pipes.
400      */
401     sfset(sfstdout, SF_SHARE, 0);
402 }
403
404 /* This is not the reverse of PerlIO_exportFILE(), PerlIO_releaseFILE() is. */
405 PerlIO *
406 PerlIO_importFILE(FILE *stdio, const char *mode)
407 {
408     const int fd = fileno(stdio);
409     if (!mode || !*mode) {
410         mode = "r+";
411     }
412     return PerlIO_fdopen(fd, mode);
413 }
414
415 FILE *
416 PerlIO_findFILE(PerlIO *pio)
417 {
418     const int fd = PerlIO_fileno(pio);
419     FILE * const f = fdopen(fd, "r+");
420     PerlIO_flush(pio);
421     if (!f && errno == EINVAL)
422         f = fdopen(fd, "w");
423     if (!f && errno == EINVAL)
424         f = fdopen(fd, "r");
425     return f;
426 }
427
428
429 #else                           /* USE_SFIO */
430 /*======================================================================================*/
431 /*
432  * Implement all the PerlIO interface ourselves.
433  */
434
435 #include "perliol.h"
436
437 /*
438  * We _MUST_ have <unistd.h> if we are using lseek() and may have large
439  * files
440  */
441 #ifdef I_UNISTD
442 #include <unistd.h>
443 #endif
444 #ifdef HAS_MMAP
445 #include <sys/mman.h>
446 #endif
447
448 void
449 PerlIO_debug(const char *fmt, ...)
450 {
451     va_list ap;
452     dSYS;
453     va_start(ap, fmt);
454     if (!PL_perlio_debug_fd && !PL_tainting && PL_uid == PL_euid && PL_gid == PL_egid) {
455         const char *s = PerlEnv_getenv("PERLIO_DEBUG");
456         if (s && *s)
457             PL_perlio_debug_fd = PerlLIO_open3(s, O_WRONLY | O_CREAT | O_APPEND, 0666);
458         else
459             PL_perlio_debug_fd = -1;
460     }
461     if (PL_perlio_debug_fd > 0) {
462         dTHX;
463         const char *s = CopFILE(PL_curcop);
464         STRLEN len;
465 #ifdef USE_ITHREADS
466         /* Use fixed buffer as sv_catpvf etc. needs SVs */
467         char buffer[1024];
468         if (!s)
469             s = "(none)";
470         len = sprintf(buffer, "%.40s:%" IVdf " ", s, (IV) CopLINE(PL_curcop));
471         vsprintf(buffer+len, fmt, ap);
472         PerlLIO_write(PL_perlio_debug_fd, buffer, strlen(buffer));
473 #else
474         SV *sv = newSVpvn("", 0);
475         if (!s)
476             s = "(none)";
477         Perl_sv_catpvf(aTHX_ sv, "%s:%" IVdf " ", s,
478                        (IV) CopLINE(PL_curcop));
479         Perl_sv_vcatpvf(aTHX_ sv, fmt, &ap);
480
481         s = SvPV(sv, len);
482         PerlLIO_write(PL_perlio_debug_fd, s, len);
483         SvREFCNT_dec(sv);
484 #endif
485     }
486     va_end(ap);
487 }
488
489 /*--------------------------------------------------------------------------------------*/
490
491 /*
492  * Inner level routines
493  */
494
495 /*
496  * Table of pointers to the PerlIO structs (malloc'ed)
497  */
498 #define PERLIO_TABLE_SIZE 64
499
500 PerlIO *
501 PerlIO_allocate(pTHX)
502 {
503     /*
504      * Find a free slot in the table, allocating new table as necessary
505      */
506     PerlIO **last;
507     PerlIO *f;
508     last = &PL_perlio;
509     while ((f = *last)) {
510         int i;
511         last = (PerlIO **) (f);
512         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
513             if (!*++f) {
514                 return f;
515             }
516         }
517     }
518     Newz('I',f,PERLIO_TABLE_SIZE,PerlIO);
519     if (!f) {
520         return NULL;
521     }
522     *last = f;
523     return f + 1;
524 }
525
526 #undef PerlIO_fdupopen
527 PerlIO *
528 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
529 {
530     if (PerlIOValid(f)) {
531         const PerlIO_funcs * const tab = PerlIOBase(f)->tab;
532         PerlIO_debug("fdupopen f=%p param=%p\n",(void*)f,(void*)param);
533         if (tab && tab->Dup)
534              return (*tab->Dup)(aTHX_ PerlIO_allocate(aTHX), f, param, flags);
535         else {
536              return PerlIOBase_dup(aTHX_ PerlIO_allocate(aTHX), f, param, flags);
537         }
538     }
539     else
540          SETERRNO(EBADF, SS_IVCHAN);
541
542     return NULL;
543 }
544
545 void
546 PerlIO_cleantable(pTHX_ PerlIO **tablep)
547 {
548     PerlIO *table = *tablep;
549     if (table) {
550         int i;
551         PerlIO_cleantable(aTHX_(PerlIO **) & (table[0]));
552         for (i = PERLIO_TABLE_SIZE - 1; i > 0; i--) {
553             PerlIO *f = table + i;
554             if (*f) {
555                 PerlIO_close(f);
556             }
557         }
558         Safefree(table);
559         *tablep = NULL;
560     }
561 }
562
563
564 PerlIO_list_t *
565 PerlIO_list_alloc(pTHX)
566 {
567     PerlIO_list_t *list;
568     Newz('L', list, 1, PerlIO_list_t);
569     list->refcnt = 1;
570     return list;
571 }
572
573 void
574 PerlIO_list_free(pTHX_ PerlIO_list_t *list)
575 {
576     if (list) {
577         if (--list->refcnt == 0) {
578             if (list->array) {
579                 IV i;
580                 for (i = 0; i < list->cur; i++) {
581                     if (list->array[i].arg)
582                         SvREFCNT_dec(list->array[i].arg);
583                 }
584                 Safefree(list->array);
585             }
586             Safefree(list);
587         }
588     }
589 }
590
591 void
592 PerlIO_list_push(pTHX_ PerlIO_list_t *list, PerlIO_funcs *funcs, SV *arg)
593 {
594     PerlIO_pair_t *p;
595     if (list->cur >= list->len) {
596         list->len += 8;
597         if (list->array)
598             Renew(list->array, list->len, PerlIO_pair_t);
599         else
600             New('l', list->array, list->len, PerlIO_pair_t);
601     }
602     p = &(list->array[list->cur++]);
603     p->funcs = funcs;
604     if ((p->arg = arg)) {
605         (void)SvREFCNT_inc(arg);
606     }
607 }
608
609 PerlIO_list_t *
610 PerlIO_clone_list(pTHX_ PerlIO_list_t *proto, CLONE_PARAMS *param)
611 {
612     PerlIO_list_t *list = (PerlIO_list_t *) NULL;
613     if (proto) {
614         int i;
615         list = PerlIO_list_alloc(aTHX);
616         for (i=0; i < proto->cur; i++) {
617             SV *arg = Nullsv;
618             if (proto->array[i].arg)
619                 arg = PerlIO_sv_dup(aTHX_ proto->array[i].arg,param);
620             PerlIO_list_push(aTHX_ list, proto->array[i].funcs, arg);
621         }
622     }
623     return list;
624 }
625
626 void
627 PerlIO_clone(pTHX_ PerlInterpreter *proto, CLONE_PARAMS *param)
628 {
629 #ifdef USE_ITHREADS
630     PerlIO **table = &proto->Iperlio;
631     PerlIO *f;
632     PL_perlio = NULL;
633     PL_known_layers = PerlIO_clone_list(aTHX_ proto->Iknown_layers, param);
634     PL_def_layerlist = PerlIO_clone_list(aTHX_ proto->Idef_layerlist, param);
635     PerlIO_allocate(aTHX); /* root slot is never used */
636     PerlIO_debug("Clone %p from %p\n",aTHX,proto);
637     while ((f = *table)) {
638             int i;
639             table = (PerlIO **) (f++);
640             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
641                 if (*f) {
642                     (void) fp_dup(f, 0, param);
643                 }
644                 f++;
645             }
646         }
647 #endif
648 }
649
650 void
651 PerlIO_destruct(pTHX)
652 {
653     PerlIO **table = &PL_perlio;
654     PerlIO *f;
655 #ifdef USE_ITHREADS
656     PerlIO_debug("Destruct %p\n",aTHX);
657 #endif
658     while ((f = *table)) {
659         int i;
660         table = (PerlIO **) (f++);
661         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
662             PerlIO *x = f;
663             PerlIOl *l;
664             while ((l = *x)) {
665                 if (l->tab->kind & PERLIO_K_DESTRUCT) {
666                     PerlIO_debug("Destruct popping %s\n", l->tab->name);
667                     PerlIO_flush(x);
668                     PerlIO_pop(aTHX_ x);
669                 }
670                 else {
671                     x = PerlIONext(x);
672                 }
673             }
674             f++;
675         }
676     }
677 }
678
679 void
680 PerlIO_pop(pTHX_ PerlIO *f)
681 {
682     PerlIOl *l = *f;
683     if (l) {
684         PerlIO_debug("PerlIO_pop f=%p %s\n", (void*)f, l->tab->name);
685         if (l->tab->Popped) {
686             /*
687              * If popped returns non-zero do not free its layer structure
688              * it has either done so itself, or it is shared and still in
689              * use
690              */
691             if ((*l->tab->Popped) (aTHX_ f) != 0)
692                 return;
693         }
694         *f = l->next;
695         Safefree(l);
696     }
697 }
698
699 /* Return as an array the stack of layers on a filehandle.  Note that
700  * the stack is returned top-first in the array, and there are three
701  * times as many array elements as there are layers in the stack: the
702  * first element of a layer triplet is the name, the second one is the
703  * arguments, and the third one is the flags. */
704
705 AV *
706 PerlIO_get_layers(pTHX_ PerlIO *f)
707 {
708      AV *av = newAV();
709
710      if (PerlIOValid(f)) {
711           PerlIOl *l = PerlIOBase(f);
712
713           while (l) {
714                SV *name = l->tab && l->tab->name ?
715                     newSVpv(l->tab->name, 0) : &PL_sv_undef;
716                SV *arg = l->tab && l->tab->Getarg ?
717                     (*l->tab->Getarg)(aTHX_ &l, 0, 0) : &PL_sv_undef;
718                av_push(av, name);
719                av_push(av, arg);
720                av_push(av, newSViv((IV)l->flags));
721                l = l->next;
722           }
723      }
724
725      return av;
726 }
727
728 /*--------------------------------------------------------------------------------------*/
729 /*
730  * XS Interface for perl code
731  */
732
733 PerlIO_funcs *
734 PerlIO_find_layer(pTHX_ const char *name, STRLEN len, int load)
735 {
736     dVAR;
737     IV i;
738     if ((SSize_t) len <= 0)
739         len = strlen(name);
740     for (i = 0; i < PL_known_layers->cur; i++) {
741         PerlIO_funcs *f = PL_known_layers->array[i].funcs;
742         if (memEQ(f->name, name, len) && f->name[len] == 0) {
743             PerlIO_debug("%.*s => %p\n", (int) len, name, (void*)f);
744             return f;
745         }
746     }
747     if (load && PL_subname && PL_def_layerlist
748         && PL_def_layerlist->cur >= 2) {
749         if (PL_in_load_module) {
750             Perl_croak(aTHX_ "Recursive call to Perl_load_module in PerlIO_find_layer");
751             return NULL;
752         } else {
753             SV *pkgsv = newSVpvn("PerlIO", 6);
754             SV *layer = newSVpvn(name, len);
755             CV *cv  = get_cv("PerlIO::Layer::NoWarnings", FALSE);
756             ENTER;
757             SAVEINT(PL_in_load_module);
758             if (cv) {
759                 SAVESPTR(PL_warnhook);
760                 PL_warnhook = (SV *) cv;
761             }
762             PL_in_load_module++;
763             /*
764              * The two SVs are magically freed by load_module
765              */
766             Perl_load_module(aTHX_ 0, pkgsv, Nullsv, layer, Nullsv);
767             PL_in_load_module--;
768             LEAVE;
769             return PerlIO_find_layer(aTHX_ name, len, 0);
770         }
771     }
772     PerlIO_debug("Cannot find %.*s\n", (int) len, name);
773     return NULL;
774 }
775
776 #ifdef USE_ATTRIBUTES_FOR_PERLIO
777
778 static int
779 perlio_mg_set(pTHX_ SV *sv, MAGIC *mg)
780 {
781     if (SvROK(sv)) {
782         IO *io = GvIOn((GV *) SvRV(sv));
783         PerlIO *ifp = IoIFP(io);
784         PerlIO *ofp = IoOFP(io);
785         Perl_warn(aTHX_ "set %" SVf " %p %p %p", sv, io, ifp, ofp);
786     }
787     return 0;
788 }
789
790 static int
791 perlio_mg_get(pTHX_ SV *sv, MAGIC *mg)
792 {
793     if (SvROK(sv)) {
794         IO *io = GvIOn((GV *) SvRV(sv));
795         PerlIO *ifp = IoIFP(io);
796         PerlIO *ofp = IoOFP(io);
797         Perl_warn(aTHX_ "get %" SVf " %p %p %p", sv, io, ifp, ofp);
798     }
799     return 0;
800 }
801
802 static int
803 perlio_mg_clear(pTHX_ SV *sv, MAGIC *mg)
804 {
805     Perl_warn(aTHX_ "clear %" SVf, sv);
806     return 0;
807 }
808
809 static int
810 perlio_mg_free(pTHX_ SV *sv, MAGIC *mg)
811 {
812     Perl_warn(aTHX_ "free %" SVf, sv);
813     return 0;
814 }
815
816 MGVTBL perlio_vtab = {
817     perlio_mg_get,
818     perlio_mg_set,
819     NULL,                       /* len */
820     perlio_mg_clear,
821     perlio_mg_free
822 };
823
824 XS(XS_io_MODIFY_SCALAR_ATTRIBUTES)
825 {
826     dXSARGS;
827     SV *sv = SvRV(ST(1));
828     AV *av = newAV();
829     MAGIC *mg;
830     int count = 0;
831     int i;
832     sv_magic(sv, (SV *) av, PERL_MAGIC_ext, NULL, 0);
833     SvRMAGICAL_off(sv);
834     mg = mg_find(sv, PERL_MAGIC_ext);
835     mg->mg_virtual = &perlio_vtab;
836     mg_magical(sv);
837     Perl_warn(aTHX_ "attrib %" SVf, sv);
838     for (i = 2; i < items; i++) {
839         STRLEN len;
840         const char *name = SvPV(ST(i), len);
841         SV *layer = PerlIO_find_layer(aTHX_ name, len, 1);
842         if (layer) {
843             av_push(av, SvREFCNT_inc(layer));
844         }
845         else {
846             ST(count) = ST(i);
847             count++;
848         }
849     }
850     SvREFCNT_dec(av);
851     XSRETURN(count);
852 }
853
854 #endif                          /* USE_ATTIBUTES_FOR_PERLIO */
855
856 SV *
857 PerlIO_tab_sv(pTHX_ PerlIO_funcs *tab)
858 {
859     HV *stash = gv_stashpv("PerlIO::Layer", TRUE);
860     SV *sv = sv_bless(newRV_noinc(newSViv(PTR2IV(tab))), stash);
861     return sv;
862 }
863
864 static XS(XS_PerlIO__Layer__NoWarnings)
865 {
866     /* This is used as a %SIG{__WARN__} handler to supress warnings
867        during loading of layers.
868      */
869     dXSARGS;
870     if (items)
871         PerlIO_debug("warning:%s\n",SvPV_nolen(ST(0)));
872     XSRETURN(0);
873 }
874
875 static XS(XS_PerlIO__Layer__find)
876 {
877     dXSARGS;
878     if (items < 2)
879         Perl_croak(aTHX_ "Usage class->find(name[,load])");
880     else {
881         STRLEN len;
882         const char *name = SvPV(ST(1), len);
883         const bool load = (items > 2) ? SvTRUE(ST(2)) : 0;
884         PerlIO_funcs *layer = PerlIO_find_layer(aTHX_ name, len, load);
885         ST(0) =
886             (layer) ? sv_2mortal(PerlIO_tab_sv(aTHX_ layer)) :
887             &PL_sv_undef;
888         XSRETURN(1);
889     }
890 }
891
892 void
893 PerlIO_define_layer(pTHX_ PerlIO_funcs *tab)
894 {
895     if (!PL_known_layers)
896         PL_known_layers = PerlIO_list_alloc(aTHX);
897     PerlIO_list_push(aTHX_ PL_known_layers, tab, Nullsv);
898     PerlIO_debug("define %s %p\n", tab->name, (void*)tab);
899 }
900
901 int
902 PerlIO_parse_layers(pTHX_ PerlIO_list_t *av, const char *names)
903 {
904     if (names) {
905         const char *s = names;
906         while (*s) {
907             while (isSPACE(*s) || *s == ':')
908                 s++;
909             if (*s) {
910                 STRLEN llen = 0;
911                 const char *e = s;
912                 const char *as = Nullch;
913                 STRLEN alen = 0;
914                 if (!isIDFIRST(*s)) {
915                     /*
916                      * Message is consistent with how attribute lists are
917                      * passed. Even though this means "foo : : bar" is
918                      * seen as an invalid separator character.
919                      */
920                     const char q = ((*s == '\'') ? '"' : '\'');
921                     if (ckWARN(WARN_LAYER))
922                         Perl_warner(aTHX_ packWARN(WARN_LAYER),
923                               "Invalid separator character %c%c%c in PerlIO layer specification %s",
924                               q, *s, q, s);
925                     SETERRNO(EINVAL, LIB_INVARG);
926                     return -1;
927                 }
928                 do {
929                     e++;
930                 } while (isALNUM(*e));
931                 llen = e - s;
932                 if (*e == '(') {
933                     int nesting = 1;
934                     as = ++e;
935                     while (nesting) {
936                         switch (*e++) {
937                         case ')':
938                             if (--nesting == 0)
939                                 alen = (e - 1) - as;
940                             break;
941                         case '(':
942                             ++nesting;
943                             break;
944                         case '\\':
945                             /*
946                              * It's a nul terminated string, not allowed
947                              * to \ the terminating null. Anything other
948                              * character is passed over.
949                              */
950                             if (*e++) {
951                                 break;
952                             }
953                             /*
954                              * Drop through
955                              */
956                         case '\0':
957                             e--;
958                             if (ckWARN(WARN_LAYER))
959                                 Perl_warner(aTHX_ packWARN(WARN_LAYER),
960                                       "Argument list not closed for PerlIO layer \"%.*s\"",
961                                       (int) (e - s), s);
962                             return -1;
963                         default:
964                             /*
965                              * boring.
966                              */
967                             break;
968                         }
969                     }
970                 }
971                 if (e > s) {
972                     const bool warn_layer = ckWARN(WARN_LAYER);
973                     PerlIO_funcs *layer =
974                         PerlIO_find_layer(aTHX_ s, llen, 1);
975                     if (layer) {
976                         PerlIO_list_push(aTHX_ av, layer,
977                                          (as) ? newSVpvn(as,
978                                                          alen) :
979                                          &PL_sv_undef);
980                     }
981                     else {
982                         if (warn_layer)
983                             Perl_warner(aTHX_ packWARN(WARN_LAYER), "Unknown PerlIO layer \"%.*s\"",
984                                   (int) llen, s);
985                         return -1;
986                     }
987                 }
988                 s = e;
989             }
990         }
991     }
992     return 0;
993 }
994
995 void
996 PerlIO_default_buffer(pTHX_ PerlIO_list_t *av)
997 {
998     PERLIO_FUNCS_DECL(*tab) = &PerlIO_perlio;
999 #ifdef PERLIO_USING_CRLF
1000     tab = &PerlIO_crlf;
1001 #else
1002     if (PerlIO_stdio.Set_ptrcnt)
1003         tab = &PerlIO_stdio;
1004 #endif
1005     PerlIO_debug("Pushing %s\n", tab->name);
1006     PerlIO_list_push(aTHX_ av, PerlIO_find_layer(aTHX_ tab->name, 0, 0),
1007                      &PL_sv_undef);
1008 }
1009
1010 SV *
1011 PerlIO_arg_fetch(PerlIO_list_t *av, IV n)
1012 {
1013     return av->array[n].arg;
1014 }
1015
1016 PerlIO_funcs *
1017 PerlIO_layer_fetch(pTHX_ PerlIO_list_t *av, IV n, PerlIO_funcs *def)
1018 {
1019     if (n >= 0 && n < av->cur) {
1020         PerlIO_debug("Layer %" IVdf " is %s\n", n,
1021                      av->array[n].funcs->name);
1022         return av->array[n].funcs;
1023     }
1024     if (!def)
1025         Perl_croak(aTHX_ "panic: PerlIO layer array corrupt");
1026     return def;
1027 }
1028
1029 IV
1030 PerlIOPop_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1031 {
1032     (void)mode;
1033     (void)arg;
1034     (void)tab;
1035     if (PerlIOValid(f)) {
1036         PerlIO_flush(f);
1037         PerlIO_pop(aTHX_ f);
1038         return 0;
1039     }
1040     return -1;
1041 }
1042
1043 PERLIO_FUNCS_DECL(PerlIO_remove) = {
1044     sizeof(PerlIO_funcs),
1045     "pop",
1046     0,
1047     PERLIO_K_DUMMY | PERLIO_K_UTF8,
1048     PerlIOPop_pushed,
1049     NULL,
1050     NULL,
1051     NULL,
1052     NULL,
1053     NULL,
1054     NULL,
1055     NULL,
1056     NULL,
1057     NULL,
1058     NULL,
1059     NULL,
1060     NULL,
1061     NULL,                       /* flush */
1062     NULL,                       /* fill */
1063     NULL,
1064     NULL,
1065     NULL,
1066     NULL,
1067     NULL,                       /* get_base */
1068     NULL,                       /* get_bufsiz */
1069     NULL,                       /* get_ptr */
1070     NULL,                       /* get_cnt */
1071     NULL,                       /* set_ptrcnt */
1072 };
1073
1074 PerlIO_list_t *
1075 PerlIO_default_layers(pTHX)
1076 {
1077     if (!PL_def_layerlist) {
1078         const char *s = (PL_tainting) ? Nullch : PerlEnv_getenv("PERLIO");
1079         PERLIO_FUNCS_DECL(*osLayer) = &PerlIO_unix;
1080         PL_def_layerlist = PerlIO_list_alloc(aTHX);
1081         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_unix));
1082 #if defined(WIN32)
1083         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_win32));
1084 #if 0
1085         osLayer = &PerlIO_win32;
1086 #endif
1087 #endif
1088         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_raw));
1089         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_perlio));
1090         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_stdio));
1091         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_crlf));
1092 #ifdef HAS_MMAP
1093         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_mmap));
1094 #endif
1095         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_utf8));
1096         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_remove));
1097         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_byte));
1098         PerlIO_list_push(aTHX_ PL_def_layerlist,
1099                          PerlIO_find_layer(aTHX_ osLayer->name, 0, 0),
1100                          &PL_sv_undef);
1101         if (s) {
1102             PerlIO_parse_layers(aTHX_ PL_def_layerlist, s);
1103         }
1104         else {
1105             PerlIO_default_buffer(aTHX_ PL_def_layerlist);
1106         }
1107     }
1108     if (PL_def_layerlist->cur < 2) {
1109         PerlIO_default_buffer(aTHX_ PL_def_layerlist);
1110     }
1111     return PL_def_layerlist;
1112 }
1113
1114 void
1115 Perl_boot_core_PerlIO(pTHX)
1116 {
1117 #ifdef USE_ATTRIBUTES_FOR_PERLIO
1118     newXS("io::MODIFY_SCALAR_ATTRIBUTES", XS_io_MODIFY_SCALAR_ATTRIBUTES,
1119           __FILE__);
1120 #endif
1121     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
1122     newXS("PerlIO::Layer::NoWarnings", XS_PerlIO__Layer__NoWarnings, __FILE__);
1123 }
1124
1125 PerlIO_funcs *
1126 PerlIO_default_layer(pTHX_ I32 n)
1127 {
1128     PerlIO_list_t *av = PerlIO_default_layers(aTHX);
1129     if (n < 0)
1130         n += av->cur;
1131     return PerlIO_layer_fetch(aTHX_ av, n, PERLIO_FUNCS_CAST(&PerlIO_stdio));
1132 }
1133
1134 #define PerlIO_default_top() PerlIO_default_layer(aTHX_ -1)
1135 #define PerlIO_default_btm() PerlIO_default_layer(aTHX_ 0)
1136
1137 void
1138 PerlIO_stdstreams(pTHX)
1139 {
1140     if (!PL_perlio) {
1141         PerlIO_allocate(aTHX);
1142         PerlIO_fdopen(0, "Ir" PERLIO_STDTEXT);
1143         PerlIO_fdopen(1, "Iw" PERLIO_STDTEXT);
1144         PerlIO_fdopen(2, "Iw" PERLIO_STDTEXT);
1145     }
1146 }
1147
1148 PerlIO *
1149 PerlIO_push(pTHX_ PerlIO *f, PERLIO_FUNCS_DECL(*tab), const char *mode, SV *arg)
1150 {
1151     if (tab->fsize != sizeof(PerlIO_funcs)) {
1152       mismatch:
1153         Perl_croak(aTHX_ "Layer does not match this perl");
1154     }
1155     if (tab->size) {
1156         PerlIOl *l = NULL;
1157         if (tab->size < sizeof(PerlIOl)) {
1158             goto mismatch;
1159         }
1160         /* Real layer with a data area */
1161         Newc('L',l,tab->size,char,PerlIOl);
1162         if (l && f) {
1163             Zero(l, tab->size, char);
1164             l->next = *f;
1165             l->tab = (PerlIO_funcs*) tab;
1166             *f = l;
1167             PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1168                         (mode) ? mode : "(Null)", (void*)arg);
1169             if (*l->tab->Pushed &&
1170                 (*l->tab->Pushed) (aTHX_ f, mode, arg, (PerlIO_funcs*) tab) != 0) {
1171                 PerlIO_pop(aTHX_ f);
1172                 return NULL;
1173             }
1174         }
1175     }
1176     else if (f) {
1177         /* Pseudo-layer where push does its own stack adjust */
1178         PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1179                      (mode) ? mode : "(Null)", (void*)arg);
1180         if (tab->Pushed &&
1181             (*tab->Pushed) (aTHX_ f, mode, arg, (PerlIO_funcs*) tab) != 0) {
1182              return NULL;
1183         }
1184     }
1185     return f;
1186 }
1187
1188 IV
1189 PerlIOBase_binmode(pTHX_ PerlIO *f)
1190 {
1191    if (PerlIOValid(f)) {
1192         /* Is layer suitable for raw stream ? */
1193         if (PerlIOBase(f)->tab->kind & PERLIO_K_RAW) {
1194             /* Yes - turn off UTF-8-ness, to undo UTF-8 locale effects */
1195             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1196         }
1197         else {
1198             /* Not suitable - pop it */
1199             PerlIO_pop(aTHX_ f);
1200         }
1201         return 0;
1202    }
1203    return -1;
1204 }
1205
1206 IV
1207 PerlIORaw_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1208 {
1209     (void)mode;
1210     (void)arg;
1211     (void)tab;
1212
1213     if (PerlIOValid(f)) {
1214         PerlIO *t;
1215         const PerlIOl *l;
1216         PerlIO_flush(f);
1217         /*
1218          * Strip all layers that are not suitable for a raw stream
1219          */
1220         t = f;
1221         while (t && (l = *t)) {
1222             if (l->tab->Binmode) {
1223                 /* Has a handler - normal case */
1224                 if ((*l->tab->Binmode)(aTHX_ f) == 0) {
1225                     if (*t == l) {
1226                         /* Layer still there - move down a layer */
1227                         t = PerlIONext(t);
1228                     }
1229                 }
1230                 else {
1231                     return -1;
1232                 }
1233             }
1234             else {
1235                 /* No handler - pop it */
1236                 PerlIO_pop(aTHX_ t);
1237             }
1238         }
1239         if (PerlIOValid(f)) {
1240             PerlIO_debug(":raw f=%p :%s\n", (void*)f, PerlIOBase(f)->tab->name);
1241             return 0;
1242         }
1243     }
1244     return -1;
1245 }
1246
1247 int
1248 PerlIO_apply_layera(pTHX_ PerlIO *f, const char *mode,
1249                     PerlIO_list_t *layers, IV n, IV max)
1250 {
1251     int code = 0;
1252     while (n < max) {
1253         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n, NULL);
1254         if (tab) {
1255             if (!PerlIO_push(aTHX_ f, tab, mode, PerlIOArg)) {
1256                 code = -1;
1257                 break;
1258             }
1259         }
1260         n++;
1261     }
1262     return code;
1263 }
1264
1265 int
1266 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
1267 {
1268     int code = 0;
1269     if (f && names) {
1270         PerlIO_list_t *layers = PerlIO_list_alloc(aTHX);
1271         code = PerlIO_parse_layers(aTHX_ layers, names);
1272         if (code == 0) {
1273             code = PerlIO_apply_layera(aTHX_ f, mode, layers, 0, layers->cur);
1274         }
1275         PerlIO_list_free(aTHX_ layers);
1276     }
1277     return code;
1278 }
1279
1280
1281 /*--------------------------------------------------------------------------------------*/
1282 /*
1283  * Given the abstraction above the public API functions
1284  */
1285
1286 int
1287 PerlIO_binmode(pTHX_ PerlIO *f, int iotype, int mode, const char *names)
1288 {
1289     PerlIO_debug("PerlIO_binmode f=%p %s %c %x %s\n",
1290                  (void*)f, PerlIOBase(f)->tab->name, iotype, mode,
1291                  (names) ? names : "(Null)");
1292     if (names) {
1293         /* Do not flush etc. if (e.g.) switching encodings.
1294            if a pushed layer knows it needs to flush lower layers
1295            (for example :unix which is never going to call them)
1296            it can do the flush when it is pushed.
1297          */
1298         return PerlIO_apply_layers(aTHX_ f, NULL, names) == 0 ? TRUE : FALSE;
1299     }
1300     else {
1301         /* Fake 5.6 legacy of using this call to turn ON O_TEXT */
1302 #ifdef PERLIO_USING_CRLF
1303         /* Legacy binmode only has meaning if O_TEXT has a value distinct from
1304            O_BINARY so we can look for it in mode.
1305          */
1306         if (!(mode & O_BINARY)) {
1307             /* Text mode */
1308             /* FIXME?: Looking down the layer stack seems wrong,
1309                but is a way of reaching past (say) an encoding layer
1310                to flip CRLF-ness of the layer(s) below
1311              */
1312             while (*f) {
1313                 /* Perhaps we should turn on bottom-most aware layer
1314                    e.g. Ilya's idea that UNIX TTY could serve
1315                  */
1316                 if (PerlIOBase(f)->tab->kind & PERLIO_K_CANCRLF) {
1317                     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
1318                         /* Not in text mode - flush any pending stuff and flip it */
1319                         PerlIO_flush(f);
1320                         PerlIOBase(f)->flags |= PERLIO_F_CRLF;
1321                     }
1322                     /* Only need to turn it on in one layer so we are done */
1323                     return TRUE;
1324                 }
1325                 f = PerlIONext(f);
1326             }
1327             /* Not finding a CRLF aware layer presumably means we are binary
1328                which is not what was requested - so we failed
1329                We _could_ push :crlf layer but so could caller
1330              */
1331             return FALSE;
1332         }
1333 #endif
1334         /* Legacy binmode is now _defined_ as being equivalent to pushing :raw
1335            So code that used to be here is now in PerlIORaw_pushed().
1336          */
1337         return PerlIO_push(aTHX_ f, PERLIO_FUNCS_CAST(&PerlIO_raw), Nullch, Nullsv) ? TRUE : FALSE;
1338     }
1339 }
1340
1341 int
1342 PerlIO__close(pTHX_ PerlIO *f)
1343 {
1344     if (PerlIOValid(f)) {
1345         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1346         if (tab && tab->Close)
1347             return (*tab->Close)(aTHX_ f);
1348         else
1349             return PerlIOBase_close(aTHX_ f);
1350     }
1351     else {
1352         SETERRNO(EBADF, SS_IVCHAN);
1353         return -1;
1354     }
1355 }
1356
1357 int
1358 Perl_PerlIO_close(pTHX_ PerlIO *f)
1359 {
1360     const int code = PerlIO__close(aTHX_ f);
1361     while (PerlIOValid(f)) {
1362         PerlIO_pop(aTHX_ f);
1363     }
1364     return code;
1365 }
1366
1367 int
1368 Perl_PerlIO_fileno(pTHX_ PerlIO *f)
1369 {
1370      Perl_PerlIO_or_Base(f, Fileno, fileno, -1, (aTHX_ f));
1371 }
1372
1373 static const char *
1374 PerlIO_context_layers(pTHX_ const char *mode)
1375 {
1376     const char *type = NULL;
1377     /*
1378      * Need to supply default layer info from open.pm
1379      */
1380     if (PL_curcop) {
1381         SV *layers = PL_curcop->cop_io;
1382         if (layers) {
1383             STRLEN len;
1384             type = SvPV(layers, len);
1385             if (type && mode[0] != 'r') {
1386                 /*
1387                  * Skip to write part
1388                  */
1389                 const char *s = strchr(type, 0);
1390                 if (s && (STRLEN)(s - type) < len) {
1391                     type = s + 1;
1392                 }
1393             }
1394         }
1395     }
1396     return type;
1397 }
1398
1399 static PerlIO_funcs *
1400 PerlIO_layer_from_ref(pTHX_ SV *sv)
1401 {
1402     /*
1403      * For any scalar type load the handler which is bundled with perl
1404      */
1405     if (SvTYPE(sv) < SVt_PVAV)
1406         return PerlIO_find_layer(aTHX_ "scalar", 6, 1);
1407
1408     /*
1409      * For other types allow if layer is known but don't try and load it
1410      */
1411     switch (SvTYPE(sv)) {
1412     case SVt_PVAV:
1413         return PerlIO_find_layer(aTHX_ "Array", 5, 0);
1414     case SVt_PVHV:
1415         return PerlIO_find_layer(aTHX_ "Hash", 4, 0);
1416     case SVt_PVCV:
1417         return PerlIO_find_layer(aTHX_ "Code", 4, 0);
1418     case SVt_PVGV:
1419         return PerlIO_find_layer(aTHX_ "Glob", 4, 0);
1420     }
1421     return NULL;
1422 }
1423
1424 PerlIO_list_t *
1425 PerlIO_resolve_layers(pTHX_ const char *layers,
1426                       const char *mode, int narg, SV **args)
1427 {
1428     PerlIO_list_t *def = PerlIO_default_layers(aTHX);
1429     int incdef = 1;
1430     if (!PL_perlio)
1431         PerlIO_stdstreams(aTHX);
1432     if (narg) {
1433         SV *arg = *args;
1434         /*
1435          * If it is a reference but not an object see if we have a handler
1436          * for it
1437          */
1438         if (SvROK(arg) && !sv_isobject(arg)) {
1439             PerlIO_funcs *handler = PerlIO_layer_from_ref(aTHX_ SvRV(arg));
1440             if (handler) {
1441                 def = PerlIO_list_alloc(aTHX);
1442                 PerlIO_list_push(aTHX_ def, handler, &PL_sv_undef);
1443                 incdef = 0;
1444             }
1445             /*
1446              * Don't fail if handler cannot be found :via(...) etc. may do
1447              * something sensible else we will just stringfy and open
1448              * resulting string.
1449              */
1450         }
1451     }
1452     if (!layers)
1453         layers = PerlIO_context_layers(aTHX_ mode);
1454     if (layers && *layers) {
1455         PerlIO_list_t *av;
1456         if (incdef) {
1457             IV i;
1458             av = PerlIO_list_alloc(aTHX);
1459             for (i = 0; i < def->cur; i++) {
1460                 PerlIO_list_push(aTHX_ av, def->array[i].funcs,
1461                                  def->array[i].arg);
1462             }
1463         }
1464         else {
1465             av = def;
1466         }
1467         if (PerlIO_parse_layers(aTHX_ av, layers) == 0) {
1468              return av;
1469         }
1470         else {
1471             PerlIO_list_free(aTHX_ av);
1472             return (PerlIO_list_t *) NULL;
1473         }
1474     }
1475     else {
1476         if (incdef)
1477             def->refcnt++;
1478         return def;
1479     }
1480 }
1481
1482 PerlIO *
1483 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
1484              int imode, int perm, PerlIO *f, int narg, SV **args)
1485 {
1486     if (!f && narg == 1 && *args == &PL_sv_undef) {
1487         if ((f = PerlIO_tmpfile())) {
1488             if (!layers)
1489                 layers = PerlIO_context_layers(aTHX_ mode);
1490             if (layers && *layers)
1491                 PerlIO_apply_layers(aTHX_ f, mode, layers);
1492         }
1493     }
1494     else {
1495         PerlIO_list_t *layera;
1496         IV n;
1497         PerlIO_funcs *tab = NULL;
1498         if (PerlIOValid(f)) {
1499             /*
1500              * This is "reopen" - it is not tested as perl does not use it
1501              * yet
1502              */
1503             PerlIOl *l = *f;
1504             layera = PerlIO_list_alloc(aTHX);
1505             while (l) {
1506                 SV *arg = (l->tab->Getarg)
1507                         ? (*l->tab->Getarg) (aTHX_ &l, NULL, 0)
1508                         : &PL_sv_undef;
1509                 PerlIO_list_push(aTHX_ layera, l->tab, arg);
1510                 l = *PerlIONext(&l);
1511             }
1512         }
1513         else {
1514             layera = PerlIO_resolve_layers(aTHX_ layers, mode, narg, args);
1515             if (!layera) {
1516                 return NULL;
1517             }
1518         }
1519         /*
1520          * Start at "top" of layer stack
1521          */
1522         n = layera->cur - 1;
1523         while (n >= 0) {
1524             PerlIO_funcs *t = PerlIO_layer_fetch(aTHX_ layera, n, NULL);
1525             if (t && t->Open) {
1526                 tab = t;
1527                 break;
1528             }
1529             n--;
1530         }
1531         if (tab) {
1532             /*
1533              * Found that layer 'n' can do opens - call it
1534              */
1535             if (narg > 1 && !(tab->kind & PERLIO_K_MULTIARG)) {
1536                 Perl_croak(aTHX_ "More than one argument to open(,':%s')",tab->name);
1537             }
1538             PerlIO_debug("openn(%s,'%s','%s',%d,%x,%o,%p,%d,%p)\n",
1539                          tab->name, layers, mode, fd, imode, perm,
1540                          (void*)f, narg, (void*)args);
1541             if (tab->Open)
1542                  f = (*tab->Open) (aTHX_ tab, layera, n, mode, fd, imode, perm,
1543                                    f, narg, args);
1544             else {
1545                  SETERRNO(EINVAL, LIB_INVARG);
1546                  f = NULL;
1547             }
1548             if (f) {
1549                 if (n + 1 < layera->cur) {
1550                     /*
1551                      * More layers above the one that we used to open -
1552                      * apply them now
1553                      */
1554                     if (PerlIO_apply_layera(aTHX_ f, mode, layera, n + 1, layera->cur) != 0) {
1555                         /* If pushing layers fails close the file */
1556                         PerlIO_close(f);
1557                         f = NULL;
1558                     }
1559                 }
1560             }
1561         }
1562         PerlIO_list_free(aTHX_ layera);
1563     }
1564     return f;
1565 }
1566
1567
1568 SSize_t
1569 Perl_PerlIO_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1570 {
1571      Perl_PerlIO_or_Base(f, Read, read, -1, (aTHX_ f, vbuf, count));
1572 }
1573
1574 SSize_t
1575 Perl_PerlIO_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1576 {
1577      Perl_PerlIO_or_Base(f, Unread, unread, -1, (aTHX_ f, vbuf, count));
1578 }
1579
1580 SSize_t
1581 Perl_PerlIO_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1582 {
1583      Perl_PerlIO_or_fail(f, Write, -1, (aTHX_ f, vbuf, count));
1584 }
1585
1586 int
1587 Perl_PerlIO_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
1588 {
1589      Perl_PerlIO_or_fail(f, Seek, -1, (aTHX_ f, offset, whence));
1590 }
1591
1592 Off_t
1593 Perl_PerlIO_tell(pTHX_ PerlIO *f)
1594 {
1595      Perl_PerlIO_or_fail(f, Tell, -1, (aTHX_ f));
1596 }
1597
1598 int
1599 Perl_PerlIO_flush(pTHX_ PerlIO *f)
1600 {
1601     if (f) {
1602         if (*f) {
1603             const PerlIO_funcs *tab = PerlIOBase(f)->tab;
1604
1605             if (tab && tab->Flush)
1606                 return (*tab->Flush) (aTHX_ f);
1607             else
1608                  return 0; /* If no Flush defined, silently succeed. */
1609         }
1610         else {
1611             PerlIO_debug("Cannot flush f=%p\n", (void*)f);
1612             SETERRNO(EBADF, SS_IVCHAN);
1613             return -1;
1614         }
1615     }
1616     else {
1617         /*
1618          * Is it good API design to do flush-all on NULL, a potentially
1619          * errorneous input? Maybe some magical value (PerlIO*
1620          * PERLIO_FLUSH_ALL = (PerlIO*)-1;)? Yes, stdio does similar
1621          * things on fflush(NULL), but should we be bound by their design
1622          * decisions? --jhi
1623          */
1624         PerlIO **table = &PL_perlio;
1625         int code = 0;
1626         while ((f = *table)) {
1627             int i;
1628             table = (PerlIO **) (f++);
1629             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1630                 if (*f && PerlIO_flush(f) != 0)
1631                     code = -1;
1632                 f++;
1633             }
1634         }
1635         return code;
1636     }
1637 }
1638
1639 void
1640 PerlIOBase_flush_linebuf(pTHX)
1641 {
1642     PerlIO **table = &PL_perlio;
1643     PerlIO *f;
1644     while ((f = *table)) {
1645         int i;
1646         table = (PerlIO **) (f++);
1647         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1648             if (*f
1649                 && (PerlIOBase(f)->
1650                     flags & (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1651                 == (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1652                 PerlIO_flush(f);
1653             f++;
1654         }
1655     }
1656 }
1657
1658 int
1659 Perl_PerlIO_fill(pTHX_ PerlIO *f)
1660 {
1661      Perl_PerlIO_or_fail(f, Fill, -1, (aTHX_ f));
1662 }
1663
1664 int
1665 PerlIO_isutf8(PerlIO *f)
1666 {
1667      if (PerlIOValid(f))
1668           return (PerlIOBase(f)->flags & PERLIO_F_UTF8) != 0;
1669      else
1670           SETERRNO(EBADF, SS_IVCHAN);
1671
1672      return -1;
1673 }
1674
1675 int
1676 Perl_PerlIO_eof(pTHX_ PerlIO *f)
1677 {
1678      Perl_PerlIO_or_Base(f, Eof, eof, -1, (aTHX_ f));
1679 }
1680
1681 int
1682 Perl_PerlIO_error(pTHX_ PerlIO *f)
1683 {
1684      Perl_PerlIO_or_Base(f, Error, error, -1, (aTHX_ f));
1685 }
1686
1687 void
1688 Perl_PerlIO_clearerr(pTHX_ PerlIO *f)
1689 {
1690      Perl_PerlIO_or_Base_void(f, Clearerr, clearerr, (aTHX_ f));
1691 }
1692
1693 void
1694 Perl_PerlIO_setlinebuf(pTHX_ PerlIO *f)
1695 {
1696      Perl_PerlIO_or_Base_void(f, Setlinebuf, setlinebuf, (aTHX_ f));
1697 }
1698
1699 int
1700 PerlIO_has_base(PerlIO *f)
1701 {
1702      if (PerlIOValid(f)) {
1703           const PerlIO_funcs *tab = PerlIOBase(f)->tab;
1704
1705           if (tab)
1706                return (tab->Get_base != NULL);
1707           SETERRNO(EINVAL, LIB_INVARG);
1708      }
1709      else
1710           SETERRNO(EBADF, SS_IVCHAN);
1711
1712      return 0;
1713 }
1714
1715 int
1716 PerlIO_fast_gets(PerlIO *f)
1717 {
1718     if (PerlIOValid(f) && (PerlIOBase(f)->flags & PERLIO_F_FASTGETS)) {
1719          const PerlIO_funcs *tab = PerlIOBase(f)->tab;
1720
1721          if (tab)
1722               return (tab->Set_ptrcnt != NULL);
1723          SETERRNO(EINVAL, LIB_INVARG);
1724     }
1725     else
1726          SETERRNO(EBADF, SS_IVCHAN);
1727
1728     return 0;
1729 }
1730
1731 int
1732 PerlIO_has_cntptr(PerlIO *f)
1733 {
1734     if (PerlIOValid(f)) {
1735         const PerlIO_funcs *tab = PerlIOBase(f)->tab;
1736
1737         if (tab)
1738              return (tab->Get_ptr != NULL && tab->Get_cnt != NULL);
1739           SETERRNO(EINVAL, LIB_INVARG);
1740     }
1741     else
1742          SETERRNO(EBADF, SS_IVCHAN);
1743
1744     return 0;
1745 }
1746
1747 int
1748 PerlIO_canset_cnt(PerlIO *f)
1749 {
1750     if (PerlIOValid(f)) {
1751           const PerlIO_funcs *tab = PerlIOBase(f)->tab;
1752
1753           if (tab)
1754                return (tab->Set_ptrcnt != NULL);
1755           SETERRNO(EINVAL, LIB_INVARG);
1756     }
1757     else
1758          SETERRNO(EBADF, SS_IVCHAN);
1759
1760     return 0;
1761 }
1762
1763 STDCHAR *
1764 Perl_PerlIO_get_base(pTHX_ PerlIO *f)
1765 {
1766      Perl_PerlIO_or_fail(f, Get_base, NULL, (aTHX_ f));
1767 }
1768
1769 int
1770 Perl_PerlIO_get_bufsiz(pTHX_ PerlIO *f)
1771 {
1772      Perl_PerlIO_or_fail(f, Get_bufsiz, -1, (aTHX_ f));
1773 }
1774
1775 STDCHAR *
1776 Perl_PerlIO_get_ptr(pTHX_ PerlIO *f)
1777 {
1778      Perl_PerlIO_or_fail(f, Get_ptr, NULL, (aTHX_ f));
1779 }
1780
1781 int
1782 Perl_PerlIO_get_cnt(pTHX_ PerlIO *f)
1783 {
1784      Perl_PerlIO_or_fail(f, Get_cnt, -1, (aTHX_ f));
1785 }
1786
1787 void
1788 Perl_PerlIO_set_cnt(pTHX_ PerlIO *f, int cnt)
1789 {
1790      Perl_PerlIO_or_fail_void(f, Set_ptrcnt, (aTHX_ f, NULL, cnt));
1791 }
1792
1793 void
1794 Perl_PerlIO_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, int cnt)
1795 {
1796      Perl_PerlIO_or_fail_void(f, Set_ptrcnt, (aTHX_ f, ptr, cnt));
1797 }
1798
1799
1800 /*--------------------------------------------------------------------------------------*/
1801 /*
1802  * utf8 and raw dummy layers
1803  */
1804
1805 IV
1806 PerlIOUtf8_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1807 {
1808     (void)mode;
1809     (void)arg;
1810     if (PerlIOValid(f)) {
1811         if (tab->kind & PERLIO_K_UTF8)
1812             PerlIOBase(f)->flags |= PERLIO_F_UTF8;
1813         else
1814             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1815         return 0;
1816     }
1817     return -1;
1818 }
1819
1820 PERLIO_FUNCS_DECL(PerlIO_utf8) = {
1821     sizeof(PerlIO_funcs),
1822     "utf8",
1823     0,
1824     PERLIO_K_DUMMY | PERLIO_K_UTF8,
1825     PerlIOUtf8_pushed,
1826     NULL,
1827     NULL,
1828     NULL,
1829     NULL,
1830     NULL,
1831     NULL,
1832     NULL,
1833     NULL,
1834     NULL,
1835     NULL,
1836     NULL,
1837     NULL,
1838     NULL,                       /* flush */
1839     NULL,                       /* fill */
1840     NULL,
1841     NULL,
1842     NULL,
1843     NULL,
1844     NULL,                       /* get_base */
1845     NULL,                       /* get_bufsiz */
1846     NULL,                       /* get_ptr */
1847     NULL,                       /* get_cnt */
1848     NULL,                       /* set_ptrcnt */
1849 };
1850
1851 PERLIO_FUNCS_DECL(PerlIO_byte) = {
1852     sizeof(PerlIO_funcs),
1853     "bytes",
1854     0,
1855     PERLIO_K_DUMMY,
1856     PerlIOUtf8_pushed,
1857     NULL,
1858     NULL,
1859     NULL,
1860     NULL,
1861     NULL,
1862     NULL,
1863     NULL,
1864     NULL,
1865     NULL,
1866     NULL,
1867     NULL,
1868     NULL,
1869     NULL,                       /* flush */
1870     NULL,                       /* fill */
1871     NULL,
1872     NULL,
1873     NULL,
1874     NULL,
1875     NULL,                       /* get_base */
1876     NULL,                       /* get_bufsiz */
1877     NULL,                       /* get_ptr */
1878     NULL,                       /* get_cnt */
1879     NULL,                       /* set_ptrcnt */
1880 };
1881
1882 PerlIO *
1883 PerlIORaw_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
1884                IV n, const char *mode, int fd, int imode, int perm,
1885                PerlIO *old, int narg, SV **args)
1886 {
1887     PerlIO_funcs *tab = PerlIO_default_btm();
1888     (void)self;
1889     if (tab && tab->Open)
1890          return (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
1891                               old, narg, args);
1892     SETERRNO(EINVAL, LIB_INVARG);
1893     return NULL;
1894 }
1895
1896 PERLIO_FUNCS_DECL(PerlIO_raw) = {
1897     sizeof(PerlIO_funcs),
1898     "raw",
1899     0,
1900     PERLIO_K_DUMMY,
1901     PerlIORaw_pushed,
1902     PerlIOBase_popped,
1903     PerlIORaw_open,
1904     NULL,
1905     NULL,
1906     NULL,
1907     NULL,
1908     NULL,
1909     NULL,
1910     NULL,
1911     NULL,
1912     NULL,
1913     NULL,
1914     NULL,                       /* flush */
1915     NULL,                       /* fill */
1916     NULL,
1917     NULL,
1918     NULL,
1919     NULL,
1920     NULL,                       /* get_base */
1921     NULL,                       /* get_bufsiz */
1922     NULL,                       /* get_ptr */
1923     NULL,                       /* get_cnt */
1924     NULL,                       /* set_ptrcnt */
1925 };
1926 /*--------------------------------------------------------------------------------------*/
1927 /*--------------------------------------------------------------------------------------*/
1928 /*
1929  * "Methods" of the "base class"
1930  */
1931
1932 IV
1933 PerlIOBase_fileno(pTHX_ PerlIO *f)
1934 {
1935     return PerlIOValid(f) ? PerlIO_fileno(PerlIONext(f)) : -1;
1936 }
1937
1938 char *
1939 PerlIO_modestr(PerlIO * f, char *buf)
1940 {
1941     char *s = buf;
1942     if (PerlIOValid(f)) {
1943         const IV flags = PerlIOBase(f)->flags;
1944         if (flags & PERLIO_F_APPEND) {
1945             *s++ = 'a';
1946             if (flags & PERLIO_F_CANREAD) {
1947                 *s++ = '+';
1948             }
1949         }
1950         else if (flags & PERLIO_F_CANREAD) {
1951             *s++ = 'r';
1952             if (flags & PERLIO_F_CANWRITE)
1953                 *s++ = '+';
1954         }
1955         else if (flags & PERLIO_F_CANWRITE) {
1956             *s++ = 'w';
1957             if (flags & PERLIO_F_CANREAD) {
1958                 *s++ = '+';
1959             }
1960         }
1961 #ifdef PERLIO_USING_CRLF
1962         if (!(flags & PERLIO_F_CRLF))
1963             *s++ = 'b';
1964 #endif
1965     }
1966     *s = '\0';
1967     return buf;
1968 }
1969
1970
1971 IV
1972 PerlIOBase_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1973 {
1974     PerlIOl * const l = PerlIOBase(f);
1975     (void)arg;
1976
1977     l->flags &= ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE |
1978                   PERLIO_F_TRUNCATE | PERLIO_F_APPEND);
1979     if (tab->Set_ptrcnt != NULL)
1980         l->flags |= PERLIO_F_FASTGETS;
1981     if (mode) {
1982         if (*mode == IoTYPE_NUMERIC || *mode == IoTYPE_IMPLICIT)
1983             mode++;
1984         switch (*mode++) {
1985         case 'r':
1986             l->flags |= PERLIO_F_CANREAD;
1987             break;
1988         case 'a':
1989             l->flags |= PERLIO_F_APPEND | PERLIO_F_CANWRITE;
1990             break;
1991         case 'w':
1992             l->flags |= PERLIO_F_TRUNCATE | PERLIO_F_CANWRITE;
1993             break;
1994         default:
1995             SETERRNO(EINVAL, LIB_INVARG);
1996             return -1;
1997         }
1998         while (*mode) {
1999             switch (*mode++) {
2000             case '+':
2001                 l->flags |= PERLIO_F_CANREAD | PERLIO_F_CANWRITE;
2002                 break;
2003             case 'b':
2004                 l->flags &= ~PERLIO_F_CRLF;
2005                 break;
2006             case 't':
2007                 l->flags |= PERLIO_F_CRLF;
2008                 break;
2009             default:
2010                 SETERRNO(EINVAL, LIB_INVARG);
2011                 return -1;
2012             }
2013         }
2014     }
2015     else {
2016         if (l->next) {
2017             l->flags |= l->next->flags &
2018                 (PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_TRUNCATE |
2019                  PERLIO_F_APPEND);
2020         }
2021     }
2022 #if 0
2023     PerlIO_debug("PerlIOBase_pushed f=%p %s %s fl=%08" UVxf " (%s)\n",
2024                  f, PerlIOBase(f)->tab->name, (omode) ? omode : "(Null)",
2025                  l->flags, PerlIO_modestr(f, temp));
2026 #endif
2027     return 0;
2028 }
2029
2030 IV
2031 PerlIOBase_popped(pTHX_ PerlIO *f)
2032 {
2033     (void)f;
2034     return 0;
2035 }
2036
2037 SSize_t
2038 PerlIOBase_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2039 {
2040     /*
2041      * Save the position as current head considers it
2042      */
2043     const Off_t old = PerlIO_tell(f);
2044     PerlIO_push(aTHX_ f, PERLIO_FUNCS_CAST(&PerlIO_pending), "r", Nullsv);
2045     PerlIOSelf(f, PerlIOBuf)->posn = old;
2046     return PerlIOBuf_unread(aTHX_ f, vbuf, count);
2047 }
2048
2049 SSize_t
2050 PerlIOBase_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2051 {
2052     STDCHAR *buf = (STDCHAR *) vbuf;
2053     if (f) {
2054         if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD)) {
2055             PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2056             SETERRNO(EBADF, SS_IVCHAN);
2057             return 0;
2058         }
2059         while (count > 0) {
2060             SSize_t avail = PerlIO_get_cnt(f);
2061             SSize_t take = 0;
2062             if (avail > 0)
2063                 take = ((SSize_t)count < avail) ? count : avail;
2064             if (take > 0) {
2065                 STDCHAR *ptr = PerlIO_get_ptr(f);
2066                 Copy(ptr, buf, take, STDCHAR);
2067                 PerlIO_set_ptrcnt(f, ptr + take, (avail -= take));
2068                 count -= take;
2069                 buf += take;
2070             }
2071             if (count > 0 && avail <= 0) {
2072                 if (PerlIO_fill(f) != 0)
2073                     break;
2074             }
2075         }
2076         return (buf - (STDCHAR *) vbuf);
2077     }
2078     return 0;
2079 }
2080
2081 IV
2082 PerlIOBase_noop_ok(pTHX_ PerlIO *f)
2083 {
2084     (void)f;
2085     return 0;
2086 }
2087
2088 IV
2089 PerlIOBase_noop_fail(pTHX_ PerlIO *f)
2090 {
2091     (void)f;
2092     return -1;
2093 }
2094
2095 IV
2096 PerlIOBase_close(pTHX_ PerlIO *f)
2097 {
2098     IV code = -1;
2099     if (PerlIOValid(f)) {
2100         PerlIO *n = PerlIONext(f);
2101         code = PerlIO_flush(f);
2102         PerlIOBase(f)->flags &=
2103            ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_OPEN);
2104         while (PerlIOValid(n)) {
2105             const PerlIO_funcs * const tab = PerlIOBase(n)->tab;
2106             if (tab && tab->Close) {
2107                 if ((*tab->Close)(aTHX_ n) != 0)
2108                     code = -1;
2109                 break;
2110             }
2111             else {
2112                 PerlIOBase(n)->flags &=
2113                     ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_OPEN);
2114             }
2115             n = PerlIONext(n);
2116         }
2117     }
2118     else {
2119         SETERRNO(EBADF, SS_IVCHAN);
2120     }
2121     return code;
2122 }
2123
2124 IV
2125 PerlIOBase_eof(pTHX_ PerlIO *f)
2126 {
2127     if (PerlIOValid(f)) {
2128         return (PerlIOBase(f)->flags & PERLIO_F_EOF) != 0;
2129     }
2130     return 1;
2131 }
2132
2133 IV
2134 PerlIOBase_error(pTHX_ PerlIO *f)
2135 {
2136     if (PerlIOValid(f)) {
2137         return (PerlIOBase(f)->flags & PERLIO_F_ERROR) != 0;
2138     }
2139     return 1;
2140 }
2141
2142 void
2143 PerlIOBase_clearerr(pTHX_ PerlIO *f)
2144 {
2145     if (PerlIOValid(f)) {
2146         PerlIO *n = PerlIONext(f);
2147         PerlIOBase(f)->flags &= ~(PERLIO_F_ERROR | PERLIO_F_EOF);
2148         if (PerlIOValid(n))
2149             PerlIO_clearerr(n);
2150     }
2151 }
2152
2153 void
2154 PerlIOBase_setlinebuf(pTHX_ PerlIO *f)
2155 {
2156     if (PerlIOValid(f)) {
2157         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF;
2158     }
2159 }
2160
2161 SV *
2162 PerlIO_sv_dup(pTHX_ SV *arg, CLONE_PARAMS *param)
2163 {
2164     if (!arg)
2165         return Nullsv;
2166 #ifdef sv_dup
2167     if (param) {
2168         return sv_dup(arg, param);
2169     }
2170     else {
2171         return newSVsv(arg);
2172     }
2173 #else
2174     return newSVsv(arg);
2175 #endif
2176 }
2177
2178 PerlIO *
2179 PerlIOBase_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2180 {
2181     PerlIO *nexto = PerlIONext(o);
2182     if (PerlIOValid(nexto)) {
2183         const PerlIO_funcs * const tab = PerlIOBase(nexto)->tab;
2184         if (tab && tab->Dup)
2185             f = (*tab->Dup)(aTHX_ f, nexto, param, flags);
2186         else
2187             f = PerlIOBase_dup(aTHX_ f, nexto, param, flags);
2188     }
2189     if (f) {
2190         PerlIO_funcs *self = PerlIOBase(o)->tab;
2191         SV *arg;
2192         char buf[8];
2193         PerlIO_debug("PerlIOBase_dup %s f=%p o=%p param=%p\n",
2194                      self->name, (void*)f, (void*)o, (void*)param);
2195         if (self->Getarg)
2196             arg = (*self->Getarg)(aTHX_ o, param, flags);
2197         else {
2198             arg = Nullsv;
2199         }
2200         f = PerlIO_push(aTHX_ f, self, PerlIO_modestr(o,buf), arg);
2201         if (arg) {
2202             SvREFCNT_dec(arg);
2203         }
2204     }
2205     return f;
2206 }
2207
2208 #ifdef USE_THREADS
2209 perl_mutex PerlIO_mutex;
2210 #endif
2211
2212 /* PL_perlio_fd_refcnt[] is in intrpvar.h */
2213
2214 void
2215 PerlIO_init(pTHX)
2216 {
2217  /* Place holder for stdstreams call ??? */
2218 #ifdef USE_THREADS
2219     MUTEX_INIT(&PerlIO_mutex);
2220 #endif
2221 }
2222
2223 void
2224 PerlIOUnix_refcnt_inc(int fd)
2225 {
2226     dTHX;
2227     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2228 #ifdef USE_THREADS
2229         MUTEX_LOCK(&PerlIO_mutex);
2230 #endif
2231         PL_perlio_fd_refcnt[fd]++;
2232         PerlIO_debug("fd %d refcnt=%d\n",fd,PL_perlio_fd_refcnt[fd]);
2233 #ifdef USE_THREADS
2234         MUTEX_UNLOCK(&PerlIO_mutex);
2235 #endif
2236     }
2237 }
2238
2239 int
2240 PerlIOUnix_refcnt_dec(int fd)
2241 {
2242     dTHX;
2243     int cnt = 0;
2244     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2245 #ifdef USE_THREADS
2246         MUTEX_LOCK(&PerlIO_mutex);
2247 #endif
2248         cnt = --PL_perlio_fd_refcnt[fd];
2249         PerlIO_debug("fd %d refcnt=%d\n",fd,cnt);
2250 #ifdef USE_THREADS
2251         MUTEX_UNLOCK(&PerlIO_mutex);
2252 #endif
2253     }
2254     return cnt;
2255 }
2256
2257 void
2258 PerlIO_cleanup(pTHX)
2259 {
2260     int i;
2261 #ifdef USE_ITHREADS
2262     PerlIO_debug("Cleanup layers for %p\n",aTHX);
2263 #else
2264     PerlIO_debug("Cleanup layers\n");
2265 #endif
2266     /* Raise STDIN..STDERR refcount so we don't close them */
2267     for (i=0; i < 3; i++)
2268         PerlIOUnix_refcnt_inc(i);
2269     PerlIO_cleantable(aTHX_ &PL_perlio);
2270     /* Restore STDIN..STDERR refcount */
2271     for (i=0; i < 3; i++)
2272         PerlIOUnix_refcnt_dec(i);
2273
2274     if (PL_known_layers) {
2275         PerlIO_list_free(aTHX_ PL_known_layers);
2276         PL_known_layers = NULL;
2277     }
2278     if (PL_def_layerlist) {
2279         PerlIO_list_free(aTHX_ PL_def_layerlist);
2280         PL_def_layerlist = NULL;
2281     }
2282 }
2283
2284
2285
2286 /*--------------------------------------------------------------------------------------*/
2287 /*
2288  * Bottom-most level for UNIX-like case
2289  */
2290
2291 typedef struct {
2292     struct _PerlIO base;        /* The generic part */
2293     int fd;                     /* UNIX like file descriptor */
2294     int oflags;                 /* open/fcntl flags */
2295 } PerlIOUnix;
2296
2297 int
2298 PerlIOUnix_oflags(const char *mode)
2299 {
2300     int oflags = -1;
2301     if (*mode == IoTYPE_IMPLICIT || *mode == IoTYPE_NUMERIC)
2302         mode++;
2303     switch (*mode) {
2304     case 'r':
2305         oflags = O_RDONLY;
2306         if (*++mode == '+') {
2307             oflags = O_RDWR;
2308             mode++;
2309         }
2310         break;
2311
2312     case 'w':
2313         oflags = O_CREAT | O_TRUNC;
2314         if (*++mode == '+') {
2315             oflags |= O_RDWR;
2316             mode++;
2317         }
2318         else
2319             oflags |= O_WRONLY;
2320         break;
2321
2322     case 'a':
2323         oflags = O_CREAT | O_APPEND;
2324         if (*++mode == '+') {
2325             oflags |= O_RDWR;
2326             mode++;
2327         }
2328         else
2329             oflags |= O_WRONLY;
2330         break;
2331     }
2332     if (*mode == 'b') {
2333         oflags |= O_BINARY;
2334         oflags &= ~O_TEXT;
2335         mode++;
2336     }
2337     else if (*mode == 't') {
2338         oflags |= O_TEXT;
2339         oflags &= ~O_BINARY;
2340         mode++;
2341     }
2342     /*
2343      * Always open in binary mode
2344      */
2345     oflags |= O_BINARY;
2346     if (*mode || oflags == -1) {
2347         SETERRNO(EINVAL, LIB_INVARG);
2348         oflags = -1;
2349     }
2350     return oflags;
2351 }
2352
2353 IV
2354 PerlIOUnix_fileno(pTHX_ PerlIO *f)
2355 {
2356     return PerlIOSelf(f, PerlIOUnix)->fd;
2357 }
2358
2359 static void
2360 PerlIOUnix_setfd(pTHX_ PerlIO *f, int fd, int imode)
2361 {
2362     PerlIOUnix * const s = PerlIOSelf(f, PerlIOUnix);
2363 #if defined(WIN32)
2364     Stat_t st;
2365     if (PerlLIO_fstat(fd, &st) == 0) {
2366         if (!S_ISREG(st.st_mode)) {
2367             PerlIO_debug("%d is not regular file\n",fd);
2368             PerlIOBase(f)->flags |= PERLIO_F_NOTREG;
2369         }
2370         else {
2371             PerlIO_debug("%d _is_ a regular file\n",fd);
2372         }
2373     }
2374 #endif
2375     s->fd = fd;
2376     s->oflags = imode;
2377     PerlIOUnix_refcnt_inc(fd);
2378 }
2379
2380 IV
2381 PerlIOUnix_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2382 {
2383     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2384     if (*PerlIONext(f)) {
2385         /* We never call down so do any pending stuff now */
2386         PerlIO_flush(PerlIONext(f));
2387         /*
2388          * XXX could (or should) we retrieve the oflags from the open file
2389          * handle rather than believing the "mode" we are passed in? XXX
2390          * Should the value on NULL mode be 0 or -1?
2391          */
2392         PerlIOUnix_setfd(aTHX_ f, PerlIO_fileno(PerlIONext(f)),
2393                          mode ? PerlIOUnix_oflags(mode) : -1);
2394     }
2395     PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2396
2397     return code;
2398 }
2399
2400 IV
2401 PerlIOUnix_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2402 {
2403     const int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2404     Off_t new_loc;
2405     if (PerlIOBase(f)->flags & PERLIO_F_NOTREG) {
2406 #ifdef  ESPIPE
2407         SETERRNO(ESPIPE, LIB_INVARG);
2408 #else
2409         SETERRNO(EINVAL, LIB_INVARG);
2410 #endif
2411         return -1;
2412     }
2413     new_loc = PerlLIO_lseek(fd, offset, whence);
2414     if (new_loc == (Off_t) - 1)
2415      {
2416       return -1;
2417      }
2418     PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
2419     return  0;
2420 }
2421
2422 PerlIO *
2423 PerlIOUnix_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2424                 IV n, const char *mode, int fd, int imode,
2425                 int perm, PerlIO *f, int narg, SV **args)
2426 {
2427     if (PerlIOValid(f)) {
2428         if (PerlIOBase(f)->flags & PERLIO_F_OPEN)
2429             (*PerlIOBase(f)->tab->Close)(aTHX_ f);
2430     }
2431     if (narg > 0) {
2432         if (*mode == IoTYPE_NUMERIC)
2433             mode++;
2434         else {
2435             imode = PerlIOUnix_oflags(mode);
2436             perm = 0666;
2437         }
2438         if (imode != -1) {
2439             const char *path = SvPV_nolen(*args);
2440             fd = PerlLIO_open3(path, imode, perm);
2441         }
2442     }
2443     if (fd >= 0) {
2444         if (*mode == IoTYPE_IMPLICIT)
2445             mode++;
2446         if (!f) {
2447             f = PerlIO_allocate(aTHX);
2448         }
2449         if (!PerlIOValid(f)) {
2450             if (!(f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2451                 return NULL;
2452             }
2453         }
2454         PerlIOUnix_setfd(aTHX_ f, fd, imode);
2455         PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2456         if (*mode == IoTYPE_APPEND)
2457             PerlIOUnix_seek(aTHX_ f, 0, SEEK_END);
2458         return f;
2459     }
2460     else {
2461         if (f) {
2462             /*
2463              * FIXME: pop layers ???
2464              */
2465         }
2466         return NULL;
2467     }
2468 }
2469
2470 PerlIO *
2471 PerlIOUnix_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2472 {
2473     PerlIOUnix *os = PerlIOSelf(o, PerlIOUnix);
2474     int fd = os->fd;
2475     if (flags & PERLIO_DUP_FD) {
2476         fd = PerlLIO_dup(fd);
2477     }
2478     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2479         f = PerlIOBase_dup(aTHX_ f, o, param, flags);
2480         if (f) {
2481             /* If all went well overwrite fd in dup'ed lay with the dup()'ed fd */
2482             PerlIOUnix_setfd(aTHX_ f, fd, os->oflags);
2483             return f;
2484         }
2485     }
2486     return NULL;
2487 }
2488
2489
2490 SSize_t
2491 PerlIOUnix_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2492 {
2493     const int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2494 #ifdef PERLIO_STD_SPECIAL
2495     if (fd == 0)
2496         return PERLIO_STD_IN(fd, vbuf, count);
2497 #endif
2498     if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD) ||
2499          PerlIOBase(f)->flags & (PERLIO_F_EOF|PERLIO_F_ERROR)) {
2500         return 0;
2501     }
2502     while (1) {
2503         SSize_t len = PerlLIO_read(fd, vbuf, count);
2504         if (len >= 0 || errno != EINTR) {
2505             if (len < 0) {
2506                 if (errno != EAGAIN) {
2507                     PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2508                 }
2509             }
2510             else if (len == 0 && count != 0) {
2511                 PerlIOBase(f)->flags |= PERLIO_F_EOF;
2512                 SETERRNO(0,0);
2513             }
2514             return len;
2515         }
2516         PERL_ASYNC_CHECK();
2517     }
2518 }
2519
2520 SSize_t
2521 PerlIOUnix_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2522 {
2523     const int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2524 #ifdef PERLIO_STD_SPECIAL
2525     if (fd == 1 || fd == 2)
2526         return PERLIO_STD_OUT(fd, vbuf, count);
2527 #endif
2528     while (1) {
2529         const SSize_t len = PerlLIO_write(fd, vbuf, count);
2530         if (len >= 0 || errno != EINTR) {
2531             if (len < 0) {
2532                 if (errno != EAGAIN) {
2533                     PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2534                 }
2535             }
2536             return len;
2537         }
2538         PERL_ASYNC_CHECK();
2539     }
2540 }
2541
2542 Off_t
2543 PerlIOUnix_tell(pTHX_ PerlIO *f)
2544 {
2545     return PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, 0, SEEK_CUR);
2546 }
2547
2548
2549 IV
2550 PerlIOUnix_close(pTHX_ PerlIO *f)
2551 {
2552     const int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2553     int code = 0;
2554     if (PerlIOBase(f)->flags & PERLIO_F_OPEN) {
2555         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2556             PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2557             return 0;
2558         }
2559     }
2560     else {
2561         SETERRNO(EBADF,SS_IVCHAN);
2562         return -1;
2563     }
2564     while (PerlLIO_close(fd) != 0) {
2565         if (errno != EINTR) {
2566             code = -1;
2567             break;
2568         }
2569         PERL_ASYNC_CHECK();
2570     }
2571     if (code == 0) {
2572         PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2573     }
2574     return code;
2575 }
2576
2577 PERLIO_FUNCS_DECL(PerlIO_unix) = {
2578     sizeof(PerlIO_funcs),
2579     "unix",
2580     sizeof(PerlIOUnix),
2581     PERLIO_K_RAW,
2582     PerlIOUnix_pushed,
2583     PerlIOBase_popped,
2584     PerlIOUnix_open,
2585     PerlIOBase_binmode,         /* binmode */
2586     NULL,
2587     PerlIOUnix_fileno,
2588     PerlIOUnix_dup,
2589     PerlIOUnix_read,
2590     PerlIOBase_unread,
2591     PerlIOUnix_write,
2592     PerlIOUnix_seek,
2593     PerlIOUnix_tell,
2594     PerlIOUnix_close,
2595     PerlIOBase_noop_ok,         /* flush */
2596     PerlIOBase_noop_fail,       /* fill */
2597     PerlIOBase_eof,
2598     PerlIOBase_error,
2599     PerlIOBase_clearerr,
2600     PerlIOBase_setlinebuf,
2601     NULL,                       /* get_base */
2602     NULL,                       /* get_bufsiz */
2603     NULL,                       /* get_ptr */
2604     NULL,                       /* get_cnt */
2605     NULL,                       /* set_ptrcnt */
2606 };
2607
2608 /*--------------------------------------------------------------------------------------*/
2609 /*
2610  * stdio as a layer
2611  */
2612
2613 #if defined(VMS) && !defined(STDIO_BUFFER_WRITABLE)
2614 /* perl5.8 - This ensures the last minute VMS ungetc fix is not
2615    broken by the last second glibc 2.3 fix
2616  */
2617 #define STDIO_BUFFER_WRITABLE
2618 #endif
2619
2620
2621 typedef struct {
2622     struct _PerlIO base;
2623     FILE *stdio;                /* The stream */
2624 } PerlIOStdio;
2625
2626 IV
2627 PerlIOStdio_fileno(pTHX_ PerlIO *f)
2628 {
2629     FILE *s;
2630     if (PerlIOValid(f) && (s = PerlIOSelf(f, PerlIOStdio)->stdio)) {
2631         return PerlSIO_fileno(s);
2632     }
2633     errno = EBADF;
2634     return -1;
2635 }
2636
2637 char *
2638 PerlIOStdio_mode(const char *mode, char *tmode)
2639 {
2640     char * const ret = tmode;
2641     if (mode) {
2642         while (*mode) {
2643             *tmode++ = *mode++;
2644         }
2645     }
2646 #if defined(PERLIO_USING_CRLF) || defined(__CYGWIN__)
2647     *tmode++ = 'b';
2648 #endif
2649     *tmode = '\0';
2650     return ret;
2651 }
2652
2653 IV
2654 PerlIOStdio_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2655 {
2656     PerlIO *n;
2657     if (PerlIOValid(f) && PerlIOValid(n = PerlIONext(f))) {
2658         PerlIO_funcs *toptab = PerlIOBase(n)->tab;
2659         if (toptab == tab) {
2660             /* Top is already stdio - pop self (duplicate) and use original */
2661             PerlIO_pop(aTHX_ f);
2662             return 0;
2663         } else {
2664             const int fd = PerlIO_fileno(n);
2665             char tmode[8];
2666             FILE *stdio;
2667             if (fd >= 0 && (stdio  = PerlSIO_fdopen(fd,
2668                             mode = PerlIOStdio_mode(mode, tmode)))) {
2669                 PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2670                 /* We never call down so do any pending stuff now */
2671                 PerlIO_flush(PerlIONext(f));
2672             }
2673             else {
2674                 return -1;
2675             }
2676         }
2677     }
2678     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2679 }
2680
2681
2682 PerlIO *
2683 PerlIO_importFILE(FILE *stdio, const char *mode)
2684 {
2685     dTHX;
2686     PerlIO *f = NULL;
2687     if (stdio) {
2688         PerlIOStdio *s;
2689         if (!mode || !*mode) {
2690             /* We need to probe to see how we can open the stream
2691                so start with read/write and then try write and read
2692                we dup() so that we can fclose without loosing the fd.
2693
2694                Note that the errno value set by a failing fdopen
2695                varies between stdio implementations.
2696              */
2697             const int fd = PerlLIO_dup(fileno(stdio));
2698             FILE *f2 = PerlSIO_fdopen(fd, (mode = "r+"));
2699             if (!f2) {
2700                 f2 = PerlSIO_fdopen(fd, (mode = "w"));
2701             }
2702             if (!f2) {
2703                 f2 = PerlSIO_fdopen(fd, (mode = "r"));
2704             }
2705             if (!f2) {
2706                 /* Don't seem to be able to open */
2707                 PerlLIO_close(fd);
2708                 return f;
2709             }
2710             fclose(f2);
2711         }
2712         if ((f = PerlIO_push(aTHX_(f = PerlIO_allocate(aTHX)), PERLIO_FUNCS_CAST(&PerlIO_stdio), mode, Nullsv))) {
2713             s = PerlIOSelf(f, PerlIOStdio);
2714             s->stdio = stdio;
2715         }
2716     }
2717     return f;
2718 }
2719
2720 PerlIO *
2721 PerlIOStdio_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2722                  IV n, const char *mode, int fd, int imode,
2723                  int perm, PerlIO *f, int narg, SV **args)
2724 {
2725     char tmode[8];
2726     if (PerlIOValid(f)) {
2727         const char *path = SvPV_nolen(*args);
2728         PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
2729         FILE *stdio;
2730         PerlIOUnix_refcnt_dec(fileno(s->stdio));
2731         stdio = PerlSIO_freopen(path, (mode = PerlIOStdio_mode(mode, tmode)),
2732                             s->stdio);
2733         if (!s->stdio)
2734             return NULL;
2735         s->stdio = stdio;
2736         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2737         return f;
2738     }
2739     else {
2740         if (narg > 0) {
2741             const char *path = SvPV_nolen(*args);
2742             if (*mode == IoTYPE_NUMERIC) {
2743                 mode++;
2744                 fd = PerlLIO_open3(path, imode, perm);
2745             }
2746             else {
2747                 FILE *stdio;
2748                 bool appended = FALSE;
2749 #ifdef __CYGWIN__
2750                 /* Cygwin wants its 'b' early. */
2751                 appended = TRUE;
2752                 mode = PerlIOStdio_mode(mode, tmode);
2753 #endif
2754                 stdio = PerlSIO_fopen(path, mode);
2755                 if (stdio) {
2756                     PerlIOStdio *s;
2757                     if (!f) {
2758                         f = PerlIO_allocate(aTHX);
2759                     }
2760                     if (!appended)
2761                         mode = PerlIOStdio_mode(mode, tmode);
2762                     f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg);
2763                     if (f) {
2764                         s = PerlIOSelf(f, PerlIOStdio);
2765                         s->stdio = stdio;
2766                         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2767                     }
2768                     return f;
2769                 }
2770                 else {
2771                     return NULL;
2772                 }
2773             }
2774         }
2775         if (fd >= 0) {
2776             FILE *stdio = NULL;
2777             int init = 0;
2778             if (*mode == IoTYPE_IMPLICIT) {
2779                 init = 1;
2780                 mode++;
2781             }
2782             if (init) {
2783                 switch (fd) {
2784                 case 0:
2785                     stdio = PerlSIO_stdin;
2786                     break;
2787                 case 1:
2788                     stdio = PerlSIO_stdout;
2789                     break;
2790                 case 2:
2791                     stdio = PerlSIO_stderr;
2792                     break;
2793                 }
2794             }
2795             else {
2796                 stdio = PerlSIO_fdopen(fd, mode =
2797                                        PerlIOStdio_mode(mode, tmode));
2798             }
2799             if (stdio) {
2800                 if (!f) {
2801                     f = PerlIO_allocate(aTHX);
2802                 }
2803                 if ((f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2804                     PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
2805                     s->stdio = stdio;
2806                     PerlIOUnix_refcnt_inc(fileno(s->stdio));
2807                 }
2808                 return f;
2809             }
2810         }
2811     }
2812     return NULL;
2813 }
2814
2815 PerlIO *
2816 PerlIOStdio_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2817 {
2818     /* This assumes no layers underneath - which is what
2819        happens, but is not how I remember it. NI-S 2001/10/16
2820      */
2821     if ((f = PerlIOBase_dup(aTHX_ f, o, param, flags))) {
2822         FILE *stdio = PerlIOSelf(o, PerlIOStdio)->stdio;
2823         const int fd = fileno(stdio);
2824         char mode[8];
2825         if (flags & PERLIO_DUP_FD) {
2826             const int dfd = PerlLIO_dup(fileno(stdio));
2827             if (dfd >= 0) {
2828                 stdio = PerlSIO_fdopen(dfd, PerlIO_modestr(o,mode));
2829                 goto set_this;
2830             }
2831             else {
2832                 /* FIXME: To avoid messy error recovery if dup fails
2833                    re-use the existing stdio as though flag was not set
2834                  */
2835             }
2836         }
2837         stdio = PerlSIO_fdopen(fd, PerlIO_modestr(o,mode));
2838     set_this:
2839         PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2840         PerlIOUnix_refcnt_inc(fileno(stdio));
2841     }
2842     return f;
2843 }
2844
2845 static int
2846 PerlIOStdio_invalidate_fileno(pTHX_ FILE *f)
2847 {
2848     /* XXX this could use PerlIO_canset_fileno() and
2849      * PerlIO_set_fileno() support from Configure
2850      */
2851 #  if defined(__UCLIBC__)
2852     /* uClibc must come before glibc because it defines __GLIBC__ as well. */
2853     f->__filedes = -1;
2854     return 1;
2855 #  elif defined(__GLIBC__)
2856     /* There may be a better way for GLIBC:
2857         - libio.h defines a flag to not close() on cleanup
2858      */ 
2859     f->_fileno = -1;
2860     return 1;
2861 #  elif defined(__sun__)
2862 #    if defined(_LP64)
2863     /* On solaris, if _LP64 is defined, the FILE structure is this:
2864      *
2865      *  struct FILE {
2866      *      long __pad[16];
2867      *  };
2868      *
2869      * It turns out that the fd is stored in the top 32 bits of
2870      * file->__pad[4]. The lower 32 bits contain flags. file->pad[5] appears
2871      * to contain a pointer or offset into another structure. All the
2872      * remaining fields are zero.
2873      *
2874      * We set the top bits to -1 (0xFFFFFFFF).
2875      */
2876     f->__pad[4] |= 0xffffffff00000000L;
2877     assert(fileno(f) == 0xffffffff);
2878 #    else /* !defined(_LP64) */
2879     /* _file is just a unsigned char :-(
2880        Not clear why we dup() rather than using -1
2881        even if that would be treated as 0xFF - so will
2882        a dup fail ...
2883      */
2884     f->_file = PerlLIO_dup(fileno(f));
2885 #    endif /* defined(_LP64) */
2886     return 1;
2887 #  elif defined(__hpux)
2888     f->__fileH = 0xff;
2889     f->__fileL = 0xff;
2890     return 1;
2891    /* Next one ->_file seems to be a reasonable fallback, i.e. if
2892       your platform does not have special entry try this one.
2893       [For OSF only have confirmation for Tru64 (alpha)
2894       but assume other OSFs will be similar.]
2895     */
2896 #  elif defined(_AIX) || defined(__osf__) || defined(__irix__)
2897     f->_file = -1;
2898     return 1;
2899 #  elif defined(__FreeBSD__)
2900     /* There may be a better way on FreeBSD:
2901         - we could insert a dummy func in the _close function entry
2902         f->_close = (int (*)(void *)) dummy_close;
2903      */
2904     f->_file = -1;
2905     return 1;
2906 #  elif defined(__OpenBSD__)
2907     /* There may be a better way on OpenBSD:
2908         - we could insert a dummy func in the _close function entry
2909         f->_close = (int (*)(void *)) dummy_close;
2910      */
2911     f->_file = -1;
2912     return 1;
2913 #  elif defined(__EMX__)
2914     /* f->_flags &= ~_IOOPEN; */        /* Will leak stream->_buffer */
2915     f->_handle = -1;
2916     return 1;
2917 #  elif defined(__CYGWIN__)
2918     /* There may be a better way on CYGWIN:
2919         - we could insert a dummy func in the _close function entry
2920         f->_close = (int (*)(void *)) dummy_close;
2921      */
2922     f->_file = -1;
2923     return 1;
2924 #  elif defined(WIN32)
2925 #    if defined(__BORLANDC__)
2926     f->fd = PerlLIO_dup(fileno(f));
2927 #    elif defined(UNDER_CE)
2928     /* WIN_CE does not have access to FILE internals, it hardly has FILE
2929        structure at all
2930      */
2931 #    else
2932     f->_file = -1;
2933 #    endif
2934     return 1;
2935 #  else
2936 #if 0
2937     /* Sarathy's code did this - we fall back to a dup/dup2 hack
2938        (which isn't thread safe) instead
2939      */
2940 #    error "Don't know how to set FILE.fileno on your platform"
2941 #endif
2942     return 0;
2943 #  endif
2944 }
2945
2946 IV
2947 PerlIOStdio_close(pTHX_ PerlIO *f)
2948 {
2949     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2950     if (!stdio) {
2951         errno = EBADF;
2952         return -1;
2953     }
2954     else {
2955         const int fd = fileno(stdio);
2956         int socksfd = 0;
2957         int invalidate = 0;
2958         IV result = 0;
2959         int saveerr = 0;
2960         int dupfd = 0;
2961 #ifdef SOCKS5_VERSION_NAME
2962         /* Socks lib overrides close() but stdio isn't linked to
2963            that library (though we are) - so we must call close()
2964            on sockets on stdio's behalf.
2965          */
2966         int optval;
2967         Sock_size_t optlen = sizeof(int);
2968         if (getsockopt(fd, SOL_SOCKET, SO_TYPE, (void *) &optval, &optlen) == 0) {
2969             socksfd = 1;
2970             invalidate = 1;
2971         }
2972 #endif
2973         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2974             /* File descriptor still in use */
2975             invalidate = 1;
2976             socksfd = 0;
2977         }
2978         if (invalidate) {
2979             /* For STD* handles don't close the stdio at all
2980                this is because we have shared the FILE * too
2981              */
2982             if (stdio == stdin) {
2983                 /* Some stdios are buggy fflush-ing inputs */
2984                 return 0;
2985             }
2986             else if (stdio == stdout || stdio == stderr) {
2987                 return PerlIO_flush(f);
2988             }
2989             /* Tricky - must fclose(stdio) to free memory but not close(fd)
2990                Use Sarathy's trick from maint-5.6 to invalidate the
2991                fileno slot of the FILE *
2992             */
2993             result = PerlIO_flush(f);
2994             saveerr = errno;
2995             if (!(invalidate = PerlIOStdio_invalidate_fileno(aTHX_ stdio))) {
2996                 dupfd = PerlLIO_dup(fd);
2997             }
2998         }
2999         result = PerlSIO_fclose(stdio);
3000         /* We treat error from stdio as success if we invalidated
3001            errno may NOT be expected EBADF
3002          */
3003         if (invalidate && result != 0) {
3004             errno = saveerr;
3005             result = 0;
3006         }
3007         if (socksfd) {
3008             /* in SOCKS case let close() determine return value */
3009             result = close(fd);
3010         }
3011         if (dupfd) {
3012             PerlLIO_dup2(dupfd,fd);
3013             PerlLIO_close(dupfd);
3014         }
3015         return result;
3016     }
3017 }
3018
3019 SSize_t
3020 PerlIOStdio_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3021 {
3022     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
3023     SSize_t got = 0;
3024     for (;;) {
3025         if (count == 1) {
3026             STDCHAR *buf = (STDCHAR *) vbuf;
3027             /*
3028              * Perl is expecting PerlIO_getc() to fill the buffer Linux's
3029              * stdio does not do that for fread()
3030              */
3031             const int ch = PerlSIO_fgetc(s);
3032             if (ch != EOF) {
3033                 *buf = ch;
3034                 got = 1;
3035             }
3036         }
3037         else
3038             got = PerlSIO_fread(vbuf, 1, count, s);
3039         if (got == 0 && PerlSIO_ferror(s))
3040             got = -1;
3041         if (got >= 0 || errno != EINTR)
3042             break;
3043         PERL_ASYNC_CHECK();
3044         SETERRNO(0,0);  /* just in case */
3045     }
3046     return got;
3047 }
3048
3049 SSize_t
3050 PerlIOStdio_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3051 {
3052     SSize_t unread = 0;
3053     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
3054
3055 #ifdef STDIO_BUFFER_WRITABLE
3056     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
3057         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
3058         STDCHAR *base = PerlIO_get_base(f);
3059         SSize_t cnt   = PerlIO_get_cnt(f);
3060         STDCHAR *ptr  = PerlIO_get_ptr(f);
3061         SSize_t avail = ptr - base;
3062         if (avail > 0) {
3063             if (avail > count) {
3064                 avail = count;
3065             }
3066             ptr -= avail;
3067             Move(buf-avail,ptr,avail,STDCHAR);
3068             count -= avail;
3069             unread += avail;
3070             PerlIO_set_ptrcnt(f,ptr,cnt+avail);
3071             if (PerlSIO_feof(s) && unread >= 0)
3072                 PerlSIO_clearerr(s);
3073         }
3074     }
3075     else
3076 #endif
3077     if (PerlIO_has_cntptr(f)) {
3078         /* We can get pointer to buffer but not its base
3079            Do ungetc() but check chars are ending up in the
3080            buffer
3081          */
3082         STDCHAR *eptr = (STDCHAR*)PerlSIO_get_ptr(s);
3083         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
3084         while (count > 0) {
3085             const int ch = *--buf & 0xFF;
3086             if (ungetc(ch,s) != ch) {
3087                 /* ungetc did not work */
3088                 break;
3089             }
3090             if ((STDCHAR*)PerlSIO_get_ptr(s) != --eptr || ((*eptr & 0xFF) != ch)) {
3091                 /* Did not change pointer as expected */
3092                 fgetc(s);  /* get char back again */
3093                 break;
3094             }
3095             /* It worked ! */
3096             count--;
3097             unread++;
3098         }
3099     }
3100
3101     if (count > 0) {
3102         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
3103     }
3104     return unread;
3105 }
3106
3107 SSize_t
3108 PerlIOStdio_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3109 {
3110     SSize_t got;
3111     for (;;) {
3112         got = PerlSIO_fwrite(vbuf, 1, count,
3113                               PerlIOSelf(f, PerlIOStdio)->stdio);
3114         if (got >= 0 || errno != EINTR)
3115             break;
3116         PERL_ASYNC_CHECK();
3117         SETERRNO(0,0);  /* just in case */
3118     }
3119     return got;
3120 }
3121
3122 IV
3123 PerlIOStdio_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3124 {
3125     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3126     return PerlSIO_fseek(stdio, offset, whence);
3127 }
3128
3129 Off_t
3130 PerlIOStdio_tell(pTHX_ PerlIO *f)
3131 {
3132     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3133     return PerlSIO_ftell(stdio);
3134 }
3135
3136 IV
3137 PerlIOStdio_flush(pTHX_ PerlIO *f)
3138 {
3139     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3140     if (PerlIOBase(f)->flags & PERLIO_F_CANWRITE) {
3141         return PerlSIO_fflush(stdio);
3142     }
3143     else {
3144 #if 0
3145         /*
3146          * FIXME: This discards ungetc() and pre-read stuff which is not
3147          * right if this is just a "sync" from a layer above Suspect right
3148          * design is to do _this_ but not have layer above flush this
3149          * layer read-to-read
3150          */
3151         /*
3152          * Not writeable - sync by attempting a seek
3153          */
3154         int err = errno;
3155         if (PerlSIO_fseek(stdio, (Off_t) 0, SEEK_CUR) != 0)
3156             errno = err;
3157 #endif
3158     }
3159     return 0;
3160 }
3161
3162 IV
3163 PerlIOStdio_eof(pTHX_ PerlIO *f)
3164 {
3165     return PerlSIO_feof(PerlIOSelf(f, PerlIOStdio)->stdio);
3166 }
3167
3168 IV
3169 PerlIOStdio_error(pTHX_ PerlIO *f)
3170 {
3171     return PerlSIO_ferror(PerlIOSelf(f, PerlIOStdio)->stdio);
3172 }
3173
3174 void
3175 PerlIOStdio_clearerr(pTHX_ PerlIO *f)
3176 {
3177     PerlSIO_clearerr(PerlIOSelf(f, PerlIOStdio)->stdio);
3178 }
3179
3180 void
3181 PerlIOStdio_setlinebuf(pTHX_ PerlIO *f)
3182 {
3183 #ifdef HAS_SETLINEBUF
3184     PerlSIO_setlinebuf(PerlIOSelf(f, PerlIOStdio)->stdio);
3185 #else
3186     PerlSIO_setvbuf(PerlIOSelf(f, PerlIOStdio)->stdio, Nullch, _IOLBF, 0);
3187 #endif
3188 }
3189
3190 #ifdef FILE_base
3191 STDCHAR *
3192 PerlIOStdio_get_base(pTHX_ PerlIO *f)
3193 {
3194     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3195     return (STDCHAR*)PerlSIO_get_base(stdio);
3196 }
3197
3198 Size_t
3199 PerlIOStdio_get_bufsiz(pTHX_ PerlIO *f)
3200 {
3201     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3202     return PerlSIO_get_bufsiz(stdio);
3203 }
3204 #endif
3205
3206 #ifdef USE_STDIO_PTR
3207 STDCHAR *
3208 PerlIOStdio_get_ptr(pTHX_ PerlIO *f)
3209 {
3210     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3211     return (STDCHAR*)PerlSIO_get_ptr(stdio);
3212 }
3213
3214 SSize_t
3215 PerlIOStdio_get_cnt(pTHX_ PerlIO *f)
3216 {
3217     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3218     return PerlSIO_get_cnt(stdio);
3219 }
3220
3221 void
3222 PerlIOStdio_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3223 {
3224     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3225     if (ptr != NULL) {
3226 #ifdef STDIO_PTR_LVALUE
3227         PerlSIO_set_ptr(stdio, (void*)ptr); /* LHS STDCHAR* cast non-portable */
3228 #ifdef STDIO_PTR_LVAL_SETS_CNT
3229         if (PerlSIO_get_cnt(stdio) != (cnt)) {
3230             assert(PerlSIO_get_cnt(stdio) == (cnt));
3231         }
3232 #endif
3233 #if (!defined(STDIO_PTR_LVAL_NOCHANGE_CNT))
3234         /*
3235          * Setting ptr _does_ change cnt - we are done
3236          */
3237         return;
3238 #endif
3239 #else                           /* STDIO_PTR_LVALUE */
3240         PerlProc_abort();
3241 #endif                          /* STDIO_PTR_LVALUE */
3242     }
3243     /*
3244      * Now (or only) set cnt
3245      */
3246 #ifdef STDIO_CNT_LVALUE
3247     PerlSIO_set_cnt(stdio, cnt);
3248 #else                           /* STDIO_CNT_LVALUE */
3249 #if (defined(STDIO_PTR_LVALUE) && defined(STDIO_PTR_LVAL_SETS_CNT))
3250     PerlSIO_set_ptr(stdio,
3251                     PerlSIO_get_ptr(stdio) + (PerlSIO_get_cnt(stdio) -
3252                                               cnt));
3253 #else                           /* STDIO_PTR_LVAL_SETS_CNT */
3254     PerlProc_abort();
3255 #endif                          /* STDIO_PTR_LVAL_SETS_CNT */
3256 #endif                          /* STDIO_CNT_LVALUE */
3257 }
3258
3259
3260 #endif
3261
3262 IV
3263 PerlIOStdio_fill(pTHX_ PerlIO *f)
3264 {
3265     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3266     int c;
3267     /*
3268      * fflush()ing read-only streams can cause trouble on some stdio-s
3269      */
3270     if ((PerlIOBase(f)->flags & PERLIO_F_CANWRITE)) {
3271         if (PerlSIO_fflush(stdio) != 0)
3272             return EOF;
3273     }
3274     c = PerlSIO_fgetc(stdio);
3275     if (c == EOF)
3276         return EOF;
3277
3278 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
3279
3280 #ifdef STDIO_BUFFER_WRITABLE
3281     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
3282         /* Fake ungetc() to the real buffer in case system's ungetc
3283            goes elsewhere
3284          */
3285         STDCHAR *base = (STDCHAR*)PerlSIO_get_base(stdio);
3286         SSize_t cnt   = PerlSIO_get_cnt(stdio);
3287         STDCHAR *ptr  = (STDCHAR*)PerlSIO_get_ptr(stdio);
3288         if (ptr == base+1) {
3289             *--ptr = (STDCHAR) c;
3290             PerlIOStdio_set_ptrcnt(aTHX_ f,ptr,cnt+1);
3291             if (PerlSIO_feof(stdio))
3292                 PerlSIO_clearerr(stdio);
3293             return 0;
3294         }
3295     }
3296     else
3297 #endif
3298     if (PerlIO_has_cntptr(f)) {
3299         STDCHAR ch = c;
3300         if (PerlIOStdio_unread(aTHX_ f,&ch,1) == 1) {
3301             return 0;
3302         }
3303     }
3304 #endif
3305
3306 #if defined(VMS)
3307     /* An ungetc()d char is handled separately from the regular
3308      * buffer, so we stuff it in the buffer ourselves.
3309      * Should never get called as should hit code above
3310      */
3311     *(--((*stdio)->_ptr)) = (unsigned char) c;
3312     (*stdio)->_cnt++;
3313 #else
3314     /* If buffer snoop scheme above fails fall back to
3315        using ungetc().
3316      */
3317     if (PerlSIO_ungetc(c, stdio) != c)
3318         return EOF;
3319 #endif
3320     return 0;
3321 }
3322
3323
3324
3325 PERLIO_FUNCS_DECL(PerlIO_stdio) = {
3326     sizeof(PerlIO_funcs),
3327     "stdio",
3328     sizeof(PerlIOStdio),
3329     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3330     PerlIOStdio_pushed,
3331     PerlIOBase_popped,
3332     PerlIOStdio_open,
3333     PerlIOBase_binmode,         /* binmode */
3334     NULL,
3335     PerlIOStdio_fileno,
3336     PerlIOStdio_dup,
3337     PerlIOStdio_read,
3338     PerlIOStdio_unread,
3339     PerlIOStdio_write,
3340     PerlIOStdio_seek,
3341     PerlIOStdio_tell,
3342     PerlIOStdio_close,
3343     PerlIOStdio_flush,
3344     PerlIOStdio_fill,
3345     PerlIOStdio_eof,
3346     PerlIOStdio_error,
3347     PerlIOStdio_clearerr,
3348     PerlIOStdio_setlinebuf,
3349 #ifdef FILE_base
3350     PerlIOStdio_get_base,
3351     PerlIOStdio_get_bufsiz,
3352 #else
3353     NULL,
3354     NULL,
3355 #endif
3356 #ifdef USE_STDIO_PTR
3357     PerlIOStdio_get_ptr,
3358     PerlIOStdio_get_cnt,
3359 #   if defined(HAS_FAST_STDIO) && defined(USE_FAST_STDIO)
3360     PerlIOStdio_set_ptrcnt,
3361 #   else
3362     NULL,
3363 #   endif /* HAS_FAST_STDIO && USE_FAST_STDIO */
3364 #else
3365     NULL,
3366     NULL,
3367     NULL,
3368 #endif /* USE_STDIO_PTR */
3369 };
3370
3371 /* Note that calls to PerlIO_exportFILE() are reversed using
3372  * PerlIO_releaseFILE(), not importFILE. */
3373 FILE *
3374 PerlIO_exportFILE(PerlIO * f, const char *mode)
3375 {
3376     dTHX;
3377     FILE *stdio = NULL;
3378     if (PerlIOValid(f)) {
3379         char buf[8];
3380         PerlIO_flush(f);
3381         if (!mode || !*mode) {
3382             mode = PerlIO_modestr(f, buf);
3383         }
3384         stdio = PerlSIO_fdopen(PerlIO_fileno(f), mode);
3385         if (stdio) {
3386             PerlIOl *l = *f;
3387             PerlIO *f2;
3388             /* De-link any lower layers so new :stdio sticks */
3389             *f = NULL;
3390             if ((f2 = PerlIO_push(aTHX_ f, PERLIO_FUNCS_CAST(&PerlIO_stdio), buf, Nullsv))) {
3391                 PerlIOStdio *s = PerlIOSelf((f = f2), PerlIOStdio);
3392                 s->stdio = stdio;
3393                 /* Link previous lower layers under new one */
3394                 *PerlIONext(f) = l;
3395             }
3396             else {
3397                 /* restore layers list */
3398                 *f = l;
3399             }
3400         }
3401     }
3402     return stdio;
3403 }
3404
3405
3406 FILE *
3407 PerlIO_findFILE(PerlIO *f)
3408 {
3409     PerlIOl *l = *f;
3410     while (l) {
3411         if (l->tab == &PerlIO_stdio) {
3412             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3413             return s->stdio;
3414         }
3415         l = *PerlIONext(&l);
3416     }
3417     /* Uses fallback "mode" via PerlIO_modestr() in PerlIO_exportFILE */
3418     return PerlIO_exportFILE(f, Nullch);
3419 }
3420
3421 /* Use this to reverse PerlIO_exportFILE calls. */
3422 void
3423 PerlIO_releaseFILE(PerlIO *p, FILE *f)
3424 {
3425     dVAR;
3426     PerlIOl *l;
3427     while ((l = *p)) {
3428         if (l->tab == &PerlIO_stdio) {
3429             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3430             if (s->stdio == f) {
3431                 dTHX;
3432                 PerlIO_pop(aTHX_ p);
3433                 return;
3434             }
3435         }
3436         p = PerlIONext(p);
3437     }
3438     return;
3439 }
3440
3441 /*--------------------------------------------------------------------------------------*/
3442 /*
3443  * perlio buffer layer
3444  */
3445
3446 IV
3447 PerlIOBuf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3448 {
3449     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3450     const int fd = PerlIO_fileno(f);
3451     if (fd >= 0 && PerlLIO_isatty(fd)) {
3452         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF | PERLIO_F_TTY;
3453     }
3454     if (*PerlIONext(f)) {
3455         const Off_t posn = PerlIO_tell(PerlIONext(f));
3456         if (posn != (Off_t) - 1) {
3457             b->posn = posn;
3458         }
3459     }
3460     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3461 }
3462
3463 PerlIO *
3464 PerlIOBuf_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
3465                IV n, const char *mode, int fd, int imode, int perm,
3466                PerlIO *f, int narg, SV **args)
3467 {
3468     if (PerlIOValid(f)) {
3469         PerlIO *next = PerlIONext(f);
3470         PerlIO_funcs *tab =
3471              PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIOBase(next)->tab);
3472         if (tab && tab->Open)
3473              next =
3474                   (*tab->Open)(aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3475                                next, narg, args);
3476         if (!next || (*PerlIOBase(f)->tab->Pushed) (aTHX_ f, mode, PerlIOArg, self) != 0) {
3477             return NULL;
3478         }
3479     }
3480     else {
3481         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIO_default_btm());
3482         int init = 0;
3483         if (*mode == IoTYPE_IMPLICIT) {
3484             init = 1;
3485             /*
3486              * mode++;
3487              */
3488         }
3489         if (tab && tab->Open)
3490              f = (*tab->Open)(aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3491                               f, narg, args);
3492         else
3493              SETERRNO(EINVAL, LIB_INVARG);
3494         if (f) {
3495             if (PerlIO_push(aTHX_ f, self, mode, PerlIOArg) == 0) {
3496                 /*
3497                  * if push fails during open, open fails. close will pop us.
3498                  */
3499                 PerlIO_close (f);
3500                 return NULL;
3501             } else {
3502                 fd = PerlIO_fileno(f);
3503                 if (init && fd == 2) {
3504                     /*
3505                      * Initial stderr is unbuffered
3506                      */
3507                     PerlIOBase(f)->flags |= PERLIO_F_UNBUF;
3508                 }
3509 #ifdef PERLIO_USING_CRLF
3510 #  ifdef PERLIO_IS_BINMODE_FD
3511                 if (PERLIO_IS_BINMODE_FD(fd))
3512                     PerlIO_binmode(aTHX_ f,  '<'/*not used*/, O_BINARY, Nullch);
3513                 else
3514 #  endif
3515                 /*
3516                  * do something about failing setmode()? --jhi
3517                  */
3518                 PerlLIO_setmode(fd, O_BINARY);
3519 #endif
3520             }
3521         }
3522     }
3523     return f;
3524 }
3525
3526 /*
3527  * This "flush" is akin to sfio's sync in that it handles files in either
3528  * read or write state
3529  */
3530 IV
3531 PerlIOBuf_flush(pTHX_ PerlIO *f)
3532 {
3533     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3534     int code = 0;
3535     PerlIO *n = PerlIONext(f);
3536     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF) {
3537         /*
3538          * write() the buffer
3539          */
3540         const STDCHAR *buf = b->buf;
3541         const STDCHAR *p = buf;
3542         while (p < b->ptr) {
3543             SSize_t count = PerlIO_write(n, p, b->ptr - p);
3544             if (count > 0) {
3545                 p += count;
3546             }
3547             else if (count < 0 || PerlIO_error(n)) {
3548                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3549                 code = -1;
3550                 break;
3551             }
3552         }
3553         b->posn += (p - buf);
3554     }
3555     else if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3556         STDCHAR *buf = PerlIO_get_base(f);
3557         /*
3558          * Note position change
3559          */
3560         b->posn += (b->ptr - buf);
3561         if (b->ptr < b->end) {
3562             /* We did not consume all of it - try and seek downstream to
3563                our logical position
3564              */
3565             if (PerlIOValid(n) && PerlIO_seek(n, b->posn, SEEK_SET) == 0) {
3566                 /* Reload n as some layers may pop themselves on seek */
3567                 b->posn = PerlIO_tell(n = PerlIONext(f));
3568             }
3569             else {
3570                 /* Seek failed (e.g. pipe or tty). Do NOT clear buffer or pre-read
3571                    data is lost for good - so return saying "ok" having undone
3572                    the position adjust
3573                  */
3574                 b->posn -= (b->ptr - buf);
3575                 return code;
3576             }
3577         }
3578     }
3579     b->ptr = b->end = b->buf;
3580     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3581     /* We check for Valid because of dubious decision to make PerlIO_flush(NULL) flush all */
3582     if (PerlIOValid(n) && PerlIO_flush(n) != 0)
3583         code = -1;
3584     return code;
3585 }
3586
3587 IV
3588 PerlIOBuf_fill(pTHX_ PerlIO *f)
3589 {
3590     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3591     PerlIO *n = PerlIONext(f);
3592     SSize_t avail;
3593     /*
3594      * Down-stream flush is defined not to loose read data so is harmless.
3595      * we would not normally be fill'ing if there was data left in anycase.
3596      */
3597     if (PerlIO_flush(f) != 0)
3598         return -1;
3599     if (PerlIOBase(f)->flags & PERLIO_F_TTY)
3600         PerlIOBase_flush_linebuf(aTHX);
3601
3602     if (!b->buf)
3603         PerlIO_get_base(f);     /* allocate via vtable */
3604
3605     b->ptr = b->end = b->buf;
3606
3607     if (!PerlIOValid(n)) {
3608         PerlIOBase(f)->flags |= PERLIO_F_EOF;
3609         return -1;
3610     }
3611
3612     if (PerlIO_fast_gets(n)) {
3613         /*
3614          * Layer below is also buffered. We do _NOT_ want to call its
3615          * ->Read() because that will loop till it gets what we asked for
3616          * which may hang on a pipe etc. Instead take anything it has to
3617          * hand, or ask it to fill _once_.
3618          */
3619         avail = PerlIO_get_cnt(n);
3620         if (avail <= 0) {
3621             avail = PerlIO_fill(n);
3622             if (avail == 0)
3623                 avail = PerlIO_get_cnt(n);
3624             else {
3625                 if (!PerlIO_error(n) && PerlIO_eof(n))
3626                     avail = 0;
3627             }
3628         }
3629         if (avail > 0) {
3630             STDCHAR *ptr = PerlIO_get_ptr(n);
3631             SSize_t cnt = avail;
3632             if (avail > (SSize_t)b->bufsiz)
3633                 avail = b->bufsiz;
3634             Copy(ptr, b->buf, avail, STDCHAR);
3635             PerlIO_set_ptrcnt(n, ptr + avail, cnt - avail);
3636         }
3637     }
3638     else {
3639         avail = PerlIO_read(n, b->ptr, b->bufsiz);
3640     }
3641     if (avail <= 0) {
3642         if (avail == 0)
3643             PerlIOBase(f)->flags |= PERLIO_F_EOF;
3644         else
3645             PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3646         return -1;
3647     }
3648     b->end = b->buf + avail;
3649     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3650     return 0;
3651 }
3652
3653 SSize_t
3654 PerlIOBuf_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3655 {
3656     if (PerlIOValid(f)) {
3657         const PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3658         if (!b->ptr)
3659             PerlIO_get_base(f);
3660         return PerlIOBase_read(aTHX_ f, vbuf, count);
3661     }
3662     return 0;
3663 }
3664
3665 SSize_t
3666 PerlIOBuf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3667 {
3668     const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3669     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3670     SSize_t unread = 0;
3671     SSize_t avail;
3672     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3673         PerlIO_flush(f);
3674     if (!b->buf)
3675         PerlIO_get_base(f);
3676     if (b->buf) {
3677         if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3678             /*
3679              * Buffer is already a read buffer, we can overwrite any chars
3680              * which have been read back to buffer start
3681              */
3682             avail = (b->ptr - b->buf);
3683         }
3684         else {
3685             /*
3686              * Buffer is idle, set it up so whole buffer is available for
3687              * unread
3688              */
3689             avail = b->bufsiz;
3690             b->end = b->buf + avail;
3691             b->ptr = b->end;
3692             PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3693             /*
3694              * Buffer extends _back_ from where we are now
3695              */
3696             b->posn -= b->bufsiz;
3697         }
3698         if (avail > (SSize_t) count) {
3699             /*
3700              * If we have space for more than count, just move count
3701              */
3702             avail = count;
3703         }
3704         if (avail > 0) {
3705             b->ptr -= avail;
3706             buf -= avail;
3707             /*
3708              * In simple stdio-like ungetc() case chars will be already
3709              * there
3710              */
3711             if (buf != b->ptr) {
3712                 Copy(buf, b->ptr, avail, STDCHAR);
3713             }
3714             count -= avail;
3715             unread += avail;
3716             PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3717         }
3718     }
3719     if (count > 0) {
3720         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
3721     }
3722     return unread;
3723 }
3724
3725 SSize_t
3726 PerlIOBuf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3727 {
3728     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3729     const STDCHAR *buf = (const STDCHAR *) vbuf;
3730     const STDCHAR *flushptr = buf;
3731     Size_t written = 0;
3732     if (!b->buf)
3733         PerlIO_get_base(f);
3734     if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
3735         return 0;
3736     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3737         if (PerlIO_flush(f) != 0) {
3738             return 0;
3739         }
3740     }   
3741     if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
3742         flushptr = buf + count;
3743         while (flushptr > buf && *(flushptr - 1) != '\n')
3744             --flushptr;
3745     }
3746     while (count > 0) {
3747         SSize_t avail = b->bufsiz - (b->ptr - b->buf);
3748         if ((SSize_t) count < avail)
3749             avail = count;
3750         if (flushptr > buf && flushptr <= buf + avail)
3751             avail = flushptr - buf;
3752         PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
3753         if (avail) {
3754             Copy(buf, b->ptr, avail, STDCHAR);
3755             count -= avail;
3756             buf += avail;
3757             written += avail;
3758             b->ptr += avail;
3759             if (buf == flushptr)
3760                 PerlIO_flush(f);
3761         }
3762         if (b->ptr >= (b->buf + b->bufsiz))
3763             PerlIO_flush(f);
3764     }
3765     if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
3766         PerlIO_flush(f);
3767     return written;
3768 }
3769
3770 IV
3771 PerlIOBuf_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3772 {
3773     IV code;
3774     if ((code = PerlIO_flush(f)) == 0) {
3775         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3776         code = PerlIO_seek(PerlIONext(f), offset, whence);
3777         if (code == 0) {
3778             PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3779             b->posn = PerlIO_tell(PerlIONext(f));
3780         }
3781     }
3782     return code;
3783 }
3784
3785 Off_t
3786 PerlIOBuf_tell(pTHX_ PerlIO *f)
3787 {
3788     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3789     /*
3790      * b->posn is file position where b->buf was read, or will be written
3791      */
3792     Off_t posn = b->posn;
3793     if ((PerlIOBase(f)->flags & PERLIO_F_APPEND) &&
3794         (PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
3795 #if 1
3796         /* As O_APPEND files are normally shared in some sense it is better
3797            to flush :
3798          */     
3799         PerlIO_flush(f);
3800 #else   
3801         /* when file is NOT shared then this is sufficient */
3802         PerlIO_seek(PerlIONext(f),0, SEEK_END);
3803 #endif
3804         posn = b->posn = PerlIO_tell(PerlIONext(f));
3805     }
3806     if (b->buf) {
3807         /*
3808          * If buffer is valid adjust position by amount in buffer
3809          */
3810         posn += (b->ptr - b->buf);
3811     }
3812     return posn;
3813 }
3814
3815 IV
3816 PerlIOBuf_popped(pTHX_ PerlIO *f)
3817 {
3818     const IV code = PerlIOBase_popped(aTHX_ f);
3819     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3820     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3821         Safefree(b->buf);
3822     }
3823     b->buf = NULL;
3824     b->ptr = b->end = b->buf;
3825     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3826     return code;
3827 }
3828
3829 IV
3830 PerlIOBuf_close(pTHX_ PerlIO *f)
3831 {
3832     const IV code = PerlIOBase_close(aTHX_ f);
3833     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3834     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3835         Safefree(b->buf);
3836     }
3837     b->buf = NULL;
3838     b->ptr = b->end = b->buf;
3839     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3840     return code;
3841 }
3842
3843 STDCHAR *
3844 PerlIOBuf_get_ptr(pTHX_ PerlIO *f)
3845 {
3846     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3847     if (!b->buf)
3848         PerlIO_get_base(f);
3849     return b->ptr;
3850 }
3851
3852 SSize_t
3853 PerlIOBuf_get_cnt(pTHX_ PerlIO *f)
3854 {
3855     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3856     if (!b->buf)
3857         PerlIO_get_base(f);
3858     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF)
3859         return (b->end - b->ptr);
3860     return 0;
3861 }
3862
3863 STDCHAR *
3864 PerlIOBuf_get_base(pTHX_ PerlIO *f)
3865 {
3866     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3867     if (!b->buf) {
3868         if (!b->bufsiz)
3869             b->bufsiz = 4096;
3870         b->buf = Newz('B',b->buf,b->bufsiz, STDCHAR);
3871         if (!b->buf) {
3872             b->buf = (STDCHAR *) & b->oneword;
3873             b->bufsiz = sizeof(b->oneword);
3874         }
3875         b->ptr = b->buf;
3876         b->end = b->ptr;
3877     }
3878     return b->buf;
3879 }
3880
3881 Size_t
3882 PerlIOBuf_bufsiz(pTHX_ PerlIO *f)
3883 {
3884     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3885     if (!b->buf)
3886         PerlIO_get_base(f);
3887     return (b->end - b->buf);
3888 }
3889
3890 void
3891 PerlIOBuf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3892 {
3893     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3894     if (!b->buf)
3895         PerlIO_get_base(f);
3896     b->ptr = ptr;
3897     if (PerlIO_get_cnt(f) != cnt || b->ptr < b->buf) {
3898         assert(PerlIO_get_cnt(f) == cnt);
3899         assert(b->ptr >= b->buf);
3900     }
3901     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3902 }
3903
3904 PerlIO *
3905 PerlIOBuf_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
3906 {
3907  return PerlIOBase_dup(aTHX_ f, o, param, flags);
3908 }
3909
3910
3911
3912 PERLIO_FUNCS_DECL(PerlIO_perlio) = {
3913     sizeof(PerlIO_funcs),
3914     "perlio",
3915     sizeof(PerlIOBuf),
3916     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3917     PerlIOBuf_pushed,
3918     PerlIOBuf_popped,
3919     PerlIOBuf_open,
3920     PerlIOBase_binmode,         /* binmode */
3921     NULL,
3922     PerlIOBase_fileno,
3923     PerlIOBuf_dup,
3924     PerlIOBuf_read,
3925     PerlIOBuf_unread,
3926     PerlIOBuf_write,
3927     PerlIOBuf_seek,
3928     PerlIOBuf_tell,
3929     PerlIOBuf_close,
3930     PerlIOBuf_flush,
3931     PerlIOBuf_fill,
3932     PerlIOBase_eof,
3933     PerlIOBase_error,
3934     PerlIOBase_clearerr,
3935     PerlIOBase_setlinebuf,
3936     PerlIOBuf_get_base,
3937     PerlIOBuf_bufsiz,
3938     PerlIOBuf_get_ptr,
3939     PerlIOBuf_get_cnt,
3940     PerlIOBuf_set_ptrcnt,
3941 };
3942
3943 /*--------------------------------------------------------------------------------------*/
3944 /*
3945  * Temp layer to hold unread chars when cannot do it any other way
3946  */
3947
3948 IV
3949 PerlIOPending_fill(pTHX_ PerlIO *f)
3950 {
3951     /*
3952      * Should never happen
3953      */
3954     PerlIO_flush(f);
3955     return 0;
3956 }
3957
3958 IV
3959 PerlIOPending_close(pTHX_ PerlIO *f)
3960 {
3961     /*
3962      * A tad tricky - flush pops us, then we close new top
3963      */
3964     PerlIO_flush(f);
3965     return PerlIO_close(f);
3966 }
3967
3968 IV
3969 PerlIOPending_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3970 {
3971     /*
3972      * A tad tricky - flush pops us, then we seek new top
3973      */
3974     PerlIO_flush(f);
3975     return PerlIO_seek(f, offset, whence);
3976 }
3977
3978
3979 IV
3980 PerlIOPending_flush(pTHX_ PerlIO *f)
3981 {
3982     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3983     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3984         Safefree(b->buf);
3985         b->buf = NULL;
3986     }
3987     PerlIO_pop(aTHX_ f);
3988     return 0;
3989 }
3990
3991 void
3992 PerlIOPending_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3993 {
3994     if (cnt <= 0) {
3995         PerlIO_flush(f);
3996     }
3997     else {
3998         PerlIOBuf_set_ptrcnt(aTHX_ f, ptr, cnt);
3999     }
4000 }
4001
4002 IV
4003 PerlIOPending_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
4004 {
4005     const IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
4006     PerlIOl *l = PerlIOBase(f);
4007     /*
4008      * Our PerlIO_fast_gets must match what we are pushed on, or sv_gets()
4009      * etc. get muddled when it changes mid-string when we auto-pop.
4010      */
4011     l->flags = (l->flags & ~(PERLIO_F_FASTGETS | PERLIO_F_UTF8)) |
4012         (PerlIOBase(PerlIONext(f))->
4013          flags & (PERLIO_F_FASTGETS | PERLIO_F_UTF8));
4014     return code;
4015 }
4016
4017 SSize_t
4018 PerlIOPending_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
4019 {
4020     SSize_t avail = PerlIO_get_cnt(f);
4021     SSize_t got = 0;
4022     if ((SSize_t)count < avail)
4023         avail = count;
4024     if (avail > 0)
4025         got = PerlIOBuf_read(aTHX_ f, vbuf, avail);
4026     if (got >= 0 && got < (SSize_t)count) {
4027         const SSize_t more =
4028             PerlIO_read(f, ((STDCHAR *) vbuf) + got, count - got);
4029         if (more >= 0 || got == 0)
4030             got += more;
4031     }
4032     return got;
4033 }
4034
4035 PERLIO_FUNCS_DECL(PerlIO_pending) = {
4036     sizeof(PerlIO_funcs),
4037     "pending",
4038     sizeof(PerlIOBuf),
4039     PERLIO_K_BUFFERED|PERLIO_K_RAW,  /* not sure about RAW here */
4040     PerlIOPending_pushed,
4041     PerlIOBuf_popped,
4042     NULL,
4043     PerlIOBase_binmode,         /* binmode */
4044     NULL,
4045     PerlIOBase_fileno,
4046     PerlIOBuf_dup,
4047     PerlIOPending_read,
4048     PerlIOBuf_unread,
4049     PerlIOBuf_write,
4050     PerlIOPending_seek,
4051     PerlIOBuf_tell,
4052     PerlIOPending_close,
4053     PerlIOPending_flush,
4054     PerlIOPending_fill,
4055     PerlIOBase_eof,
4056     PerlIOBase_error,
4057     PerlIOBase_clearerr,
4058     PerlIOBase_setlinebuf,
4059     PerlIOBuf_get_base,
4060     PerlIOBuf_bufsiz,
4061     PerlIOBuf_get_ptr,
4062     PerlIOBuf_get_cnt,
4063     PerlIOPending_set_ptrcnt,
4064 };
4065
4066
4067
4068 /*--------------------------------------------------------------------------------------*/
4069 /*
4070  * crlf - translation On read translate CR,LF to "\n" we do this by
4071  * overriding ptr/cnt entries to hand back a line at a time and keeping a
4072  * record of which nl we "lied" about. On write translate "\n" to CR,LF
4073  */
4074
4075 typedef struct {
4076     PerlIOBuf base;             /* PerlIOBuf stuff */
4077     STDCHAR *nl;                /* Position of crlf we "lied" about in the
4078                                  * buffer */
4079 } PerlIOCrlf;
4080
4081 IV
4082 PerlIOCrlf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
4083 {
4084     IV code;
4085     PerlIOBase(f)->flags |= PERLIO_F_CRLF;
4086     code = PerlIOBuf_pushed(aTHX_ f, mode, arg, tab);
4087 #if 0
4088     PerlIO_debug("PerlIOCrlf_pushed f=%p %s %s fl=%08" UVxf "\n",
4089                  f, PerlIOBase(f)->tab->name, (mode) ? mode : "(Null)",
4090                  PerlIOBase(f)->flags);
4091 #endif
4092     {
4093       /* Enable the first CRLF capable layer you can find, but if none
4094        * found, the one we just pushed is fine.  This results in at
4095        * any given moment at most one CRLF-capable layer being enabled
4096        * in the whole layer stack. */
4097          PerlIO *g = PerlIONext(f);
4098          while (g && *g) {
4099               PerlIOl *b = PerlIOBase(g);
4100               if (b && b->tab == &PerlIO_crlf) {
4101                    if (!(b->flags & PERLIO_F_CRLF))
4102                         b->flags |= PERLIO_F_CRLF;
4103                    PerlIO_pop(aTHX_ f);
4104                    return code;
4105               }           
4106               g = PerlIONext(g);
4107          }
4108     }
4109     return code;
4110 }
4111
4112
4113 SSize_t
4114 PerlIOCrlf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4115 {
4116     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
4117     if (c->nl) {
4118         *(c->nl) = 0xd;
4119         c->nl = NULL;
4120     }
4121     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
4122         return PerlIOBuf_unread(aTHX_ f, vbuf, count);
4123     else {
4124         const STDCHAR *buf = (const STDCHAR *) vbuf + count;
4125         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4126         SSize_t unread = 0;
4127         if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
4128             PerlIO_flush(f);
4129         if (!b->buf)
4130             PerlIO_get_base(f);
4131         if (b->buf) {
4132             if (!(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4133                 b->end = b->ptr = b->buf + b->bufsiz;
4134                 PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
4135                 b->posn -= b->bufsiz;
4136             }
4137             while (count > 0 && b->ptr > b->buf) {
4138                 int ch = *--buf;
4139                 if (ch == '\n') {
4140                     if (b->ptr - 2 >= b->buf) {
4141                         *--(b->ptr) = 0xa;
4142                         *--(b->ptr) = 0xd;
4143                         unread++;
4144                         count--;
4145                     }
4146                     else {
4147                         buf++;
4148                         break;
4149                     }
4150                 }
4151                 else {
4152                     *--(b->ptr) = ch;
4153                     unread++;
4154                     count--;
4155                 }
4156             }
4157         }
4158         return unread;
4159     }
4160 }
4161
4162 SSize_t
4163 PerlIOCrlf_get_cnt(pTHX_ PerlIO *f)
4164 {
4165     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4166     if (!b->buf)
4167         PerlIO_get_base(f);
4168     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
4169         PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
4170         if ((PerlIOBase(f)->flags & PERLIO_F_CRLF) && (!c->nl || *c->nl == 0xd)) {
4171             STDCHAR *nl = (c->nl) ? c->nl : b->ptr;
4172           scan:
4173             while (nl < b->end && *nl != 0xd)
4174                 nl++;
4175             if (nl < b->end && *nl == 0xd) {
4176               test:
4177                 if (nl + 1 < b->end) {
4178                     if (nl[1] == 0xa) {
4179                         *nl = '\n';
4180                         c->nl = nl;
4181                     }
4182                     else {
4183                         /*
4184                          * Not CR,LF but just CR
4185                          */
4186                         nl++;
4187                         goto scan;
4188                     }
4189                 }
4190                 else {
4191                     /*
4192                      * Blast - found CR as last char in buffer
4193                      */
4194
4195                     if (b->ptr < nl) {
4196                         /*
4197                          * They may not care, defer work as long as
4198                          * possible
4199                          */
4200                         c->nl = nl;
4201                         return (nl - b->ptr);
4202                     }
4203                     else {
4204                         int code;
4205                         b->ptr++;       /* say we have read it as far as
4206                                          * flush() is concerned */
4207                         b->buf++;       /* Leave space in front of buffer */
4208                         /* Note as we have moved buf up flush's
4209                            posn += ptr-buf
4210                            will naturally make posn point at CR
4211                          */
4212                         b->bufsiz--;    /* Buffer is thus smaller */
4213                         code = PerlIO_fill(f);  /* Fetch some more */
4214                         b->bufsiz++;    /* Restore size for next time */
4215                         b->buf--;       /* Point at space */
4216                         b->ptr = nl = b->buf;   /* Which is what we hand
4217                                                  * off */
4218                         *nl = 0xd;      /* Fill in the CR */
4219                         if (code == 0)
4220                             goto test;  /* fill() call worked */
4221                         /*
4222                          * CR at EOF - just fall through
4223                          */
4224                         /* Should we clear EOF though ??? */
4225                     }
4226                 }
4227             }
4228         }
4229         return (((c->nl) ? (c->nl + 1) : b->end) - b->ptr);
4230     }
4231     return 0;
4232 }
4233
4234 void
4235 PerlIOCrlf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
4236 {
4237     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4238     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
4239     if (!b->buf)
4240         PerlIO_get_base(f);
4241     if (!ptr) {
4242         if (c->nl) {
4243             ptr = c->nl + 1;
4244             if (ptr == b->end && *c->nl == 0xd) {
4245                 /* Defered CR at end of buffer case - we lied about count */
4246                 ptr--;
4247             }
4248         }
4249         else {
4250             ptr = b->end;
4251         }
4252         ptr -= cnt;
4253     }
4254     else {
4255 #if 0
4256         /*
4257          * Test code - delete when it works ...
4258          */
4259         IV flags = PerlIOBase(f)->flags;
4260         STDCHAR *chk = (c->nl) ? (c->nl+1) : b->end;
4261         if (ptr+cnt == c->nl && c->nl+1 == b->end && *c->nl == 0xd) {
4262           /* Defered CR at end of buffer case - we lied about count */
4263           chk--;
4264         }
4265         chk -= cnt;
4266
4267         if (ptr != chk ) {
4268             Perl_croak(aTHX_ "ptr wrong %p != %p fl=%08" UVxf
4269                        " nl=%p e=%p for %d", ptr, chk, flags, c->nl,
4270                        b->end, cnt);
4271         }
4272 #endif
4273     }
4274     if (c->nl) {
4275         if (ptr > c->nl) {
4276             /*
4277              * They have taken what we lied about
4278              */
4279             *(c->nl) = 0xd;
4280             c->nl = NULL;
4281             ptr++;
4282         }
4283     }
4284     b->ptr = ptr;
4285     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
4286 }
4287
4288 SSize_t
4289 PerlIOCrlf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4290 {
4291     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
4292         return PerlIOBuf_write(aTHX_ f, vbuf, count);
4293     else {
4294         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4295         const STDCHAR *buf = (const STDCHAR *) vbuf;
4296         const STDCHAR *ebuf = buf + count;
4297         if (!b->buf)
4298             PerlIO_get_base(f);
4299         if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
4300             return 0;
4301         while (buf < ebuf) {
4302             STDCHAR *eptr = b->buf + b->bufsiz;
4303             PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
4304             while (buf < ebuf && b->ptr < eptr) {
4305                 if (*buf == '\n') {
4306                     if ((b->ptr + 2) > eptr) {
4307                         /*
4308                          * Not room for both
4309                          */
4310                         PerlIO_flush(f);
4311                         break;
4312                     }
4313                     else {
4314                         *(b->ptr)++ = 0xd;      /* CR */
4315                         *(b->ptr)++ = 0xa;      /* LF */
4316                         buf++;
4317                         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
4318                             PerlIO_flush(f);
4319                             break;
4320                         }
4321                     }
4322                 }
4323                 else {
4324                     int ch = *buf++;
4325                     *(b->ptr)++ = ch;
4326                 }
4327                 if (b->ptr >= eptr) {
4328                     PerlIO_flush(f);
4329                     break;
4330                 }
4331             }
4332         }
4333         if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
4334             PerlIO_flush(f);
4335         return (buf - (STDCHAR *) vbuf);
4336     }
4337 }
4338
4339 IV
4340 PerlIOCrlf_flush(pTHX_ PerlIO *f)
4341 {
4342     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
4343     if (c->nl) {
4344         *(c->nl) = 0xd;
4345         c->nl = NULL;
4346     }
4347     return PerlIOBuf_flush(aTHX_ f);
4348 }
4349
4350 IV
4351 PerlIOCrlf_binmode(pTHX_ PerlIO *f)
4352 {
4353     if ((PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
4354         /* In text mode - flush any pending stuff and flip it */
4355         PerlIOBase(f)->flags &= ~PERLIO_F_CRLF;
4356 #ifndef PERLIO_USING_CRLF
4357         /* CRLF is unusual case - if this is just the :crlf layer pop it */
4358         if (PerlIOBase(f)->tab == &PerlIO_crlf) {
4359                 PerlIO_pop(aTHX_ f);
4360         }
4361 #endif
4362     }
4363     return 0;
4364 }
4365
4366 PERLIO_FUNCS_DECL(PerlIO_crlf) = {
4367     sizeof(PerlIO_funcs),
4368     "crlf",
4369     sizeof(PerlIOCrlf),
4370     PERLIO_K_BUFFERED | PERLIO_K_CANCRLF | PERLIO_K_RAW,
4371     PerlIOCrlf_pushed,
4372     PerlIOBuf_popped,         /* popped */
4373     PerlIOBuf_open,
4374     PerlIOCrlf_binmode,       /* binmode */
4375     NULL,
4376     PerlIOBase_fileno,
4377     PerlIOBuf_dup,
4378     PerlIOBuf_read,             /* generic read works with ptr/cnt lies */
4379     PerlIOCrlf_unread,          /* Put CR,LF in buffer for each '\n' */
4380     PerlIOCrlf_write,           /* Put CR,LF in buffer for each '\n' */
4381     PerlIOBuf_seek,
4382     PerlIOBuf_tell,
4383     PerlIOBuf_close,
4384     PerlIOCrlf_flush,
4385     PerlIOBuf_fill,
4386     PerlIOBase_eof,
4387     PerlIOBase_error,
4388     PerlIOBase_clearerr,
4389     PerlIOBase_setlinebuf,
4390     PerlIOBuf_get_base,
4391     PerlIOBuf_bufsiz,
4392     PerlIOBuf_get_ptr,
4393     PerlIOCrlf_get_cnt,
4394     PerlIOCrlf_set_ptrcnt,
4395 };
4396
4397 #ifdef HAS_MMAP
4398 /*--------------------------------------------------------------------------------------*/
4399 /*
4400  * mmap as "buffer" layer
4401  */
4402
4403 typedef struct {
4404     PerlIOBuf base;             /* PerlIOBuf stuff */
4405     Mmap_t mptr;                /* Mapped address */
4406     Size_t len;                 /* mapped length */
4407     STDCHAR *bbuf;              /* malloced buffer if map fails */
4408 } PerlIOMmap;
4409
4410 IV
4411 PerlIOMmap_map(pTHX_ PerlIO *f)
4412 {
4413     dVAR;
4414     PerlIOMmap * const m = PerlIOSelf(f, PerlIOMmap);
4415     const IV flags = PerlIOBase(f)->flags;
4416     IV code = 0;
4417     if (m->len)
4418         abort();
4419     if (flags & PERLIO_F_CANREAD) {
4420         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4421         const int fd = PerlIO_fileno(f);
4422         Stat_t st;
4423         code = Fstat(fd, &st);
4424         if (code == 0 && S_ISREG(st.st_mode)) {
4425             SSize_t len = st.st_size - b->posn;
4426             if (len > 0) {
4427                 Off_t posn;
4428                 if (PL_mmap_page_size <= 0)
4429                   Perl_croak(aTHX_ "panic: bad pagesize %" IVdf,
4430                              PL_mmap_page_size);
4431                 if (b->posn < 0) {
4432                     /*
4433                      * This is a hack - should never happen - open should
4434                      * have set it !
4435                      */
4436                     b->posn = PerlIO_tell(PerlIONext(f));
4437                 }
4438                 posn = (b->posn / PL_mmap_page_size) * PL_mmap_page_size;
4439                 len = st.st_size - posn;
4440                 m->mptr = mmap(NULL, len, PROT_READ, MAP_SHARED, fd, posn);
4441                 if (m->mptr && m->mptr != (Mmap_t) - 1) {
4442 #if 0 && defined(HAS_MADVISE) && defined(MADV_SEQUENTIAL)
4443                     madvise(m->mptr, len, MADV_SEQUENTIAL);
4444 #endif
4445 #if 0 && defined(HAS_MADVISE) && defined(MADV_WILLNEED)
4446                     madvise(m->mptr, len, MADV_WILLNEED);
4447 #endif
4448                     PerlIOBase(f)->flags =
4449                         (flags & ~PERLIO_F_EOF) | PERLIO_F_RDBUF;
4450                     b->end = ((STDCHAR *) m->mptr) + len;
4451                     b->buf = ((STDCHAR *) m->mptr) + (b->posn - posn);
4452                     b->ptr = b->buf;
4453                     m->len = len;
4454                 }
4455                 else {
4456                     b->buf = NULL;
4457                 }
4458             }
4459             else {
4460                 PerlIOBase(f)->flags =
4461                     flags | PERLIO_F_EOF | PERLIO_F_RDBUF;
4462                 b->buf = NULL;
4463                 b->ptr = b->end = b->ptr;
4464                 code = -1;
4465             }
4466         }
4467     }
4468     return code;
4469 }
4470
4471 IV
4472 PerlIOMmap_unmap(pTHX_ PerlIO *f)
4473 {
4474     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4475     PerlIOBuf *b = &m->base;
4476     IV code = 0;
4477     if (m->len) {
4478         if (b->buf) {
4479             code = munmap(m->mptr, m->len);
4480             b->buf = NULL;
4481             m->len = 0;
4482             m->mptr = NULL;
4483             if (PerlIO_seek(PerlIONext(f), b->posn, SEEK_SET) != 0)
4484                 code = -1;
4485         }
4486         b->ptr = b->end = b->buf;
4487         PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
4488     }
4489     return code;
4490 }
4491
4492 STDCHAR *
4493 PerlIOMmap_get_base(pTHX_ PerlIO *f)
4494 {
4495     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4496     PerlIOBuf *b = &m->base;
4497     if (b->buf && (PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4498         /*
4499          * Already have a readbuffer in progress
4500          */
4501         return b->buf;
4502     }
4503     if (b->buf) {
4504         /*
4505          * We have a write buffer or flushed PerlIOBuf read buffer
4506          */
4507         m->bbuf = b->buf;       /* save it in case we need it again */
4508         b->buf = NULL;          /* Clear to trigger below */
4509     }
4510     if (!b->buf) {
4511         PerlIOMmap_map(aTHX_ f);        /* Try and map it */
4512         if (!b->buf) {
4513             /*
4514              * Map did not work - recover PerlIOBuf buffer if we have one
4515              */
4516             b->buf = m->bbuf;
4517         }
4518     }
4519     b->ptr = b->end = b->buf;
4520     if (b->buf)
4521         return b->buf;
4522     return PerlIOBuf_get_base(aTHX_ f);
4523 }
4524
4525 SSize_t
4526 PerlIOMmap_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4527 {
4528     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4529     PerlIOBuf *b = &m->base;
4530     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
4531         PerlIO_flush(f);
4532     if (b->ptr && (b->ptr - count) >= b->buf
4533         && memEQ(b->ptr - count, vbuf, count)) {
4534         b->ptr -= count;
4535         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
4536         return count;
4537     }
4538     if (m->len) {
4539         /*
4540          * Loose the unwritable mapped buffer
4541          */
4542         PerlIO_flush(f);
4543         /*
4544          * If flush took the "buffer" see if we have one from before
4545          */
4546         if (!b->buf && m->bbuf)
4547             b->buf = m->bbuf;
4548         if (!b->buf) {
4549             PerlIOBuf_get_base(aTHX_ f);
4550             m->bbuf = b->buf;
4551         }
4552     }
4553     return PerlIOBuf_unread(aTHX_ f, vbuf, count);
4554 }
4555
4556 SSize_t
4557 PerlIOMmap_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4558 {
4559     PerlIOMmap * const m = PerlIOSelf(f, PerlIOMmap);
4560     PerlIOBuf * const b = &m->base;
4561
4562     if (!b->buf || !(PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
4563         /*
4564          * No, or wrong sort of, buffer
4565          */
4566         if (m->len) {
4567             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4568                 return 0;
4569         }
4570         /*
4571          * If unmap took the "buffer" see if we have one from before
4572          */
4573         if (!b->buf && m->bbuf)
4574             b->buf = m->bbuf;
4575         if (!b->buf) {
4576             PerlIOBuf_get_base(aTHX_ f);
4577             m->bbuf = b->buf;
4578         }
4579     }
4580     return PerlIOBuf_write(aTHX_ f, vbuf, count);
4581 }
4582
4583 IV
4584 PerlIOMmap_flush(pTHX_ PerlIO *f)
4585 {
4586     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4587     PerlIOBuf *b = &m->base;
4588     IV code = PerlIOBuf_flush(aTHX_ f);
4589     /*
4590      * Now we are "synced" at PerlIOBuf level
4591      */
4592     if (b->buf) {
4593         if (m->len) {
4594             /*
4595              * Unmap the buffer
4596              */
4597             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4598                 code = -1;
4599         }
4600         else {
4601             /*
4602              * We seem to have a PerlIOBuf buffer which was not mapped
4603              * remember it in case we need one later
4604              */
4605             m->bbuf = b->buf;
4606         }
4607     }
4608     return code;
4609 }
4610
4611 IV
4612 PerlIOMmap_fill(pTHX_ PerlIO *f)
4613 {
4614     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4615     IV code = PerlIO_flush(f);
4616     if (code == 0 && !b->buf) {
4617         code = PerlIOMmap_map(aTHX_ f);
4618     }
4619     if (code == 0 && !(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4620         code = PerlIOBuf_fill(aTHX_ f);
4621     }
4622     return code;
4623 }
4624
4625 IV
4626 PerlIOMmap_close(pTHX_ PerlIO *f)
4627 {
4628     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4629     PerlIOBuf *b = &m->base;
4630     IV code = PerlIO_flush(f);
4631     if (m->bbuf) {
4632         b->buf = m->bbuf;
4633         m->bbuf = NULL;
4634         b->ptr = b->end = b->buf;
4635     }
4636     if (PerlIOBuf_close(aTHX_ f) != 0)
4637         code = -1;
4638     return code;
4639 }
4640
4641 PerlIO *
4642 PerlIOMmap_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
4643 {
4644  return PerlIOBase_dup(aTHX_ f, o, param, flags);
4645 }
4646
4647
4648 PERLIO_FUNCS_DECL(PerlIO_mmap) = {
4649     sizeof(PerlIO_funcs),
4650     "mmap",
4651     sizeof(PerlIOMmap),
4652     PERLIO_K_BUFFERED|PERLIO_K_RAW,
4653     PerlIOBuf_pushed,
4654     PerlIOBuf_popped,
4655     PerlIOBuf_open,
4656     PerlIOBase_binmode,         /* binmode */
4657     NULL,
4658     PerlIOBase_fileno,
4659     PerlIOMmap_dup,
4660     PerlIOBuf_read,
4661     PerlIOMmap_unread,
4662     PerlIOMmap_write,
4663     PerlIOBuf_seek,
4664     PerlIOBuf_tell,
4665     PerlIOBuf_close,
4666     PerlIOMmap_flush,
4667     PerlIOMmap_fill,
4668     PerlIOBase_eof,
4669     PerlIOBase_error,
4670     PerlIOBase_clearerr,
4671     PerlIOBase_setlinebuf,
4672     PerlIOMmap_get_base,
4673     PerlIOBuf_bufsiz,
4674     PerlIOBuf_get_ptr,
4675     PerlIOBuf_get_cnt,
4676     PerlIOBuf_set_ptrcnt,
4677 };
4678
4679 #endif                          /* HAS_MMAP */
4680
4681 PerlIO *
4682 Perl_PerlIO_stdin(pTHX)
4683 {
4684     if (!PL_perlio) {
4685         PerlIO_stdstreams(aTHX);
4686     }
4687     return &PL_perlio[1];
4688 }
4689
4690 PerlIO *
4691 Perl_PerlIO_stdout(pTHX)
4692 {
4693     if (!PL_perlio) {
4694         PerlIO_stdstreams(aTHX);
4695     }
4696     return &PL_perlio[2];
4697 }
4698
4699 PerlIO *
4700 Perl_PerlIO_stderr(pTHX)
4701 {
4702     if (!PL_perlio) {
4703         PerlIO_stdstreams(aTHX);
4704     }
4705     return &PL_perlio[3];
4706 }
4707
4708 /*--------------------------------------------------------------------------------------*/
4709
4710 char *
4711 PerlIO_getname(PerlIO *f, char *buf)
4712 {
4713     dTHX;
4714 #ifdef VMS
4715     char *name = NULL;
4716     bool exported = FALSE;
4717     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
4718     if (!stdio) {
4719         stdio = PerlIO_exportFILE(f,0);
4720         exported = TRUE;
4721     }
4722     if (stdio) {
4723         name = fgetname(stdio, buf);
4724         if (exported) PerlIO_releaseFILE(f,stdio);
4725     }
4726     return name;
4727 #else
4728     (void)f;
4729     (void)buf;
4730     Perl_croak(aTHX_ "Don't know how to get file name");
4731     return Nullch;
4732 #endif
4733 }
4734
4735
4736 /*--------------------------------------------------------------------------------------*/
4737 /*
4738  * Functions which can be called on any kind of PerlIO implemented in
4739  * terms of above
4740  */
4741
4742 #undef PerlIO_fdopen
4743 PerlIO *
4744 PerlIO_fdopen(int fd, const char *mode)
4745 {
4746     dTHX;
4747     return PerlIO_openn(aTHX_ Nullch, mode, fd, 0, 0, NULL, 0, NULL);
4748 }
4749
4750 #undef PerlIO_open
4751 PerlIO *
4752 PerlIO_open(const char *path, const char *mode)
4753 {
4754     dTHX;
4755     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4756     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, NULL, 1, &name);
4757 }
4758
4759 #undef Perlio_reopen
4760 PerlIO *
4761 PerlIO_reopen(const char *path, const char *mode, PerlIO *f)
4762 {
4763     dTHX;
4764     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4765     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, f, 1, &name);
4766 }
4767
4768 #undef PerlIO_getc
4769 int
4770 PerlIO_getc(PerlIO *f)
4771 {
4772     dTHX;
4773     STDCHAR buf[1];
4774     if ( 1 == PerlIO_read(f, buf, 1) ) {
4775         return (unsigned char) buf[0];
4776     }
4777     return EOF;
4778 }
4779
4780 #undef PerlIO_ungetc
4781 int
4782 PerlIO_ungetc(PerlIO *f, int ch)
4783 {
4784     dTHX;
4785     if (ch != EOF) {
4786         STDCHAR buf = ch;
4787         if (PerlIO_unread(f, &buf, 1) == 1)
4788             return ch;
4789     }
4790     return EOF;
4791 }
4792
4793 #undef PerlIO_putc
4794 int
4795 PerlIO_putc(PerlIO *f, int ch)
4796 {
4797     dTHX;
4798     STDCHAR buf = ch;
4799     return PerlIO_write(f, &buf, 1);
4800 }
4801
4802 #undef PerlIO_puts
4803 int
4804 PerlIO_puts(PerlIO *f, const char *s)
4805 {
4806     dTHX;
4807     STRLEN len = strlen(s);
4808     return PerlIO_write(f, s, len);
4809 }
4810
4811 #undef PerlIO_rewind
4812 void
4813 PerlIO_rewind(PerlIO *f)
4814 {
4815     dTHX;
4816     PerlIO_seek(f, (Off_t) 0, SEEK_SET);
4817     PerlIO_clearerr(f);
4818 }
4819
4820 #undef PerlIO_vprintf
4821 int
4822 PerlIO_vprintf(PerlIO *f, const char *fmt, va_list ap)
4823 {
4824     dTHX;
4825     SV *sv = newSVpvn("", 0);
4826     char *s;
4827     STRLEN len;
4828     SSize_t wrote;
4829 #ifdef NEED_VA_COPY
4830     va_list apc;
4831     Perl_va_copy(ap, apc);
4832     sv_vcatpvf(sv, fmt, &apc);
4833 #else
4834     sv_vcatpvf(sv, fmt, &ap);
4835 #endif
4836     s = SvPV(sv, len);
4837     wrote = PerlIO_write(f, s, len);
4838     SvREFCNT_dec(sv);
4839     return wrote;
4840 }
4841
4842 #undef PerlIO_printf
4843 int
4844 PerlIO_printf(PerlIO *f, const char *fmt, ...)
4845 {
4846     va_list ap;
4847     int result;
4848     va_start(ap, fmt);
4849     result = PerlIO_vprintf(f, fmt, ap);
4850     va_end(ap);
4851     return result;
4852 }
4853
4854 #undef PerlIO_stdoutf
4855 int
4856 PerlIO_stdoutf(const char *fmt, ...)
4857 {
4858     dTHX;
4859     va_list ap;
4860     int result;
4861     va_start(ap, fmt);
4862     result = PerlIO_vprintf(PerlIO_stdout(), fmt, ap);
4863     va_end(ap);
4864     return result;
4865 }
4866
4867 #undef PerlIO_tmpfile
4868 PerlIO *
4869 PerlIO_tmpfile(void)
4870 {
4871      dTHX;
4872      PerlIO *f = NULL;
4873 #ifdef WIN32
4874      const int fd = win32_tmpfd();
4875      if (fd >= 0)
4876           f = PerlIO_fdopen(fd, "w+b");
4877 #else /* WIN32 */
4878 #    if defined(HAS_MKSTEMP) && ! defined(VMS) && ! defined(OS2)
4879      SV *sv = newSVpv("/tmp/PerlIO_XXXXXX", 0);
4880      /*
4881       * I have no idea how portable mkstemp() is ... NI-S
4882       */
4883      const int fd = mkstemp(SvPVX(sv));
4884      if (fd >= 0) {
4885           f = PerlIO_fdopen(fd, "w+");
4886           if (f)
4887                PerlIOBase(f)->flags |= PERLIO_F_TEMP;
4888           PerlLIO_unlink(SvPVX(sv));
4889           SvREFCNT_dec(sv);
4890      }
4891 #    else       /* !HAS_MKSTEMP, fallback to stdio tmpfile(). */
4892      FILE *stdio = PerlSIO_tmpfile();
4893
4894      if (stdio) {
4895           if ((f = PerlIO_push(aTHX_(PerlIO_allocate(aTHX)),
4896                                PERLIO_FUNCS_CAST(&PerlIO_stdio),
4897                                "w+", Nullsv))) {
4898                PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
4899
4900                if (s)
4901                     s->stdio = stdio;
4902           }
4903      }
4904 #    endif /* else HAS_MKSTEMP */
4905 #endif /* else WIN32 */
4906      return f;
4907 }
4908
4909 #undef HAS_FSETPOS
4910 #undef HAS_FGETPOS
4911
4912 #endif                          /* USE_SFIO */
4913 #endif                          /* PERLIO_IS_STDIO */
4914
4915 /*======================================================================================*/
4916 /*
4917  * Now some functions in terms of above which may be needed even if we are
4918  * not in true PerlIO mode
4919  */
4920
4921 #ifndef HAS_FSETPOS
4922 #undef PerlIO_setpos
4923 int
4924 PerlIO_setpos(PerlIO *f, SV *pos)
4925 {
4926     dTHX;
4927     if (SvOK(pos)) {
4928         STRLEN len;
4929         Off_t *posn = (Off_t *) SvPV(pos, len);
4930         if (f && len == sizeof(Off_t))
4931             return PerlIO_seek(f, *posn, SEEK_SET);
4932     }
4933     SETERRNO(EINVAL, SS_IVCHAN);
4934     return -1;
4935 }
4936 #else
4937 #undef PerlIO_setpos
4938 int
4939 PerlIO_setpos(PerlIO *f, SV *pos)
4940 {
4941     dTHX;
4942     if (SvOK(pos)) {
4943         STRLEN len;
4944         Fpos_t *fpos = (Fpos_t *) SvPV(pos, len);
4945         if (f && len == sizeof(Fpos_t)) {
4946 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4947             return fsetpos64(f, fpos);
4948 #else
4949             return fsetpos(f, fpos);
4950 #endif
4951         }
4952     }
4953     SETERRNO(EINVAL, SS_IVCHAN);
4954     return -1;
4955 }
4956 #endif
4957
4958 #ifndef HAS_FGETPOS
4959 #undef PerlIO_getpos
4960 int
4961 PerlIO_getpos(PerlIO *f, SV *pos)
4962 {
4963     dTHX;
4964     Off_t posn = PerlIO_tell(f);
4965     sv_setpvn(pos, (char *) &posn, sizeof(posn));
4966     return (posn == (Off_t) - 1) ? -1 : 0;
4967 }
4968 #else
4969 #undef PerlIO_getpos
4970 int
4971 PerlIO_getpos(PerlIO *f, SV *pos)
4972 {
4973     dTHX;
4974     Fpos_t fpos;
4975     int code;
4976 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4977     code = fgetpos64(f, &fpos);
4978 #else
4979     code = fgetpos(f, &fpos);
4980 #endif
4981     sv_setpvn(pos, (char *) &fpos, sizeof(fpos));
4982     return code;
4983 }
4984 #endif
4985
4986 #if (defined(PERLIO_IS_STDIO) || !defined(USE_SFIO)) && !defined(HAS_VPRINTF)
4987
4988 int
4989 vprintf(char *pat, char *args)
4990 {
4991     _doprnt(pat, args, stdout);
4992     return 0;                   /* wrong, but perl doesn't use the return
4993                                  * value */
4994 }
4995
4996 int
4997 vfprintf(FILE *fd, char *pat, char *args)
4998 {
4999     _doprnt(pat, args, fd);
5000     return 0;                   /* wrong, but perl doesn't use the return
5001                                  * value */
5002 }
5003
5004 #endif
5005
5006 #ifndef PerlIO_vsprintf
5007 int
5008 PerlIO_vsprintf(char *s, int n, const char *fmt, va_list ap)
5009 {
5010     dVAR;
5011     const int val = vsprintf(s, fmt, ap);
5012     if (n >= 0) {
5013         if (strlen(s) >= (STRLEN) n) {
5014             dTHX;
5015             (void) PerlIO_puts(Perl_error_log,
5016                                "panic: sprintf overflow - memory corrupted!\n");
5017             my_exit(1);
5018         }
5019     }
5020     return val;
5021 }
5022 #endif
5023
5024 #ifndef PerlIO_sprintf
5025 int
5026 PerlIO_sprintf(char *s, int n, const char *fmt, ...)
5027 {
5028     va_list ap;
5029     int result;
5030     va_start(ap, fmt);
5031     result = PerlIO_vsprintf(s, n, fmt, ap);
5032     va_end(ap);
5033     return result;
5034 }
5035 #endif