Re-attempt to clear the hash in S_hfreeentries if anything adds to it.
[p5sagit/p5-mst-13.2.git] / sv.c
1 /*    sv.c
2  *
3  *    Copyright (C) 1991, 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999,
4  *    2000, 2001, 2002, 2003, 2004, 2005, by Larry Wall and others
5  *
6  *    You may distribute under the terms of either the GNU General Public
7  *    License or the Artistic License, as specified in the README file.
8  *
9  * "I wonder what the Entish is for 'yes' and 'no'," he thought.
10  *
11  *
12  * This file contains the code that creates, manipulates and destroys
13  * scalar values (SVs). The other types (AV, HV, GV, etc.) reuse the
14  * structure of an SV, so their creation and destruction is handled
15  * here; higher-level functions are in av.c, hv.c, and so on. Opcode
16  * level functions (eg. substr, split, join) for each of the types are
17  * in the pp*.c files.
18  */
19
20 #include "EXTERN.h"
21 #define PERL_IN_SV_C
22 #include "perl.h"
23 #include "regcomp.h"
24
25 #define FCALL *f
26
27 #ifdef __Lynx__
28 /* Missing proto on LynxOS */
29   char *gconvert(double, int, int,  char *);
30 #endif
31
32 #ifdef PERL_UTF8_CACHE_ASSERT
33 /* The cache element 0 is the Unicode offset;
34  * the cache element 1 is the byte offset of the element 0;
35  * the cache element 2 is the Unicode length of the substring;
36  * the cache element 3 is the byte length of the substring;
37  * The checking of the substring side would be good
38  * but substr() has enough code paths to make my head spin;
39  * if adding more checks watch out for the following tests:
40  *   t/op/index.t t/op/length.t t/op/pat.t t/op/substr.t
41  *   lib/utf8.t lib/Unicode/Collate/t/index.t
42  * --jhi
43  */
44 #define ASSERT_UTF8_CACHE(cache) \
45         STMT_START { if (cache) { assert((cache)[0] <= (cache)[1]); } } STMT_END
46 #else
47 #define ASSERT_UTF8_CACHE(cache) NOOP
48 #endif
49
50 #ifdef PERL_OLD_COPY_ON_WRITE
51 #define SV_COW_NEXT_SV(sv)      INT2PTR(SV *,SvUVX(sv))
52 #define SV_COW_NEXT_SV_SET(current,next)        SvUV_set(current, PTR2UV(next))
53 /* This is a pessimistic view. Scalar must be purely a read-write PV to copy-
54    on-write.  */
55 #endif
56
57 /* ============================================================================
58
59 =head1 Allocation and deallocation of SVs.
60
61 An SV (or AV, HV, etc.) is allocated in two parts: the head (struct sv,
62 av, hv...) contains type and reference count information, as well as a
63 pointer to the body (struct xrv, xpv, xpviv...), which contains fields
64 specific to each type.
65
66 In all but the most memory-paranoid configuations (ex: PURIFY), this
67 allocation is done using arenas, which by default are approximately 4K
68 chunks of memory parcelled up into N heads or bodies (of same size).
69 Sv-bodies are allocated by their sv-type, guaranteeing size
70 consistency needed to allocate safely from arrays.
71
72 The first slot in each arena is reserved, and is used to hold a link
73 to the next arena.  In the case of heads, the unused first slot also
74 contains some flags and a note of the number of slots.  Snaked through
75 each arena chain is a linked list of free items; when this becomes
76 empty, an extra arena is allocated and divided up into N items which
77 are threaded into the free list.
78
79 The following global variables are associated with arenas:
80
81     PL_sv_arenaroot     pointer to list of SV arenas
82     PL_sv_root          pointer to list of free SV structures
83
84     PL_body_arenaroots[]  array of pointers to list of arenas, 1 per svtype
85     PL_body_roots[]       array of pointers to list of free bodies of svtype
86                           arrays are indexed by the svtype needed
87
88 Note that some of the larger and more rarely used body types (eg
89 xpvio) are not allocated using arenas, but are instead just
90 malloc()/free()ed as required.
91
92 In addition, a few SV heads are not allocated from an arena, but are
93 instead directly created as static or auto variables, eg PL_sv_undef.
94 The size of arenas can be changed from the default by setting
95 PERL_ARENA_SIZE appropriately at compile time.
96
97 The SV arena serves the secondary purpose of allowing still-live SVs
98 to be located and destroyed during final cleanup.
99
100 At the lowest level, the macros new_SV() and del_SV() grab and free
101 an SV head.  (If debugging with -DD, del_SV() calls the function S_del_sv()
102 to return the SV to the free list with error checking.) new_SV() calls
103 more_sv() / sv_add_arena() to add an extra arena if the free list is empty.
104 SVs in the free list have their SvTYPE field set to all ones.
105
106 Similarly, there are macros new_XIV()/del_XIV(), new_XNV()/del_XNV() etc
107 that allocate and return individual body types. Normally these are mapped
108 to the arena-manipulating functions new_xiv()/del_xiv() etc, but may be
109 instead mapped directly to malloc()/free() if PURIFY is defined. The
110 new/del functions remove from, or add to, the appropriate PL_foo_root
111 list, and call more_xiv() etc to add a new arena if the list is empty.
112
113 At the time of very final cleanup, sv_free_arenas() is called from
114 perl_destruct() to physically free all the arenas allocated since the
115 start of the interpreter.
116
117 Manipulation of any of the PL_*root pointers is protected by enclosing
118 LOCK_SV_MUTEX; ... UNLOCK_SV_MUTEX calls which should Do the Right Thing
119 if threads are enabled.
120
121 The function visit() scans the SV arenas list, and calls a specified
122 function for each SV it finds which is still live - ie which has an SvTYPE
123 other than all 1's, and a non-zero SvREFCNT. visit() is used by the
124 following functions (specified as [function that calls visit()] / [function
125 called by visit() for each SV]):
126
127     sv_report_used() / do_report_used()
128                         dump all remaining SVs (debugging aid)
129
130     sv_clean_objs() / do_clean_objs(),do_clean_named_objs()
131                         Attempt to free all objects pointed to by RVs,
132                         and, unless DISABLE_DESTRUCTOR_KLUDGE is defined,
133                         try to do the same for all objects indirectly
134                         referenced by typeglobs too.  Called once from
135                         perl_destruct(), prior to calling sv_clean_all()
136                         below.
137
138     sv_clean_all() / do_clean_all()
139                         SvREFCNT_dec(sv) each remaining SV, possibly
140                         triggering an sv_free(). It also sets the
141                         SVf_BREAK flag on the SV to indicate that the
142                         refcnt has been artificially lowered, and thus
143                         stopping sv_free() from giving spurious warnings
144                         about SVs which unexpectedly have a refcnt
145                         of zero.  called repeatedly from perl_destruct()
146                         until there are no SVs left.
147
148 =head2 Arena allocator API Summary
149
150 Private API to rest of sv.c
151
152     new_SV(),  del_SV(),
153
154     new_XIV(), del_XIV(),
155     new_XNV(), del_XNV(),
156     etc
157
158 Public API:
159
160     sv_report_used(), sv_clean_objs(), sv_clean_all(), sv_free_arenas()
161
162
163 =cut
164
165 ============================================================================ */
166
167
168
169 /*
170  * "A time to plant, and a time to uproot what was planted..."
171  */
172
173 /*
174  * nice_chunk and nice_chunk size need to be set
175  * and queried under the protection of sv_mutex
176  */
177 void
178 Perl_offer_nice_chunk(pTHX_ void *chunk, U32 chunk_size)
179 {
180     void *new_chunk;
181     U32 new_chunk_size;
182     LOCK_SV_MUTEX;
183     new_chunk = (void *)(chunk);
184     new_chunk_size = (chunk_size);
185     if (new_chunk_size > PL_nice_chunk_size) {
186         Safefree(PL_nice_chunk);
187         PL_nice_chunk = (char *) new_chunk;
188         PL_nice_chunk_size = new_chunk_size;
189     } else {
190         Safefree(chunk);
191     }
192     UNLOCK_SV_MUTEX;
193 }
194
195 #ifdef DEBUG_LEAKING_SCALARS
196 #  define FREE_SV_DEBUG_FILE(sv) Safefree((sv)->sv_debug_file)
197 #else
198 #  define FREE_SV_DEBUG_FILE(sv)
199 #endif
200
201 #ifdef PERL_POISON
202 #  define SvARENA_CHAIN(sv)     ((sv)->sv_u.svu_rv)
203 /* Whilst I'd love to do this, it seems that things like to check on
204    unreferenced scalars
205 #  define POSION_SV_HEAD(sv)    Poison(sv, 1, struct STRUCT_SV)
206 */
207 #  define POSION_SV_HEAD(sv)    Poison(&SvANY(sv), 1, void *), \
208                                 Poison(&SvREFCNT(sv), 1, U32)
209 #else
210 #  define SvARENA_CHAIN(sv)     SvANY(sv)
211 #  define POSION_SV_HEAD(sv)
212 #endif
213
214 #define plant_SV(p) \
215     STMT_START {                                        \
216         FREE_SV_DEBUG_FILE(p);                          \
217         POSION_SV_HEAD(p);                              \
218         SvARENA_CHAIN(p) = (void *)PL_sv_root;          \
219         SvFLAGS(p) = SVTYPEMASK;                        \
220         PL_sv_root = (p);                               \
221         --PL_sv_count;                                  \
222     } STMT_END
223
224 /* sv_mutex must be held while calling uproot_SV() */
225 #define uproot_SV(p) \
226     STMT_START {                                        \
227         (p) = PL_sv_root;                               \
228         PL_sv_root = (SV*)SvARENA_CHAIN(p);                     \
229         ++PL_sv_count;                                  \
230     } STMT_END
231
232
233 /* make some more SVs by adding another arena */
234
235 /* sv_mutex must be held while calling more_sv() */
236 STATIC SV*
237 S_more_sv(pTHX)
238 {
239     SV* sv;
240
241     if (PL_nice_chunk) {
242         sv_add_arena(PL_nice_chunk, PL_nice_chunk_size, 0);
243         PL_nice_chunk = Nullch;
244         PL_nice_chunk_size = 0;
245     }
246     else {
247         char *chunk;                /* must use New here to match call to */
248         Newx(chunk,PERL_ARENA_SIZE,char);   /* Safefree() in sv_free_arenas()     */
249         sv_add_arena(chunk, PERL_ARENA_SIZE, 0);
250     }
251     uproot_SV(sv);
252     return sv;
253 }
254
255 /* new_SV(): return a new, empty SV head */
256
257 #ifdef DEBUG_LEAKING_SCALARS
258 /* provide a real function for a debugger to play with */
259 STATIC SV*
260 S_new_SV(pTHX)
261 {
262     SV* sv;
263
264     LOCK_SV_MUTEX;
265     if (PL_sv_root)
266         uproot_SV(sv);
267     else
268         sv = S_more_sv(aTHX);
269     UNLOCK_SV_MUTEX;
270     SvANY(sv) = 0;
271     SvREFCNT(sv) = 1;
272     SvFLAGS(sv) = 0;
273     sv->sv_debug_optype = PL_op ? PL_op->op_type : 0;
274     sv->sv_debug_line = (U16) ((PL_copline == NOLINE) ?
275         (PL_curcop ? CopLINE(PL_curcop) : 0) : PL_copline);
276     sv->sv_debug_inpad = 0;
277     sv->sv_debug_cloned = 0;
278     sv->sv_debug_file = PL_curcop ? savepv(CopFILE(PL_curcop)): NULL;
279     
280     return sv;
281 }
282 #  define new_SV(p) (p)=S_new_SV(aTHX)
283
284 #else
285 #  define new_SV(p) \
286     STMT_START {                                        \
287         LOCK_SV_MUTEX;                                  \
288         if (PL_sv_root)                                 \
289             uproot_SV(p);                               \
290         else                                            \
291             (p) = S_more_sv(aTHX);                      \
292         UNLOCK_SV_MUTEX;                                \
293         SvANY(p) = 0;                                   \
294         SvREFCNT(p) = 1;                                \
295         SvFLAGS(p) = 0;                                 \
296     } STMT_END
297 #endif
298
299
300 /* del_SV(): return an empty SV head to the free list */
301
302 #ifdef DEBUGGING
303
304 #define del_SV(p) \
305     STMT_START {                                        \
306         LOCK_SV_MUTEX;                                  \
307         if (DEBUG_D_TEST)                               \
308             del_sv(p);                                  \
309         else                                            \
310             plant_SV(p);                                \
311         UNLOCK_SV_MUTEX;                                \
312     } STMT_END
313
314 STATIC void
315 S_del_sv(pTHX_ SV *p)
316 {
317     if (DEBUG_D_TEST) {
318         SV* sva;
319         bool ok = 0;
320         for (sva = PL_sv_arenaroot; sva; sva = (SV *) SvANY(sva)) {
321             const SV * const sv = sva + 1;
322             const SV * const svend = &sva[SvREFCNT(sva)];
323             if (p >= sv && p < svend) {
324                 ok = 1;
325                 break;
326             }
327         }
328         if (!ok) {
329             if (ckWARN_d(WARN_INTERNAL))        
330                 Perl_warner(aTHX_ packWARN(WARN_INTERNAL),
331                             "Attempt to free non-arena SV: 0x%"UVxf
332                             pTHX__FORMAT, PTR2UV(p) pTHX__VALUE);
333             return;
334         }
335     }
336     plant_SV(p);
337 }
338
339 #else /* ! DEBUGGING */
340
341 #define del_SV(p)   plant_SV(p)
342
343 #endif /* DEBUGGING */
344
345
346 /*
347 =head1 SV Manipulation Functions
348
349 =for apidoc sv_add_arena
350
351 Given a chunk of memory, link it to the head of the list of arenas,
352 and split it into a list of free SVs.
353
354 =cut
355 */
356
357 void
358 Perl_sv_add_arena(pTHX_ char *ptr, U32 size, U32 flags)
359 {
360     SV* const sva = (SV*)ptr;
361     register SV* sv;
362     register SV* svend;
363
364     /* The first SV in an arena isn't an SV. */
365     SvANY(sva) = (void *) PL_sv_arenaroot;              /* ptr to next arena */
366     SvREFCNT(sva) = size / sizeof(SV);          /* number of SV slots */
367     SvFLAGS(sva) = flags;                       /* FAKE if not to be freed */
368
369     PL_sv_arenaroot = sva;
370     PL_sv_root = sva + 1;
371
372     svend = &sva[SvREFCNT(sva) - 1];
373     sv = sva + 1;
374     while (sv < svend) {
375         SvARENA_CHAIN(sv) = (void *)(SV*)(sv + 1);
376 #ifdef DEBUGGING
377         SvREFCNT(sv) = 0;
378 #endif
379         /* Must always set typemask because it's awlays checked in on cleanup
380            when the arenas are walked looking for objects.  */
381         SvFLAGS(sv) = SVTYPEMASK;
382         sv++;
383     }
384     SvARENA_CHAIN(sv) = 0;
385 #ifdef DEBUGGING
386     SvREFCNT(sv) = 0;
387 #endif
388     SvFLAGS(sv) = SVTYPEMASK;
389 }
390
391 /* visit(): call the named function for each non-free SV in the arenas
392  * whose flags field matches the flags/mask args. */
393
394 STATIC I32
395 S_visit(pTHX_ SVFUNC_t f, U32 flags, U32 mask)
396 {
397     SV* sva;
398     I32 visited = 0;
399
400     for (sva = PL_sv_arenaroot; sva; sva = (SV*)SvANY(sva)) {
401         register const SV * const svend = &sva[SvREFCNT(sva)];
402         register SV* sv;
403         for (sv = sva + 1; sv < svend; ++sv) {
404             if (SvTYPE(sv) != SVTYPEMASK
405                     && (sv->sv_flags & mask) == flags
406                     && SvREFCNT(sv))
407             {
408                 (FCALL)(aTHX_ sv);
409                 ++visited;
410             }
411         }
412     }
413     return visited;
414 }
415
416 #ifdef DEBUGGING
417
418 /* called by sv_report_used() for each live SV */
419
420 static void
421 do_report_used(pTHX_ SV *sv)
422 {
423     if (SvTYPE(sv) != SVTYPEMASK) {
424         PerlIO_printf(Perl_debug_log, "****\n");
425         sv_dump(sv);
426     }
427 }
428 #endif
429
430 /*
431 =for apidoc sv_report_used
432
433 Dump the contents of all SVs not yet freed. (Debugging aid).
434
435 =cut
436 */
437
438 void
439 Perl_sv_report_used(pTHX)
440 {
441 #ifdef DEBUGGING
442     visit(do_report_used, 0, 0);
443 #endif
444 }
445
446 /* called by sv_clean_objs() for each live SV */
447
448 static void
449 do_clean_objs(pTHX_ SV *ref)
450 {
451     if (SvROK(ref)) {
452         SV * const target = SvRV(ref);
453         if (SvOBJECT(target)) {
454             DEBUG_D((PerlIO_printf(Perl_debug_log, "Cleaning object ref:\n "), sv_dump(ref)));
455             if (SvWEAKREF(ref)) {
456                 sv_del_backref(target, ref);
457                 SvWEAKREF_off(ref);
458                 SvRV_set(ref, NULL);
459             } else {
460                 SvROK_off(ref);
461                 SvRV_set(ref, NULL);
462                 SvREFCNT_dec(target);
463             }
464         }
465     }
466
467     /* XXX Might want to check arrays, etc. */
468 }
469
470 /* called by sv_clean_objs() for each live SV */
471
472 #ifndef DISABLE_DESTRUCTOR_KLUDGE
473 static void
474 do_clean_named_objs(pTHX_ SV *sv)
475 {
476     if (SvTYPE(sv) == SVt_PVGV && GvGP(sv)) {
477         if ((
478 #ifdef PERL_DONT_CREATE_GVSV
479              GvSV(sv) &&
480 #endif
481              SvOBJECT(GvSV(sv))) ||
482              (GvAV(sv) && SvOBJECT(GvAV(sv))) ||
483              (GvHV(sv) && SvOBJECT(GvHV(sv))) ||
484              (GvIO(sv) && SvOBJECT(GvIO(sv))) ||
485              (GvCV(sv) && SvOBJECT(GvCV(sv))) )
486         {
487             DEBUG_D((PerlIO_printf(Perl_debug_log, "Cleaning named glob object:\n "), sv_dump(sv)));
488             SvFLAGS(sv) |= SVf_BREAK;
489             SvREFCNT_dec(sv);
490         }
491     }
492 }
493 #endif
494
495 /*
496 =for apidoc sv_clean_objs
497
498 Attempt to destroy all objects not yet freed
499
500 =cut
501 */
502
503 void
504 Perl_sv_clean_objs(pTHX)
505 {
506     PL_in_clean_objs = TRUE;
507     visit(do_clean_objs, SVf_ROK, SVf_ROK);
508 #ifndef DISABLE_DESTRUCTOR_KLUDGE
509     /* some barnacles may yet remain, clinging to typeglobs */
510     visit(do_clean_named_objs, SVt_PVGV, SVTYPEMASK);
511 #endif
512     PL_in_clean_objs = FALSE;
513 }
514
515 /* called by sv_clean_all() for each live SV */
516
517 static void
518 do_clean_all(pTHX_ SV *sv)
519 {
520     DEBUG_D((PerlIO_printf(Perl_debug_log, "Cleaning loops: SV at 0x%"UVxf"\n", PTR2UV(sv)) ));
521     SvFLAGS(sv) |= SVf_BREAK;
522     if (PL_comppad == (AV*)sv) {
523         PL_comppad = NULL;
524         PL_curpad = Null(SV**);
525     }
526     SvREFCNT_dec(sv);
527 }
528
529 /*
530 =for apidoc sv_clean_all
531
532 Decrement the refcnt of each remaining SV, possibly triggering a
533 cleanup. This function may have to be called multiple times to free
534 SVs which are in complex self-referential hierarchies.
535
536 =cut
537 */
538
539 I32
540 Perl_sv_clean_all(pTHX)
541 {
542     I32 cleaned;
543     PL_in_clean_all = TRUE;
544     cleaned = visit(do_clean_all, 0,0);
545     PL_in_clean_all = FALSE;
546     return cleaned;
547 }
548
549 static void 
550 S_free_arena(pTHX_ void **root) {
551     while (root) {
552         void ** const next = *(void **)root;
553         Safefree(root);
554         root = next;
555     }
556 }
557     
558 /*
559 =for apidoc sv_free_arenas
560
561 Deallocate the memory used by all arenas. Note that all the individual SV
562 heads and bodies within the arenas must already have been freed.
563
564 =cut
565 */
566 #define free_arena(name)                                        \
567     STMT_START {                                                \
568         S_free_arena(aTHX_ (void**) PL_ ## name ## _arenaroot); \
569         PL_ ## name ## _arenaroot = 0;                          \
570         PL_ ## name ## _root = 0;                               \
571     } STMT_END
572
573 void
574 Perl_sv_free_arenas(pTHX)
575 {
576     SV* sva;
577     SV* svanext;
578     int i;
579
580     /* Free arenas here, but be careful about fake ones.  (We assume
581        contiguity of the fake ones with the corresponding real ones.) */
582
583     for (sva = PL_sv_arenaroot; sva; sva = svanext) {
584         svanext = (SV*) SvANY(sva);
585         while (svanext && SvFAKE(svanext))
586             svanext = (SV*) SvANY(svanext);
587
588         if (!SvFAKE(sva))
589             Safefree(sva);
590     }
591
592     for (i=0; i<SVt_LAST; i++) {
593         S_free_arena(aTHX_ (void**) PL_body_arenaroots[i]);
594         PL_body_arenaroots[i] = 0;
595         PL_body_roots[i] = 0;
596     }
597
598     Safefree(PL_nice_chunk);
599     PL_nice_chunk = Nullch;
600     PL_nice_chunk_size = 0;
601     PL_sv_arenaroot = 0;
602     PL_sv_root = 0;
603 }
604
605 /*
606   Here are mid-level routines that manage the allocation of bodies out
607   of the various arenas.  There are 5 kinds of arenas:
608
609   1. SV-head arenas, which are discussed and handled above
610   2. regular body arenas
611   3. arenas for reduced-size bodies
612   4. Hash-Entry arenas
613   5. pte arenas (thread related)
614
615   Arena types 2 & 3 are chained by body-type off an array of
616   arena-root pointers, which is indexed by svtype.  Some of the
617   larger/less used body types are malloced singly, since a large
618   unused block of them is wasteful.  Also, several svtypes dont have
619   bodies; the data fits into the sv-head itself.  The arena-root
620   pointer thus has a few unused root-pointers (which may be hijacked
621   later for arena types 4,5)
622
623   3 differs from 2 as an optimization; some body types have several
624   unused fields in the front of the structure (which are kept in-place
625   for consistency).  These bodies can be allocated in smaller chunks,
626   because the leading fields arent accessed.  Pointers to such bodies
627   are decremented to point at the unused 'ghost' memory, knowing that
628   the pointers are used with offsets to the real memory.
629
630   HE, HEK arenas are managed separately, with separate code, but may
631   be merge-able later..
632
633   PTE arenas are not sv-bodies, but they share these mid-level
634   mechanics, so are considered here.  The new mid-level mechanics rely
635   on the sv_type of the body being allocated, so we just reserve one
636   of the unused body-slots for PTEs, then use it in those (2) PTE
637   contexts below (line ~10k)
638 */
639
640 STATIC void *
641 S_more_bodies (pTHX_ size_t size, svtype sv_type)
642 {
643     void ** const arena_root    = &PL_body_arenaroots[sv_type];
644     void ** const root          = &PL_body_roots[sv_type];
645     char *start;
646     const char *end;
647     const size_t count = PERL_ARENA_SIZE / size;
648
649     Newx(start, count*size, char);
650     *((void **) start) = *arena_root;
651     *arena_root = (void *)start;
652
653     end = start + (count-1) * size;
654
655     /* The initial slot is used to link the arenas together, so it isn't to be
656        linked into the list of ready-to-use bodies.  */
657
658     start += size;
659
660     *root = (void *)start;
661
662     while (start < end) {
663         char * const next = start + size;
664         *(void**) start = (void *)next;
665         start = next;
666     }
667     *(void **)start = 0;
668
669     return *root;
670 }
671
672 /* grab a new thing from the free list, allocating more if necessary */
673
674 /* 1st, the inline version  */
675
676 #define new_body_inline(xpv, size, sv_type) \
677     STMT_START { \
678         void ** const r3wt = &PL_body_roots[sv_type]; \
679         LOCK_SV_MUTEX; \
680         xpv = *((void **)(r3wt)) \
681           ? *((void **)(r3wt)) : S_more_bodies(aTHX_ size, sv_type); \
682         *(r3wt) = *(void**)(xpv); \
683         UNLOCK_SV_MUTEX; \
684     } STMT_END
685
686 /* now use the inline version in the proper function */
687
688 #ifndef PURIFY
689
690 /* This isn't being used with -DPURIFY, so don't declare it. Otherwise
691    compilers issue warnings.  */
692
693 STATIC void *
694 S_new_body(pTHX_ size_t size, svtype sv_type)
695 {
696     void *xpv;
697     new_body_inline(xpv, size, sv_type);
698     return xpv;
699 }
700
701 #endif
702
703 /* return a thing to the free list */
704
705 #define del_body(thing, root)                   \
706     STMT_START {                                \
707         void ** const thing_copy = (void **)thing;\
708         LOCK_SV_MUTEX;                          \
709         *thing_copy = *root;                    \
710         *root = (void*)thing_copy;              \
711         UNLOCK_SV_MUTEX;                        \
712     } STMT_END
713
714 /* 
715    Revisiting type 3 arenas, there are 4 body-types which have some
716    members that are never accessed.  They are XPV, XPVIV, XPVAV,
717    XPVHV, which have corresponding types: xpv_allocated,
718    xpviv_allocated, xpvav_allocated, xpvhv_allocated,
719
720    For these types, the arenas are carved up into *_allocated size
721    chunks, we thus avoid wasted memory for those unaccessed members.
722    When bodies are allocated, we adjust the pointer back in memory by
723    the size of the bit not allocated, so it's as if we allocated the
724    full structure.  (But things will all go boom if you write to the
725    part that is "not there", because you'll be overwriting the last
726    members of the preceding structure in memory.)
727
728    We calculate the correction using the STRUCT_OFFSET macro. For example, if
729    xpv_allocated is the same structure as XPV then the two OFFSETs sum to zero,
730    and the pointer is unchanged. If the allocated structure is smaller (no
731    initial NV actually allocated) then the net effect is to subtract the size
732    of the NV from the pointer, to return a new pointer as if an initial NV were
733    actually allocated.
734
735    This is the same trick as was used for NV and IV bodies. Ironically it
736    doesn't need to be used for NV bodies any more, because NV is now at the
737    start of the structure. IV bodies don't need it either, because they are
738    no longer allocated.  */
739
740 /* The following 2 arrays hide the above details in a pair of
741    lookup-tables, allowing us to be body-type agnostic.
742
743    size maps svtype to its body's allocated size.
744    offset maps svtype to the body-pointer adjustment needed
745
746    NB: elements in latter are 0 or <0, and are added during
747    allocation, and subtracted during deallocation.  It may be clearer
748    to invert the values, and call it shrinkage_by_svtype.
749 */
750
751 struct body_details {
752     size_t size;        /* Size to allocate  */
753     size_t copy;        /* Size of structure to copy (may be shorter)  */
754     size_t offset;
755     bool cant_upgrade;  /* Can upgrade this type */
756     bool zero_nv;       /* zero the NV when upgrading from this */
757     bool arena;         /* Allocated from an arena */
758 };
759
760 #define HADNV FALSE
761 #define NONV TRUE
762
763 #ifdef PURIFY
764 /* With -DPURFIY we allocate everything directly, and don't use arenas.
765    This seems a rather elegant way to simplify some of the code below.  */
766 #define HASARENA FALSE
767 #else
768 #define HASARENA TRUE
769 #endif
770 #define NOARENA FALSE
771
772 /* A macro to work out the offset needed to subtract from a pointer to (say)
773
774 typedef struct {
775     STRLEN      xpv_cur;
776     STRLEN      xpv_len;
777 } xpv_allocated;
778
779 to make its members accessible via a pointer to (say)
780
781 struct xpv {
782     NV          xnv_nv;
783     STRLEN      xpv_cur;
784     STRLEN      xpv_len;
785 };
786
787 */
788
789 #define relative_STRUCT_OFFSET(longer, shorter, member) \
790     (STRUCT_OFFSET(shorter, member) - STRUCT_OFFSET(longer, member))
791
792 /* Calculate the length to copy. Specifically work out the length less any
793    final padding the compiler needed to add.  See the comment in sv_upgrade
794    for why copying the padding proved to be a bug.  */
795
796 #define copy_length(type, last_member) \
797         STRUCT_OFFSET(type, last_member) \
798         + sizeof (((type*)SvANY((SV*)0))->last_member)
799
800 static const struct body_details bodies_by_type[] = {
801     {0, 0, 0, FALSE, NONV, NOARENA},
802     /* IVs are in the head, so the allocation size is 0  */
803     {0, sizeof(IV), STRUCT_OFFSET(XPVIV, xiv_iv), FALSE, NONV, NOARENA},
804     /* 8 bytes on most ILP32 with IEEE doubles */
805     {sizeof(NV), sizeof(NV), 0, FALSE, HADNV, HASARENA},
806     /* RVs are in the head now */
807     /* However, this slot is overloaded and used by the pte  */
808     {0, 0, 0, FALSE, NONV, NOARENA},
809     /* 8 bytes on most ILP32 with IEEE doubles */
810     {sizeof(xpv_allocated),
811      copy_length(XPV, xpv_len)
812      - relative_STRUCT_OFFSET(xpv_allocated, XPV, xpv_cur),
813      + relative_STRUCT_OFFSET(xpv_allocated, XPV, xpv_cur),
814      FALSE, NONV, HASARENA},
815     /* 12 */
816     {sizeof(xpviv_allocated),
817      copy_length(XPVIV, xiv_u)
818      - relative_STRUCT_OFFSET(xpviv_allocated, XPVIV, xpv_cur),
819      + relative_STRUCT_OFFSET(xpviv_allocated, XPVIV, xpv_cur),
820      FALSE, NONV, HASARENA},
821     /* 20 */
822     {sizeof(XPVNV), copy_length(XPVNV, xiv_u), 0, FALSE, HADNV, HASARENA},
823     /* 28 */
824     {sizeof(XPVMG), copy_length(XPVMG, xmg_stash), 0, FALSE, HADNV, HASARENA},
825     /* 36 */
826     {sizeof(XPVBM), sizeof(XPVBM), 0, TRUE, HADNV, HASARENA},
827     /* 48 */
828     {sizeof(XPVGV), sizeof(XPVGV), 0, TRUE, HADNV, HASARENA},
829     /* 64 */
830     {sizeof(XPVLV), sizeof(XPVLV), 0, TRUE, HADNV, HASARENA},
831     /* 20 */
832     {sizeof(xpvav_allocated),
833      copy_length(XPVAV, xmg_stash)
834      - relative_STRUCT_OFFSET(xpvav_allocated, XPVAV, xav_fill),
835      + relative_STRUCT_OFFSET(xpvav_allocated, XPVAV, xav_fill),
836      TRUE, HADNV, HASARENA},
837     /* 20 */
838     {sizeof(xpvhv_allocated),
839      copy_length(XPVHV, xmg_stash)
840      - relative_STRUCT_OFFSET(xpvhv_allocated, XPVHV, xhv_fill),
841      + relative_STRUCT_OFFSET(xpvhv_allocated, XPVHV, xhv_fill),
842      TRUE, HADNV, HASARENA},
843     /* 76 */
844     {sizeof(XPVCV), sizeof(XPVCV), 0, TRUE, HADNV, HASARENA},
845     /* 80 */
846     {sizeof(XPVFM), sizeof(XPVFM), 0, TRUE, HADNV, NOARENA},
847     /* 84 */
848     {sizeof(XPVIO), sizeof(XPVIO), 0, TRUE, HADNV, NOARENA}
849 };
850
851 #define new_body_type(sv_type)                  \
852     (void *)((char *)S_new_body(aTHX_ bodies_by_type[sv_type].size, sv_type)\
853              - bodies_by_type[sv_type].offset)
854
855 #define del_body_type(p, sv_type)       \
856     del_body(p, &PL_body_roots[sv_type])
857
858
859 #define new_body_allocated(sv_type)             \
860     (void *)((char *)S_new_body(aTHX_ bodies_by_type[sv_type].size, sv_type)\
861              - bodies_by_type[sv_type].offset)
862
863 #define del_body_allocated(p, sv_type)          \
864     del_body(p + bodies_by_type[sv_type].offset, &PL_body_roots[sv_type])
865
866
867 #define my_safemalloc(s)        (void*)safemalloc(s)
868 #define my_safecalloc(s)        (void*)safecalloc(s, 1)
869 #define my_safefree(p)  safefree((char*)p)
870
871 #ifdef PURIFY
872
873 #define new_XNV()       my_safemalloc(sizeof(XPVNV))
874 #define del_XNV(p)      my_safefree(p)
875
876 #define new_XPVNV()     my_safemalloc(sizeof(XPVNV))
877 #define del_XPVNV(p)    my_safefree(p)
878
879 #define new_XPVAV()     my_safemalloc(sizeof(XPVAV))
880 #define del_XPVAV(p)    my_safefree(p)
881
882 #define new_XPVHV()     my_safemalloc(sizeof(XPVHV))
883 #define del_XPVHV(p)    my_safefree(p)
884
885 #define new_XPVMG()     my_safemalloc(sizeof(XPVMG))
886 #define del_XPVMG(p)    my_safefree(p)
887
888 #define new_XPVGV()     my_safemalloc(sizeof(XPVGV))
889 #define del_XPVGV(p)    my_safefree(p)
890
891 #else /* !PURIFY */
892
893 #define new_XNV()       new_body_type(SVt_NV)
894 #define del_XNV(p)      del_body_type(p, SVt_NV)
895
896 #define new_XPVNV()     new_body_type(SVt_PVNV)
897 #define del_XPVNV(p)    del_body_type(p, SVt_PVNV)
898
899 #define new_XPVAV()     new_body_allocated(SVt_PVAV)
900 #define del_XPVAV(p)    del_body_allocated(p, SVt_PVAV)
901
902 #define new_XPVHV()     new_body_allocated(SVt_PVHV)
903 #define del_XPVHV(p)    del_body_allocated(p, SVt_PVHV)
904
905 #define new_XPVMG()     new_body_type(SVt_PVMG)
906 #define del_XPVMG(p)    del_body_type(p, SVt_PVMG)
907
908 #define new_XPVGV()     new_body_type(SVt_PVGV)
909 #define del_XPVGV(p)    del_body_type(p, SVt_PVGV)
910
911 #endif /* PURIFY */
912
913 /* no arena for you! */
914
915 #define new_NOARENA(details) \
916         my_safemalloc((details)->size + (details)->offset)
917 #define new_NOARENAZ(details) \
918         my_safecalloc((details)->size + (details)->offset)
919
920 /*
921 =for apidoc sv_upgrade
922
923 Upgrade an SV to a more complex form.  Generally adds a new body type to the
924 SV, then copies across as much information as possible from the old body.
925 You generally want to use the C<SvUPGRADE> macro wrapper. See also C<svtype>.
926
927 =cut
928 */
929
930 void
931 Perl_sv_upgrade(pTHX_ register SV *sv, U32 new_type)
932 {
933     void*       old_body;
934     void*       new_body;
935     const U32   old_type = SvTYPE(sv);
936     const struct body_details *const old_type_details
937         = bodies_by_type + old_type;
938     const struct body_details *new_type_details = bodies_by_type + new_type;
939
940     if (new_type != SVt_PV && SvIsCOW(sv)) {
941         sv_force_normal_flags(sv, 0);
942     }
943
944     if (old_type == new_type)
945         return;
946
947     if (old_type > new_type)
948         Perl_croak(aTHX_ "sv_upgrade from type %d down to type %d",
949                 (int)old_type, (int)new_type);
950
951
952     old_body = SvANY(sv);
953
954     /* Copying structures onto other structures that have been neatly zeroed
955        has a subtle gotcha. Consider XPVMG
956
957        +------+------+------+------+------+-------+-------+
958        |     NV      | CUR  | LEN  |  IV  | MAGIC | STASH |
959        +------+------+------+------+------+-------+-------+
960        0      4      8     12     16     20      24      28
961
962        where NVs are aligned to 8 bytes, so that sizeof that structure is
963        actually 32 bytes long, with 4 bytes of padding at the end:
964
965        +------+------+------+------+------+-------+-------+------+
966        |     NV      | CUR  | LEN  |  IV  | MAGIC | STASH | ???  |
967        +------+------+------+------+------+-------+-------+------+
968        0      4      8     12     16     20      24      28     32
969
970        so what happens if you allocate memory for this structure:
971
972        +------+------+------+------+------+-------+-------+------+------+...
973        |     NV      | CUR  | LEN  |  IV  | MAGIC | STASH |  GP  | NAME |
974        +------+------+------+------+------+-------+-------+------+------+...
975        0      4      8     12     16     20      24      28     32     36
976
977        zero it, then copy sizeof(XPVMG) bytes on top of it? Not quite what you
978        expect, because you copy the area marked ??? onto GP. Now, ??? may have
979        started out as zero once, but it's quite possible that it isn't. So now,
980        rather than a nicely zeroed GP, you have it pointing somewhere random.
981        Bugs ensue.
982
983        (In fact, GP ends up pointing at a previous GP structure, because the
984        principle cause of the padding in XPVMG getting garbage is a copy of
985        sizeof(XPVMG) bytes from a XPVGV structure in sv_unglob)
986
987        So we are careful and work out the size of used parts of all the
988        structures.  */
989
990     switch (old_type) {
991     case SVt_NULL:
992         break;
993     case SVt_IV:
994         if (new_type < SVt_PVIV) {
995             new_type = (new_type == SVt_NV)
996                 ? SVt_PVNV : SVt_PVIV;
997             new_type_details = bodies_by_type + new_type;
998         }
999         break;
1000     case SVt_NV:
1001         if (new_type < SVt_PVNV) {
1002             new_type = SVt_PVNV;
1003             new_type_details = bodies_by_type + new_type;
1004         }
1005         break;
1006     case SVt_RV:
1007         break;
1008     case SVt_PV:
1009         assert(new_type > SVt_PV);
1010         assert(SVt_IV < SVt_PV);
1011         assert(SVt_NV < SVt_PV);
1012         break;
1013     case SVt_PVIV:
1014         break;
1015     case SVt_PVNV:
1016         break;
1017     case SVt_PVMG:
1018         /* Because the XPVMG of PL_mess_sv isn't allocated from the arena,
1019            there's no way that it can be safely upgraded, because perl.c
1020            expects to Safefree(SvANY(PL_mess_sv))  */
1021         assert(sv != PL_mess_sv);
1022         /* This flag bit is used to mean other things in other scalar types.
1023            Given that it only has meaning inside the pad, it shouldn't be set
1024            on anything that can get upgraded.  */
1025         assert((SvFLAGS(sv) & SVpad_TYPED) == 0);
1026         break;
1027     default:
1028         if (old_type_details->cant_upgrade)
1029             Perl_croak(aTHX_ "Can't upgrade that kind of scalar");
1030     }
1031
1032     SvFLAGS(sv) &= ~SVTYPEMASK;
1033     SvFLAGS(sv) |= new_type;
1034
1035     switch (new_type) {
1036     case SVt_NULL:
1037         Perl_croak(aTHX_ "Can't upgrade to undef");
1038     case SVt_IV:
1039         assert(old_type == SVt_NULL);
1040         SvANY(sv) = (XPVIV*)((char*)&(sv->sv_u.svu_iv) - STRUCT_OFFSET(XPVIV, xiv_iv));
1041         SvIV_set(sv, 0);
1042         return;
1043     case SVt_NV:
1044         assert(old_type == SVt_NULL);
1045         SvANY(sv) = new_XNV();
1046         SvNV_set(sv, 0);
1047         return;
1048     case SVt_RV:
1049         assert(old_type == SVt_NULL);
1050         SvANY(sv) = &sv->sv_u.svu_rv;
1051         SvRV_set(sv, 0);
1052         return;
1053     case SVt_PVHV:
1054         SvANY(sv) = new_XPVHV();
1055         HvFILL(sv)      = 0;
1056         HvMAX(sv)       = 0;
1057         HvTOTALKEYS(sv) = 0;
1058
1059         goto hv_av_common;
1060
1061     case SVt_PVAV:
1062         SvANY(sv) = new_XPVAV();
1063         AvMAX(sv)       = -1;
1064         AvFILLp(sv)     = -1;
1065         AvALLOC(sv)     = 0;
1066         AvREAL_only(sv);
1067
1068     hv_av_common:
1069         /* SVt_NULL isn't the only thing upgraded to AV or HV.
1070            The target created by newSVrv also is, and it can have magic.
1071            However, it never has SvPVX set.
1072         */
1073         if (old_type >= SVt_RV) {
1074             assert(SvPVX_const(sv) == 0);
1075         }
1076
1077         /* Could put this in the else clause below, as PVMG must have SvPVX
1078            0 already (the assertion above)  */
1079         SvPV_set(sv, (char*)0);
1080
1081         if (old_type >= SVt_PVMG) {
1082             SvMAGIC_set(sv, ((XPVMG*)old_body)->xmg_magic);
1083             SvSTASH_set(sv, ((XPVMG*)old_body)->xmg_stash);
1084         } else {
1085             SvMAGIC_set(sv, 0);
1086             SvSTASH_set(sv, 0);
1087         }
1088         break;
1089
1090
1091     case SVt_PVIV:
1092         /* XXX Is this still needed?  Was it ever needed?   Surely as there is
1093            no route from NV to PVIV, NOK can never be true  */
1094         assert(!SvNOKp(sv));
1095         assert(!SvNOK(sv));
1096     case SVt_PVIO:
1097     case SVt_PVFM:
1098     case SVt_PVBM:
1099     case SVt_PVGV:
1100     case SVt_PVCV:
1101     case SVt_PVLV:
1102     case SVt_PVMG:
1103     case SVt_PVNV:
1104     case SVt_PV:
1105
1106         assert(new_type_details->size);
1107         /* We always allocated the full length item with PURIFY. To do this
1108            we fake things so that arena is false for all 16 types..  */
1109         if(new_type_details->arena) {
1110             /* This points to the start of the allocated area.  */
1111             new_body_inline(new_body, new_type_details->size, new_type);
1112             Zero(new_body, new_type_details->size, char);
1113             new_body = ((char *)new_body) - new_type_details->offset;
1114         } else {
1115             new_body = new_NOARENAZ(new_type_details);
1116         }
1117         SvANY(sv) = new_body;
1118
1119         if (old_type_details->copy) {
1120             Copy((char *)old_body + old_type_details->offset,
1121                  (char *)new_body + old_type_details->offset,
1122                  old_type_details->copy, char);
1123         }
1124
1125 #ifndef NV_ZERO_IS_ALLBITS_ZERO
1126     /* If NV 0.0 is store as all bits 0 then Zero() already creates a correct
1127        0.0 for us.  */
1128         if (old_type_details->zero_nv)
1129             SvNV_set(sv, 0);
1130 #endif
1131
1132         if (new_type == SVt_PVIO)
1133             IoPAGE_LEN(sv)      = 60;
1134         if (old_type < SVt_RV)
1135             SvPV_set(sv, 0);
1136         break;
1137     default:
1138         Perl_croak(aTHX_ "panic: sv_upgrade to unknown type %lu", new_type);
1139     }
1140
1141     if (old_type_details->size) {
1142         /* If the old body had an allocated size, then we need to free it.  */
1143 #ifdef PURIFY
1144         my_safefree(old_body);
1145 #else
1146         del_body((void*)((char*)old_body + old_type_details->offset),
1147                  &PL_body_roots[old_type]);
1148 #endif
1149     }
1150 }
1151
1152 /*
1153 =for apidoc sv_backoff
1154
1155 Remove any string offset. You should normally use the C<SvOOK_off> macro
1156 wrapper instead.
1157
1158 =cut
1159 */
1160
1161 int
1162 Perl_sv_backoff(pTHX_ register SV *sv)
1163 {
1164     assert(SvOOK(sv));
1165     assert(SvTYPE(sv) != SVt_PVHV);
1166     assert(SvTYPE(sv) != SVt_PVAV);
1167     if (SvIVX(sv)) {
1168         const char * const s = SvPVX_const(sv);
1169         SvLEN_set(sv, SvLEN(sv) + SvIVX(sv));
1170         SvPV_set(sv, SvPVX(sv) - SvIVX(sv));
1171         SvIV_set(sv, 0);
1172         Move(s, SvPVX(sv), SvCUR(sv)+1, char);
1173     }
1174     SvFLAGS(sv) &= ~SVf_OOK;
1175     return 0;
1176 }
1177
1178 /*
1179 =for apidoc sv_grow
1180
1181 Expands the character buffer in the SV.  If necessary, uses C<sv_unref> and
1182 upgrades the SV to C<SVt_PV>.  Returns a pointer to the character buffer.
1183 Use the C<SvGROW> wrapper instead.
1184
1185 =cut
1186 */
1187
1188 char *
1189 Perl_sv_grow(pTHX_ register SV *sv, register STRLEN newlen)
1190 {
1191     register char *s;
1192
1193 #ifdef HAS_64K_LIMIT
1194     if (newlen >= 0x10000) {
1195         PerlIO_printf(Perl_debug_log,
1196                       "Allocation too large: %"UVxf"\n", (UV)newlen);
1197         my_exit(1);
1198     }
1199 #endif /* HAS_64K_LIMIT */
1200     if (SvROK(sv))
1201         sv_unref(sv);
1202     if (SvTYPE(sv) < SVt_PV) {
1203         sv_upgrade(sv, SVt_PV);
1204         s = SvPVX_mutable(sv);
1205     }
1206     else if (SvOOK(sv)) {       /* pv is offset? */
1207         sv_backoff(sv);
1208         s = SvPVX_mutable(sv);
1209         if (newlen > SvLEN(sv))
1210             newlen += 10 * (newlen - SvCUR(sv)); /* avoid copy each time */
1211 #ifdef HAS_64K_LIMIT
1212         if (newlen >= 0x10000)
1213             newlen = 0xFFFF;
1214 #endif
1215     }
1216     else
1217         s = SvPVX_mutable(sv);
1218
1219     if (newlen > SvLEN(sv)) {           /* need more room? */
1220         newlen = PERL_STRLEN_ROUNDUP(newlen);
1221         if (SvLEN(sv) && s) {
1222 #ifdef MYMALLOC
1223             const STRLEN l = malloced_size((void*)SvPVX_const(sv));
1224             if (newlen <= l) {
1225                 SvLEN_set(sv, l);
1226                 return s;
1227             } else
1228 #endif
1229             s = saferealloc(s, newlen);
1230         }
1231         else {
1232             s = safemalloc(newlen);
1233             if (SvPVX_const(sv) && SvCUR(sv)) {
1234                 Move(SvPVX_const(sv), s, (newlen < SvCUR(sv)) ? newlen : SvCUR(sv), char);
1235             }
1236         }
1237         SvPV_set(sv, s);
1238         SvLEN_set(sv, newlen);
1239     }
1240     return s;
1241 }
1242
1243 /*
1244 =for apidoc sv_setiv
1245
1246 Copies an integer into the given SV, upgrading first if necessary.
1247 Does not handle 'set' magic.  See also C<sv_setiv_mg>.
1248
1249 =cut
1250 */
1251
1252 void
1253 Perl_sv_setiv(pTHX_ register SV *sv, IV i)
1254 {
1255     SV_CHECK_THINKFIRST_COW_DROP(sv);
1256     switch (SvTYPE(sv)) {
1257     case SVt_NULL:
1258         sv_upgrade(sv, SVt_IV);
1259         break;
1260     case SVt_NV:
1261         sv_upgrade(sv, SVt_PVNV);
1262         break;
1263     case SVt_RV:
1264     case SVt_PV:
1265         sv_upgrade(sv, SVt_PVIV);
1266         break;
1267
1268     case SVt_PVGV:
1269     case SVt_PVAV:
1270     case SVt_PVHV:
1271     case SVt_PVCV:
1272     case SVt_PVFM:
1273     case SVt_PVIO:
1274         Perl_croak(aTHX_ "Can't coerce %s to integer in %s", sv_reftype(sv,0),
1275                    OP_DESC(PL_op));
1276     }
1277     (void)SvIOK_only(sv);                       /* validate number */
1278     SvIV_set(sv, i);
1279     SvTAINT(sv);
1280 }
1281
1282 /*
1283 =for apidoc sv_setiv_mg
1284
1285 Like C<sv_setiv>, but also handles 'set' magic.
1286
1287 =cut
1288 */
1289
1290 void
1291 Perl_sv_setiv_mg(pTHX_ register SV *sv, IV i)
1292 {
1293     sv_setiv(sv,i);
1294     SvSETMAGIC(sv);
1295 }
1296
1297 /*
1298 =for apidoc sv_setuv
1299
1300 Copies an unsigned integer into the given SV, upgrading first if necessary.
1301 Does not handle 'set' magic.  See also C<sv_setuv_mg>.
1302
1303 =cut
1304 */
1305
1306 void
1307 Perl_sv_setuv(pTHX_ register SV *sv, UV u)
1308 {
1309     /* With these two if statements:
1310        u=1.49  s=0.52  cu=72.49  cs=10.64  scripts=270  tests=20865
1311
1312        without
1313        u=1.35  s=0.47  cu=73.45  cs=11.43  scripts=270  tests=20865
1314
1315        If you wish to remove them, please benchmark to see what the effect is
1316     */
1317     if (u <= (UV)IV_MAX) {
1318        sv_setiv(sv, (IV)u);
1319        return;
1320     }
1321     sv_setiv(sv, 0);
1322     SvIsUV_on(sv);
1323     SvUV_set(sv, u);
1324 }
1325
1326 /*
1327 =for apidoc sv_setuv_mg
1328
1329 Like C<sv_setuv>, but also handles 'set' magic.
1330
1331 =cut
1332 */
1333
1334 void
1335 Perl_sv_setuv_mg(pTHX_ register SV *sv, UV u)
1336 {
1337     sv_setiv(sv, 0);
1338     SvIsUV_on(sv);
1339     sv_setuv(sv,u);
1340     SvSETMAGIC(sv);
1341 }
1342
1343 /*
1344 =for apidoc sv_setnv
1345
1346 Copies a double into the given SV, upgrading first if necessary.
1347 Does not handle 'set' magic.  See also C<sv_setnv_mg>.
1348
1349 =cut
1350 */
1351
1352 void
1353 Perl_sv_setnv(pTHX_ register SV *sv, NV num)
1354 {
1355     SV_CHECK_THINKFIRST_COW_DROP(sv);
1356     switch (SvTYPE(sv)) {
1357     case SVt_NULL:
1358     case SVt_IV:
1359         sv_upgrade(sv, SVt_NV);
1360         break;
1361     case SVt_RV:
1362     case SVt_PV:
1363     case SVt_PVIV:
1364         sv_upgrade(sv, SVt_PVNV);
1365         break;
1366
1367     case SVt_PVGV:
1368     case SVt_PVAV:
1369     case SVt_PVHV:
1370     case SVt_PVCV:
1371     case SVt_PVFM:
1372     case SVt_PVIO:
1373         Perl_croak(aTHX_ "Can't coerce %s to number in %s", sv_reftype(sv,0),
1374                    OP_NAME(PL_op));
1375     }
1376     SvNV_set(sv, num);
1377     (void)SvNOK_only(sv);                       /* validate number */
1378     SvTAINT(sv);
1379 }
1380
1381 /*
1382 =for apidoc sv_setnv_mg
1383
1384 Like C<sv_setnv>, but also handles 'set' magic.
1385
1386 =cut
1387 */
1388
1389 void
1390 Perl_sv_setnv_mg(pTHX_ register SV *sv, NV num)
1391 {
1392     sv_setnv(sv,num);
1393     SvSETMAGIC(sv);
1394 }
1395
1396 /* Print an "isn't numeric" warning, using a cleaned-up,
1397  * printable version of the offending string
1398  */
1399
1400 STATIC void
1401 S_not_a_number(pTHX_ SV *sv)
1402 {
1403      SV *dsv;
1404      char tmpbuf[64];
1405      const char *pv;
1406
1407      if (DO_UTF8(sv)) {
1408           dsv = sv_2mortal(newSVpvn("", 0));
1409           pv = sv_uni_display(dsv, sv, 10, 0);
1410      } else {
1411           char *d = tmpbuf;
1412           const char * const limit = tmpbuf + sizeof(tmpbuf) - 8;
1413           /* each *s can expand to 4 chars + "...\0",
1414              i.e. need room for 8 chars */
1415         
1416           const char *s = SvPVX_const(sv);
1417           const char * const end = s + SvCUR(sv);
1418           for ( ; s < end && d < limit; s++ ) {
1419                int ch = *s & 0xFF;
1420                if (ch & 128 && !isPRINT_LC(ch)) {
1421                     *d++ = 'M';
1422                     *d++ = '-';
1423                     ch &= 127;
1424                }
1425                if (ch == '\n') {
1426                     *d++ = '\\';
1427                     *d++ = 'n';
1428                }
1429                else if (ch == '\r') {
1430                     *d++ = '\\';
1431                     *d++ = 'r';
1432                }
1433                else if (ch == '\f') {
1434                     *d++ = '\\';
1435                     *d++ = 'f';
1436                }
1437                else if (ch == '\\') {
1438                     *d++ = '\\';
1439                     *d++ = '\\';
1440                }
1441                else if (ch == '\0') {
1442                     *d++ = '\\';
1443                     *d++ = '0';
1444                }
1445                else if (isPRINT_LC(ch))
1446                     *d++ = ch;
1447                else {
1448                     *d++ = '^';
1449                     *d++ = toCTRL(ch);
1450                }
1451           }
1452           if (s < end) {
1453                *d++ = '.';
1454                *d++ = '.';
1455                *d++ = '.';
1456           }
1457           *d = '\0';
1458           pv = tmpbuf;
1459     }
1460
1461     if (PL_op)
1462         Perl_warner(aTHX_ packWARN(WARN_NUMERIC),
1463                     "Argument \"%s\" isn't numeric in %s", pv,
1464                     OP_DESC(PL_op));
1465     else
1466         Perl_warner(aTHX_ packWARN(WARN_NUMERIC),
1467                     "Argument \"%s\" isn't numeric", pv);
1468 }
1469
1470 /*
1471 =for apidoc looks_like_number
1472
1473 Test if the content of an SV looks like a number (or is a number).
1474 C<Inf> and C<Infinity> are treated as numbers (so will not issue a
1475 non-numeric warning), even if your atof() doesn't grok them.
1476
1477 =cut
1478 */
1479
1480 I32
1481 Perl_looks_like_number(pTHX_ SV *sv)
1482 {
1483     register const char *sbegin;
1484     STRLEN len;
1485
1486     if (SvPOK(sv)) {
1487         sbegin = SvPVX_const(sv);
1488         len = SvCUR(sv);
1489     }
1490     else if (SvPOKp(sv))
1491         sbegin = SvPV_const(sv, len);
1492     else
1493         return SvFLAGS(sv) & (SVf_NOK|SVp_NOK|SVf_IOK|SVp_IOK);
1494     return grok_number(sbegin, len, NULL);
1495 }
1496
1497 /* Actually, ISO C leaves conversion of UV to IV undefined, but
1498    until proven guilty, assume that things are not that bad... */
1499
1500 /*
1501    NV_PRESERVES_UV:
1502
1503    As 64 bit platforms often have an NV that doesn't preserve all bits of
1504    an IV (an assumption perl has been based on to date) it becomes necessary
1505    to remove the assumption that the NV always carries enough precision to
1506    recreate the IV whenever needed, and that the NV is the canonical form.
1507    Instead, IV/UV and NV need to be given equal rights. So as to not lose
1508    precision as a side effect of conversion (which would lead to insanity
1509    and the dragon(s) in t/op/numconvert.t getting very angry) the intent is
1510    1) to distinguish between IV/UV/NV slots that have cached a valid
1511       conversion where precision was lost and IV/UV/NV slots that have a
1512       valid conversion which has lost no precision
1513    2) to ensure that if a numeric conversion to one form is requested that
1514       would lose precision, the precise conversion (or differently
1515       imprecise conversion) is also performed and cached, to prevent
1516       requests for different numeric formats on the same SV causing
1517       lossy conversion chains. (lossless conversion chains are perfectly
1518       acceptable (still))
1519
1520
1521    flags are used:
1522    SvIOKp is true if the IV slot contains a valid value
1523    SvIOK  is true only if the IV value is accurate (UV if SvIOK_UV true)
1524    SvNOKp is true if the NV slot contains a valid value
1525    SvNOK  is true only if the NV value is accurate
1526
1527    so
1528    while converting from PV to NV, check to see if converting that NV to an
1529    IV(or UV) would lose accuracy over a direct conversion from PV to
1530    IV(or UV). If it would, cache both conversions, return NV, but mark
1531    SV as IOK NOKp (ie not NOK).
1532
1533    While converting from PV to IV, check to see if converting that IV to an
1534    NV would lose accuracy over a direct conversion from PV to NV. If it
1535    would, cache both conversions, flag similarly.
1536
1537    Before, the SV value "3.2" could become NV=3.2 IV=3 NOK, IOK quite
1538    correctly because if IV & NV were set NV *always* overruled.
1539    Now, "3.2" will become NV=3.2 IV=3 NOK, IOKp, because the flag's meaning
1540    changes - now IV and NV together means that the two are interchangeable:
1541    SvIVX == (IV) SvNVX && SvNVX == (NV) SvIVX;
1542
1543    The benefit of this is that operations such as pp_add know that if
1544    SvIOK is true for both left and right operands, then integer addition
1545    can be used instead of floating point (for cases where the result won't
1546    overflow). Before, floating point was always used, which could lead to
1547    loss of precision compared with integer addition.
1548
1549    * making IV and NV equal status should make maths accurate on 64 bit
1550      platforms
1551    * may speed up maths somewhat if pp_add and friends start to use
1552      integers when possible instead of fp. (Hopefully the overhead in
1553      looking for SvIOK and checking for overflow will not outweigh the
1554      fp to integer speedup)
1555    * will slow down integer operations (callers of SvIV) on "inaccurate"
1556      values, as the change from SvIOK to SvIOKp will cause a call into
1557      sv_2iv each time rather than a macro access direct to the IV slot
1558    * should speed up number->string conversion on integers as IV is
1559      favoured when IV and NV are equally accurate
1560
1561    ####################################################################
1562    You had better be using SvIOK_notUV if you want an IV for arithmetic:
1563    SvIOK is true if (IV or UV), so you might be getting (IV)SvUV.
1564    On the other hand, SvUOK is true iff UV.
1565    ####################################################################
1566
1567    Your mileage will vary depending your CPU's relative fp to integer
1568    performance ratio.
1569 */
1570
1571 #ifndef NV_PRESERVES_UV
1572 #  define IS_NUMBER_UNDERFLOW_IV 1
1573 #  define IS_NUMBER_UNDERFLOW_UV 2
1574 #  define IS_NUMBER_IV_AND_UV    2
1575 #  define IS_NUMBER_OVERFLOW_IV  4
1576 #  define IS_NUMBER_OVERFLOW_UV  5
1577
1578 /* sv_2iuv_non_preserve(): private routine for use by sv_2iv() and sv_2uv() */
1579
1580 /* For sv_2nv these three cases are "SvNOK and don't bother casting"  */
1581 STATIC int
1582 S_sv_2iuv_non_preserve(pTHX_ register SV *sv, I32 numtype)
1583 {
1584     DEBUG_c(PerlIO_printf(Perl_debug_log,"sv_2iuv_non '%s', IV=0x%"UVxf" NV=%"NVgf" inttype=%"UVXf"\n", SvPVX_const(sv), SvIVX(sv), SvNVX(sv), (UV)numtype));
1585     if (SvNVX(sv) < (NV)IV_MIN) {
1586         (void)SvIOKp_on(sv);
1587         (void)SvNOK_on(sv);
1588         SvIV_set(sv, IV_MIN);
1589         return IS_NUMBER_UNDERFLOW_IV;
1590     }
1591     if (SvNVX(sv) > (NV)UV_MAX) {
1592         (void)SvIOKp_on(sv);
1593         (void)SvNOK_on(sv);
1594         SvIsUV_on(sv);
1595         SvUV_set(sv, UV_MAX);
1596         return IS_NUMBER_OVERFLOW_UV;
1597     }
1598     (void)SvIOKp_on(sv);
1599     (void)SvNOK_on(sv);
1600     /* Can't use strtol etc to convert this string.  (See truth table in
1601        sv_2iv  */
1602     if (SvNVX(sv) <= (UV)IV_MAX) {
1603         SvIV_set(sv, I_V(SvNVX(sv)));
1604         if ((NV)(SvIVX(sv)) == SvNVX(sv)) {
1605             SvIOK_on(sv); /* Integer is precise. NOK, IOK */
1606         } else {
1607             /* Integer is imprecise. NOK, IOKp */
1608         }
1609         return SvNVX(sv) < 0 ? IS_NUMBER_UNDERFLOW_UV : IS_NUMBER_IV_AND_UV;
1610     }
1611     SvIsUV_on(sv);
1612     SvUV_set(sv, U_V(SvNVX(sv)));
1613     if ((NV)(SvUVX(sv)) == SvNVX(sv)) {
1614         if (SvUVX(sv) == UV_MAX) {
1615             /* As we know that NVs don't preserve UVs, UV_MAX cannot
1616                possibly be preserved by NV. Hence, it must be overflow.
1617                NOK, IOKp */
1618             return IS_NUMBER_OVERFLOW_UV;
1619         }
1620         SvIOK_on(sv); /* Integer is precise. NOK, UOK */
1621     } else {
1622         /* Integer is imprecise. NOK, IOKp */
1623     }
1624     return IS_NUMBER_OVERFLOW_IV;
1625 }
1626 #endif /* !NV_PRESERVES_UV*/
1627
1628 STATIC bool
1629 S_sv_2iuv_common(pTHX_ SV *sv) {
1630     if (SvNOKp(sv)) {
1631         /* erm. not sure. *should* never get NOKp (without NOK) from sv_2nv
1632          * without also getting a cached IV/UV from it at the same time
1633          * (ie PV->NV conversion should detect loss of accuracy and cache
1634          * IV or UV at same time to avoid this. */
1635         /* IV-over-UV optimisation - choose to cache IV if possible */
1636
1637         if (SvTYPE(sv) == SVt_NV)
1638             sv_upgrade(sv, SVt_PVNV);
1639
1640         (void)SvIOKp_on(sv);    /* Must do this first, to clear any SvOOK */
1641         /* < not <= as for NV doesn't preserve UV, ((NV)IV_MAX+1) will almost
1642            certainly cast into the IV range at IV_MAX, whereas the correct
1643            answer is the UV IV_MAX +1. Hence < ensures that dodgy boundary
1644            cases go to UV */
1645         if (SvNVX(sv) < (NV)IV_MAX + 0.5) {
1646             SvIV_set(sv, I_V(SvNVX(sv)));
1647             if (SvNVX(sv) == (NV) SvIVX(sv)
1648 #ifndef NV_PRESERVES_UV
1649                 && (((UV)1 << NV_PRESERVES_UV_BITS) >
1650                     (UV)(SvIVX(sv) > 0 ? SvIVX(sv) : -SvIVX(sv)))
1651                 /* Don't flag it as "accurately an integer" if the number
1652                    came from a (by definition imprecise) NV operation, and
1653                    we're outside the range of NV integer precision */
1654 #endif
1655                 ) {
1656                 SvIOK_on(sv);  /* Can this go wrong with rounding? NWC */
1657                 DEBUG_c(PerlIO_printf(Perl_debug_log,
1658                                       "0x%"UVxf" iv(%"NVgf" => %"IVdf") (precise)\n",
1659                                       PTR2UV(sv),
1660                                       SvNVX(sv),
1661                                       SvIVX(sv)));
1662
1663             } else {
1664                 /* IV not precise.  No need to convert from PV, as NV
1665                    conversion would already have cached IV if it detected
1666                    that PV->IV would be better than PV->NV->IV
1667                    flags already correct - don't set public IOK.  */
1668                 DEBUG_c(PerlIO_printf(Perl_debug_log,
1669                                       "0x%"UVxf" iv(%"NVgf" => %"IVdf") (imprecise)\n",
1670                                       PTR2UV(sv),
1671                                       SvNVX(sv),
1672                                       SvIVX(sv)));
1673             }
1674             /* Can the above go wrong if SvIVX == IV_MIN and SvNVX < IV_MIN,
1675                but the cast (NV)IV_MIN rounds to a the value less (more
1676                negative) than IV_MIN which happens to be equal to SvNVX ??
1677                Analogous to 0xFFFFFFFFFFFFFFFF rounding up to NV (2**64) and
1678                NV rounding back to 0xFFFFFFFFFFFFFFFF, so UVX == UV(NVX) and
1679                (NV)UVX == NVX are both true, but the values differ. :-(
1680                Hopefully for 2s complement IV_MIN is something like
1681                0x8000000000000000 which will be exact. NWC */
1682         }
1683         else {
1684             SvUV_set(sv, U_V(SvNVX(sv)));
1685             if (
1686                 (SvNVX(sv) == (NV) SvUVX(sv))
1687 #ifndef  NV_PRESERVES_UV
1688                 /* Make sure it's not 0xFFFFFFFFFFFFFFFF */
1689                 /*&& (SvUVX(sv) != UV_MAX) irrelevant with code below */
1690                 && (((UV)1 << NV_PRESERVES_UV_BITS) > SvUVX(sv))
1691                 /* Don't flag it as "accurately an integer" if the number
1692                    came from a (by definition imprecise) NV operation, and
1693                    we're outside the range of NV integer precision */
1694 #endif
1695                 )
1696                 SvIOK_on(sv);
1697             SvIsUV_on(sv);
1698             DEBUG_c(PerlIO_printf(Perl_debug_log,
1699                                   "0x%"UVxf" 2iv(%"UVuf" => %"IVdf") (as unsigned)\n",
1700                                   PTR2UV(sv),
1701                                   SvUVX(sv),
1702                                   SvUVX(sv)));
1703         }
1704     }
1705     else if (SvPOKp(sv) && SvLEN(sv)) {
1706         UV value;
1707         const int numtype = grok_number(SvPVX_const(sv), SvCUR(sv), &value);
1708         /* We want to avoid a possible problem when we cache an IV/ a UV which
1709            may be later translated to an NV, and the resulting NV is not
1710            the same as the direct translation of the initial string
1711            (eg 123.456 can shortcut to the IV 123 with atol(), but we must
1712            be careful to ensure that the value with the .456 is around if the
1713            NV value is requested in the future).
1714         
1715            This means that if we cache such an IV/a UV, we need to cache the
1716            NV as well.  Moreover, we trade speed for space, and do not
1717            cache the NV if we are sure it's not needed.
1718          */
1719
1720         /* SVt_PVNV is one higher than SVt_PVIV, hence this order  */
1721         if ((numtype & (IS_NUMBER_IN_UV | IS_NUMBER_NOT_INT))
1722              == IS_NUMBER_IN_UV) {
1723             /* It's definitely an integer, only upgrade to PVIV */
1724             if (SvTYPE(sv) < SVt_PVIV)
1725                 sv_upgrade(sv, SVt_PVIV);
1726             (void)SvIOK_on(sv);
1727         } else if (SvTYPE(sv) < SVt_PVNV)
1728             sv_upgrade(sv, SVt_PVNV);
1729
1730         /* If NV preserves UV then we only use the UV value if we know that
1731            we aren't going to call atof() below. If NVs don't preserve UVs
1732            then the value returned may have more precision than atof() will
1733            return, even though value isn't perfectly accurate.  */
1734         if ((numtype & (IS_NUMBER_IN_UV
1735 #ifdef NV_PRESERVES_UV
1736                         | IS_NUMBER_NOT_INT
1737 #endif
1738             )) == IS_NUMBER_IN_UV) {
1739             /* This won't turn off the public IOK flag if it was set above  */
1740             (void)SvIOKp_on(sv);
1741
1742             if (!(numtype & IS_NUMBER_NEG)) {
1743                 /* positive */;
1744                 if (value <= (UV)IV_MAX) {
1745                     SvIV_set(sv, (IV)value);
1746                 } else {
1747                     /* it didn't overflow, and it was positive. */
1748                     SvUV_set(sv, value);
1749                     SvIsUV_on(sv);
1750                 }
1751             } else {
1752                 /* 2s complement assumption  */
1753                 if (value <= (UV)IV_MIN) {
1754                     SvIV_set(sv, -(IV)value);
1755                 } else {
1756                     /* Too negative for an IV.  This is a double upgrade, but
1757                        I'm assuming it will be rare.  */
1758                     if (SvTYPE(sv) < SVt_PVNV)
1759                         sv_upgrade(sv, SVt_PVNV);
1760                     SvNOK_on(sv);
1761                     SvIOK_off(sv);
1762                     SvIOKp_on(sv);
1763                     SvNV_set(sv, -(NV)value);
1764                     SvIV_set(sv, IV_MIN);
1765                 }
1766             }
1767         }
1768         /* For !NV_PRESERVES_UV and IS_NUMBER_IN_UV and IS_NUMBER_NOT_INT we
1769            will be in the previous block to set the IV slot, and the next
1770            block to set the NV slot.  So no else here.  */
1771         
1772         if ((numtype & (IS_NUMBER_IN_UV | IS_NUMBER_NOT_INT))
1773             != IS_NUMBER_IN_UV) {
1774             /* It wasn't an (integer that doesn't overflow the UV). */
1775             SvNV_set(sv, Atof(SvPVX_const(sv)));
1776
1777             if (! numtype && ckWARN(WARN_NUMERIC))
1778                 not_a_number(sv);
1779
1780 #if defined(USE_LONG_DOUBLE)
1781             DEBUG_c(PerlIO_printf(Perl_debug_log, "0x%"UVxf" 2iv(%" PERL_PRIgldbl ")\n",
1782                                   PTR2UV(sv), SvNVX(sv)));
1783 #else
1784             DEBUG_c(PerlIO_printf(Perl_debug_log, "0x%"UVxf" 2iv(%"NVgf")\n",
1785                                   PTR2UV(sv), SvNVX(sv)));
1786 #endif
1787
1788 #ifdef NV_PRESERVES_UV
1789             (void)SvIOKp_on(sv);
1790             (void)SvNOK_on(sv);
1791             if (SvNVX(sv) < (NV)IV_MAX + 0.5) {
1792                 SvIV_set(sv, I_V(SvNVX(sv)));
1793                 if ((NV)(SvIVX(sv)) == SvNVX(sv)) {
1794                     SvIOK_on(sv);
1795                 } else {
1796                     /* Integer is imprecise. NOK, IOKp */
1797                 }
1798                 /* UV will not work better than IV */
1799             } else {
1800                 if (SvNVX(sv) > (NV)UV_MAX) {
1801                     SvIsUV_on(sv);
1802                     /* Integer is inaccurate. NOK, IOKp, is UV */
1803                     SvUV_set(sv, UV_MAX);
1804                 } else {
1805                     SvUV_set(sv, U_V(SvNVX(sv)));
1806                     /* 0xFFFFFFFFFFFFFFFF not an issue in here, NVs
1807                        NV preservse UV so can do correct comparison.  */
1808                     if ((NV)(SvUVX(sv)) == SvNVX(sv)) {
1809                         SvIOK_on(sv);
1810                     } else {
1811                         /* Integer is imprecise. NOK, IOKp, is UV */
1812                     }
1813                 }
1814                 SvIsUV_on(sv);
1815             }
1816 #else /* NV_PRESERVES_UV */
1817             if ((numtype & (IS_NUMBER_IN_UV | IS_NUMBER_NOT_INT))
1818                 == (IS_NUMBER_IN_UV | IS_NUMBER_NOT_INT)) {
1819                 /* The IV/UV slot will have been set from value returned by
1820                    grok_number above.  The NV slot has just been set using
1821                    Atof.  */
1822                 SvNOK_on(sv);
1823                 assert (SvIOKp(sv));
1824             } else {
1825                 if (((UV)1 << NV_PRESERVES_UV_BITS) >
1826                     U_V(SvNVX(sv) > 0 ? SvNVX(sv) : -SvNVX(sv))) {
1827                     /* Small enough to preserve all bits. */
1828                     (void)SvIOKp_on(sv);
1829                     SvNOK_on(sv);
1830                     SvIV_set(sv, I_V(SvNVX(sv)));
1831                     if ((NV)(SvIVX(sv)) == SvNVX(sv))
1832                         SvIOK_on(sv);
1833                     /* Assumption: first non-preserved integer is < IV_MAX,
1834                        this NV is in the preserved range, therefore: */
1835                     if (!(U_V(SvNVX(sv) > 0 ? SvNVX(sv) : -SvNVX(sv))
1836                           < (UV)IV_MAX)) {
1837                         Perl_croak(aTHX_ "sv_2iv assumed (U_V(fabs((double)SvNVX(sv))) < (UV)IV_MAX) but SvNVX(sv)=%"NVgf" U_V is 0x%"UVxf", IV_MAX is 0x%"UVxf"\n", SvNVX(sv), U_V(SvNVX(sv)), (UV)IV_MAX);
1838                     }
1839                 } else {
1840                     /* IN_UV NOT_INT
1841                          0      0       already failed to read UV.
1842                          0      1       already failed to read UV.
1843                          1      0       you won't get here in this case. IV/UV
1844                                         slot set, public IOK, Atof() unneeded.
1845                          1      1       already read UV.
1846                        so there's no point in sv_2iuv_non_preserve() attempting
1847                        to use atol, strtol, strtoul etc.  */
1848                     sv_2iuv_non_preserve (sv, numtype);
1849                 }
1850             }
1851 #endif /* NV_PRESERVES_UV */
1852         }
1853     }
1854     else  {
1855         if (!(SvFLAGS(sv) & SVs_PADTMP)) {
1856             if (!PL_localizing && ckWARN(WARN_UNINITIALIZED))
1857                 report_uninit(sv);
1858         }
1859         if (SvTYPE(sv) < SVt_IV)
1860             /* Typically the caller expects that sv_any is not NULL now.  */
1861             sv_upgrade(sv, SVt_IV);
1862         /* Return 0 from the caller.  */
1863         return TRUE;
1864     }
1865     return FALSE;
1866 }
1867
1868 /*
1869 =for apidoc sv_2iv_flags
1870
1871 Return the integer value of an SV, doing any necessary string
1872 conversion.  If flags includes SV_GMAGIC, does an mg_get() first.
1873 Normally used via the C<SvIV(sv)> and C<SvIVx(sv)> macros.
1874
1875 =cut
1876 */
1877
1878 IV
1879 Perl_sv_2iv_flags(pTHX_ register SV *sv, I32 flags)
1880 {
1881     if (!sv)
1882         return 0;
1883     if (SvGMAGICAL(sv)) {
1884         if (flags & SV_GMAGIC)
1885             mg_get(sv);
1886         if (SvIOKp(sv))
1887             return SvIVX(sv);
1888         if (SvNOKp(sv)) {
1889             return I_V(SvNVX(sv));
1890         }
1891         if (SvPOKp(sv) && SvLEN(sv)) {
1892             UV value;
1893             const int numtype
1894                 = grok_number(SvPVX_const(sv), SvCUR(sv), &value);
1895
1896             if ((numtype & (IS_NUMBER_IN_UV | IS_NUMBER_NOT_INT))
1897                 == IS_NUMBER_IN_UV) {
1898                 /* It's definitely an integer */
1899                 if (numtype & IS_NUMBER_NEG) {
1900                     if (value < (UV)IV_MIN)
1901                         return -(IV)value;
1902                 } else {
1903                     if (value < (UV)IV_MAX)
1904                         return (IV)value;
1905                 }
1906             }
1907             if (!numtype) {
1908                 if (ckWARN(WARN_NUMERIC))
1909                     not_a_number(sv);
1910             }
1911             return I_V(Atof(SvPVX_const(sv)));
1912         }
1913         if (SvROK(sv)) {
1914             goto return_rok;
1915         }
1916         assert(SvTYPE(sv) >= SVt_PVMG);
1917         /* This falls through to the report_uninit inside S_sv_2iuv_common.  */
1918     } else if (SvTHINKFIRST(sv)) {
1919         if (SvROK(sv)) {
1920         return_rok:
1921             if (SvAMAGIC(sv)) {
1922                 SV * const tmpstr=AMG_CALLun(sv,numer);
1923                 if (tmpstr && (!SvROK(tmpstr) || (SvRV(tmpstr) != SvRV(sv)))) {
1924                     return SvIV(tmpstr);
1925                 }
1926             }
1927             return PTR2IV(SvRV(sv));
1928         }
1929         if (SvIsCOW(sv)) {
1930             sv_force_normal_flags(sv, 0);
1931         }
1932         if (SvREADONLY(sv) && !SvOK(sv)) {
1933             if (ckWARN(WARN_UNINITIALIZED))
1934                 report_uninit(sv);
1935             return 0;
1936         }
1937     }
1938     if (!SvIOKp(sv)) {
1939         if (S_sv_2iuv_common(aTHX_ sv))
1940             return 0;
1941     }
1942     DEBUG_c(PerlIO_printf(Perl_debug_log, "0x%"UVxf" 2iv(%"IVdf")\n",
1943         PTR2UV(sv),SvIVX(sv)));
1944     return SvIsUV(sv) ? (IV)SvUVX(sv) : SvIVX(sv);
1945 }
1946
1947 /*
1948 =for apidoc sv_2uv_flags
1949
1950 Return the unsigned integer value of an SV, doing any necessary string
1951 conversion.  If flags includes SV_GMAGIC, does an mg_get() first.
1952 Normally used via the C<SvUV(sv)> and C<SvUVx(sv)> macros.
1953
1954 =cut
1955 */
1956
1957 UV
1958 Perl_sv_2uv_flags(pTHX_ register SV *sv, I32 flags)
1959 {
1960     if (!sv)
1961         return 0;
1962     if (SvGMAGICAL(sv)) {
1963         if (flags & SV_GMAGIC)
1964             mg_get(sv);
1965         if (SvIOKp(sv))
1966             return SvUVX(sv);
1967         if (SvNOKp(sv))
1968             return U_V(SvNVX(sv));
1969         if (SvPOKp(sv) && SvLEN(sv)) {
1970             UV value;
1971             const int numtype
1972                 = grok_number(SvPVX_const(sv), SvCUR(sv), &value);
1973
1974             if ((numtype & (IS_NUMBER_IN_UV | IS_NUMBER_NOT_INT))
1975                 == IS_NUMBER_IN_UV) {
1976                 /* It's definitely an integer */
1977                 if (!(numtype & IS_NUMBER_NEG))
1978                     return value;
1979             }
1980             if (!numtype) {
1981                 if (ckWARN(WARN_NUMERIC))
1982                     not_a_number(sv);
1983             }
1984             return U_V(Atof(SvPVX_const(sv)));
1985         }
1986         if (SvROK(sv)) {
1987             goto return_rok;
1988         }
1989         assert(SvTYPE(sv) >= SVt_PVMG);
1990         /* This falls through to the report_uninit inside S_sv_2iuv_common.  */
1991     } else if (SvTHINKFIRST(sv)) {
1992         if (SvROK(sv)) {
1993         return_rok:
1994             if (SvAMAGIC(sv)) {
1995                 SV *const tmpstr = AMG_CALLun(sv,numer);
1996                 if (tmpstr && (!SvROK(tmpstr) || (SvRV(tmpstr) != SvRV(sv)))) {
1997                     return SvUV(tmpstr);
1998                 }
1999             }
2000             return PTR2UV(SvRV(sv));
2001         }
2002         if (SvIsCOW(sv)) {
2003             sv_force_normal_flags(sv, 0);
2004         }
2005         if (SvREADONLY(sv) && !SvOK(sv)) {
2006             if (ckWARN(WARN_UNINITIALIZED))
2007                 report_uninit(sv);
2008             return 0;
2009         }
2010     }
2011     if (!SvIOKp(sv)) {
2012         if (S_sv_2iuv_common(aTHX_ sv))
2013             return 0;
2014     }
2015
2016     DEBUG_c(PerlIO_printf(Perl_debug_log, "0x%"UVxf" 2uv(%"UVuf")\n",
2017                           PTR2UV(sv),SvUVX(sv)));
2018     return SvIsUV(sv) ? SvUVX(sv) : (UV)SvIVX(sv);
2019 }
2020
2021 /*
2022 =for apidoc sv_2nv
2023
2024 Return the num value of an SV, doing any necessary string or integer
2025 conversion, magic etc. Normally used via the C<SvNV(sv)> and C<SvNVx(sv)>
2026 macros.
2027
2028 =cut
2029 */
2030
2031 NV
2032 Perl_sv_2nv(pTHX_ register SV *sv)
2033 {
2034     if (!sv)
2035         return 0.0;
2036     if (SvGMAGICAL(sv)) {
2037         mg_get(sv);
2038         if (SvNOKp(sv))
2039             return SvNVX(sv);
2040         if (SvPOKp(sv) && SvLEN(sv)) {
2041             if (!SvIOKp(sv) && ckWARN(WARN_NUMERIC) &&
2042                 !grok_number(SvPVX_const(sv), SvCUR(sv), NULL))
2043                 not_a_number(sv);
2044             return Atof(SvPVX_const(sv));
2045         }
2046         if (SvIOKp(sv)) {
2047             if (SvIsUV(sv))
2048                 return (NV)SvUVX(sv);
2049             else
2050                 return (NV)SvIVX(sv);
2051         }
2052         if (SvROK(sv)) {
2053             goto return_rok;
2054         }
2055         assert(SvTYPE(sv) >= SVt_PVMG);
2056         /* This falls through to the report_uninit near the end of the
2057            function. */
2058     } else if (SvTHINKFIRST(sv)) {
2059         if (SvROK(sv)) {
2060         return_rok:
2061             if (SvAMAGIC(sv)) {
2062                 SV *const tmpstr = AMG_CALLun(sv,numer);
2063                 if (tmpstr && (!SvROK(tmpstr) || (SvRV(tmpstr) != SvRV(sv)))) {
2064                     return SvNV(tmpstr);
2065                 }
2066             }
2067             return PTR2NV(SvRV(sv));
2068         }
2069         if (SvIsCOW(sv)) {
2070             sv_force_normal_flags(sv, 0);
2071         }
2072         if (SvREADONLY(sv) && !SvOK(sv)) {
2073             if (ckWARN(WARN_UNINITIALIZED))
2074                 report_uninit(sv);
2075             return 0.0;
2076         }
2077     }
2078     if (SvTYPE(sv) < SVt_NV) {
2079         /* The logic to use SVt_PVNV if necessary is in sv_upgrade.  */
2080         sv_upgrade(sv, SVt_NV);
2081 #ifdef USE_LONG_DOUBLE
2082         DEBUG_c({
2083             STORE_NUMERIC_LOCAL_SET_STANDARD();
2084             PerlIO_printf(Perl_debug_log,
2085                           "0x%"UVxf" num(%" PERL_PRIgldbl ")\n",
2086                           PTR2UV(sv), SvNVX(sv));
2087             RESTORE_NUMERIC_LOCAL();
2088         });
2089 #else
2090         DEBUG_c({
2091             STORE_NUMERIC_LOCAL_SET_STANDARD();
2092             PerlIO_printf(Perl_debug_log, "0x%"UVxf" num(%"NVgf")\n",
2093                           PTR2UV(sv), SvNVX(sv));
2094             RESTORE_NUMERIC_LOCAL();
2095         });
2096 #endif
2097     }
2098     else if (SvTYPE(sv) < SVt_PVNV)
2099         sv_upgrade(sv, SVt_PVNV);
2100     if (SvNOKp(sv)) {
2101         return SvNVX(sv);
2102     }
2103     if (SvIOKp(sv)) {
2104         SvNV_set(sv, SvIsUV(sv) ? (NV)SvUVX(sv) : (NV)SvIVX(sv));
2105 #ifdef NV_PRESERVES_UV
2106         SvNOK_on(sv);
2107 #else
2108         /* Only set the public NV OK flag if this NV preserves the IV  */
2109         /* Check it's not 0xFFFFFFFFFFFFFFFF */
2110         if (SvIsUV(sv) ? ((SvUVX(sv) != UV_MAX)&&(SvUVX(sv) == U_V(SvNVX(sv))))
2111                        : (SvIVX(sv) == I_V(SvNVX(sv))))
2112             SvNOK_on(sv);
2113         else
2114             SvNOKp_on(sv);
2115 #endif
2116     }
2117     else if (SvPOKp(sv) && SvLEN(sv)) {
2118         UV value;
2119         const int numtype = grok_number(SvPVX_const(sv), SvCUR(sv), &value);
2120         if (!SvIOKp(sv) && !numtype && ckWARN(WARN_NUMERIC))
2121             not_a_number(sv);
2122 #ifdef NV_PRESERVES_UV
2123         if ((numtype & (IS_NUMBER_IN_UV | IS_NUMBER_NOT_INT))
2124             == IS_NUMBER_IN_UV) {
2125             /* It's definitely an integer */
2126             SvNV_set(sv, (numtype & IS_NUMBER_NEG) ? -(NV)value : (NV)value);
2127         } else
2128             SvNV_set(sv, Atof(SvPVX_const(sv)));
2129         SvNOK_on(sv);
2130 #else
2131         SvNV_set(sv, Atof(SvPVX_const(sv)));
2132         /* Only set the public NV OK flag if this NV preserves the value in
2133            the PV at least as well as an IV/UV would.
2134            Not sure how to do this 100% reliably. */
2135         /* if that shift count is out of range then Configure's test is
2136            wonky. We shouldn't be in here with NV_PRESERVES_UV_BITS ==
2137            UV_BITS */
2138         if (((UV)1 << NV_PRESERVES_UV_BITS) >
2139             U_V(SvNVX(sv) > 0 ? SvNVX(sv) : -SvNVX(sv))) {
2140             SvNOK_on(sv); /* Definitely small enough to preserve all bits */
2141         } else if (!(numtype & IS_NUMBER_IN_UV)) {
2142             /* Can't use strtol etc to convert this string, so don't try.
2143                sv_2iv and sv_2uv will use the NV to convert, not the PV.  */
2144             SvNOK_on(sv);
2145         } else {
2146             /* value has been set.  It may not be precise.  */
2147             if ((numtype & IS_NUMBER_NEG) && (value > (UV)IV_MIN)) {
2148                 /* 2s complement assumption for (UV)IV_MIN  */
2149                 SvNOK_on(sv); /* Integer is too negative.  */
2150             } else {
2151                 SvNOKp_on(sv);
2152                 SvIOKp_on(sv);
2153
2154                 if (numtype & IS_NUMBER_NEG) {
2155                     SvIV_set(sv, -(IV)value);
2156                 } else if (value <= (UV)IV_MAX) {
2157                     SvIV_set(sv, (IV)value);
2158                 } else {
2159                     SvUV_set(sv, value);
2160                     SvIsUV_on(sv);
2161                 }
2162
2163                 if (numtype & IS_NUMBER_NOT_INT) {
2164                     /* I believe that even if the original PV had decimals,
2165                        they are lost beyond the limit of the FP precision.
2166                        However, neither is canonical, so both only get p
2167                        flags.  NWC, 2000/11/25 */
2168                     /* Both already have p flags, so do nothing */
2169                 } else {
2170                     const NV nv = SvNVX(sv);
2171                     if (SvNVX(sv) < (NV)IV_MAX + 0.5) {
2172                         if (SvIVX(sv) == I_V(nv)) {
2173                             SvNOK_on(sv);
2174                         } else {
2175                             /* It had no "." so it must be integer.  */
2176                         }
2177                         SvIOK_on(sv);
2178                     } else {
2179                         /* between IV_MAX and NV(UV_MAX).
2180                            Could be slightly > UV_MAX */
2181
2182                         if (numtype & IS_NUMBER_NOT_INT) {
2183                             /* UV and NV both imprecise.  */
2184                         } else {
2185                             const UV nv_as_uv = U_V(nv);
2186
2187                             if (value == nv_as_uv && SvUVX(sv) != UV_MAX) {
2188                                 SvNOK_on(sv);
2189                             }
2190                             SvIOK_on(sv);
2191                         }
2192                     }
2193                 }
2194             }
2195         }
2196 #endif /* NV_PRESERVES_UV */
2197     }
2198     else  {
2199         if (!PL_localizing && !(SvFLAGS(sv) & SVs_PADTMP) && ckWARN(WARN_UNINITIALIZED))
2200             report_uninit(sv);
2201         assert (SvTYPE(sv) >= SVt_NV);
2202         /* Typically the caller expects that sv_any is not NULL now.  */
2203         /* XXX Ilya implies that this is a bug in callers that assume this
2204            and ideally should be fixed.  */
2205         return 0.0;
2206     }
2207 #if defined(USE_LONG_DOUBLE)
2208     DEBUG_c({
2209         STORE_NUMERIC_LOCAL_SET_STANDARD();
2210         PerlIO_printf(Perl_debug_log, "0x%"UVxf" 2nv(%" PERL_PRIgldbl ")\n",
2211                       PTR2UV(sv), SvNVX(sv));
2212         RESTORE_NUMERIC_LOCAL();
2213     });
2214 #else
2215     DEBUG_c({
2216         STORE_NUMERIC_LOCAL_SET_STANDARD();
2217         PerlIO_printf(Perl_debug_log, "0x%"UVxf" 1nv(%"NVgf")\n",
2218                       PTR2UV(sv), SvNVX(sv));
2219         RESTORE_NUMERIC_LOCAL();
2220     });
2221 #endif
2222     return SvNVX(sv);
2223 }
2224
2225 /* uiv_2buf(): private routine for use by sv_2pv_flags(): print an IV or
2226  * UV as a string towards the end of buf, and return pointers to start and
2227  * end of it.
2228  *
2229  * We assume that buf is at least TYPE_CHARS(UV) long.
2230  */
2231
2232 static char *
2233 S_uiv_2buf(char *buf, IV iv, UV uv, int is_uv, char **peob)
2234 {
2235     char *ptr = buf + TYPE_CHARS(UV);
2236     char * const ebuf = ptr;
2237     int sign;
2238
2239     if (is_uv)
2240         sign = 0;
2241     else if (iv >= 0) {
2242         uv = iv;
2243         sign = 0;
2244     } else {
2245         uv = -iv;
2246         sign = 1;
2247     }
2248     do {
2249         *--ptr = '0' + (char)(uv % 10);
2250     } while (uv /= 10);
2251     if (sign)
2252         *--ptr = '-';
2253     *peob = ebuf;
2254     return ptr;
2255 }
2256
2257 /* stringify_regexp(): private routine for use by sv_2pv_flags(): converts
2258  * a regexp to its stringified form.
2259  */
2260
2261 static char *
2262 S_stringify_regexp(pTHX_ SV *sv, MAGIC *mg, STRLEN *lp) {
2263     const regexp * const re = (regexp *)mg->mg_obj;
2264
2265     if (!mg->mg_ptr) {
2266         const char *fptr = "msix";
2267         char reflags[6];
2268         char ch;
2269         int left = 0;
2270         int right = 4;
2271         bool need_newline = 0;
2272         U16 reganch = (U16)((re->reganch & PMf_COMPILETIME) >> 12);
2273
2274         while((ch = *fptr++)) {
2275             if(reganch & 1) {
2276                 reflags[left++] = ch;
2277             }
2278             else {
2279                 reflags[right--] = ch;
2280             }
2281             reganch >>= 1;
2282         }
2283         if(left != 4) {
2284             reflags[left] = '-';
2285             left = 5;
2286         }
2287
2288         mg->mg_len = re->prelen + 4 + left;
2289         /*
2290          * If /x was used, we have to worry about a regex ending with a
2291          * comment later being embedded within another regex. If so, we don't
2292          * want this regex's "commentization" to leak out to the right part of
2293          * the enclosing regex, we must cap it with a newline.
2294          *
2295          * So, if /x was used, we scan backwards from the end of the regex. If
2296          * we find a '#' before we find a newline, we need to add a newline
2297          * ourself. If we find a '\n' first (or if we don't find '#' or '\n'),
2298          * we don't need to add anything.  -jfriedl
2299          */
2300         if (PMf_EXTENDED & re->reganch) {
2301             const char *endptr = re->precomp + re->prelen;
2302             while (endptr >= re->precomp) {
2303                 const char c = *(endptr--);
2304                 if (c == '\n')
2305                     break; /* don't need another */
2306                 if (c == '#') {
2307                     /* we end while in a comment, so we need a newline */
2308                     mg->mg_len++; /* save space for it */
2309                     need_newline = 1; /* note to add it */
2310                     break;
2311                 }
2312             }
2313         }
2314
2315         Newx(mg->mg_ptr, mg->mg_len + 1 + left, char);
2316         mg->mg_ptr[0] = '(';
2317         mg->mg_ptr[1] = '?';
2318         Copy(reflags, mg->mg_ptr+2, left, char);
2319         *(mg->mg_ptr+left+2) = ':';
2320         Copy(re->precomp, mg->mg_ptr+3+left, re->prelen, char);
2321         if (need_newline)
2322             mg->mg_ptr[mg->mg_len - 2] = '\n';
2323         mg->mg_ptr[mg->mg_len - 1] = ')';
2324         mg->mg_ptr[mg->mg_len] = 0;
2325     }
2326     PL_reginterp_cnt += re->program[0].next_off;
2327     
2328     if (re->reganch & ROPT_UTF8)
2329         SvUTF8_on(sv);
2330     else
2331         SvUTF8_off(sv);
2332     if (lp)
2333         *lp = mg->mg_len;
2334     return mg->mg_ptr;
2335 }
2336
2337 /*
2338 =for apidoc sv_2pv_flags
2339
2340 Returns a pointer to the string value of an SV, and sets *lp to its length.
2341 If flags includes SV_GMAGIC, does an mg_get() first. Coerces sv to a string
2342 if necessary.
2343 Normally invoked via the C<SvPV_flags> macro. C<sv_2pv()> and C<sv_2pv_nomg>
2344 usually end up here too.
2345
2346 =cut
2347 */
2348
2349 char *
2350 Perl_sv_2pv_flags(pTHX_ register SV *sv, STRLEN *lp, I32 flags)
2351 {
2352     register char *s;
2353
2354     if (!sv) {
2355         if (lp)
2356             *lp = 0;
2357         return (char *)"";
2358     }
2359     if (SvGMAGICAL(sv)) {
2360         if (flags & SV_GMAGIC)
2361             mg_get(sv);
2362         if (SvPOKp(sv)) {
2363             if (lp)
2364                 *lp = SvCUR(sv);
2365             if (flags & SV_MUTABLE_RETURN)
2366                 return SvPVX_mutable(sv);
2367             if (flags & SV_CONST_RETURN)
2368                 return (char *)SvPVX_const(sv);
2369             return SvPVX(sv);
2370         }
2371         if (SvIOKp(sv) || SvNOKp(sv)) {
2372             char tbuf[64];  /* Must fit sprintf/Gconvert of longest IV/NV */
2373             STRLEN len;
2374
2375             if (SvIOKp(sv)) {
2376                 len = SvIsUV(sv) ? my_sprintf(tbuf,"%"UVuf, (UV)SvUVX(sv))
2377                     : my_sprintf(tbuf,"%"IVdf, (IV)SvIVX(sv));
2378             } else {
2379                 Gconvert(SvNVX(sv), NV_DIG, 0, tbuf);
2380                 len = strlen(tbuf);
2381             }
2382             if (SvROK(sv)) {    /* XXX Skip this when sv_pvn_force calls */
2383                 /* Sneaky stuff here */
2384                 SV * const tsv = newSVpvn(tbuf, len);
2385
2386                 sv_2mortal(tsv);
2387                 if (lp)
2388                     *lp = SvCUR(tsv);
2389                 return SvPVX(tsv);
2390             }
2391             else {
2392                 dVAR;
2393
2394 #ifdef FIXNEGATIVEZERO
2395                 if (len == 2 && tbuf[0] == '-' && tbuf[1] == '0') {
2396                     tbuf[0] = '0';
2397                     tbuf[1] = 0;
2398                     len = 1;
2399                 }
2400 #endif
2401                 SvUPGRADE(sv, SVt_PV);
2402                 if (lp)
2403                     *lp = len;
2404                 s = SvGROW_mutable(sv, len + 1);
2405                 SvCUR_set(sv, len);
2406                 SvPOKp_on(sv);
2407                 return memcpy(s, tbuf, len + 1);
2408             }
2409         }
2410         if (SvROK(sv)) {
2411             goto return_rok;
2412         }
2413         assert(SvTYPE(sv) >= SVt_PVMG);
2414         /* This falls through to the report_uninit near the end of the
2415            function. */
2416     } else if (SvTHINKFIRST(sv)) {
2417         if (SvROK(sv)) {
2418         return_rok:
2419             if (SvAMAGIC(sv)) {
2420                 SV *const tmpstr = AMG_CALLun(sv,string);
2421                 if (tmpstr && (!SvROK(tmpstr) || (SvRV(tmpstr) != SvRV(sv)))) {
2422                     /* Unwrap this:  */
2423                     /* char *pv = lp ? SvPV(tmpstr, *lp) : SvPV_nolen(tmpstr);
2424                      */
2425
2426                     char *pv;
2427                     if ((SvFLAGS(tmpstr) & (SVf_POK)) == SVf_POK) {
2428                         if (flags & SV_CONST_RETURN) {
2429                             pv = (char *) SvPVX_const(tmpstr);
2430                         } else {
2431                             pv = (flags & SV_MUTABLE_RETURN)
2432                                 ? SvPVX_mutable(tmpstr) : SvPVX(tmpstr);
2433                         }
2434                         if (lp)
2435                             *lp = SvCUR(tmpstr);
2436                     } else {
2437                         pv = sv_2pv_flags(tmpstr, lp, flags);
2438                     }
2439                     if (SvUTF8(tmpstr))
2440                         SvUTF8_on(sv);
2441                     else
2442                         SvUTF8_off(sv);
2443                     return pv;
2444                 }
2445             }
2446             {
2447                 SV *tsv;
2448                 MAGIC *mg;
2449                 const SV *const referent = (SV*)SvRV(sv);
2450
2451                 if (!referent) {
2452                     tsv = sv_2mortal(newSVpvn("NULLREF", 7));
2453                 } else if (SvTYPE(referent) == SVt_PVMG
2454                            && ((SvFLAGS(referent) &
2455                                 (SVs_OBJECT|SVf_OK|SVs_GMG|SVs_SMG|SVs_RMG))
2456                                == (SVs_OBJECT|SVs_SMG))
2457                            && (mg = mg_find(referent, PERL_MAGIC_qr))) {
2458                     return stringify_regexp(sv, mg, lp);
2459                 } else {
2460                     const char *const typestr = sv_reftype(referent, 0);
2461
2462                     tsv = sv_newmortal();
2463                     if (SvOBJECT(referent)) {
2464                         const char *const name = HvNAME_get(SvSTASH(referent));
2465                         Perl_sv_setpvf(aTHX_ tsv, "%s=%s(0x%"UVxf")",
2466                                        name ? name : "__ANON__" , typestr,
2467                                        PTR2UV(referent));
2468                     }
2469                     else
2470                         Perl_sv_setpvf(aTHX_ tsv, "%s(0x%"UVxf")", typestr,
2471                                        PTR2UV(referent));
2472                 }
2473                 if (lp)
2474                     *lp = SvCUR(tsv);
2475                 return SvPVX(tsv);
2476             }
2477         }
2478         if (SvREADONLY(sv) && !SvOK(sv)) {
2479             if (ckWARN(WARN_UNINITIALIZED))
2480                 report_uninit(sv);
2481             if (lp)
2482                 *lp = 0;
2483             return (char *)"";
2484         }
2485     }
2486     if (SvIOK(sv) || ((SvIOKp(sv) && !SvNOKp(sv)))) {
2487         /* I'm assuming that if both IV and NV are equally valid then
2488            converting the IV is going to be more efficient */
2489         const U32 isIOK = SvIOK(sv);
2490         const U32 isUIOK = SvIsUV(sv);
2491         char buf[TYPE_CHARS(UV)];
2492         char *ebuf, *ptr;
2493
2494         if (SvTYPE(sv) < SVt_PVIV)
2495             sv_upgrade(sv, SVt_PVIV);
2496         ptr = uiv_2buf(buf, SvIVX(sv), SvUVX(sv), isUIOK, &ebuf);
2497         /* inlined from sv_setpvn */
2498         SvGROW_mutable(sv, (STRLEN)(ebuf - ptr + 1));
2499         Move(ptr,SvPVX_mutable(sv),ebuf - ptr,char);
2500         SvCUR_set(sv, ebuf - ptr);
2501         s = SvEND(sv);
2502         *s = '\0';
2503         if (isIOK)
2504             SvIOK_on(sv);
2505         else
2506             SvIOKp_on(sv);
2507         if (isUIOK)
2508             SvIsUV_on(sv);
2509     }
2510     else if (SvNOKp(sv)) {
2511         const int olderrno = errno;
2512         if (SvTYPE(sv) < SVt_PVNV)
2513             sv_upgrade(sv, SVt_PVNV);
2514         /* The +20 is pure guesswork.  Configure test needed. --jhi */
2515         s = SvGROW_mutable(sv, NV_DIG + 20);
2516         /* some Xenix systems wipe out errno here */
2517 #ifdef apollo
2518         if (SvNVX(sv) == 0.0)
2519             (void)strcpy(s,"0");
2520         else
2521 #endif /*apollo*/
2522         {
2523             Gconvert(SvNVX(sv), NV_DIG, 0, s);
2524         }
2525         errno = olderrno;
2526 #ifdef FIXNEGATIVEZERO
2527         if (*s == '-' && s[1] == '0' && !s[2])
2528             strcpy(s,"0");
2529 #endif
2530         while (*s) s++;
2531 #ifdef hcx
2532         if (s[-1] == '.')
2533             *--s = '\0';
2534 #endif
2535     }
2536     else {
2537         if (!PL_localizing && !(SvFLAGS(sv) & SVs_PADTMP) && ckWARN(WARN_UNINITIALIZED))
2538             report_uninit(sv);
2539         if (lp)
2540             *lp = 0;
2541         if (SvTYPE(sv) < SVt_PV)
2542             /* Typically the caller expects that sv_any is not NULL now.  */
2543             sv_upgrade(sv, SVt_PV);
2544         return (char *)"";
2545     }
2546     {
2547         const STRLEN len = s - SvPVX_const(sv);
2548         if (lp) 
2549             *lp = len;
2550         SvCUR_set(sv, len);
2551     }
2552     SvPOK_on(sv);
2553     DEBUG_c(PerlIO_printf(Perl_debug_log, "0x%"UVxf" 2pv(%s)\n",
2554                           PTR2UV(sv),SvPVX_const(sv)));
2555     if (flags & SV_CONST_RETURN)
2556         return (char *)SvPVX_const(sv);
2557     if (flags & SV_MUTABLE_RETURN)
2558         return SvPVX_mutable(sv);
2559     return SvPVX(sv);
2560 }
2561
2562 /*
2563 =for apidoc sv_copypv
2564
2565 Copies a stringified representation of the source SV into the
2566 destination SV.  Automatically performs any necessary mg_get and
2567 coercion of numeric values into strings.  Guaranteed to preserve
2568 UTF-8 flag even from overloaded objects.  Similar in nature to
2569 sv_2pv[_flags] but operates directly on an SV instead of just the
2570 string.  Mostly uses sv_2pv_flags to do its work, except when that
2571 would lose the UTF-8'ness of the PV.
2572
2573 =cut
2574 */
2575
2576 void
2577 Perl_sv_copypv(pTHX_ SV *dsv, register SV *ssv)
2578 {
2579     STRLEN len;
2580     const char * const s = SvPV_const(ssv,len);
2581     sv_setpvn(dsv,s,len);
2582     if (SvUTF8(ssv))
2583         SvUTF8_on(dsv);
2584     else
2585         SvUTF8_off(dsv);
2586 }
2587
2588 /*
2589 =for apidoc sv_2pvbyte
2590
2591 Return a pointer to the byte-encoded representation of the SV, and set *lp
2592 to its length.  May cause the SV to be downgraded from UTF-8 as a
2593 side-effect.
2594
2595 Usually accessed via the C<SvPVbyte> macro.
2596
2597 =cut
2598 */
2599
2600 char *
2601 Perl_sv_2pvbyte(pTHX_ register SV *sv, STRLEN *lp)
2602 {
2603     sv_utf8_downgrade(sv,0);
2604     return lp ? SvPV(sv,*lp) : SvPV_nolen(sv);
2605 }
2606
2607 /*
2608 =for apidoc sv_2pvutf8
2609
2610 Return a pointer to the UTF-8-encoded representation of the SV, and set *lp
2611 to its length.  May cause the SV to be upgraded to UTF-8 as a side-effect.
2612
2613 Usually accessed via the C<SvPVutf8> macro.
2614
2615 =cut
2616 */
2617
2618 char *
2619 Perl_sv_2pvutf8(pTHX_ register SV *sv, STRLEN *lp)
2620 {
2621     sv_utf8_upgrade(sv);
2622     return lp ? SvPV(sv,*lp) : SvPV_nolen(sv);
2623 }
2624
2625
2626 /*
2627 =for apidoc sv_2bool
2628
2629 This function is only called on magical items, and is only used by
2630 sv_true() or its macro equivalent.
2631
2632 =cut
2633 */
2634
2635 bool
2636 Perl_sv_2bool(pTHX_ register SV *sv)
2637 {
2638     SvGETMAGIC(sv);
2639
2640     if (!SvOK(sv))
2641         return 0;
2642     if (SvROK(sv)) {
2643         if (SvAMAGIC(sv)) {
2644             SV * const tmpsv = AMG_CALLun(sv,bool_);
2645             if (tmpsv && (!SvROK(tmpsv) || (SvRV(tmpsv) != SvRV(sv))))
2646                 return (bool)SvTRUE(tmpsv);
2647         }
2648         return SvRV(sv) != 0;
2649     }
2650     if (SvPOKp(sv)) {
2651         register XPV* const Xpvtmp = (XPV*)SvANY(sv);
2652         if (Xpvtmp &&
2653                 (*sv->sv_u.svu_pv > '0' ||
2654                 Xpvtmp->xpv_cur > 1 ||
2655                 (Xpvtmp->xpv_cur && *sv->sv_u.svu_pv != '0')))
2656             return 1;
2657         else
2658             return 0;
2659     }
2660     else {
2661         if (SvIOKp(sv))
2662             return SvIVX(sv) != 0;
2663         else {
2664             if (SvNOKp(sv))
2665                 return SvNVX(sv) != 0.0;
2666             else
2667                 return FALSE;
2668         }
2669     }
2670 }
2671
2672 /*
2673 =for apidoc sv_utf8_upgrade
2674
2675 Converts the PV of an SV to its UTF-8-encoded form.
2676 Forces the SV to string form if it is not already.
2677 Always sets the SvUTF8 flag to avoid future validity checks even
2678 if all the bytes have hibit clear.
2679
2680 This is not as a general purpose byte encoding to Unicode interface:
2681 use the Encode extension for that.
2682
2683 =for apidoc sv_utf8_upgrade_flags
2684
2685 Converts the PV of an SV to its UTF-8-encoded form.
2686 Forces the SV to string form if it is not already.
2687 Always sets the SvUTF8 flag to avoid future validity checks even
2688 if all the bytes have hibit clear. If C<flags> has C<SV_GMAGIC> bit set,
2689 will C<mg_get> on C<sv> if appropriate, else not. C<sv_utf8_upgrade> and
2690 C<sv_utf8_upgrade_nomg> are implemented in terms of this function.
2691
2692 This is not as a general purpose byte encoding to Unicode interface:
2693 use the Encode extension for that.
2694
2695 =cut
2696 */
2697
2698 STRLEN
2699 Perl_sv_utf8_upgrade_flags(pTHX_ register SV *sv, I32 flags)
2700 {
2701     if (sv == &PL_sv_undef)
2702         return 0;
2703     if (!SvPOK(sv)) {
2704         STRLEN len = 0;
2705         if (SvREADONLY(sv) && (SvPOKp(sv) || SvIOKp(sv) || SvNOKp(sv))) {
2706             (void) sv_2pv_flags(sv,&len, flags);
2707             if (SvUTF8(sv))
2708                 return len;
2709         } else {
2710             (void) SvPV_force(sv,len);
2711         }
2712     }
2713
2714     if (SvUTF8(sv)) {
2715         return SvCUR(sv);
2716     }
2717
2718     if (SvIsCOW(sv)) {
2719         sv_force_normal_flags(sv, 0);
2720     }
2721
2722     if (PL_encoding && !(flags & SV_UTF8_NO_ENCODING))
2723         sv_recode_to_utf8(sv, PL_encoding);
2724     else { /* Assume Latin-1/EBCDIC */
2725         /* This function could be much more efficient if we
2726          * had a FLAG in SVs to signal if there are any hibit
2727          * chars in the PV.  Given that there isn't such a flag
2728          * make the loop as fast as possible. */
2729         const U8 * const s = (U8 *) SvPVX_const(sv);
2730         const U8 * const e = (U8 *) SvEND(sv);
2731         const U8 *t = s;
2732         
2733         while (t < e) {
2734             const U8 ch = *t++;
2735             /* Check for hi bit */
2736             if (!NATIVE_IS_INVARIANT(ch)) {
2737                 STRLEN len = SvCUR(sv) + 1; /* Plus the \0 */
2738                 U8 * const recoded = bytes_to_utf8((U8*)s, &len);
2739
2740                 SvPV_free(sv); /* No longer using what was there before. */
2741                 SvPV_set(sv, (char*)recoded);
2742                 SvCUR_set(sv, len - 1);
2743                 SvLEN_set(sv, len); /* No longer know the real size. */
2744                 break;
2745             }
2746         }
2747         /* Mark as UTF-8 even if no hibit - saves scanning loop */
2748         SvUTF8_on(sv);
2749     }
2750     return SvCUR(sv);
2751 }
2752
2753 /*
2754 =for apidoc sv_utf8_downgrade
2755
2756 Attempts to convert the PV of an SV from characters to bytes.
2757 If the PV contains a character beyond byte, this conversion will fail;
2758 in this case, either returns false or, if C<fail_ok> is not
2759 true, croaks.
2760
2761 This is not as a general purpose Unicode to byte encoding interface:
2762 use the Encode extension for that.
2763
2764 =cut
2765 */
2766
2767 bool
2768 Perl_sv_utf8_downgrade(pTHX_ register SV* sv, bool fail_ok)
2769 {
2770     if (SvPOKp(sv) && SvUTF8(sv)) {
2771         if (SvCUR(sv)) {
2772             U8 *s;
2773             STRLEN len;
2774
2775             if (SvIsCOW(sv)) {
2776                 sv_force_normal_flags(sv, 0);
2777             }
2778             s = (U8 *) SvPV(sv, len);
2779             if (!utf8_to_bytes(s, &len)) {
2780                 if (fail_ok)
2781                     return FALSE;
2782                 else {
2783                     if (PL_op)
2784                         Perl_croak(aTHX_ "Wide character in %s",
2785                                    OP_DESC(PL_op));
2786                     else
2787                         Perl_croak(aTHX_ "Wide character");
2788                 }
2789             }
2790             SvCUR_set(sv, len);
2791         }
2792     }
2793     SvUTF8_off(sv);
2794     return TRUE;
2795 }
2796
2797 /*
2798 =for apidoc sv_utf8_encode
2799
2800 Converts the PV of an SV to UTF-8, but then turns the C<SvUTF8>
2801 flag off so that it looks like octets again.
2802
2803 =cut
2804 */
2805
2806 void
2807 Perl_sv_utf8_encode(pTHX_ register SV *sv)
2808 {
2809     (void) sv_utf8_upgrade(sv);
2810     if (SvIsCOW(sv)) {
2811         sv_force_normal_flags(sv, 0);
2812     }
2813     if (SvREADONLY(sv)) {
2814         Perl_croak(aTHX_ PL_no_modify);
2815     }
2816     SvUTF8_off(sv);
2817 }
2818
2819 /*
2820 =for apidoc sv_utf8_decode
2821
2822 If the PV of the SV is an octet sequence in UTF-8
2823 and contains a multiple-byte character, the C<SvUTF8> flag is turned on
2824 so that it looks like a character. If the PV contains only single-byte
2825 characters, the C<SvUTF8> flag stays being off.
2826 Scans PV for validity and returns false if the PV is invalid UTF-8.
2827
2828 =cut
2829 */
2830
2831 bool
2832 Perl_sv_utf8_decode(pTHX_ register SV *sv)
2833 {
2834     if (SvPOKp(sv)) {
2835         const U8 *c;
2836         const U8 *e;
2837
2838         /* The octets may have got themselves encoded - get them back as
2839          * bytes
2840          */
2841         if (!sv_utf8_downgrade(sv, TRUE))
2842             return FALSE;
2843
2844         /* it is actually just a matter of turning the utf8 flag on, but
2845          * we want to make sure everything inside is valid utf8 first.
2846          */
2847         c = (const U8 *) SvPVX_const(sv);
2848         if (!is_utf8_string(c, SvCUR(sv)+1))
2849             return FALSE;
2850         e = (const U8 *) SvEND(sv);
2851         while (c < e) {
2852             const U8 ch = *c++;
2853             if (!UTF8_IS_INVARIANT(ch)) {
2854                 SvUTF8_on(sv);
2855                 break;
2856             }
2857         }
2858     }
2859     return TRUE;
2860 }
2861
2862 /*
2863 =for apidoc sv_setsv
2864
2865 Copies the contents of the source SV C<ssv> into the destination SV
2866 C<dsv>.  The source SV may be destroyed if it is mortal, so don't use this
2867 function if the source SV needs to be reused. Does not handle 'set' magic.
2868 Loosely speaking, it performs a copy-by-value, obliterating any previous
2869 content of the destination.
2870
2871 You probably want to use one of the assortment of wrappers, such as
2872 C<SvSetSV>, C<SvSetSV_nosteal>, C<SvSetMagicSV> and
2873 C<SvSetMagicSV_nosteal>.
2874
2875 =for apidoc sv_setsv_flags
2876
2877 Copies the contents of the source SV C<ssv> into the destination SV
2878 C<dsv>.  The source SV may be destroyed if it is mortal, so don't use this
2879 function if the source SV needs to be reused. Does not handle 'set' magic.
2880 Loosely speaking, it performs a copy-by-value, obliterating any previous
2881 content of the destination.
2882 If the C<flags> parameter has the C<SV_GMAGIC> bit set, will C<mg_get> on
2883 C<ssv> if appropriate, else not. If the C<flags> parameter has the
2884 C<NOSTEAL> bit set then the buffers of temps will not be stolen. <sv_setsv>
2885 and C<sv_setsv_nomg> are implemented in terms of this function.
2886
2887 You probably want to use one of the assortment of wrappers, such as
2888 C<SvSetSV>, C<SvSetSV_nosteal>, C<SvSetMagicSV> and
2889 C<SvSetMagicSV_nosteal>.
2890
2891 This is the primary function for copying scalars, and most other
2892 copy-ish functions and macros use this underneath.
2893
2894 =cut
2895 */
2896
2897 void
2898 Perl_sv_setsv_flags(pTHX_ SV *dstr, register SV *sstr, I32 flags)
2899 {
2900     register U32 sflags;
2901     register int dtype;
2902     register int stype;
2903
2904     if (sstr == dstr)
2905         return;
2906     SV_CHECK_THINKFIRST_COW_DROP(dstr);
2907     if (!sstr)
2908         sstr = &PL_sv_undef;
2909     stype = SvTYPE(sstr);
2910     dtype = SvTYPE(dstr);
2911
2912     SvAMAGIC_off(dstr);
2913     if ( SvVOK(dstr) )
2914     {
2915         /* need to nuke the magic */
2916         mg_free(dstr);
2917         SvRMAGICAL_off(dstr);
2918     }
2919
2920     /* There's a lot of redundancy below but we're going for speed here */
2921
2922     switch (stype) {
2923     case SVt_NULL:
2924       undef_sstr:
2925         if (dtype != SVt_PVGV) {
2926             (void)SvOK_off(dstr);
2927             return;
2928         }
2929         break;
2930     case SVt_IV:
2931         if (SvIOK(sstr)) {
2932             switch (dtype) {
2933             case SVt_NULL:
2934                 sv_upgrade(dstr, SVt_IV);
2935                 break;
2936             case SVt_NV:
2937                 sv_upgrade(dstr, SVt_PVNV);
2938                 break;
2939             case SVt_RV:
2940             case SVt_PV:
2941                 sv_upgrade(dstr, SVt_PVIV);
2942                 break;
2943             }
2944             (void)SvIOK_only(dstr);
2945             SvIV_set(dstr,  SvIVX(sstr));
2946             if (SvIsUV(sstr))
2947                 SvIsUV_on(dstr);
2948             if (SvTAINTED(sstr))
2949                 SvTAINT(dstr);
2950             return;
2951         }
2952         goto undef_sstr;
2953
2954     case SVt_NV:
2955         if (SvNOK(sstr)) {
2956             switch (dtype) {
2957             case SVt_NULL:
2958             case SVt_IV:
2959                 sv_upgrade(dstr, SVt_NV);
2960                 break;
2961             case SVt_RV:
2962             case SVt_PV:
2963             case SVt_PVIV:
2964                 sv_upgrade(dstr, SVt_PVNV);
2965                 break;
2966             }
2967             SvNV_set(dstr, SvNVX(sstr));
2968             (void)SvNOK_only(dstr);
2969             if (SvTAINTED(sstr))
2970                 SvTAINT(dstr);
2971             return;
2972         }
2973         goto undef_sstr;
2974
2975     case SVt_RV:
2976         if (dtype < SVt_RV)
2977             sv_upgrade(dstr, SVt_RV);
2978         else if (dtype == SVt_PVGV &&
2979                  SvROK(sstr) && SvTYPE(SvRV(sstr)) == SVt_PVGV) {
2980             sstr = SvRV(sstr);
2981             if (sstr == dstr) {
2982                 if (GvIMPORTED(dstr) != GVf_IMPORTED
2983                     && CopSTASH_ne(PL_curcop, GvSTASH(dstr)))
2984                 {
2985                     GvIMPORTED_on(dstr);
2986                 }
2987                 GvMULTI_on(dstr);
2988                 return;
2989             }
2990             goto glob_assign;
2991         }
2992         break;
2993     case SVt_PVFM:
2994 #ifdef PERL_OLD_COPY_ON_WRITE
2995         if ((SvFLAGS(sstr) & CAN_COW_MASK) == CAN_COW_FLAGS) {
2996             if (dtype < SVt_PVIV)
2997                 sv_upgrade(dstr, SVt_PVIV);
2998             break;
2999         }
3000         /* Fall through */
3001 #endif
3002     case SVt_PV:
3003         if (dtype < SVt_PV)
3004             sv_upgrade(dstr, SVt_PV);
3005         break;
3006     case SVt_PVIV:
3007         if (dtype < SVt_PVIV)
3008             sv_upgrade(dstr, SVt_PVIV);
3009         break;
3010     case SVt_PVNV:
3011         if (dtype < SVt_PVNV)
3012             sv_upgrade(dstr, SVt_PVNV);
3013         break;
3014     case SVt_PVAV:
3015     case SVt_PVHV:
3016     case SVt_PVCV:
3017     case SVt_PVIO:
3018         {
3019         const char * const type = sv_reftype(sstr,0);
3020         if (PL_op)
3021             Perl_croak(aTHX_ "Bizarre copy of %s in %s", type, OP_NAME(PL_op));
3022         else
3023             Perl_croak(aTHX_ "Bizarre copy of %s", type);
3024         }
3025         break;
3026
3027     case SVt_PVGV:
3028         if (dtype <= SVt_PVGV) {
3029   glob_assign:
3030             if (dtype != SVt_PVGV) {
3031                 const char * const name = GvNAME(sstr);
3032                 const STRLEN len = GvNAMELEN(sstr);
3033                 /* don't upgrade SVt_PVLV: it can hold a glob */
3034                 if (dtype != SVt_PVLV)
3035                     sv_upgrade(dstr, SVt_PVGV);
3036                 sv_magic(dstr, dstr, PERL_MAGIC_glob, Nullch, 0);
3037                 GvSTASH(dstr) = GvSTASH(sstr);
3038                 if (GvSTASH(dstr))
3039                     Perl_sv_add_backref(aTHX_ (SV*)GvSTASH(dstr), dstr);
3040                 GvNAME(dstr) = savepvn(name, len);
3041                 GvNAMELEN(dstr) = len;
3042                 SvFAKE_on(dstr);        /* can coerce to non-glob */
3043             }
3044
3045 #ifdef GV_UNIQUE_CHECK
3046                 if (GvUNIQUE((GV*)dstr)) {
3047                     Perl_croak(aTHX_ PL_no_modify);
3048                 }
3049 #endif
3050
3051             (void)SvOK_off(dstr);
3052             GvINTRO_off(dstr);          /* one-shot flag */
3053             gp_free((GV*)dstr);
3054             GvGP(dstr) = gp_ref(GvGP(sstr));
3055             if (SvTAINTED(sstr))
3056                 SvTAINT(dstr);
3057             if (GvIMPORTED(dstr) != GVf_IMPORTED
3058                 && CopSTASH_ne(PL_curcop, GvSTASH(dstr)))
3059             {
3060                 GvIMPORTED_on(dstr);
3061             }
3062             GvMULTI_on(dstr);
3063             return;
3064         }
3065         /* FALL THROUGH */
3066
3067     default:
3068         if (SvGMAGICAL(sstr) && (flags & SV_GMAGIC)) {
3069             mg_get(sstr);
3070             if ((int)SvTYPE(sstr) != stype) {
3071                 stype = SvTYPE(sstr);
3072                 if (stype == SVt_PVGV && dtype <= SVt_PVGV)
3073                     goto glob_assign;
3074             }
3075         }
3076         if (stype == SVt_PVLV)
3077             SvUPGRADE(dstr, SVt_PVNV);
3078         else
3079             SvUPGRADE(dstr, (U32)stype);
3080     }
3081
3082     sflags = SvFLAGS(sstr);
3083
3084     if (sflags & SVf_ROK) {
3085         if (dtype >= SVt_PV) {
3086             if (dtype == SVt_PVGV) {
3087                 SV * const sref = SvREFCNT_inc(SvRV(sstr));
3088                 SV *dref = 0;
3089                 const int intro = GvINTRO(dstr);
3090
3091 #ifdef GV_UNIQUE_CHECK
3092                 if (GvUNIQUE((GV*)dstr)) {
3093                     Perl_croak(aTHX_ PL_no_modify);
3094                 }
3095 #endif
3096
3097                 if (intro) {
3098                     GvINTRO_off(dstr);  /* one-shot flag */
3099                     GvLINE(dstr) = CopLINE(PL_curcop);
3100                     GvEGV(dstr) = (GV*)dstr;
3101                 }
3102                 GvMULTI_on(dstr);
3103                 switch (SvTYPE(sref)) {
3104                 case SVt_PVAV:
3105                     if (intro)
3106                         SAVEGENERICSV(GvAV(dstr));
3107                     else
3108                         dref = (SV*)GvAV(dstr);
3109                     GvAV(dstr) = (AV*)sref;
3110                     if (!GvIMPORTED_AV(dstr)
3111                         && CopSTASH_ne(PL_curcop, GvSTASH(dstr)))
3112                     {
3113                         GvIMPORTED_AV_on(dstr);
3114                     }
3115                     break;
3116                 case SVt_PVHV:
3117                     if (intro)
3118                         SAVEGENERICSV(GvHV(dstr));
3119                     else
3120                         dref = (SV*)GvHV(dstr);
3121                     GvHV(dstr) = (HV*)sref;
3122                     if (!GvIMPORTED_HV(dstr)
3123                         && CopSTASH_ne(PL_curcop, GvSTASH(dstr)))
3124                     {
3125                         GvIMPORTED_HV_on(dstr);
3126                     }
3127                     break;
3128                 case SVt_PVCV:
3129                     if (intro) {
3130                         if (GvCVGEN(dstr) && GvCV(dstr) != (CV*)sref) {
3131                             SvREFCNT_dec(GvCV(dstr));
3132                             GvCV(dstr) = Nullcv;
3133                             GvCVGEN(dstr) = 0; /* Switch off cacheness. */
3134                             PL_sub_generation++;
3135                         }
3136                         SAVEGENERICSV(GvCV(dstr));
3137                     }
3138                     else
3139                         dref = (SV*)GvCV(dstr);
3140                     if (GvCV(dstr) != (CV*)sref) {
3141                         CV* const cv = GvCV(dstr);
3142                         if (cv) {
3143                             if (!GvCVGEN((GV*)dstr) &&
3144                                 (CvROOT(cv) || CvXSUB(cv)))
3145                             {
3146                                 /* Redefining a sub - warning is mandatory if
3147                                    it was a const and its value changed. */
3148                                 if (CvCONST(cv) && CvCONST((CV*)sref)
3149                                     && cv_const_sv(cv)
3150                                     == cv_const_sv((CV*)sref)) {
3151                                     /* They are 2 constant subroutines
3152                                        generated from the same constant.
3153                                        This probably means that they are
3154                                        really the "same" proxy subroutine
3155                                        instantiated in 2 places. Most likely
3156                                        this is when a constant is exported
3157                                        twice.  Don't warn.  */
3158                                 }
3159                                 else if (ckWARN(WARN_REDEFINE)
3160                                     || (CvCONST(cv)
3161                                         && (!CvCONST((CV*)sref)
3162                                             || sv_cmp(cv_const_sv(cv),
3163                                                       cv_const_sv((CV*)sref)))))
3164                                 {
3165                                     Perl_warner(aTHX_ packWARN(WARN_REDEFINE),
3166                                         CvCONST(cv)
3167                                         ? "Constant subroutine %s::%s redefined"
3168                                         : "Subroutine %s::%s redefined",
3169                                         HvNAME_get(GvSTASH((GV*)dstr)),
3170                                         GvENAME((GV*)dstr));
3171                                 }
3172                             }
3173                             if (!intro)
3174                                 cv_ckproto(cv, (GV*)dstr,
3175                                            SvPOK(sref)
3176                                            ? SvPVX_const(sref) : Nullch);
3177                         }
3178                         GvCV(dstr) = (CV*)sref;
3179                         GvCVGEN(dstr) = 0; /* Switch off cacheness. */
3180                         GvASSUMECV_on(dstr);
3181                         PL_sub_generation++;
3182                     }
3183                     if (!GvIMPORTED_CV(dstr)
3184                         && CopSTASH_ne(PL_curcop, GvSTASH(dstr)))
3185                     {
3186                         GvIMPORTED_CV_on(dstr);
3187                     }
3188                     break;
3189                 case SVt_PVIO:
3190                     if (intro)
3191                         SAVEGENERICSV(GvIOp(dstr));
3192                     else
3193                         dref = (SV*)GvIOp(dstr);
3194                     GvIOp(dstr) = (IO*)sref;
3195                     break;
3196                 case SVt_PVFM:
3197                     if (intro)
3198                         SAVEGENERICSV(GvFORM(dstr));
3199                     else
3200                         dref = (SV*)GvFORM(dstr);
3201                     GvFORM(dstr) = (CV*)sref;
3202                     break;
3203                 default:
3204                     if (intro)
3205                         SAVEGENERICSV(GvSV(dstr));
3206                     else
3207                         dref = (SV*)GvSV(dstr);
3208                     GvSV(dstr) = sref;
3209                     if (!GvIMPORTED_SV(dstr)
3210                         && CopSTASH_ne(PL_curcop, GvSTASH(dstr)))
3211                     {
3212                         GvIMPORTED_SV_on(dstr);
3213                     }
3214                     break;
3215                 }
3216                 if (dref)
3217                     SvREFCNT_dec(dref);
3218                 if (SvTAINTED(sstr))
3219                     SvTAINT(dstr);
3220                 return;
3221             }
3222             if (SvPVX_const(dstr)) {
3223                 SvPV_free(dstr);
3224                 SvLEN_set(dstr, 0);
3225                 SvCUR_set(dstr, 0);
3226             }
3227         }
3228         (void)SvOK_off(dstr);
3229         SvRV_set(dstr, SvREFCNT_inc(SvRV(sstr)));
3230         SvROK_on(dstr);
3231         if (sflags & SVp_NOK) {
3232             SvNOKp_on(dstr);
3233             /* Only set the public OK flag if the source has public OK.  */
3234             if (sflags & SVf_NOK)
3235                 SvFLAGS(dstr) |= SVf_NOK;
3236             SvNV_set(dstr, SvNVX(sstr));
3237         }
3238         if (sflags & SVp_IOK) {
3239             (void)SvIOKp_on(dstr);
3240             if (sflags & SVf_IOK)
3241                 SvFLAGS(dstr) |= SVf_IOK;
3242             if (sflags & SVf_IVisUV)
3243                 SvIsUV_on(dstr);
3244             SvIV_set(dstr, SvIVX(sstr));
3245         }
3246         if (SvAMAGIC(sstr)) {
3247             SvAMAGIC_on(dstr);
3248         }
3249     }
3250     else if (sflags & SVp_POK) {
3251         bool isSwipe = 0;
3252
3253         /*
3254          * Check to see if we can just swipe the string.  If so, it's a
3255          * possible small lose on short strings, but a big win on long ones.
3256          * It might even be a win on short strings if SvPVX_const(dstr)
3257          * has to be allocated and SvPVX_const(sstr) has to be freed.
3258          */
3259
3260         /* Whichever path we take through the next code, we want this true,
3261            and doing it now facilitates the COW check.  */
3262         (void)SvPOK_only(dstr);
3263
3264         if (
3265             /* We're not already COW  */
3266             ((sflags & (SVf_FAKE | SVf_READONLY)) != (SVf_FAKE | SVf_READONLY)
3267 #ifndef PERL_OLD_COPY_ON_WRITE
3268              /* or we are, but dstr isn't a suitable target.  */
3269              || (SvFLAGS(dstr) & CAN_COW_MASK) != CAN_COW_FLAGS
3270 #endif
3271              )
3272             &&
3273             !(isSwipe =
3274                  (sflags & SVs_TEMP) &&   /* slated for free anyway? */
3275                  !(sflags & SVf_OOK) &&   /* and not involved in OOK hack? */
3276                  (!(flags & SV_NOSTEAL)) &&
3277                                         /* and we're allowed to steal temps */
3278                  SvREFCNT(sstr) == 1 &&   /* and no other references to it? */
3279                  SvLEN(sstr)    &&        /* and really is a string */
3280                                 /* and won't be needed again, potentially */
3281               !(PL_op && PL_op->op_type == OP_AASSIGN))
3282 #ifdef PERL_OLD_COPY_ON_WRITE
3283             && !((sflags & CAN_COW_MASK) == CAN_COW_FLAGS
3284                  && (SvFLAGS(dstr) & CAN_COW_MASK) == CAN_COW_FLAGS
3285                  && SvTYPE(sstr) >= SVt_PVIV)
3286 #endif
3287             ) {
3288             /* Failed the swipe test, and it's not a shared hash key either.
3289                Have to copy the string.  */
3290             STRLEN len = SvCUR(sstr);
3291             SvGROW(dstr, len + 1);      /* inlined from sv_setpvn */
3292             Move(SvPVX_const(sstr),SvPVX(dstr),len,char);
3293             SvCUR_set(dstr, len);
3294             *SvEND(dstr) = '\0';
3295         } else {
3296             /* If PERL_OLD_COPY_ON_WRITE is not defined, then isSwipe will always
3297                be true in here.  */
3298             /* Either it's a shared hash key, or it's suitable for
3299                copy-on-write or we can swipe the string.  */
3300             if (DEBUG_C_TEST) {
3301                 PerlIO_printf(Perl_debug_log, "Copy on write: sstr --> dstr\n");
3302                 sv_dump(sstr);
3303                 sv_dump(dstr);
3304             }
3305 #ifdef PERL_OLD_COPY_ON_WRITE
3306             if (!isSwipe) {
3307                 /* I believe I should acquire a global SV mutex if
3308                    it's a COW sv (not a shared hash key) to stop
3309                    it going un copy-on-write.
3310                    If the source SV has gone un copy on write between up there
3311                    and down here, then (assert() that) it is of the correct
3312                    form to make it copy on write again */
3313                 if ((sflags & (SVf_FAKE | SVf_READONLY))
3314                     != (SVf_FAKE | SVf_READONLY)) {
3315                     SvREADONLY_on(sstr);
3316                     SvFAKE_on(sstr);
3317                     /* Make the source SV into a loop of 1.
3318                        (about to become 2) */
3319                     SV_COW_NEXT_SV_SET(sstr, sstr);
3320                 }
3321             }
3322 #endif
3323             /* Initial code is common.  */
3324             if (SvPVX_const(dstr)) {    /* we know that dtype >= SVt_PV */
3325                 SvPV_free(dstr);
3326             }
3327
3328             if (!isSwipe) {
3329                 /* making another shared SV.  */
3330                 STRLEN cur = SvCUR(sstr);
3331                 STRLEN len = SvLEN(sstr);
3332 #ifdef PERL_OLD_COPY_ON_WRITE
3333                 if (len) {
3334                     assert (SvTYPE(dstr) >= SVt_PVIV);
3335                     /* SvIsCOW_normal */
3336                     /* splice us in between source and next-after-source.  */
3337                     SV_COW_NEXT_SV_SET(dstr, SV_COW_NEXT_SV(sstr));
3338                     SV_COW_NEXT_SV_SET(sstr, dstr);
3339                     SvPV_set(dstr, SvPVX_mutable(sstr));
3340                 } else
3341 #endif
3342                 {
3343                     /* SvIsCOW_shared_hash */
3344                     DEBUG_C(PerlIO_printf(Perl_debug_log,
3345                                           "Copy on write: Sharing hash\n"));
3346
3347                     assert (SvTYPE(dstr) >= SVt_PV);
3348                     SvPV_set(dstr,
3349                              HEK_KEY(share_hek_hek(SvSHARED_HEK_FROM_PV(SvPVX_const(sstr)))));
3350                 }
3351                 SvLEN_set(dstr, len);
3352                 SvCUR_set(dstr, cur);
3353                 SvREADONLY_on(dstr);
3354                 SvFAKE_on(dstr);
3355                 /* Relesase a global SV mutex.  */
3356             }
3357             else
3358                 {       /* Passes the swipe test.  */
3359                 SvPV_set(dstr, SvPVX_mutable(sstr));
3360                 SvLEN_set(dstr, SvLEN(sstr));
3361                 SvCUR_set(dstr, SvCUR(sstr));
3362
3363                 SvTEMP_off(dstr);
3364                 (void)SvOK_off(sstr);   /* NOTE: nukes most SvFLAGS on sstr */
3365                 SvPV_set(sstr, Nullch);
3366                 SvLEN_set(sstr, 0);
3367                 SvCUR_set(sstr, 0);
3368                 SvTEMP_off(sstr);
3369             }
3370         }
3371         if (sflags & SVf_UTF8)
3372             SvUTF8_on(dstr);
3373         if (sflags & SVp_NOK) {
3374             SvNOKp_on(dstr);
3375             if (sflags & SVf_NOK)
3376                 SvFLAGS(dstr) |= SVf_NOK;
3377             SvNV_set(dstr, SvNVX(sstr));
3378         }
3379         if (sflags & SVp_IOK) {
3380             (void)SvIOKp_on(dstr);
3381             if (sflags & SVf_IOK)
3382                 SvFLAGS(dstr) |= SVf_IOK;
3383             if (sflags & SVf_IVisUV)
3384                 SvIsUV_on(dstr);
3385             SvIV_set(dstr, SvIVX(sstr));
3386         }
3387         if (SvVOK(sstr)) {
3388             const MAGIC * const smg = mg_find(sstr,PERL_MAGIC_vstring);
3389             sv_magic(dstr, NULL, PERL_MAGIC_vstring,
3390                         smg->mg_ptr, smg->mg_len);
3391             SvRMAGICAL_on(dstr);
3392         }
3393     }
3394     else if (sflags & SVp_IOK) {
3395         if (sflags & SVf_IOK)
3396             (void)SvIOK_only(dstr);
3397         else {
3398             (void)SvOK_off(dstr);
3399             (void)SvIOKp_on(dstr);
3400         }
3401         /* XXXX Do we want to set IsUV for IV(ROK)?  Be extra safe... */
3402         if (sflags & SVf_IVisUV)
3403             SvIsUV_on(dstr);
3404         SvIV_set(dstr, SvIVX(sstr));
3405         if (sflags & SVp_NOK) {
3406             if (sflags & SVf_NOK)
3407                 (void)SvNOK_on(dstr);
3408             else
3409                 (void)SvNOKp_on(dstr);
3410             SvNV_set(dstr, SvNVX(sstr));
3411         }
3412     }
3413     else if (sflags & SVp_NOK) {
3414         if (sflags & SVf_NOK)
3415             (void)SvNOK_only(dstr);
3416         else {
3417             (void)SvOK_off(dstr);
3418             SvNOKp_on(dstr);
3419         }
3420         SvNV_set(dstr, SvNVX(sstr));
3421     }
3422     else {
3423         if (dtype == SVt_PVGV) {
3424             if (ckWARN(WARN_MISC))
3425                 Perl_warner(aTHX_ packWARN(WARN_MISC), "Undefined value assigned to typeglob");
3426         }
3427         else
3428             (void)SvOK_off(dstr);
3429     }
3430     if (SvTAINTED(sstr))
3431         SvTAINT(dstr);
3432 }
3433
3434 /*
3435 =for apidoc sv_setsv_mg
3436
3437 Like C<sv_setsv>, but also handles 'set' magic.
3438
3439 =cut
3440 */
3441
3442 void
3443 Perl_sv_setsv_mg(pTHX_ SV *dstr, register SV *sstr)
3444 {
3445     sv_setsv(dstr,sstr);
3446     SvSETMAGIC(dstr);
3447 }
3448
3449 #ifdef PERL_OLD_COPY_ON_WRITE
3450 SV *
3451 Perl_sv_setsv_cow(pTHX_ SV *dstr, SV *sstr)
3452 {
3453     STRLEN cur = SvCUR(sstr);
3454     STRLEN len = SvLEN(sstr);
3455     register char *new_pv;
3456
3457     if (DEBUG_C_TEST) {
3458         PerlIO_printf(Perl_debug_log, "Fast copy on write: %p -> %p\n",
3459                       sstr, dstr);
3460         sv_dump(sstr);
3461         if (dstr)
3462                     sv_dump(dstr);
3463     }
3464
3465     if (dstr) {
3466         if (SvTHINKFIRST(dstr))
3467             sv_force_normal_flags(dstr, SV_COW_DROP_PV);
3468         else if (SvPVX_const(dstr))
3469             Safefree(SvPVX_const(dstr));
3470     }
3471     else
3472         new_SV(dstr);
3473     SvUPGRADE(dstr, SVt_PVIV);
3474
3475     assert (SvPOK(sstr));
3476     assert (SvPOKp(sstr));
3477     assert (!SvIOK(sstr));
3478     assert (!SvIOKp(sstr));
3479     assert (!SvNOK(sstr));
3480     assert (!SvNOKp(sstr));
3481
3482     if (SvIsCOW(sstr)) {
3483
3484         if (SvLEN(sstr) == 0) {
3485             /* source is a COW shared hash key.  */
3486             DEBUG_C(PerlIO_printf(Perl_debug_log,
3487                                   "Fast copy on write: Sharing hash\n"));
3488             new_pv = HEK_KEY(share_hek_hek(SvSHARED_HEK_FROM_PV(SvPVX_const(sstr))));
3489             goto common_exit;
3490         }
3491         SV_COW_NEXT_SV_SET(dstr, SV_COW_NEXT_SV(sstr));
3492     } else {
3493         assert ((SvFLAGS(sstr) & CAN_COW_MASK) == CAN_COW_FLAGS);
3494         SvUPGRADE(sstr, SVt_PVIV);
3495         SvREADONLY_on(sstr);
3496         SvFAKE_on(sstr);
3497         DEBUG_C(PerlIO_printf(Perl_debug_log,
3498                               "Fast copy on write: Converting sstr to COW\n"));
3499         SV_COW_NEXT_SV_SET(dstr, sstr);
3500     }
3501     SV_COW_NEXT_SV_SET(sstr, dstr);
3502     new_pv = SvPVX_mutable(sstr);
3503
3504   common_exit:
3505     SvPV_set(dstr, new_pv);
3506     SvFLAGS(dstr) = (SVt_PVIV|SVf_POK|SVp_POK|SVf_FAKE|SVf_READONLY);
3507     if (SvUTF8(sstr))
3508         SvUTF8_on(dstr);
3509     SvLEN_set(dstr, len);
3510     SvCUR_set(dstr, cur);
3511     if (DEBUG_C_TEST) {
3512         sv_dump(dstr);
3513     }
3514     return dstr;
3515 }
3516 #endif
3517
3518 /*
3519 =for apidoc sv_setpvn
3520
3521 Copies a string into an SV.  The C<len> parameter indicates the number of
3522 bytes to be copied.  If the C<ptr> argument is NULL the SV will become
3523 undefined.  Does not handle 'set' magic.  See C<sv_setpvn_mg>.
3524
3525 =cut
3526 */
3527
3528 void
3529 Perl_sv_setpvn(pTHX_ register SV *sv, register const char *ptr, register STRLEN len)
3530 {
3531     register char *dptr;
3532
3533     SV_CHECK_THINKFIRST_COW_DROP(sv);
3534     if (!ptr) {
3535         (void)SvOK_off(sv);
3536         return;
3537     }
3538     else {
3539         /* len is STRLEN which is unsigned, need to copy to signed */
3540         const IV iv = len;
3541         if (iv < 0)
3542             Perl_croak(aTHX_ "panic: sv_setpvn called with negative strlen");
3543     }
3544     SvUPGRADE(sv, SVt_PV);
3545
3546     dptr = SvGROW(sv, len + 1);
3547     Move(ptr,dptr,len,char);
3548     dptr[len] = '\0';
3549     SvCUR_set(sv, len);
3550     (void)SvPOK_only_UTF8(sv);          /* validate pointer */
3551     SvTAINT(sv);
3552 }
3553
3554 /*
3555 =for apidoc sv_setpvn_mg
3556
3557 Like C<sv_setpvn>, but also handles 'set' magic.
3558
3559 =cut
3560 */
3561
3562 void
3563 Perl_sv_setpvn_mg(pTHX_ register SV *sv, register const char *ptr, register STRLEN len)
3564 {
3565     sv_setpvn(sv,ptr,len);
3566     SvSETMAGIC(sv);
3567 }
3568
3569 /*
3570 =for apidoc sv_setpv
3571
3572 Copies a string into an SV.  The string must be null-terminated.  Does not
3573 handle 'set' magic.  See C<sv_setpv_mg>.
3574
3575 =cut
3576 */
3577
3578 void
3579 Perl_sv_setpv(pTHX_ register SV *sv, register const char *ptr)
3580 {
3581     register STRLEN len;
3582
3583     SV_CHECK_THINKFIRST_COW_DROP(sv);
3584     if (!ptr) {
3585         (void)SvOK_off(sv);
3586         return;
3587     }
3588     len = strlen(ptr);
3589     SvUPGRADE(sv, SVt_PV);
3590
3591     SvGROW(sv, len + 1);
3592     Move(ptr,SvPVX(sv),len+1,char);
3593     SvCUR_set(sv, len);
3594     (void)SvPOK_only_UTF8(sv);          /* validate pointer */
3595     SvTAINT(sv);
3596 }
3597
3598 /*
3599 =for apidoc sv_setpv_mg
3600
3601 Like C<sv_setpv>, but also handles 'set' magic.
3602
3603 =cut
3604 */
3605
3606 void
3607 Perl_sv_setpv_mg(pTHX_ register SV *sv, register const char *ptr)
3608 {
3609     sv_setpv(sv,ptr);
3610     SvSETMAGIC(sv);
3611 }
3612
3613 /*
3614 =for apidoc sv_usepvn
3615
3616 Tells an SV to use C<ptr> to find its string value.  Normally the string is
3617 stored inside the SV but sv_usepvn allows the SV to use an outside string.
3618 The C<ptr> should point to memory that was allocated by C<malloc>.  The
3619 string length, C<len>, must be supplied.  This function will realloc the
3620 memory pointed to by C<ptr>, so that pointer should not be freed or used by
3621 the programmer after giving it to sv_usepvn.  Does not handle 'set' magic.
3622 See C<sv_usepvn_mg>.
3623
3624 =cut
3625 */
3626
3627 void
3628 Perl_sv_usepvn(pTHX_ register SV *sv, register char *ptr, register STRLEN len)
3629 {
3630     STRLEN allocate;
3631     SV_CHECK_THINKFIRST_COW_DROP(sv);
3632     SvUPGRADE(sv, SVt_PV);
3633     if (!ptr) {
3634         (void)SvOK_off(sv);
3635         return;
3636     }
3637     if (SvPVX_const(sv))
3638         SvPV_free(sv);
3639
3640     allocate = PERL_STRLEN_ROUNDUP(len + 1);
3641     ptr = saferealloc (ptr, allocate);
3642     SvPV_set(sv, ptr);
3643     SvCUR_set(sv, len);
3644     SvLEN_set(sv, allocate);
3645     *SvEND(sv) = '\0';
3646     (void)SvPOK_only_UTF8(sv);          /* validate pointer */
3647     SvTAINT(sv);
3648 }
3649
3650 /*
3651 =for apidoc sv_usepvn_mg
3652
3653 Like C<sv_usepvn>, but also handles 'set' magic.
3654
3655 =cut
3656 */
3657
3658 void
3659 Perl_sv_usepvn_mg(pTHX_ register SV *sv, register char *ptr, register STRLEN len)
3660 {
3661     sv_usepvn(sv,ptr,len);
3662     SvSETMAGIC(sv);
3663 }
3664
3665 #ifdef PERL_OLD_COPY_ON_WRITE
3666 /* Need to do this *after* making the SV normal, as we need the buffer
3667    pointer to remain valid until after we've copied it.  If we let go too early,
3668    another thread could invalidate it by unsharing last of the same hash key
3669    (which it can do by means other than releasing copy-on-write Svs)
3670    or by changing the other copy-on-write SVs in the loop.  */
3671 STATIC void
3672 S_sv_release_COW(pTHX_ register SV *sv, const char *pvx, STRLEN len, SV *after)
3673 {
3674     if (len) { /* this SV was SvIsCOW_normal(sv) */
3675          /* we need to find the SV pointing to us.  */
3676         SV * const current = SV_COW_NEXT_SV(after);
3677
3678         if (current == sv) {
3679             /* The SV we point to points back to us (there were only two of us
3680                in the loop.)
3681                Hence other SV is no longer copy on write either.  */
3682             SvFAKE_off(after);
3683             SvREADONLY_off(after);
3684         } else {
3685             /* We need to follow the pointers around the loop.  */
3686             SV *next;
3687             while ((next = SV_COW_NEXT_SV(current)) != sv) {
3688                 assert (next);
3689                 current = next;
3690                  /* don't loop forever if the structure is bust, and we have
3691                     a pointer into a closed loop.  */
3692                 assert (current != after);
3693                 assert (SvPVX_const(current) == pvx);
3694             }
3695             /* Make the SV before us point to the SV after us.  */
3696             SV_COW_NEXT_SV_SET(current, after);
3697         }
3698     } else {
3699         unshare_hek(SvSHARED_HEK_FROM_PV(pvx));
3700     }
3701 }
3702
3703 int
3704 Perl_sv_release_IVX(pTHX_ register SV *sv)
3705 {
3706     if (SvIsCOW(sv))
3707         sv_force_normal_flags(sv, 0);
3708     SvOOK_off(sv);
3709     return 0;
3710 }
3711 #endif
3712 /*
3713 =for apidoc sv_force_normal_flags
3714
3715 Undo various types of fakery on an SV: if the PV is a shared string, make
3716 a private copy; if we're a ref, stop refing; if we're a glob, downgrade to
3717 an xpvmg; if we're a copy-on-write scalar, this is the on-write time when
3718 we do the copy, and is also used locally. If C<SV_COW_DROP_PV> is set
3719 then a copy-on-write scalar drops its PV buffer (if any) and becomes
3720 SvPOK_off rather than making a copy. (Used where this scalar is about to be
3721 set to some other value.) In addition, the C<flags> parameter gets passed to
3722 C<sv_unref_flags()> when unrefing. C<sv_force_normal> calls this function
3723 with flags set to 0.
3724
3725 =cut
3726 */
3727
3728 void
3729 Perl_sv_force_normal_flags(pTHX_ register SV *sv, U32 flags)
3730 {
3731 #ifdef PERL_OLD_COPY_ON_WRITE
3732     if (SvREADONLY(sv)) {
3733         /* At this point I believe I should acquire a global SV mutex.  */
3734         if (SvFAKE(sv)) {
3735             const char * const pvx = SvPVX_const(sv);
3736             const STRLEN len = SvLEN(sv);
3737             const STRLEN cur = SvCUR(sv);
3738             SV * const next = SV_COW_NEXT_SV(sv);   /* next COW sv in the loop. */
3739             if (DEBUG_C_TEST) {
3740                 PerlIO_printf(Perl_debug_log,
3741                               "Copy on write: Force normal %ld\n",
3742                               (long) flags);
3743                 sv_dump(sv);
3744             }
3745             SvFAKE_off(sv);
3746             SvREADONLY_off(sv);
3747             /* This SV doesn't own the buffer, so need to Newx() a new one:  */
3748             SvPV_set(sv, (char*)0);
3749             SvLEN_set(sv, 0);
3750             if (flags & SV_COW_DROP_PV) {
3751                 /* OK, so we don't need to copy our buffer.  */
3752                 SvPOK_off(sv);
3753             } else {
3754                 SvGROW(sv, cur + 1);
3755                 Move(pvx,SvPVX(sv),cur,char);
3756                 SvCUR_set(sv, cur);
3757                 *SvEND(sv) = '\0';
3758             }
3759             sv_release_COW(sv, pvx, len, next);
3760             if (DEBUG_C_TEST) {
3761                 sv_dump(sv);
3762             }
3763         }
3764         else if (IN_PERL_RUNTIME)
3765             Perl_croak(aTHX_ PL_no_modify);
3766         /* At this point I believe that I can drop the global SV mutex.  */
3767     }
3768 #else
3769     if (SvREADONLY(sv)) {
3770         if (SvFAKE(sv)) {
3771             const char * const pvx = SvPVX_const(sv);
3772             const STRLEN len = SvCUR(sv);
3773             SvFAKE_off(sv);
3774             SvREADONLY_off(sv);
3775             SvPV_set(sv, Nullch);
3776             SvLEN_set(sv, 0);
3777             SvGROW(sv, len + 1);
3778             Move(pvx,SvPVX(sv),len,char);
3779             *SvEND(sv) = '\0';
3780             unshare_hek(SvSHARED_HEK_FROM_PV(pvx));
3781         }
3782         else if (IN_PERL_RUNTIME)
3783             Perl_croak(aTHX_ PL_no_modify);
3784     }
3785 #endif
3786     if (SvROK(sv))
3787         sv_unref_flags(sv, flags);
3788     else if (SvFAKE(sv) && SvTYPE(sv) == SVt_PVGV)
3789         sv_unglob(sv);
3790 }
3791
3792 /*
3793 =for apidoc sv_chop
3794
3795 Efficient removal of characters from the beginning of the string buffer.
3796 SvPOK(sv) must be true and the C<ptr> must be a pointer to somewhere inside
3797 the string buffer.  The C<ptr> becomes the first character of the adjusted
3798 string. Uses the "OOK hack".
3799 Beware: after this function returns, C<ptr> and SvPVX_const(sv) may no longer
3800 refer to the same chunk of data.
3801
3802 =cut
3803 */
3804
3805 void
3806 Perl_sv_chop(pTHX_ register SV *sv, register const char *ptr)
3807 {
3808     register STRLEN delta;
3809     if (!ptr || !SvPOKp(sv))
3810         return;
3811     delta = ptr - SvPVX_const(sv);
3812     SV_CHECK_THINKFIRST(sv);
3813     if (SvTYPE(sv) < SVt_PVIV)
3814         sv_upgrade(sv,SVt_PVIV);
3815
3816     if (!SvOOK(sv)) {
3817         if (!SvLEN(sv)) { /* make copy of shared string */
3818             const char *pvx = SvPVX_const(sv);
3819             const STRLEN len = SvCUR(sv);
3820             SvGROW(sv, len + 1);
3821             Move(pvx,SvPVX(sv),len,char);
3822             *SvEND(sv) = '\0';
3823         }
3824         SvIV_set(sv, 0);
3825         /* Same SvOOK_on but SvOOK_on does a SvIOK_off
3826            and we do that anyway inside the SvNIOK_off
3827         */
3828         SvFLAGS(sv) |= SVf_OOK;
3829     }
3830     SvNIOK_off(sv);
3831     SvLEN_set(sv, SvLEN(sv) - delta);
3832     SvCUR_set(sv, SvCUR(sv) - delta);
3833     SvPV_set(sv, SvPVX(sv) + delta);
3834     SvIV_set(sv, SvIVX(sv) + delta);
3835 }
3836
3837 /*
3838 =for apidoc sv_catpvn
3839
3840 Concatenates the string onto the end of the string which is in the SV.  The
3841 C<len> indicates number of bytes to copy.  If the SV has the UTF-8
3842 status set, then the bytes appended should be valid UTF-8.
3843 Handles 'get' magic, but not 'set' magic.  See C<sv_catpvn_mg>.
3844
3845 =for apidoc sv_catpvn_flags
3846
3847 Concatenates the string onto the end of the string which is in the SV.  The
3848 C<len> indicates number of bytes to copy.  If the SV has the UTF-8
3849 status set, then the bytes appended should be valid UTF-8.
3850 If C<flags> has C<SV_GMAGIC> bit set, will C<mg_get> on C<dsv> if
3851 appropriate, else not. C<sv_catpvn> and C<sv_catpvn_nomg> are implemented
3852 in terms of this function.
3853
3854 =cut
3855 */
3856
3857 void
3858 Perl_sv_catpvn_flags(pTHX_ register SV *dsv, register const char *sstr, register STRLEN slen, I32 flags)
3859 {
3860     STRLEN dlen;
3861     const char * const dstr = SvPV_force_flags(dsv, dlen, flags);
3862
3863     SvGROW(dsv, dlen + slen + 1);
3864     if (sstr == dstr)
3865         sstr = SvPVX_const(dsv);
3866     Move(sstr, SvPVX(dsv) + dlen, slen, char);
3867     SvCUR_set(dsv, SvCUR(dsv) + slen);
3868     *SvEND(dsv) = '\0';
3869     (void)SvPOK_only_UTF8(dsv);         /* validate pointer */
3870     SvTAINT(dsv);
3871     if (flags & SV_SMAGIC)
3872         SvSETMAGIC(dsv);
3873 }
3874
3875 /*
3876 =for apidoc sv_catsv
3877
3878 Concatenates the string from SV C<ssv> onto the end of the string in
3879 SV C<dsv>.  Modifies C<dsv> but not C<ssv>.  Handles 'get' magic, but
3880 not 'set' magic.  See C<sv_catsv_mg>.
3881
3882 =for apidoc sv_catsv_flags
3883
3884 Concatenates the string from SV C<ssv> onto the end of the string in
3885 SV C<dsv>.  Modifies C<dsv> but not C<ssv>.  If C<flags> has C<SV_GMAGIC>
3886 bit set, will C<mg_get> on the SVs if appropriate, else not. C<sv_catsv>
3887 and C<sv_catsv_nomg> are implemented in terms of this function.
3888
3889 =cut */
3890
3891 void
3892 Perl_sv_catsv_flags(pTHX_ SV *dsv, register SV *ssv, I32 flags)
3893 {
3894     if (ssv) {
3895         STRLEN slen;
3896         const char *spv = SvPV_const(ssv, slen);
3897         if (spv) {
3898             /*  sutf8 and dutf8 were type bool, but under USE_ITHREADS,
3899                 gcc version 2.95.2 20000220 (Debian GNU/Linux) for
3900                 Linux xxx 2.2.17 on sparc64 with gcc -O2, we erroneously
3901                 get dutf8 = 0x20000000, (i.e.  SVf_UTF8) even though
3902                 dsv->sv_flags doesn't have that bit set.
3903                 Andy Dougherty  12 Oct 2001
3904             */
3905             const I32 sutf8 = DO_UTF8(ssv);
3906             I32 dutf8;
3907
3908             if (SvGMAGICAL(dsv) && (flags & SV_GMAGIC))
3909                 mg_get(dsv);
3910             dutf8 = DO_UTF8(dsv);
3911
3912             if (dutf8 != sutf8) {
3913                 if (dutf8) {
3914                     /* Not modifying source SV, so taking a temporary copy. */
3915                     SV* const csv = sv_2mortal(newSVpvn(spv, slen));
3916
3917                     sv_utf8_upgrade(csv);
3918                     spv = SvPV_const(csv, slen);
3919                 }
3920                 else
3921                     sv_utf8_upgrade_nomg(dsv);
3922             }
3923             sv_catpvn_nomg(dsv, spv, slen);
3924         }
3925     }
3926     if (flags & SV_SMAGIC)
3927         SvSETMAGIC(dsv);
3928 }
3929
3930 /*
3931 =for apidoc sv_catpv
3932
3933 Concatenates the string onto the end of the string which is in the SV.
3934 If the SV has the UTF-8 status set, then the bytes appended should be
3935 valid UTF-8.  Handles 'get' magic, but not 'set' magic.  See C<sv_catpv_mg>.
3936
3937 =cut */
3938
3939 void
3940 Perl_sv_catpv(pTHX_ register SV *sv, register const char *ptr)
3941 {
3942     register STRLEN len;
3943     STRLEN tlen;
3944     char *junk;
3945
3946     if (!ptr)
3947         return;
3948     junk = SvPV_force(sv, tlen);
3949     len = strlen(ptr);
3950     SvGROW(sv, tlen + len + 1);
3951     if (ptr == junk)
3952         ptr = SvPVX_const(sv);
3953     Move(ptr,SvPVX(sv)+tlen,len+1,char);
3954     SvCUR_set(sv, SvCUR(sv) + len);
3955     (void)SvPOK_only_UTF8(sv);          /* validate pointer */
3956     SvTAINT(sv);
3957 }
3958
3959 /*
3960 =for apidoc sv_catpv_mg
3961
3962 Like C<sv_catpv>, but also handles 'set' magic.
3963
3964 =cut
3965 */
3966
3967 void
3968 Perl_sv_catpv_mg(pTHX_ register SV *sv, register const char *ptr)
3969 {
3970     sv_catpv(sv,ptr);
3971     SvSETMAGIC(sv);
3972 }
3973
3974 /*
3975 =for apidoc newSV
3976
3977 Create a new null SV, or if len > 0, create a new empty SVt_PV type SV
3978 with an initial PV allocation of len+1. Normally accessed via the C<NEWSV>
3979 macro.
3980
3981 =cut
3982 */
3983
3984 SV *
3985 Perl_newSV(pTHX_ STRLEN len)
3986 {
3987     register SV *sv;
3988
3989     new_SV(sv);
3990     if (len) {
3991         sv_upgrade(sv, SVt_PV);
3992         SvGROW(sv, len + 1);
3993     }
3994     return sv;
3995 }
3996 /*
3997 =for apidoc sv_magicext
3998
3999 Adds magic to an SV, upgrading it if necessary. Applies the
4000 supplied vtable and returns a pointer to the magic added.
4001
4002 Note that C<sv_magicext> will allow things that C<sv_magic> will not.
4003 In particular, you can add magic to SvREADONLY SVs, and add more than
4004 one instance of the same 'how'.
4005
4006 If C<namlen> is greater than zero then a C<savepvn> I<copy> of C<name> is
4007 stored, if C<namlen> is zero then C<name> is stored as-is and - as another
4008 special case - if C<(name && namlen == HEf_SVKEY)> then C<name> is assumed
4009 to contain an C<SV*> and is stored as-is with its REFCNT incremented.
4010
4011 (This is now used as a subroutine by C<sv_magic>.)
4012
4013 =cut
4014 */
4015 MAGIC * 
4016 Perl_sv_magicext(pTHX_ SV* sv, SV* obj, int how, const MGVTBL *vtable,
4017                  const char* name, I32 namlen)
4018 {
4019     MAGIC* mg;
4020
4021     if (SvTYPE(sv) < SVt_PVMG) {
4022         SvUPGRADE(sv, SVt_PVMG);
4023     }
4024     Newxz(mg, 1, MAGIC);
4025     mg->mg_moremagic = SvMAGIC(sv);
4026     SvMAGIC_set(sv, mg);
4027
4028     /* Sometimes a magic contains a reference loop, where the sv and
4029        object refer to each other.  To prevent a reference loop that
4030        would prevent such objects being freed, we look for such loops
4031        and if we find one we avoid incrementing the object refcount.
4032
4033        Note we cannot do this to avoid self-tie loops as intervening RV must
4034        have its REFCNT incremented to keep it in existence.
4035
4036     */
4037     if (!obj || obj == sv ||
4038         how == PERL_MAGIC_arylen ||
4039         how == PERL_MAGIC_qr ||
4040         how == PERL_MAGIC_symtab ||
4041         (SvTYPE(obj) == SVt_PVGV &&
4042             (GvSV(obj) == sv || GvHV(obj) == (HV*)sv || GvAV(obj) == (AV*)sv ||
4043             GvCV(obj) == (CV*)sv || GvIOp(obj) == (IO*)sv ||
4044             GvFORM(obj) == (CV*)sv)))
4045     {
4046         mg->mg_obj = obj;
4047     }
4048     else {
4049         mg->mg_obj = SvREFCNT_inc(obj);
4050         mg->mg_flags |= MGf_REFCOUNTED;
4051     }
4052
4053     /* Normal self-ties simply pass a null object, and instead of
4054        using mg_obj directly, use the SvTIED_obj macro to produce a
4055        new RV as needed.  For glob "self-ties", we are tieing the PVIO
4056        with an RV obj pointing to the glob containing the PVIO.  In
4057        this case, to avoid a reference loop, we need to weaken the
4058        reference.
4059     */
4060
4061     if (how == PERL_MAGIC_tiedscalar && SvTYPE(sv) == SVt_PVIO &&
4062         obj && SvROK(obj) && GvIO(SvRV(obj)) == (IO*)sv)
4063     {
4064       sv_rvweaken(obj);
4065     }
4066
4067     mg->mg_type = how;
4068     mg->mg_len = namlen;
4069     if (name) {
4070         if (namlen > 0)
4071             mg->mg_ptr = savepvn(name, namlen);
4072         else if (namlen == HEf_SVKEY)
4073             mg->mg_ptr = (char*)SvREFCNT_inc((SV*)name);
4074         else
4075             mg->mg_ptr = (char *) name;
4076     }
4077     mg->mg_virtual = vtable;
4078
4079     mg_magical(sv);
4080     if (SvGMAGICAL(sv))
4081         SvFLAGS(sv) &= ~(SVf_IOK|SVf_NOK|SVf_POK);
4082     return mg;
4083 }
4084
4085 /*
4086 =for apidoc sv_magic
4087
4088 Adds magic to an SV. First upgrades C<sv> to type C<SVt_PVMG> if necessary,
4089 then adds a new magic item of type C<how> to the head of the magic list.
4090
4091 See C<sv_magicext> (which C<sv_magic> now calls) for a description of the
4092 handling of the C<name> and C<namlen> arguments.
4093
4094 You need to use C<sv_magicext> to add magic to SvREADONLY SVs and also
4095 to add more than one instance of the same 'how'.
4096
4097 =cut
4098 */
4099
4100 void
4101 Perl_sv_magic(pTHX_ register SV *sv, SV *obj, int how, const char *name, I32 namlen)
4102 {
4103     const MGVTBL *vtable;
4104     MAGIC* mg;
4105
4106 #ifdef PERL_OLD_COPY_ON_WRITE
4107     if (SvIsCOW(sv))
4108         sv_force_normal_flags(sv, 0);
4109 #endif
4110     if (SvREADONLY(sv)) {
4111         if (
4112             /* its okay to attach magic to shared strings; the subsequent
4113              * upgrade to PVMG will unshare the string */
4114             !(SvFAKE(sv) && SvTYPE(sv) < SVt_PVMG)
4115
4116             && IN_PERL_RUNTIME
4117             && how != PERL_MAGIC_regex_global
4118             && how != PERL_MAGIC_bm
4119             && how != PERL_MAGIC_fm
4120             && how != PERL_MAGIC_sv
4121             && how != PERL_MAGIC_backref
4122            )
4123         {
4124             Perl_croak(aTHX_ PL_no_modify);
4125         }
4126     }
4127     if (SvMAGICAL(sv) || (how == PERL_MAGIC_taint && SvTYPE(sv) >= SVt_PVMG)) {
4128         if (SvMAGIC(sv) && (mg = mg_find(sv, how))) {
4129             /* sv_magic() refuses to add a magic of the same 'how' as an
4130                existing one
4131              */
4132             if (how == PERL_MAGIC_taint)
4133                 mg->mg_len |= 1;
4134             return;
4135         }
4136     }
4137
4138     switch (how) {
4139     case PERL_MAGIC_sv:
4140         vtable = &PL_vtbl_sv;
4141         break;
4142     case PERL_MAGIC_overload:
4143         vtable = &PL_vtbl_amagic;
4144         break;
4145     case PERL_MAGIC_overload_elem:
4146         vtable = &PL_vtbl_amagicelem;
4147         break;
4148     case PERL_MAGIC_overload_table:
4149         vtable = &PL_vtbl_ovrld;
4150         break;
4151     case PERL_MAGIC_bm:
4152         vtable = &PL_vtbl_bm;
4153         break;
4154     case PERL_MAGIC_regdata:
4155         vtable = &PL_vtbl_regdata;
4156         break;
4157     case PERL_MAGIC_regdatum:
4158         vtable = &PL_vtbl_regdatum;
4159         break;
4160     case PERL_MAGIC_env:
4161         vtable = &PL_vtbl_env;
4162         break;
4163     case PERL_MAGIC_fm:
4164         vtable = &PL_vtbl_fm;
4165         break;
4166     case PERL_MAGIC_envelem:
4167         vtable = &PL_vtbl_envelem;
4168         break;
4169     case PERL_MAGIC_regex_global:
4170         vtable = &PL_vtbl_mglob;
4171         break;
4172     case PERL_MAGIC_isa:
4173         vtable = &PL_vtbl_isa;
4174         break;
4175     case PERL_MAGIC_isaelem:
4176         vtable = &PL_vtbl_isaelem;
4177         break;
4178     case PERL_MAGIC_nkeys:
4179         vtable = &PL_vtbl_nkeys;
4180         break;
4181     case PERL_MAGIC_dbfile:
4182         vtable = NULL;
4183         break;
4184     case PERL_MAGIC_dbline:
4185         vtable = &PL_vtbl_dbline;
4186         break;
4187 #ifdef USE_LOCALE_COLLATE
4188     case PERL_MAGIC_collxfrm:
4189         vtable = &PL_vtbl_collxfrm;
4190         break;
4191 #endif /* USE_LOCALE_COLLATE */
4192     case PERL_MAGIC_tied:
4193         vtable = &PL_vtbl_pack;
4194         break;
4195     case PERL_MAGIC_tiedelem:
4196     case PERL_MAGIC_tiedscalar:
4197         vtable = &PL_vtbl_packelem;
4198         break;
4199     case PERL_MAGIC_qr:
4200         vtable = &PL_vtbl_regexp;
4201         break;
4202     case PERL_MAGIC_sig:
4203         vtable = &PL_vtbl_sig;
4204         break;
4205     case PERL_MAGIC_sigelem:
4206         vtable = &PL_vtbl_sigelem;
4207         break;
4208     case PERL_MAGIC_taint:
4209         vtable = &PL_vtbl_taint;
4210         break;
4211     case PERL_MAGIC_uvar:
4212         vtable = &PL_vtbl_uvar;
4213         break;
4214     case PERL_MAGIC_vec:
4215         vtable = &PL_vtbl_vec;
4216         break;
4217     case PERL_MAGIC_arylen_p:
4218     case PERL_MAGIC_rhash:
4219     case PERL_MAGIC_symtab:
4220     case PERL_MAGIC_vstring:
4221         vtable = NULL;
4222         break;
4223     case PERL_MAGIC_utf8:
4224         vtable = &PL_vtbl_utf8;
4225         break;
4226     case PERL_MAGIC_substr:
4227         vtable = &PL_vtbl_substr;
4228         break;
4229     case PERL_MAGIC_defelem:
4230         vtable = &PL_vtbl_defelem;
4231         break;
4232     case PERL_MAGIC_glob:
4233         vtable = &PL_vtbl_glob;
4234         break;
4235     case PERL_MAGIC_arylen:
4236         vtable = &PL_vtbl_arylen;
4237         break;
4238     case PERL_MAGIC_pos:
4239         vtable = &PL_vtbl_pos;
4240         break;
4241     case PERL_MAGIC_backref:
4242         vtable = &PL_vtbl_backref;
4243         break;
4244     case PERL_MAGIC_ext:
4245         /* Reserved for use by extensions not perl internals.           */
4246         /* Useful for attaching extension internal data to perl vars.   */
4247         /* Note that multiple extensions may clash if magical scalars   */
4248         /* etc holding private data from one are passed to another.     */
4249         vtable = NULL;
4250         break;
4251     default:
4252         Perl_croak(aTHX_ "Don't know how to handle magic of type \\%o", how);
4253     }
4254
4255     /* Rest of work is done else where */
4256     mg = sv_magicext(sv,obj,how,vtable,name,namlen);
4257
4258     switch (how) {
4259     case PERL_MAGIC_taint:
4260         mg->mg_len = 1;
4261         break;
4262     case PERL_MAGIC_ext:
4263     case PERL_MAGIC_dbfile:
4264         SvRMAGICAL_on(sv);
4265         break;
4266     }
4267 }
4268
4269 /*
4270 =for apidoc sv_unmagic
4271
4272 Removes all magic of type C<type> from an SV.
4273
4274 =cut
4275 */
4276
4277 int
4278 Perl_sv_unmagic(pTHX_ SV *sv, int type)
4279 {
4280     MAGIC* mg;
4281     MAGIC** mgp;
4282     if (SvTYPE(sv) < SVt_PVMG || !SvMAGIC(sv))
4283         return 0;
4284     mgp = &SvMAGIC(sv);
4285     for (mg = *mgp; mg; mg = *mgp) {
4286         if (mg->mg_type == type) {
4287             const MGVTBL* const vtbl = mg->mg_virtual;
4288             *mgp = mg->mg_moremagic;
4289             if (vtbl && vtbl->svt_free)
4290                 CALL_FPTR(vtbl->svt_free)(aTHX_ sv, mg);
4291             if (mg->mg_ptr && mg->mg_type != PERL_MAGIC_regex_global) {
4292                 if (mg->mg_len > 0)
4293                     Safefree(mg->mg_ptr);
4294                 else if (mg->mg_len == HEf_SVKEY)
4295                     SvREFCNT_dec((SV*)mg->mg_ptr);
4296                 else if (mg->mg_type == PERL_MAGIC_utf8 && mg->mg_ptr)
4297                     Safefree(mg->mg_ptr);
4298             }
4299             if (mg->mg_flags & MGf_REFCOUNTED)
4300                 SvREFCNT_dec(mg->mg_obj);
4301             Safefree(mg);
4302         }
4303         else
4304             mgp = &mg->mg_moremagic;
4305     }
4306     if (!SvMAGIC(sv)) {
4307         SvMAGICAL_off(sv);
4308         SvFLAGS(sv) |= (SvFLAGS(sv) & (SVp_NOK|SVp_POK)) >> PRIVSHIFT;
4309         SvMAGIC_set(sv, NULL);
4310     }
4311
4312     return 0;
4313 }
4314
4315 /*
4316 =for apidoc sv_rvweaken
4317
4318 Weaken a reference: set the C<SvWEAKREF> flag on this RV; give the
4319 referred-to SV C<PERL_MAGIC_backref> magic if it hasn't already; and
4320 push a back-reference to this RV onto the array of backreferences
4321 associated with that magic.
4322
4323 =cut
4324 */
4325
4326 SV *
4327 Perl_sv_rvweaken(pTHX_ SV *sv)
4328 {
4329     SV *tsv;
4330     if (!SvOK(sv))  /* let undefs pass */
4331         return sv;
4332     if (!SvROK(sv))
4333         Perl_croak(aTHX_ "Can't weaken a nonreference");
4334     else if (SvWEAKREF(sv)) {
4335         if (ckWARN(WARN_MISC))
4336             Perl_warner(aTHX_ packWARN(WARN_MISC), "Reference is already weak");
4337         return sv;
4338     }
4339     tsv = SvRV(sv);
4340     Perl_sv_add_backref(aTHX_ tsv, sv);
4341     SvWEAKREF_on(sv);
4342     SvREFCNT_dec(tsv);
4343     return sv;
4344 }
4345
4346 /* Give tsv backref magic if it hasn't already got it, then push a
4347  * back-reference to sv onto the array associated with the backref magic.
4348  */
4349
4350 void
4351 Perl_sv_add_backref(pTHX_ SV *tsv, SV *sv)
4352 {
4353     AV *av;
4354
4355     if (SvTYPE(tsv) == SVt_PVHV) {
4356         AV **const avp = Perl_hv_backreferences_p(aTHX_ (HV*)tsv);
4357
4358         av = *avp;
4359         if (!av) {
4360             /* There is no AV in the offical place - try a fixup.  */
4361             MAGIC *const mg = mg_find(tsv, PERL_MAGIC_backref);
4362
4363             if (mg) {
4364                 /* Aha. They've got it stowed in magic.  Bring it back.  */
4365                 av = (AV*)mg->mg_obj;
4366                 /* Stop mg_free decreasing the refernce count.  */
4367                 mg->mg_obj = NULL;
4368                 /* Stop mg_free even calling the destructor, given that
4369                    there's no AV to free up.  */
4370                 mg->mg_virtual = 0;
4371                 sv_unmagic(tsv, PERL_MAGIC_backref);
4372             } else {
4373                 av = newAV();
4374                 AvREAL_off(av);
4375                 SvREFCNT_inc(av);
4376             }
4377             *avp = av;
4378         }
4379     } else {
4380         const MAGIC *const mg
4381             = SvMAGICAL(tsv) ? mg_find(tsv, PERL_MAGIC_backref) : NULL;
4382         if (mg)
4383             av = (AV*)mg->mg_obj;
4384         else {
4385             av = newAV();
4386             AvREAL_off(av);
4387             sv_magic(tsv, (SV*)av, PERL_MAGIC_backref, NULL, 0);
4388             /* av now has a refcnt of 2, which avoids it getting freed
4389              * before us during global cleanup. The extra ref is removed
4390              * by magic_killbackrefs() when tsv is being freed */
4391         }
4392     }
4393     if (AvFILLp(av) >= AvMAX(av)) {
4394         av_extend(av, AvFILLp(av)+1);
4395     }
4396     AvARRAY(av)[++AvFILLp(av)] = sv; /* av_push() */
4397 }
4398
4399 /* delete a back-reference to ourselves from the backref magic associated
4400  * with the SV we point to.
4401  */
4402
4403 STATIC void
4404 S_sv_del_backref(pTHX_ SV *tsv, SV *sv)
4405 {
4406     AV *av = NULL;
4407     SV **svp;
4408     I32 i;
4409
4410     if (SvTYPE(tsv) == SVt_PVHV && SvOOK(tsv)) {
4411         av = *Perl_hv_backreferences_p(aTHX_ (HV*)tsv);
4412         /* We mustn't attempt to "fix up" the hash here by moving the
4413            backreference array back to the hv_aux structure, as that is stored
4414            in the main HvARRAY(), and hfreentries assumes that no-one
4415            reallocates HvARRAY() while it is running.  */
4416     }
4417     if (!av) {
4418         const MAGIC *const mg
4419             = SvMAGICAL(tsv) ? mg_find(tsv, PERL_MAGIC_backref) : NULL;
4420         if (mg)
4421             av = (AV *)mg->mg_obj;
4422     }
4423     if (!av) {
4424         if (PL_in_clean_all)
4425             return;
4426         Perl_croak(aTHX_ "panic: del_backref");
4427     }
4428
4429     if (SvIS_FREED(av))
4430         return;
4431
4432     svp = AvARRAY(av);
4433     /* We shouldn't be in here more than once, but for paranoia reasons lets
4434        not assume this.  */
4435     for (i = AvFILLp(av); i >= 0; i--) {
4436         if (svp[i] == sv) {
4437             const SSize_t fill = AvFILLp(av);
4438             if (i != fill) {
4439                 /* We weren't the last entry.
4440                    An unordered list has this property that you can take the
4441                    last element off the end to fill the hole, and it's still
4442                    an unordered list :-)
4443                 */
4444                 svp[i] = svp[fill];
4445             }
4446             svp[fill] = Nullsv;
4447             AvFILLp(av) = fill - 1;
4448         }
4449     }
4450 }
4451
4452 int
4453 Perl_sv_kill_backrefs(pTHX_ SV *sv, AV *av)
4454 {
4455     SV **svp = AvARRAY(av);
4456
4457     PERL_UNUSED_ARG(sv);
4458
4459     /* Not sure why the av can get freed ahead of its sv, but somehow it does
4460        in ext/B/t/bytecode.t test 15 (involving print <DATA>)  */
4461     if (svp && !SvIS_FREED(av)) {
4462         SV *const *const last = svp + AvFILLp(av);
4463
4464         while (svp <= last) {
4465             if (*svp) {
4466                 SV *const referrer = *svp;
4467                 if (SvWEAKREF(referrer)) {
4468                     /* XXX Should we check that it hasn't changed? */
4469                     SvRV_set(referrer, 0);
4470                     SvOK_off(referrer);
4471                     SvWEAKREF_off(referrer);
4472                 } else if (SvTYPE(referrer) == SVt_PVGV ||
4473                            SvTYPE(referrer) == SVt_PVLV) {
4474                     /* You lookin' at me?  */
4475                     assert(GvSTASH(referrer));
4476                     assert(GvSTASH(referrer) == (HV*)sv);
4477                     GvSTASH(referrer) = 0;
4478                 } else {
4479                     Perl_croak(aTHX_
4480                                "panic: magic_killbackrefs (flags=%"UVxf")",
4481                                (UV)SvFLAGS(referrer));
4482                 }
4483
4484                 *svp = Nullsv;
4485             }
4486             svp++;
4487         }
4488     }
4489     SvREFCNT_dec(av); /* remove extra count added by sv_add_backref() */
4490     return 0;
4491 }
4492
4493 /*
4494 =for apidoc sv_insert
4495
4496 Inserts a string at the specified offset/length within the SV. Similar to
4497 the Perl substr() function.
4498
4499 =cut
4500 */
4501
4502 void
4503 Perl_sv_insert(pTHX_ SV *bigstr, STRLEN offset, STRLEN len, const char *little, STRLEN littlelen)
4504 {
4505     register char *big;
4506     register char *mid;
4507     register char *midend;
4508     register char *bigend;
4509     register I32 i;
4510     STRLEN curlen;
4511
4512
4513     if (!bigstr)
4514         Perl_croak(aTHX_ "Can't modify non-existent substring");
4515     SvPV_force(bigstr, curlen);
4516     (void)SvPOK_only_UTF8(bigstr);
4517     if (offset + len > curlen) {
4518         SvGROW(bigstr, offset+len+1);
4519         Zero(SvPVX(bigstr)+curlen, offset+len-curlen, char);
4520         SvCUR_set(bigstr, offset+len);
4521     }
4522
4523     SvTAINT(bigstr);
4524     i = littlelen - len;
4525     if (i > 0) {                        /* string might grow */
4526         big = SvGROW(bigstr, SvCUR(bigstr) + i + 1);
4527         mid = big + offset + len;
4528         midend = bigend = big + SvCUR(bigstr);
4529         bigend += i;
4530         *bigend = '\0';
4531         while (midend > mid)            /* shove everything down */
4532             *--bigend = *--midend;
4533         Move(little,big+offset,littlelen,char);
4534         SvCUR_set(bigstr, SvCUR(bigstr) + i);
4535         SvSETMAGIC(bigstr);
4536         return;
4537     }
4538     else if (i == 0) {
4539         Move(little,SvPVX(bigstr)+offset,len,char);
4540         SvSETMAGIC(bigstr);
4541         return;
4542     }
4543
4544     big = SvPVX(bigstr);
4545     mid = big + offset;
4546     midend = mid + len;
4547     bigend = big + SvCUR(bigstr);
4548
4549     if (midend > bigend)
4550         Perl_croak(aTHX_ "panic: sv_insert");
4551
4552     if (mid - big > bigend - midend) {  /* faster to shorten from end */
4553         if (littlelen) {
4554             Move(little, mid, littlelen,char);
4555             mid += littlelen;
4556         }
4557         i = bigend - midend;
4558         if (i > 0) {
4559             Move(midend, mid, i,char);
4560             mid += i;
4561         }
4562         *mid = '\0';
4563         SvCUR_set(bigstr, mid - big);
4564     }
4565     else if ((i = mid - big)) { /* faster from front */
4566         midend -= littlelen;
4567         mid = midend;
4568         sv_chop(bigstr,midend-i);
4569         big += i;
4570         while (i--)
4571             *--midend = *--big;
4572         if (littlelen)
4573             Move(little, mid, littlelen,char);
4574     }
4575     else if (littlelen) {
4576         midend -= littlelen;
4577         sv_chop(bigstr,midend);
4578         Move(little,midend,littlelen,char);
4579     }
4580     else {
4581         sv_chop(bigstr,midend);
4582     }
4583     SvSETMAGIC(bigstr);
4584 }
4585
4586 /*
4587 =for apidoc sv_replace
4588
4589 Make the first argument a copy of the second, then delete the original.
4590 The target SV physically takes over ownership of the body of the source SV
4591 and inherits its flags; however, the target keeps any magic it owns,
4592 and any magic in the source is discarded.
4593 Note that this is a rather specialist SV copying operation; most of the
4594 time you'll want to use C<sv_setsv> or one of its many macro front-ends.
4595
4596 =cut
4597 */
4598
4599 void
4600 Perl_sv_replace(pTHX_ register SV *sv, register SV *nsv)
4601 {
4602     const U32 refcnt = SvREFCNT(sv);
4603     SV_CHECK_THINKFIRST_COW_DROP(sv);
4604     if (SvREFCNT(nsv) != 1) {
4605         Perl_croak(aTHX_ "panic: reference miscount on nsv in sv_replace() (%"
4606                    UVuf " != 1)", (UV) SvREFCNT(nsv));
4607     }
4608     if (SvMAGICAL(sv)) {
4609         if (SvMAGICAL(nsv))
4610             mg_free(nsv);
4611         else
4612             sv_upgrade(nsv, SVt_PVMG);
4613         SvMAGIC_set(nsv, SvMAGIC(sv));
4614         SvFLAGS(nsv) |= SvMAGICAL(sv);
4615         SvMAGICAL_off(sv);
4616         SvMAGIC_set(sv, NULL);
4617     }
4618     SvREFCNT(sv) = 0;
4619     sv_clear(sv);
4620     assert(!SvREFCNT(sv));
4621 #ifdef DEBUG_LEAKING_SCALARS
4622     sv->sv_flags  = nsv->sv_flags;
4623     sv->sv_any    = nsv->sv_any;
4624     sv->sv_refcnt = nsv->sv_refcnt;
4625     sv->sv_u      = nsv->sv_u;
4626 #else
4627     StructCopy(nsv,sv,SV);
4628 #endif
4629     /* Currently could join these into one piece of pointer arithmetic, but
4630        it would be unclear.  */
4631     if(SvTYPE(sv) == SVt_IV)
4632         SvANY(sv)
4633             = (XPVIV*)((char*)&(sv->sv_u.svu_iv) - STRUCT_OFFSET(XPVIV, xiv_iv));
4634     else if (SvTYPE(sv) == SVt_RV) {
4635         SvANY(sv) = &sv->sv_u.svu_rv;
4636     }
4637         
4638
4639 #ifdef PERL_OLD_COPY_ON_WRITE
4640     if (SvIsCOW_normal(nsv)) {
4641         /* We need to follow the pointers around the loop to make the
4642            previous SV point to sv, rather than nsv.  */
4643         SV *next;
4644         SV *current = nsv;
4645         while ((next = SV_COW_NEXT_SV(current)) != nsv) {
4646             assert(next);
4647             current = next;
4648             assert(SvPVX_const(current) == SvPVX_const(nsv));
4649         }
4650         /* Make the SV before us point to the SV after us.  */
4651         if (DEBUG_C_TEST) {
4652             PerlIO_printf(Perl_debug_log, "previous is\n");
4653             sv_dump(current);
4654             PerlIO_printf(Perl_debug_log,
4655                           "move it from 0x%"UVxf" to 0x%"UVxf"\n",
4656                           (UV) SV_COW_NEXT_SV(current), (UV) sv);
4657         }
4658         SV_COW_NEXT_SV_SET(current, sv);
4659     }
4660 #endif
4661     SvREFCNT(sv) = refcnt;
4662     SvFLAGS(nsv) |= SVTYPEMASK;         /* Mark as freed */
4663     SvREFCNT(nsv) = 0;
4664     del_SV(nsv);
4665 }
4666
4667 /*
4668 =for apidoc sv_clear
4669
4670 Clear an SV: call any destructors, free up any memory used by the body,
4671 and free the body itself. The SV's head is I<not> freed, although
4672 its type is set to all 1's so that it won't inadvertently be assumed
4673 to be live during global destruction etc.
4674 This function should only be called when REFCNT is zero. Most of the time
4675 you'll want to call C<sv_free()> (or its macro wrapper C<SvREFCNT_dec>)
4676 instead.
4677
4678 =cut
4679 */
4680
4681 void
4682 Perl_sv_clear(pTHX_ register SV *sv)
4683 {
4684     dVAR;
4685     const U32 type = SvTYPE(sv);
4686     const struct body_details *const sv_type_details
4687         = bodies_by_type + type;
4688
4689     assert(sv);
4690     assert(SvREFCNT(sv) == 0);
4691
4692     if (type <= SVt_IV)
4693         return;
4694
4695     if (SvOBJECT(sv)) {
4696         if (PL_defstash) {              /* Still have a symbol table? */
4697             dSP;
4698             HV* stash;
4699             do {        
4700                 CV* destructor;
4701                 stash = SvSTASH(sv);
4702                 destructor = StashHANDLER(stash,DESTROY);
4703                 if (destructor) {
4704                     SV* const tmpref = newRV(sv);
4705                     SvREADONLY_on(tmpref);   /* DESTROY() could be naughty */
4706                     ENTER;
4707                     PUSHSTACKi(PERLSI_DESTROY);
4708                     EXTEND(SP, 2);
4709                     PUSHMARK(SP);
4710                     PUSHs(tmpref);
4711                     PUTBACK;
4712                     call_sv((SV*)destructor, G_DISCARD|G_EVAL|G_KEEPERR|G_VOID);
4713                 
4714                 
4715                     POPSTACK;
4716                     SPAGAIN;
4717                     LEAVE;
4718                     if(SvREFCNT(tmpref) < 2) {
4719                         /* tmpref is not kept alive! */
4720                         SvREFCNT(sv)--;
4721                         SvRV_set(tmpref, NULL);
4722                         SvROK_off(tmpref);
4723                     }
4724                     SvREFCNT_dec(tmpref);
4725                 }
4726             } while (SvOBJECT(sv) && SvSTASH(sv) != stash);
4727
4728
4729             if (SvREFCNT(sv)) {
4730                 if (PL_in_clean_objs)
4731                     Perl_croak(aTHX_ "DESTROY created new reference to dead object '%s'",
4732                           HvNAME_get(stash));
4733                 /* DESTROY gave object new lease on life */
4734                 return;
4735             }
4736         }
4737
4738         if (SvOBJECT(sv)) {
4739             SvREFCNT_dec(SvSTASH(sv));  /* possibly of changed persuasion */
4740             SvOBJECT_off(sv);   /* Curse the object. */
4741             if (type != SVt_PVIO)
4742                 --PL_sv_objcount;       /* XXX Might want something more general */
4743         }
4744     }
4745     if (type >= SVt_PVMG) {
4746         if (SvMAGIC(sv))
4747             mg_free(sv);
4748         if (type == SVt_PVMG && SvFLAGS(sv) & SVpad_TYPED)
4749             SvREFCNT_dec(SvSTASH(sv));
4750     }
4751     switch (type) {
4752     case SVt_PVIO:
4753         if (IoIFP(sv) &&
4754             IoIFP(sv) != PerlIO_stdin() &&
4755             IoIFP(sv) != PerlIO_stdout() &&
4756             IoIFP(sv) != PerlIO_stderr())
4757         {
4758             io_close((IO*)sv, FALSE);
4759         }
4760         if (IoDIRP(sv) && !(IoFLAGS(sv) & IOf_FAKE_DIRP))
4761             PerlDir_close(IoDIRP(sv));
4762         IoDIRP(sv) = (DIR*)NULL;
4763         Safefree(IoTOP_NAME(sv));
4764         Safefree(IoFMT_NAME(sv));
4765         Safefree(IoBOTTOM_NAME(sv));
4766         goto freescalar;
4767     case SVt_PVBM:
4768         goto freescalar;
4769     case SVt_PVCV:
4770     case SVt_PVFM:
4771         cv_undef((CV*)sv);
4772         goto freescalar;
4773     case SVt_PVHV:
4774         Perl_hv_kill_backrefs(aTHX_ (HV*)sv);
4775         hv_undef((HV*)sv);
4776         break;
4777     case SVt_PVAV:
4778         av_undef((AV*)sv);
4779         break;
4780     case SVt_PVLV:
4781         if (LvTYPE(sv) == 'T') { /* for tie: return HE to pool */
4782             SvREFCNT_dec(HeKEY_sv((HE*)LvTARG(sv)));
4783             HeNEXT((HE*)LvTARG(sv)) = PL_hv_fetch_ent_mh;
4784             PL_hv_fetch_ent_mh = (HE*)LvTARG(sv);
4785         }
4786         else if (LvTYPE(sv) != 't') /* unless tie: unrefcnted fake SV**  */
4787             SvREFCNT_dec(LvTARG(sv));
4788         goto freescalar;
4789     case SVt_PVGV:
4790         gp_free((GV*)sv);
4791         Safefree(GvNAME(sv));
4792         /* If we're in a stash, we don't own a reference to it. However it does
4793            have a back reference to us, which needs to be cleared.  */
4794         if (GvSTASH(sv))
4795             sv_del_backref((SV*)GvSTASH(sv), sv);
4796     case SVt_PVMG:
4797     case SVt_PVNV:
4798     case SVt_PVIV:
4799       freescalar:
4800         /* Don't bother with SvOOK_off(sv); as we're only going to free it.  */
4801         if (SvOOK(sv)) {
4802             SvPV_set(sv, SvPVX_mutable(sv) - SvIVX(sv));
4803             /* Don't even bother with turning off the OOK flag.  */
4804         }
4805     case SVt_PV:
4806     case SVt_RV:
4807         if (SvROK(sv)) {
4808             SV *target = SvRV(sv);
4809             if (SvWEAKREF(sv))
4810                 sv_del_backref(target, sv);
4811             else
4812                 SvREFCNT_dec(target);
4813         }
4814 #ifdef PERL_OLD_COPY_ON_WRITE
4815         else if (SvPVX_const(sv)) {
4816             if (SvIsCOW(sv)) {
4817                 /* I believe I need to grab the global SV mutex here and
4818                    then recheck the COW status.  */
4819                 if (DEBUG_C_TEST) {
4820                     PerlIO_printf(Perl_debug_log, "Copy on write: clear\n");
4821                     sv_dump(sv);
4822                 }
4823                 sv_release_COW(sv, SvPVX_const(sv), SvLEN(sv),
4824                                SV_COW_NEXT_SV(sv));
4825                 /* And drop it here.  */
4826                 SvFAKE_off(sv);
4827             } else if (SvLEN(sv)) {
4828                 Safefree(SvPVX_const(sv));
4829             }
4830         }
4831 #else
4832         else if (SvPVX_const(sv) && SvLEN(sv))
4833             Safefree(SvPVX_mutable(sv));
4834         else if (SvPVX_const(sv) && SvREADONLY(sv) && SvFAKE(sv)) {
4835             unshare_hek(SvSHARED_HEK_FROM_PV(SvPVX_const(sv)));
4836             SvFAKE_off(sv);
4837         }
4838 #endif
4839         break;
4840     case SVt_NV:
4841         break;
4842     }
4843
4844     SvFLAGS(sv) &= SVf_BREAK;
4845     SvFLAGS(sv) |= SVTYPEMASK;
4846
4847     if (sv_type_details->arena) {
4848         del_body(((char *)SvANY(sv) + sv_type_details->offset),
4849                  &PL_body_roots[type]);
4850     }
4851     else if (sv_type_details->size) {
4852         my_safefree(SvANY(sv));
4853     }
4854 }
4855
4856 /*
4857 =for apidoc sv_newref
4858
4859 Increment an SV's reference count. Use the C<SvREFCNT_inc()> wrapper
4860 instead.
4861
4862 =cut
4863 */
4864
4865 SV *
4866 Perl_sv_newref(pTHX_ SV *sv)
4867 {
4868     if (sv)
4869         (SvREFCNT(sv))++;
4870     return sv;
4871 }
4872
4873 /*
4874 =for apidoc sv_free
4875
4876 Decrement an SV's reference count, and if it drops to zero, call
4877 C<sv_clear> to invoke destructors and free up any memory used by
4878 the body; finally, deallocate the SV's head itself.
4879 Normally called via a wrapper macro C<SvREFCNT_dec>.
4880
4881 =cut
4882 */
4883
4884 void
4885 Perl_sv_free(pTHX_ SV *sv)
4886 {
4887     dVAR;
4888     if (!sv)
4889         return;
4890     if (SvREFCNT(sv) == 0) {
4891         if (SvFLAGS(sv) & SVf_BREAK)
4892             /* this SV's refcnt has been artificially decremented to
4893              * trigger cleanup */
4894             return;
4895         if (PL_in_clean_all) /* All is fair */
4896             return;
4897         if (SvREADONLY(sv) && SvIMMORTAL(sv)) {
4898             /* make sure SvREFCNT(sv)==0 happens very seldom */
4899             SvREFCNT(sv) = (~(U32)0)/2;
4900             return;
4901         }
4902         if (ckWARN_d(WARN_INTERNAL)) {
4903             Perl_warner(aTHX_ packWARN(WARN_INTERNAL),
4904                         "Attempt to free unreferenced scalar: SV 0x%"UVxf
4905                         pTHX__FORMAT, PTR2UV(sv) pTHX__VALUE);
4906 #ifdef DEBUG_LEAKING_SCALARS_FORK_DUMP
4907             Perl_dump_sv_child(aTHX_ sv);
4908 #endif
4909         }
4910         return;
4911     }
4912     if (--(SvREFCNT(sv)) > 0)
4913         return;
4914     Perl_sv_free2(aTHX_ sv);
4915 }
4916
4917 void
4918 Perl_sv_free2(pTHX_ SV *sv)
4919 {
4920     dVAR;
4921 #ifdef DEBUGGING
4922     if (SvTEMP(sv)) {
4923         if (ckWARN_d(WARN_DEBUGGING))
4924             Perl_warner(aTHX_ packWARN(WARN_DEBUGGING),
4925                         "Attempt to free temp prematurely: SV 0x%"UVxf
4926                         pTHX__FORMAT, PTR2UV(sv) pTHX__VALUE);
4927         return;
4928     }
4929 #endif
4930     if (SvREADONLY(sv) && SvIMMORTAL(sv)) {
4931         /* make sure SvREFCNT(sv)==0 happens very seldom */
4932         SvREFCNT(sv) = (~(U32)0)/2;
4933         return;
4934     }
4935     sv_clear(sv);
4936     if (! SvREFCNT(sv))
4937         del_SV(sv);
4938 }
4939
4940 /*
4941 =for apidoc sv_len
4942
4943 Returns the length of the string in the SV. Handles magic and type
4944 coercion.  See also C<SvCUR>, which gives raw access to the xpv_cur slot.
4945
4946 =cut
4947 */
4948
4949 STRLEN
4950 Perl_sv_len(pTHX_ register SV *sv)
4951 {
4952     STRLEN len;
4953
4954     if (!sv)
4955         return 0;
4956
4957     if (SvGMAGICAL(sv))
4958         len = mg_length(sv);
4959     else
4960         (void)SvPV_const(sv, len);
4961     return len;
4962 }
4963
4964 /*
4965 =for apidoc sv_len_utf8
4966
4967 Returns the number of characters in the string in an SV, counting wide
4968 UTF-8 bytes as a single character. Handles magic and type coercion.
4969
4970 =cut
4971 */
4972
4973 /*
4974  * The length is cached in PERL_UTF8_magic, in the mg_len field.  Also the
4975  * mg_ptr is used, by sv_pos_u2b(), see the comments of S_utf8_mg_pos_init().
4976  * (Note that the mg_len is not the length of the mg_ptr field.)
4977  *
4978  */
4979
4980 STRLEN
4981 Perl_sv_len_utf8(pTHX_ register SV *sv)
4982 {
4983     if (!sv)
4984         return 0;
4985
4986     if (SvGMAGICAL(sv))
4987         return mg_length(sv);
4988     else
4989     {
4990         STRLEN len, ulen;
4991         const U8 *s = (U8*)SvPV_const(sv, len);
4992         MAGIC *mg = SvMAGICAL(sv) ? mg_find(sv, PERL_MAGIC_utf8) : 0;
4993
4994         if (mg && mg->mg_len != -1 && (mg->mg_len > 0 || len == 0)) {
4995             ulen = mg->mg_len;
4996 #ifdef PERL_UTF8_CACHE_ASSERT
4997             assert(ulen == Perl_utf8_length(aTHX_ s, s + len));
4998 #endif
4999         }
5000         else {
5001             ulen = Perl_utf8_length(aTHX_ s, s + len);
5002             if (!mg && !SvREADONLY(sv)) {
5003                 sv_magic(sv, 0, PERL_MAGIC_utf8, 0, 0);
5004                 mg = mg_find(sv, PERL_MAGIC_utf8);
5005                 assert(mg);
5006             }
5007             if (mg)
5008                 mg->mg_len = ulen;
5009         }
5010         return ulen;
5011     }
5012 }
5013
5014 /* S_utf8_mg_pos_init() is used to initialize the mg_ptr field of
5015  * a PERL_UTF8_magic.  The mg_ptr is used to store the mapping
5016  * between UTF-8 and byte offsets.  There are two (substr offset and substr
5017  * length, the i offset, PERL_MAGIC_UTF8_CACHESIZE) times two (UTF-8 offset
5018  * and byte offset) cache positions.
5019  *
5020  * The mg_len field is used by sv_len_utf8(), see its comments.
5021  * Note that the mg_len is not the length of the mg_ptr field.
5022  *
5023  */
5024 STATIC bool
5025 S_utf8_mg_pos_init(pTHX_ SV *sv, MAGIC **mgp, STRLEN **cachep, I32 i,
5026                    I32 offsetp, const U8 *s, const U8 *start)
5027 {
5028     bool found = FALSE;
5029
5030     if (SvMAGICAL(sv) && !SvREADONLY(sv)) {
5031         if (!*mgp)
5032             *mgp = sv_magicext(sv, 0, PERL_MAGIC_utf8, (MGVTBL*)&PL_vtbl_utf8, 0, 0);
5033         assert(*mgp);
5034
5035         if ((*mgp)->mg_ptr)
5036             *cachep = (STRLEN *) (*mgp)->mg_ptr;
5037         else {
5038             Newxz(*cachep, PERL_MAGIC_UTF8_CACHESIZE * 2, STRLEN);
5039             (*mgp)->mg_ptr = (char *) *cachep;
5040         }
5041         assert(*cachep);
5042
5043         (*cachep)[i]   = offsetp;
5044         (*cachep)[i+1] = s - start;
5045         found = TRUE;
5046     }
5047
5048     return found;
5049 }
5050
5051 /*
5052  * S_utf8_mg_pos() is used to query and update mg_ptr field of
5053  * a PERL_UTF8_magic.  The mg_ptr is used to store the mapping
5054  * between UTF-8 and byte offsets.  See also the comments of
5055  * S_utf8_mg_pos_init().
5056  *
5057  */
5058 STATIC bool
5059 S_utf8_mg_pos(pTHX_ SV *sv, MAGIC **mgp, STRLEN **cachep, I32 i, I32 *offsetp, I32 uoff, const U8 **sp, const U8 *start, const U8 *send)
5060 {
5061     bool found = FALSE;
5062
5063     if (SvMAGICAL(sv) && !SvREADONLY(sv)) {
5064         if (!*mgp)
5065             *mgp = mg_find(sv, PERL_MAGIC_utf8);
5066         if (*mgp && (*mgp)->mg_ptr) {
5067             *cachep = (STRLEN *) (*mgp)->mg_ptr;
5068             ASSERT_UTF8_CACHE(*cachep);
5069             if ((*cachep)[i] == (STRLEN)uoff)   /* An exact match. */
5070                  found = TRUE;
5071             else {                      /* We will skip to the right spot. */
5072                  STRLEN forw  = 0;
5073                  STRLEN backw = 0;
5074                  const U8* p = NULL;
5075
5076                  /* The assumption is that going backward is half
5077                   * the speed of going forward (that's where the
5078                   * 2 * backw in the below comes from).  (The real
5079                   * figure of course depends on the UTF-8 data.) */
5080
5081                  if ((*cachep)[i] > (STRLEN)uoff) {
5082                       forw  = uoff;
5083                       backw = (*cachep)[i] - (STRLEN)uoff;
5084
5085                       if (forw < 2 * backw)
5086                            p = start;
5087                       else
5088                            p = start + (*cachep)[i+1];
5089                  }
5090                  /* Try this only for the substr offset (i == 0),
5091                   * not for the substr length (i == 2). */
5092                  else if (i == 0) { /* (*cachep)[i] < uoff */
5093                       const STRLEN ulen = sv_len_utf8(sv);
5094
5095                       if ((STRLEN)uoff < ulen) {
5096                            forw  = (STRLEN)uoff - (*cachep)[i];
5097                            backw = ulen - (STRLEN)uoff;
5098
5099                            if (forw < 2 * backw)
5100                                 p = start + (*cachep)[i+1];
5101                            else
5102                                 p = send;
5103                       }
5104
5105                       /* If the string is not long enough for uoff,
5106                        * we could extend it, but not at this low a level. */
5107                  }
5108
5109                  if (p) {
5110                       if (forw < 2 * backw) {
5111                            while (forw--)
5112                                 p += UTF8SKIP(p);
5113                       }
5114                       else {
5115                            while (backw--) {
5116                                 p--;
5117                                 while (UTF8_IS_CONTINUATION(*p))
5118                                      p--;
5119                            }
5120                       }
5121
5122                       /* Update the cache. */
5123                       (*cachep)[i]   = (STRLEN)uoff;
5124                       (*cachep)[i+1] = p - start;
5125
5126                       /* Drop the stale "length" cache */
5127                       if (i == 0) {
5128                           (*cachep)[2] = 0;
5129                           (*cachep)[3] = 0;
5130                       }
5131
5132                       found = TRUE;
5133                  }
5134             }
5135             if (found) {        /* Setup the return values. */
5136                  *offsetp = (*cachep)[i+1];
5137                  *sp = start + *offsetp;
5138                  if (*sp >= send) {
5139                       *sp = send;
5140                       *offsetp = send - start;
5141                  }
5142                  else if (*sp < start) {
5143                       *sp = start;
5144                       *offsetp = 0;
5145                  }
5146             }
5147         }
5148 #ifdef PERL_UTF8_CACHE_ASSERT
5149         if (found) {
5150              U8 *s = start;
5151              I32 n = uoff;
5152
5153              while (n-- && s < send)
5154                   s += UTF8SKIP(s);
5155
5156              if (i == 0) {
5157                   assert(*offsetp == s - start);
5158                   assert((*cachep)[0] == (STRLEN)uoff);
5159                   assert((*cachep)[1] == *offsetp);
5160              }
5161              ASSERT_UTF8_CACHE(*cachep);
5162         }
5163 #endif
5164     }
5165
5166     return found;
5167 }
5168
5169 /*
5170 =for apidoc sv_pos_u2b
5171
5172 Converts the value pointed to by offsetp from a count of UTF-8 chars from
5173 the start of the string, to a count of the equivalent number of bytes; if
5174 lenp is non-zero, it does the same to lenp, but this time starting from
5175 the offset, rather than from the start of the string. Handles magic and
5176 type coercion.
5177
5178 =cut
5179 */
5180
5181 /*
5182  * sv_pos_u2b() uses, like sv_pos_b2u(), the mg_ptr of the potential
5183  * PERL_UTF8_magic of the sv to store the mapping between UTF-8 and
5184  * byte offsets.  See also the comments of S_utf8_mg_pos().
5185  *
5186  */
5187
5188 void
5189 Perl_sv_pos_u2b(pTHX_ register SV *sv, I32* offsetp, I32* lenp)
5190 {
5191     const U8 *start;
5192     STRLEN len;
5193
5194     if (!sv)
5195         return;
5196
5197     start = (U8*)SvPV_const(sv, len);
5198     if (len) {
5199         STRLEN boffset = 0;
5200         STRLEN *cache = 0;
5201         const U8 *s = start;
5202         I32 uoffset = *offsetp;
5203         const U8 * const send = s + len;
5204         MAGIC *mg = 0;
5205         bool found = FALSE;
5206
5207          if (utf8_mg_pos(sv, &mg, &cache, 0, offsetp, *offsetp, &s, start, send))
5208              found = TRUE;
5209          if (!found && uoffset > 0) {
5210               while (s < send && uoffset--)
5211                    s += UTF8SKIP(s);
5212               if (s >= send)
5213                    s = send;
5214               if (utf8_mg_pos_init(sv, &mg, &cache, 0, *offsetp, s, start))
5215                   boffset = cache[1];
5216               *offsetp = s - start;
5217          }
5218          if (lenp) {
5219               found = FALSE;
5220               start = s;
5221               if (utf8_mg_pos(sv, &mg, &cache, 2, lenp, *lenp, &s, start, send)) {
5222                   *lenp -= boffset;
5223                   found = TRUE;
5224               }
5225               if (!found && *lenp > 0) {
5226                    I32 ulen = *lenp;
5227                    if (ulen > 0)
5228                         while (s < send && ulen--)
5229                              s += UTF8SKIP(s);
5230                    if (s >= send)
5231                         s = send;
5232                    utf8_mg_pos_init(sv, &mg, &cache, 2, *lenp, s, start);
5233               }
5234               *lenp = s - start;
5235          }
5236          ASSERT_UTF8_CACHE(cache);
5237     }
5238     else {
5239          *offsetp = 0;
5240          if (lenp)
5241               *lenp = 0;
5242     }
5243
5244     return;
5245 }
5246
5247 /*
5248 =for apidoc sv_pos_b2u
5249
5250 Converts the value pointed to by offsetp from a count of bytes from the
5251 start of the string, to a count of the equivalent number of UTF-8 chars.
5252 Handles magic and type coercion.
5253
5254 =cut
5255 */
5256
5257 /*
5258  * sv_pos_b2u() uses, like sv_pos_u2b(), the mg_ptr of the potential
5259  * PERL_UTF8_magic of the sv to store the mapping between UTF-8 and
5260  * byte offsets.  See also the comments of S_utf8_mg_pos().
5261  *
5262  */
5263
5264 void
5265 Perl_sv_pos_b2u(pTHX_ register SV* sv, I32* offsetp)
5266 {
5267     const U8* s;
5268     STRLEN len;
5269
5270     if (!sv)
5271         return;
5272
5273     s = (const U8*)SvPV_const(sv, len);
5274     if ((I32)len < *offsetp)
5275         Perl_croak(aTHX_ "panic: sv_pos_b2u: bad byte offset");
5276     else {
5277         const U8* send = s + *offsetp;
5278         MAGIC* mg = NULL;
5279         STRLEN *cache = NULL;
5280
5281         len = 0;
5282
5283         if (SvMAGICAL(sv) && !SvREADONLY(sv)) {
5284             mg = mg_find(sv, PERL_MAGIC_utf8);
5285             if (mg && mg->mg_ptr) {
5286                 cache = (STRLEN *) mg->mg_ptr;
5287                 if (cache[1] == (STRLEN)*offsetp) {
5288                     /* An exact match. */
5289                     *offsetp = cache[0];
5290
5291                     return;
5292                 }
5293                 else if (cache[1] < (STRLEN)*offsetp) {
5294                     /* We already know part of the way. */
5295                     len = cache[0];
5296                     s  += cache[1];
5297                     /* Let the below loop do the rest. */
5298                 }
5299                 else { /* cache[1] > *offsetp */
5300                     /* We already know all of the way, now we may
5301                      * be able to walk back.  The same assumption
5302                      * is made as in S_utf8_mg_pos(), namely that
5303                      * walking backward is twice slower than
5304                      * walking forward. */
5305                     const STRLEN forw  = *offsetp;
5306                     STRLEN backw = cache[1] - *offsetp;
5307
5308                     if (!(forw < 2 * backw)) {
5309                         const U8 *p = s + cache[1];
5310                         STRLEN ubackw = 0;
5311                         
5312                         cache[1] -= backw;
5313
5314                         while (backw--) {
5315                             p--;
5316                             while (UTF8_IS_CONTINUATION(*p)) {
5317                                 p--;
5318                                 backw--;
5319                             }
5320                             ubackw++;
5321                         }
5322
5323                         cache[0] -= ubackw;
5324                         *offsetp = cache[0];
5325
5326                         /* Drop the stale "length" cache */
5327                         cache[2] = 0;
5328                         cache[3] = 0;
5329
5330                         return;
5331                     }
5332                 }
5333             }
5334             ASSERT_UTF8_CACHE(cache);
5335         }
5336
5337         while (s < send) {
5338             STRLEN n = 1;
5339
5340             /* Call utf8n_to_uvchr() to validate the sequence
5341              * (unless a simple non-UTF character) */
5342             if (!UTF8_IS_INVARIANT(*s))
5343                 utf8n_to_uvchr(s, UTF8SKIP(s), &n, 0);
5344             if (n > 0) {
5345                 s += n;
5346                 len++;
5347             }
5348             else
5349                 break;
5350         }
5351
5352         if (!SvREADONLY(sv)) {
5353             if (!mg) {
5354                 sv_magic(sv, 0, PERL_MAGIC_utf8, 0, 0);
5355                 mg = mg_find(sv, PERL_MAGIC_utf8);
5356             }
5357             assert(mg);
5358
5359             if (!mg->mg_ptr) {
5360                 Newxz(cache, PERL_MAGIC_UTF8_CACHESIZE * 2, STRLEN);
5361                 mg->mg_ptr = (char *) cache;
5362             }
5363             assert(cache);
5364
5365             cache[0] = len;
5366             cache[1] = *offsetp;
5367             /* Drop the stale "length" cache */
5368             cache[2] = 0;
5369             cache[3] = 0;
5370         }
5371
5372         *offsetp = len;
5373     }
5374     return;
5375 }
5376
5377 /*
5378 =for apidoc sv_eq
5379
5380 Returns a boolean indicating whether the strings in the two SVs are
5381 identical. Is UTF-8 and 'use bytes' aware, handles get magic, and will
5382 coerce its args to strings if necessary.
5383
5384 =cut
5385 */
5386
5387 I32
5388 Perl_sv_eq(pTHX_ register SV *sv1, register SV *sv2)
5389 {
5390     const char *pv1;
5391     STRLEN cur1;
5392     const char *pv2;
5393     STRLEN cur2;
5394     I32  eq     = 0;
5395     char *tpv   = Nullch;
5396     SV* svrecode = Nullsv;
5397
5398     if (!sv1) {
5399         pv1 = "";
5400         cur1 = 0;
5401     }
5402     else
5403         pv1 = SvPV_const(sv1, cur1);
5404
5405     if (!sv2){
5406         pv2 = "";
5407         cur2 = 0;
5408     }
5409     else
5410         pv2 = SvPV_const(sv2, cur2);
5411
5412     if (cur1 && cur2 && SvUTF8(sv1) != SvUTF8(sv2) && !IN_BYTES) {
5413         /* Differing utf8ness.
5414          * Do not UTF8size the comparands as a side-effect. */
5415          if (PL_encoding) {
5416               if (SvUTF8(sv1)) {
5417                    svrecode = newSVpvn(pv2, cur2);
5418                    sv_recode_to_utf8(svrecode, PL_encoding);
5419                    pv2 = SvPV_const(svrecode, cur2);
5420               }
5421               else {
5422                    svrecode = newSVpvn(pv1, cur1);
5423                    sv_recode_to_utf8(svrecode, PL_encoding);
5424                    pv1 = SvPV_const(svrecode, cur1);
5425               }
5426               /* Now both are in UTF-8. */
5427               if (cur1 != cur2) {
5428                    SvREFCNT_dec(svrecode);
5429                    return FALSE;
5430               }
5431          }
5432          else {
5433               bool is_utf8 = TRUE;
5434
5435               if (SvUTF8(sv1)) {
5436                    /* sv1 is the UTF-8 one,
5437                     * if is equal it must be downgrade-able */
5438                    char * const pv = (char*)bytes_from_utf8((const U8*)pv1,
5439                                                      &cur1, &is_utf8);
5440                    if (pv != pv1)
5441                         pv1 = tpv = pv;
5442               }
5443               else {
5444                    /* sv2 is the UTF-8 one,
5445                     * if is equal it must be downgrade-able */
5446                    char * const pv = (char *)bytes_from_utf8((const U8*)pv2,
5447                                                       &cur2, &is_utf8);
5448                    if (pv != pv2)
5449                         pv2 = tpv = pv;
5450               }
5451               if (is_utf8) {
5452                    /* Downgrade not possible - cannot be eq */
5453                    assert (tpv == 0);
5454                    return FALSE;
5455               }
5456          }
5457     }
5458
5459     if (cur1 == cur2)
5460         eq = (pv1 == pv2) || memEQ(pv1, pv2, cur1);
5461         
5462     if (svrecode)
5463          SvREFCNT_dec(svrecode);
5464
5465     if (tpv)
5466         Safefree(tpv);
5467
5468     return eq;
5469 }
5470
5471 /*
5472 =for apidoc sv_cmp
5473
5474 Compares the strings in two SVs.  Returns -1, 0, or 1 indicating whether the
5475 string in C<sv1> is less than, equal to, or greater than the string in
5476 C<sv2>. Is UTF-8 and 'use bytes' aware, handles get magic, and will
5477 coerce its args to strings if necessary.  See also C<sv_cmp_locale>.
5478
5479 =cut
5480 */
5481
5482 I32
5483 Perl_sv_cmp(pTHX_ register SV *sv1, register SV *sv2)
5484 {
5485     STRLEN cur1, cur2;
5486     const char *pv1, *pv2;
5487     char *tpv = Nullch;
5488     I32  cmp;
5489     SV *svrecode = Nullsv;
5490
5491     if (!sv1) {
5492         pv1 = "";
5493         cur1 = 0;
5494     }
5495     else
5496         pv1 = SvPV_const(sv1, cur1);
5497
5498     if (!sv2) {
5499         pv2 = "";
5500         cur2 = 0;
5501     }
5502     else
5503         pv2 = SvPV_const(sv2, cur2);
5504
5505     if (cur1 && cur2 && SvUTF8(sv1) != SvUTF8(sv2) && !IN_BYTES) {
5506         /* Differing utf8ness.
5507          * Do not UTF8size the comparands as a side-effect. */
5508         if (SvUTF8(sv1)) {
5509             if (PL_encoding) {
5510                  svrecode = newSVpvn(pv2, cur2);
5511                  sv_recode_to_utf8(svrecode, PL_encoding);
5512                  pv2 = SvPV_const(svrecode, cur2);
5513             }
5514             else {
5515                  pv2 = tpv = (char*)bytes_to_utf8((const U8*)pv2, &cur2);
5516             }
5517         }
5518         else {
5519             if (PL_encoding) {
5520                  svrecode = newSVpvn(pv1, cur1);
5521                  sv_recode_to_utf8(svrecode, PL_encoding);
5522                  pv1 = SvPV_const(svrecode, cur1);
5523             }
5524             else {
5525                  pv1 = tpv = (char*)bytes_to_utf8((const U8*)pv1, &cur1);
5526             }
5527         }
5528     }
5529
5530     if (!cur1) {
5531         cmp = cur2 ? -1 : 0;
5532     } else if (!cur2) {
5533         cmp = 1;
5534     } else {
5535         const I32 retval = memcmp((const void*)pv1, (const void*)pv2, cur1 < cur2 ? cur1 : cur2);
5536
5537         if (retval) {
5538             cmp = retval < 0 ? -1 : 1;
5539         } else if (cur1 == cur2) {
5540             cmp = 0;
5541         } else {
5542             cmp = cur1 < cur2 ? -1 : 1;
5543         }
5544     }
5545
5546     if (svrecode)
5547          SvREFCNT_dec(svrecode);
5548
5549     if (tpv)
5550         Safefree(tpv);
5551
5552     return cmp;
5553 }
5554
5555 /*
5556 =for apidoc sv_cmp_locale
5557
5558 Compares the strings in two SVs in a locale-aware manner. Is UTF-8 and
5559 'use bytes' aware, handles get magic, and will coerce its args to strings
5560 if necessary.  See also C<sv_cmp_locale>.  See also C<sv_cmp>.
5561
5562 =cut
5563 */
5564
5565 I32
5566 Perl_sv_cmp_locale(pTHX_ register SV *sv1, register SV *sv2)
5567 {
5568 #ifdef USE_LOCALE_COLLATE
5569
5570     char *pv1, *pv2;
5571     STRLEN len1, len2;
5572     I32 retval;
5573
5574     if (PL_collation_standard)
5575         goto raw_compare;
5576
5577     len1 = 0;
5578     pv1 = sv1 ? sv_collxfrm(sv1, &len1) : (char *) NULL;
5579     len2 = 0;
5580     pv2 = sv2 ? sv_collxfrm(sv2, &len2) : (char *) NULL;
5581
5582     if (!pv1 || !len1) {
5583         if (pv2 && len2)
5584             return -1;
5585         else
5586             goto raw_compare;
5587     }
5588     else {
5589         if (!pv2 || !len2)
5590             return 1;
5591     }
5592
5593     retval = memcmp((void*)pv1, (void*)pv2, len1 < len2 ? len1 : len2);
5594
5595     if (retval)
5596         return retval < 0 ? -1 : 1;
5597
5598     /*
5599      * When the result of collation is equality, that doesn't mean
5600      * that there are no differences -- some locales exclude some
5601      * characters from consideration.  So to avoid false equalities,
5602      * we use the raw string as a tiebreaker.
5603      */
5604
5605   raw_compare:
5606     /* FALL THROUGH */
5607
5608 #endif /* USE_LOCALE_COLLATE */
5609
5610     return sv_cmp(sv1, sv2);
5611 }
5612
5613
5614 #ifdef USE_LOCALE_COLLATE
5615
5616 /*
5617 =for apidoc sv_collxfrm
5618
5619 Add Collate Transform magic to an SV if it doesn't already have it.
5620
5621 Any scalar variable may carry PERL_MAGIC_collxfrm magic that contains the
5622 scalar data of the variable, but transformed to such a format that a normal
5623 memory comparison can be used to compare the data according to the locale
5624 settings.
5625
5626 =cut
5627 */
5628
5629 char *
5630 Perl_sv_collxfrm(pTHX_ SV *sv, STRLEN *nxp)
5631 {
5632     MAGIC *mg;
5633
5634     mg = SvMAGICAL(sv) ? mg_find(sv, PERL_MAGIC_collxfrm) : (MAGIC *) NULL;
5635     if (!mg || !mg->mg_ptr || *(U32*)mg->mg_ptr != PL_collation_ix) {
5636         const char *s;
5637         char *xf;
5638         STRLEN len, xlen;
5639
5640         if (mg)
5641             Safefree(mg->mg_ptr);
5642         s = SvPV_const(sv, len);
5643         if ((xf = mem_collxfrm(s, len, &xlen))) {
5644             if (SvREADONLY(sv)) {
5645                 SAVEFREEPV(xf);
5646                 *nxp = xlen;
5647                 return xf + sizeof(PL_collation_ix);
5648             }
5649             if (! mg) {
5650                 sv_magic(sv, 0, PERL_MAGIC_collxfrm, 0, 0);
5651                 mg = mg_find(sv, PERL_MAGIC_collxfrm);
5652                 assert(mg);
5653             }
5654             mg->mg_ptr = xf;
5655             mg->mg_len = xlen;
5656         }
5657         else {
5658             if (mg) {
5659                 mg->mg_ptr = NULL;
5660                 mg->mg_len = -1;
5661             }
5662         }
5663     }
5664     if (mg && mg->mg_ptr) {
5665         *nxp = mg->mg_len;
5666         return mg->mg_ptr + sizeof(PL_collation_ix);
5667     }
5668     else {
5669         *nxp = 0;
5670         return NULL;
5671     }
5672 }
5673
5674 #endif /* USE_LOCALE_COLLATE */
5675
5676 /*
5677 =for apidoc sv_gets
5678
5679 Get a line from the filehandle and store it into the SV, optionally
5680 appending to the currently-stored string.
5681
5682 =cut
5683 */
5684
5685 char *
5686 Perl_sv_gets(pTHX_ register SV *sv, register PerlIO *fp, I32 append)
5687 {
5688     const char *rsptr;
5689     STRLEN rslen;
5690     register STDCHAR rslast;
5691     register STDCHAR *bp;
5692     register I32 cnt;
5693     I32 i = 0;
5694     I32 rspara = 0;
5695     I32 recsize;
5696
5697     if (SvTHINKFIRST(sv))
5698         sv_force_normal_flags(sv, append ? 0 : SV_COW_DROP_PV);
5699     /* XXX. If you make this PVIV, then copy on write can copy scalars read
5700        from <>.
5701        However, perlbench says it's slower, because the existing swipe code
5702        is faster than copy on write.
5703        Swings and roundabouts.  */
5704     SvUPGRADE(sv, SVt_PV);
5705
5706     SvSCREAM_off(sv);
5707
5708     if (append) {
5709         if (PerlIO_isutf8(fp)) {
5710             if (!SvUTF8(sv)) {
5711                 sv_utf8_upgrade_nomg(sv);
5712                 sv_pos_u2b(sv,&append,0);
5713             }
5714         } else if (SvUTF8(sv)) {
5715             SV * const tsv = NEWSV(0,0);
5716             sv_gets(tsv, fp, 0);
5717             sv_utf8_upgrade_nomg(tsv);
5718             SvCUR_set(sv,append);
5719             sv_catsv(sv,tsv);
5720             sv_free(tsv);
5721             goto return_string_or_null;
5722         }
5723     }
5724
5725     SvPOK_only(sv);
5726     if (PerlIO_isutf8(fp))
5727         SvUTF8_on(sv);
5728
5729     if (IN_PERL_COMPILETIME) {
5730         /* we always read code in line mode */
5731         rsptr = "\n";
5732         rslen = 1;
5733     }
5734     else if (RsSNARF(PL_rs)) {
5735         /* If it is a regular disk file use size from stat() as estimate
5736            of amount we are going to read - may result in malloc-ing
5737            more memory than we realy need if layers bellow reduce
5738            size we read (e.g. CRLF or a gzip layer)
5739          */
5740         Stat_t st;
5741         if (!PerlLIO_fstat(PerlIO_fileno(fp), &st) && S_ISREG(st.st_mode))  {
5742             const Off_t offset = PerlIO_tell(fp);
5743             if (offset != (Off_t) -1 && st.st_size + append > offset) {
5744                 (void) SvGROW(sv, (STRLEN)((st.st_size - offset) + append + 1));
5745             }
5746         }
5747         rsptr = NULL;
5748         rslen = 0;
5749     }
5750     else if (RsRECORD(PL_rs)) {
5751       I32 bytesread;
5752       char *buffer;
5753
5754       /* Grab the size of the record we're getting */
5755       recsize = SvIV(SvRV(PL_rs));
5756       buffer = SvGROW(sv, (STRLEN)(recsize + append + 1)) + append;
5757       /* Go yank in */
5758 #ifdef VMS
5759       /* VMS wants read instead of fread, because fread doesn't respect */
5760       /* RMS record boundaries. This is not necessarily a good thing to be */
5761       /* doing, but we've got no other real choice - except avoid stdio
5762          as implementation - perhaps write a :vms layer ?
5763        */
5764       bytesread = PerlLIO_read(PerlIO_fileno(fp), buffer, recsize);
5765 #else
5766       bytesread = PerlIO_read(fp, buffer, recsize);
5767 #endif
5768       if (bytesread < 0)
5769           bytesread = 0;
5770       SvCUR_set(sv, bytesread += append);
5771       buffer[bytesread] = '\0';
5772       goto return_string_or_null;
5773     }
5774     else if (RsPARA(PL_rs)) {
5775         rsptr = "\n\n";
5776         rslen = 2;
5777         rspara = 1;
5778     }
5779     else {
5780         /* Get $/ i.e. PL_rs into same encoding as stream wants */
5781         if (PerlIO_isutf8(fp)) {
5782             rsptr = SvPVutf8(PL_rs, rslen);
5783         }
5784         else {
5785             if (SvUTF8(PL_rs)) {
5786                 if (!sv_utf8_downgrade(PL_rs, TRUE)) {
5787                     Perl_croak(aTHX_ "Wide character in $/");
5788                 }
5789             }
5790             rsptr = SvPV_const(PL_rs, rslen);
5791         }
5792     }
5793
5794     rslast = rslen ? rsptr[rslen - 1] : '\0';
5795
5796     if (rspara) {               /* have to do this both before and after */
5797         do {                    /* to make sure file boundaries work right */
5798             if (PerlIO_eof(fp))
5799                 return 0;
5800             i = PerlIO_getc(fp);
5801             if (i != '\n') {
5802                 if (i == -1)
5803                     return 0;
5804                 PerlIO_ungetc(fp,i);
5805                 break;
5806             }
5807         } while (i != EOF);
5808     }
5809
5810     /* See if we know enough about I/O mechanism to cheat it ! */
5811
5812     /* This used to be #ifdef test - it is made run-time test for ease
5813        of abstracting out stdio interface. One call should be cheap
5814        enough here - and may even be a macro allowing compile
5815        time optimization.
5816      */
5817
5818     if (PerlIO_fast_gets(fp)) {
5819
5820     /*
5821      * We're going to steal some values from the stdio struct
5822      * and put EVERYTHING in the innermost loop into registers.
5823      */
5824     register STDCHAR *ptr;
5825     STRLEN bpx;
5826     I32 shortbuffered;
5827
5828 #if defined(VMS) && defined(PERLIO_IS_STDIO)
5829     /* An ungetc()d char is handled separately from the regular
5830      * buffer, so we getc() it back out and stuff it in the buffer.
5831      */
5832     i = PerlIO_getc(fp);
5833     if (i == EOF) return 0;
5834     *(--((*fp)->_ptr)) = (unsigned char) i;
5835     (*fp)->_cnt++;
5836 #endif
5837
5838     /* Here is some breathtakingly efficient cheating */
5839
5840     cnt = PerlIO_get_cnt(fp);                   /* get count into register */
5841     /* make sure we have the room */
5842     if ((I32)(SvLEN(sv) - append) <= cnt + 1) {
5843         /* Not room for all of it
5844            if we are looking for a separator and room for some
5845          */
5846         if (rslen && cnt > 80 && (I32)SvLEN(sv) > append) {
5847             /* just process what we have room for */
5848             shortbuffered = cnt - SvLEN(sv) + append + 1;
5849             cnt -= shortbuffered;
5850         }
5851         else {
5852             shortbuffered = 0;
5853             /* remember that cnt can be negative */
5854             SvGROW(sv, (STRLEN)(append + (cnt <= 0 ? 2 : (cnt + 1))));
5855         }
5856     }
5857     else
5858         shortbuffered = 0;
5859     bp = (STDCHAR*)SvPVX_const(sv) + append;  /* move these two too to registers */
5860     ptr = (STDCHAR*)PerlIO_get_ptr(fp);
5861     DEBUG_P(PerlIO_printf(Perl_debug_log,
5862         "Screamer: entering, ptr=%"UVuf", cnt=%ld\n",PTR2UV(ptr),(long)cnt));
5863     DEBUG_P(PerlIO_printf(Perl_debug_log,
5864         "Screamer: entering: PerlIO * thinks ptr=%"UVuf", cnt=%ld, base=%"UVuf"\n",
5865                PTR2UV(PerlIO_get_ptr(fp)), (long)PerlIO_get_cnt(fp),
5866                PTR2UV(PerlIO_has_base(fp) ? PerlIO_get_base(fp) : 0)));
5867     for (;;) {
5868       screamer:
5869         if (cnt > 0) {
5870             if (rslen) {
5871                 while (cnt > 0) {                    /* this     |  eat */
5872                     cnt--;
5873                     if ((*bp++ = *ptr++) == rslast)  /* really   |  dust */
5874                         goto thats_all_folks;        /* screams  |  sed :-) */
5875                 }
5876             }
5877             else {
5878                 Copy(ptr, bp, cnt, char);            /* this     |  eat */
5879                 bp += cnt;                           /* screams  |  dust */
5880                 ptr += cnt;                          /* louder   |  sed :-) */
5881                 cnt = 0;
5882             }
5883         }
5884         
5885         if (shortbuffered) {            /* oh well, must extend */
5886             cnt = shortbuffered;
5887             shortbuffered = 0;
5888             bpx = bp - (STDCHAR*)SvPVX_const(sv); /* box up before relocation */
5889             SvCUR_set(sv, bpx);
5890             SvGROW(sv, SvLEN(sv) + append + cnt + 2);
5891             bp = (STDCHAR*)SvPVX_const(sv) + bpx; /* unbox after relocation */
5892             continue;
5893         }
5894
5895         DEBUG_P(PerlIO_printf(Perl_debug_log,
5896                               "Screamer: going to getc, ptr=%"UVuf", cnt=%ld\n",
5897                               PTR2UV(ptr),(long)cnt));
5898         PerlIO_set_ptrcnt(fp, (STDCHAR*)ptr, cnt); /* deregisterize cnt and ptr */
5899 #if 0
5900         DEBUG_P(PerlIO_printf(Perl_debug_log,
5901             "Screamer: pre: FILE * thinks ptr=%"UVuf", cnt=%ld, base=%"UVuf"\n",
5902             PTR2UV(PerlIO_get_ptr(fp)), (long)PerlIO_get_cnt(fp),
5903             PTR2UV(PerlIO_has_base (fp) ? PerlIO_get_base(fp) : 0)));
5904 #endif
5905         /* This used to call 'filbuf' in stdio form, but as that behaves like
5906            getc when cnt <= 0 we use PerlIO_getc here to avoid introducing
5907            another abstraction.  */
5908         i   = PerlIO_getc(fp);          /* get more characters */
5909 #if 0
5910         DEBUG_P(PerlIO_printf(Perl_debug_log,
5911             "Screamer: post: FILE * thinks ptr=%"UVuf", cnt=%ld, base=%"UVuf"\n",
5912             PTR2UV(PerlIO_get_ptr(fp)), (long)PerlIO_get_cnt(fp),
5913             PTR2UV(PerlIO_has_base (fp) ? PerlIO_get_base(fp) : 0)));
5914 #endif
5915         cnt = PerlIO_get_cnt(fp);
5916         ptr = (STDCHAR*)PerlIO_get_ptr(fp);     /* reregisterize cnt and ptr */
5917         DEBUG_P(PerlIO_printf(Perl_debug_log,
5918             "Screamer: after getc, ptr=%"UVuf", cnt=%ld\n",PTR2UV(ptr),(long)cnt));
5919
5920         if (i == EOF)                   /* all done for ever? */
5921             goto thats_really_all_folks;
5922
5923         bpx = bp - (STDCHAR*)SvPVX_const(sv);   /* box up before relocation */
5924         SvCUR_set(sv, bpx);
5925         SvGROW(sv, bpx + cnt + 2);
5926         bp = (STDCHAR*)SvPVX_const(sv) + bpx;   /* unbox after relocation */
5927
5928         *bp++ = (STDCHAR)i;             /* store character from PerlIO_getc */
5929
5930         if (rslen && (STDCHAR)i == rslast)  /* all done for now? */
5931             goto thats_all_folks;
5932     }
5933
5934 thats_all_folks:
5935     if ((rslen > 1 && (STRLEN)(bp - (STDCHAR*)SvPVX_const(sv)) < rslen) ||
5936           memNE((char*)bp - rslen, rsptr, rslen))
5937         goto screamer;                          /* go back to the fray */
5938 thats_really_all_folks:
5939     if (shortbuffered)
5940         cnt += shortbuffered;
5941         DEBUG_P(PerlIO_printf(Perl_debug_log,
5942             "Screamer: quitting, ptr=%"UVuf", cnt=%ld\n",PTR2UV(ptr),(long)cnt));
5943     PerlIO_set_ptrcnt(fp, (STDCHAR*)ptr, cnt);  /* put these back or we're in trouble */
5944     DEBUG_P(PerlIO_printf(Perl_debug_log,
5945         "Screamer: end: FILE * thinks ptr=%"UVuf", cnt=%ld, base=%"UVuf"\n",
5946         PTR2UV(PerlIO_get_ptr(fp)), (long)PerlIO_get_cnt(fp),
5947         PTR2UV(PerlIO_has_base (fp) ? PerlIO_get_base(fp) : 0)));
5948     *bp = '\0';
5949     SvCUR_set(sv, bp - (STDCHAR*)SvPVX_const(sv));      /* set length */
5950     DEBUG_P(PerlIO_printf(Perl_debug_log,
5951         "Screamer: done, len=%ld, string=|%.*s|\n",
5952         (long)SvCUR(sv),(int)SvCUR(sv),SvPVX_const(sv)));
5953     }
5954    else
5955     {
5956        /*The big, slow, and stupid way. */
5957 #ifdef USE_HEAP_INSTEAD_OF_STACK        /* Even slower way. */
5958         STDCHAR *buf = 0;
5959         Newx(buf, 8192, STDCHAR);
5960         assert(buf);
5961 #else
5962         STDCHAR buf[8192];
5963 #endif
5964
5965 screamer2:
5966         if (rslen) {
5967             register const STDCHAR * const bpe = buf + sizeof(buf);
5968             bp = buf;
5969             while ((i = PerlIO_getc(fp)) != EOF && (*bp++ = (STDCHAR)i) != rslast && bp < bpe)
5970                 ; /* keep reading */
5971             cnt = bp - buf;
5972         }
5973         else {
5974             cnt = PerlIO_read(fp,(char*)buf, sizeof(buf));
5975             /* Accomodate broken VAXC compiler, which applies U8 cast to
5976              * both args of ?: operator, causing EOF to change into 255
5977              */
5978             if (cnt > 0)
5979                  i = (U8)buf[cnt - 1];
5980             else
5981                  i = EOF;
5982         }
5983
5984         if (cnt < 0)
5985             cnt = 0;  /* we do need to re-set the sv even when cnt <= 0 */
5986         if (append)
5987              sv_catpvn(sv, (char *) buf, cnt);
5988         else
5989              sv_setpvn(sv, (char *) buf, cnt);
5990
5991         if (i != EOF &&                 /* joy */
5992             (!rslen ||
5993              SvCUR(sv) < rslen ||
5994              memNE(SvPVX_const(sv) + SvCUR(sv) - rslen, rsptr, rslen)))
5995         {
5996             append = -1;
5997             /*
5998              * If we're reading from a TTY and we get a short read,
5999              * indicating that the user hit his EOF character, we need
6000              * to notice it now, because if we try to read from the TTY
6001              * again, the EOF condition will disappear.
6002              *
6003              * The comparison of cnt to sizeof(buf) is an optimization
6004              * that prevents unnecessary calls to feof().
6005              *
6006              * - jik 9/25/96
6007              */
6008             if (!(cnt < sizeof(buf) && PerlIO_eof(fp)))
6009                 goto screamer2;
6010         }
6011
6012 #ifdef USE_HEAP_INSTEAD_OF_STACK
6013         Safefree(buf);
6014 #endif
6015     }
6016
6017     if (rspara) {               /* have to do this both before and after */
6018         while (i != EOF) {      /* to make sure file boundaries work right */
6019             i = PerlIO_getc(fp);
6020             if (i != '\n') {
6021                 PerlIO_ungetc(fp,i);
6022                 break;
6023             }
6024         }
6025     }
6026
6027 return_string_or_null:
6028     return (SvCUR(sv) - append) ? SvPVX(sv) : Nullch;
6029 }
6030
6031 /*
6032 =for apidoc sv_inc
6033
6034 Auto-increment of the value in the SV, doing string to numeric conversion
6035 if necessary. Handles 'get' magic.
6036
6037 =cut
6038 */
6039
6040 void
6041 Perl_sv_inc(pTHX_ register SV *sv)
6042 {
6043     register char *d;
6044     int flags;
6045
6046     if (!sv)
6047         return;
6048     SvGETMAGIC(sv);
6049     if (SvTHINKFIRST(sv)) {
6050         if (SvIsCOW(sv))
6051             sv_force_normal_flags(sv, 0);
6052         if (SvREADONLY(sv)) {
6053             if (IN_PERL_RUNTIME)
6054                 Perl_croak(aTHX_ PL_no_modify);
6055         }
6056         if (SvROK(sv)) {
6057             IV i;
6058             if (SvAMAGIC(sv) && AMG_CALLun(sv,inc))
6059                 return;
6060             i = PTR2IV(SvRV(sv));
6061             sv_unref(sv);
6062             sv_setiv(sv, i);
6063         }
6064     }
6065     flags = SvFLAGS(sv);
6066     if ((flags & (SVp_NOK|SVp_IOK)) == SVp_NOK) {
6067         /* It's (privately or publicly) a float, but not tested as an
6068            integer, so test it to see. */
6069         (void) SvIV(sv);
6070         flags = SvFLAGS(sv);
6071     }
6072     if ((flags & SVf_IOK) || ((flags & (SVp_IOK | SVp_NOK)) == SVp_IOK)) {
6073         /* It's publicly an integer, or privately an integer-not-float */
6074 #ifdef PERL_PRESERVE_IVUV
6075       oops_its_int:
6076 #endif
6077         if (SvIsUV(sv)) {
6078             if (SvUVX(sv) == UV_MAX)
6079                 sv_setnv(sv, UV_MAX_P1);
6080             else
6081                 (void)SvIOK_only_UV(sv);
6082                 SvUV_set(sv, SvUVX(sv) + 1);
6083         } else {
6084             if (SvIVX(sv) == IV_MAX)
6085                 sv_setuv(sv, (UV)IV_MAX + 1);
6086             else {
6087                 (void)SvIOK_only(sv);
6088                 SvIV_set(sv, SvIVX(sv) + 1);
6089             }   
6090         }
6091         return;
6092     }
6093     if (flags & SVp_NOK) {
6094         (void)SvNOK_only(sv);
6095         SvNV_set(sv, SvNVX(sv) + 1.0);
6096         return;
6097     }
6098
6099     if (!(flags & SVp_POK) || !*SvPVX_const(sv)) {
6100         if ((flags & SVTYPEMASK) < SVt_PVIV)
6101             sv_upgrade(sv, ((flags & SVTYPEMASK) > SVt_IV ? SVt_PVIV : SVt_IV));
6102         (void)SvIOK_only(sv);
6103         SvIV_set(sv, 1);
6104         return;
6105     }
6106     d = SvPVX(sv);
6107     while (isALPHA(*d)) d++;
6108     while (isDIGIT(*d)) d++;
6109     if (*d) {
6110 #ifdef PERL_PRESERVE_IVUV
6111         /* Got to punt this as an integer if needs be, but we don't issue
6112            warnings. Probably ought to make the sv_iv_please() that does
6113            the conversion if possible, and silently.  */
6114         const int numtype = grok_number(SvPVX_const(sv), SvCUR(sv), NULL);
6115         if (numtype && !(numtype & IS_NUMBER_INFINITY)) {
6116             /* Need to try really hard to see if it's an integer.
6117                9.22337203685478e+18 is an integer.
6118                but "9.22337203685478e+18" + 0 is UV=9223372036854779904
6119                so $a="9.22337203685478e+18"; $a+0; $a++
6120                needs to be the same as $a="9.22337203685478e+18"; $a++
6121                or we go insane. */
6122         
6123             (void) sv_2iv(sv);
6124             if (SvIOK(sv))
6125                 goto oops_its_int;
6126
6127             /* sv_2iv *should* have made this an NV */
6128             if (flags & SVp_NOK) {
6129                 (void)SvNOK_only(sv);
6130                 SvNV_set(sv, SvNVX(sv) + 1.0);
6131                 return;
6132             }
6133             /* I don't think we can get here. Maybe I should assert this
6134                And if we do get here I suspect that sv_setnv will croak. NWC
6135                Fall through. */
6136 #if defined(USE_LONG_DOUBLE)
6137             DEBUG_c(PerlIO_printf(Perl_debug_log,"sv_inc punt failed to convert '%s' to IOK or NOKp, UV=0x%"UVxf" NV=%"PERL_PRIgldbl"\n",
6138                                   SvPVX_const(sv), SvIVX(sv), SvNVX(sv)));
6139 #else
6140             DEBUG_c(PerlIO_printf(Perl_debug_log,"sv_inc punt failed to convert '%s' to IOK or NOKp, UV=0x%"UVxf" NV=%"NVgf"\n",
6141                                   SvPVX_const(sv), SvIVX(sv), SvNVX(sv)));
6142 #endif
6143         }
6144 #endif /* PERL_PRESERVE_IVUV */
6145         sv_setnv(sv,Atof(SvPVX_const(sv)) + 1.0);
6146         return;
6147     }
6148     d--;
6149     while (d >= SvPVX_const(sv)) {
6150         if (isDIGIT(*d)) {
6151             if (++*d <= '9')
6152                 return;
6153             *(d--) = '0';
6154         }
6155         else {
6156 #ifdef EBCDIC
6157             /* MKS: The original code here died if letters weren't consecutive.
6158              * at least it didn't have to worry about non-C locales.  The
6159              * new code assumes that ('z'-'a')==('Z'-'A'), letters are
6160              * arranged in order (although not consecutively) and that only
6161              * [A-Za-z] are accepted by isALPHA in the C locale.
6162              */
6163             if (*d != 'z' && *d != 'Z') {
6164                 do { ++*d; } while (!isALPHA(*d));
6165                 return;
6166             }
6167             *(d--) -= 'z' - 'a';
6168 #else
6169             ++*d;
6170             if (isALPHA(*d))
6171                 return;
6172             *(d--) -= 'z' - 'a' + 1;
6173 #endif
6174         }
6175     }
6176     /* oh,oh, the number grew */
6177     SvGROW(sv, SvCUR(sv) + 2);
6178     SvCUR_set(sv, SvCUR(sv) + 1);
6179     for (d = SvPVX(sv) + SvCUR(sv); d > SvPVX_const(sv); d--)
6180         *d = d[-1];
6181     if (isDIGIT(d[1]))
6182         *d = '1';
6183     else
6184         *d = d[1];
6185 }
6186
6187 /*
6188 =for apidoc sv_dec
6189
6190 Auto-decrement of the value in the SV, doing string to numeric conversion
6191 if necessary. Handles 'get' magic.
6192
6193 =cut
6194 */
6195
6196 void
6197 Perl_sv_dec(pTHX_ register SV *sv)
6198 {
6199     int flags;
6200
6201     if (!sv)
6202         return;
6203     SvGETMAGIC(sv);
6204     if (SvTHINKFIRST(sv)) {
6205         if (SvIsCOW(sv))
6206             sv_force_normal_flags(sv, 0);
6207         if (SvREADONLY(sv)) {
6208             if (IN_PERL_RUNTIME)
6209                 Perl_croak(aTHX_ PL_no_modify);
6210         }
6211         if (SvROK(sv)) {
6212             IV i;
6213             if (SvAMAGIC(sv) && AMG_CALLun(sv,dec))
6214                 return;
6215             i = PTR2IV(SvRV(sv));
6216             sv_unref(sv);
6217             sv_setiv(sv, i);
6218         }
6219     }
6220     /* Unlike sv_inc we don't have to worry about string-never-numbers
6221        and keeping them magic. But we mustn't warn on punting */
6222     flags = SvFLAGS(sv);
6223     if ((flags & SVf_IOK) || ((flags & (SVp_IOK | SVp_NOK)) == SVp_IOK)) {
6224         /* It's publicly an integer, or privately an integer-not-float */
6225 #ifdef PERL_PRESERVE_IVUV
6226       oops_its_int:
6227 #endif
6228         if (SvIsUV(sv)) {
6229             if (SvUVX(sv) == 0) {
6230                 (void)SvIOK_only(sv);
6231                 SvIV_set(sv, -1);
6232             }
6233             else {
6234                 (void)SvIOK_only_UV(sv);
6235                 SvUV_set(sv, SvUVX(sv) - 1);
6236             }   
6237         } else {
6238             if (SvIVX(sv) == IV_MIN)
6239                 sv_setnv(sv, (NV)IV_MIN - 1.0);
6240             else {
6241                 (void)SvIOK_only(sv);
6242                 SvIV_set(sv, SvIVX(sv) - 1);
6243             }   
6244         }
6245         return;
6246     }
6247     if (flags & SVp_NOK) {
6248         SvNV_set(sv, SvNVX(sv) - 1.0);
6249         (void)SvNOK_only(sv);
6250         return;
6251     }
6252     if (!(flags & SVp_POK)) {
6253         if ((flags & SVTYPEMASK) < SVt_PVIV)
6254             sv_upgrade(sv, ((flags & SVTYPEMASK) > SVt_IV) ? SVt_PVIV : SVt_IV);
6255         SvIV_set(sv, -1);
6256         (void)SvIOK_only(sv);
6257         return;
6258     }
6259 #ifdef PERL_PRESERVE_IVUV
6260     {
6261         const int numtype = grok_number(SvPVX_const(sv), SvCUR(sv), NULL);
6262         if (numtype && !(numtype & IS_NUMBER_INFINITY)) {
6263             /* Need to try really hard to see if it's an integer.
6264                9.22337203685478e+18 is an integer.
6265                but "9.22337203685478e+18" + 0 is UV=9223372036854779904
6266                so $a="9.22337203685478e+18"; $a+0; $a--
6267                needs to be the same as $a="9.22337203685478e+18"; $a--
6268                or we go insane. */
6269         
6270             (void) sv_2iv(sv);
6271             if (SvIOK(sv))
6272                 goto oops_its_int;
6273
6274             /* sv_2iv *should* have made this an NV */
6275             if (flags & SVp_NOK) {
6276                 (void)SvNOK_only(sv);
6277                 SvNV_set(sv, SvNVX(sv) - 1.0);
6278                 return;
6279             }
6280             /* I don't think we can get here. Maybe I should assert this
6281                And if we do get here I suspect that sv_setnv will croak. NWC
6282                Fall through. */
6283 #if defined(USE_LONG_DOUBLE)
6284             DEBUG_c(PerlIO_printf(Perl_debug_log,"sv_dec punt failed to convert '%s' to IOK or NOKp, UV=0x%"UVxf" NV=%"PERL_PRIgldbl"\n",
6285                                   SvPVX_const(sv), SvIVX(sv), SvNVX(sv)));
6286 #else
6287             DEBUG_c(PerlIO_printf(Perl_debug_log,"sv_dec punt failed to convert '%s' to IOK or NOKp, UV=0x%"UVxf" NV=%"NVgf"\n",
6288                                   SvPVX_const(sv), SvIVX(sv), SvNVX(sv)));
6289 #endif
6290         }
6291     }
6292 #endif /* PERL_PRESERVE_IVUV */
6293     sv_setnv(sv,Atof(SvPVX_const(sv)) - 1.0);   /* punt */
6294 }
6295
6296 /*
6297 =for apidoc sv_mortalcopy
6298
6299 Creates a new SV which is a copy of the original SV (using C<sv_setsv>).
6300 The new SV is marked as mortal. It will be destroyed "soon", either by an
6301 explicit call to FREETMPS, or by an implicit call at places such as
6302 statement boundaries.  See also C<sv_newmortal> and C<sv_2mortal>.
6303
6304 =cut
6305 */
6306
6307 /* Make a string that will exist for the duration of the expression
6308  * evaluation.  Actually, it may have to last longer than that, but
6309  * hopefully we won't free it until it has been assigned to a
6310  * permanent location. */
6311
6312 SV *
6313 Perl_sv_mortalcopy(pTHX_ SV *oldstr)
6314 {
6315     register SV *sv;
6316
6317     new_SV(sv);
6318     sv_setsv(sv,oldstr);
6319     EXTEND_MORTAL(1);
6320     PL_tmps_stack[++PL_tmps_ix] = sv;
6321     SvTEMP_on(sv);
6322     return sv;
6323 }
6324
6325 /*
6326 =for apidoc sv_newmortal
6327
6328 Creates a new null SV which is mortal.  The reference count of the SV is
6329 set to 1. It will be destroyed "soon", either by an explicit call to
6330 FREETMPS, or by an implicit call at places such as statement boundaries.
6331 See also C<sv_mortalcopy> and C<sv_2mortal>.
6332
6333 =cut
6334 */
6335
6336 SV *
6337 Perl_sv_newmortal(pTHX)
6338 {
6339     register SV *sv;
6340
6341     new_SV(sv);
6342     SvFLAGS(sv) = SVs_TEMP;
6343     EXTEND_MORTAL(1);
6344     PL_tmps_stack[++PL_tmps_ix] = sv;
6345     return sv;
6346 }
6347
6348 /*
6349 =for apidoc sv_2mortal
6350
6351 Marks an existing SV as mortal.  The SV will be destroyed "soon", either
6352 by an explicit call to FREETMPS, or by an implicit call at places such as
6353 statement boundaries.  SvTEMP() is turned on which means that the SV's
6354 string buffer can be "stolen" if this SV is copied. See also C<sv_newmortal>
6355 and C<sv_mortalcopy>.
6356
6357 =cut
6358 */
6359
6360 SV *
6361 Perl_sv_2mortal(pTHX_ register SV *sv)
6362 {
6363     dVAR;
6364     if (!sv)
6365         return NULL;
6366     if (SvREADONLY(sv) && SvIMMORTAL(sv))
6367         return sv;
6368     EXTEND_MORTAL(1);
6369     PL_tmps_stack[++PL_tmps_ix] = sv;
6370     SvTEMP_on(sv);
6371     return sv;
6372 }
6373
6374 /*
6375 =for apidoc newSVpv
6376
6377 Creates a new SV and copies a string into it.  The reference count for the
6378 SV is set to 1.  If C<len> is zero, Perl will compute the length using
6379 strlen().  For efficiency, consider using C<newSVpvn> instead.
6380
6381 =cut
6382 */
6383
6384 SV *
6385 Perl_newSVpv(pTHX_ const char *s, STRLEN len)
6386 {
6387     register SV *sv;
6388
6389     new_SV(sv);
6390     sv_setpvn(sv,s,len ? len : strlen(s));
6391     return sv;
6392 }
6393
6394 /*
6395 =for apidoc newSVpvn
6396
6397 Creates a new SV and copies a string into it.  The reference count for the
6398 SV is set to 1.  Note that if C<len> is zero, Perl will create a zero length
6399 string.  You are responsible for ensuring that the source string is at least
6400 C<len> bytes long.  If the C<s> argument is NULL the new SV will be undefined.
6401
6402 =cut
6403 */
6404
6405 SV *
6406 Perl_newSVpvn(pTHX_ const char *s, STRLEN len)
6407 {
6408     register SV *sv;
6409
6410     new_SV(sv);
6411     sv_setpvn(sv,s,len);
6412     return sv;
6413 }
6414
6415
6416 /*
6417 =for apidoc newSVhek
6418
6419 Creates a new SV from the hash key structure.  It will generate scalars that
6420 point to the shared string table where possible. Returns a new (undefined)
6421 SV if the hek is NULL.
6422
6423 =cut
6424 */
6425
6426 SV *
6427 Perl_newSVhek(pTHX_ const HEK *hek)
6428 {
6429     if (!hek) {
6430         SV *sv;
6431
6432         new_SV(sv);
6433         return sv;
6434     }
6435
6436     if (HEK_LEN(hek) == HEf_SVKEY) {
6437         return newSVsv(*(SV**)HEK_KEY(hek));
6438     } else {
6439         const int flags = HEK_FLAGS(hek);
6440         if (flags & HVhek_WASUTF8) {
6441             /* Trouble :-)
6442                Andreas would like keys he put in as utf8 to come back as utf8
6443             */
6444             STRLEN utf8_len = HEK_LEN(hek);
6445             const U8 *as_utf8 = bytes_to_utf8 ((U8*)HEK_KEY(hek), &utf8_len);
6446             SV * const sv = newSVpvn ((const char*)as_utf8, utf8_len);
6447
6448             SvUTF8_on (sv);
6449             Safefree (as_utf8); /* bytes_to_utf8() allocates a new string */
6450             return sv;
6451         } else if (flags & HVhek_REHASH) {
6452             /* We don't have a pointer to the hv, so we have to replicate the
6453                flag into every HEK. This hv is using custom a hasing
6454                algorithm. Hence we can't return a shared string scalar, as
6455                that would contain the (wrong) hash value, and might get passed
6456                into an hv routine with a regular hash  */
6457
6458             SV * const sv = newSVpvn (HEK_KEY(hek), HEK_LEN(hek));
6459             if (HEK_UTF8(hek))
6460                 SvUTF8_on (sv);
6461             return sv;
6462         }
6463         /* This will be overwhelminly the most common case.  */
6464         return newSVpvn_share(HEK_KEY(hek),
6465                               (HEK_UTF8(hek) ? -HEK_LEN(hek) : HEK_LEN(hek)),
6466                               HEK_HASH(hek));
6467     }
6468 }
6469
6470 /*
6471 =for apidoc newSVpvn_share
6472
6473 Creates a new SV with its SvPVX_const pointing to a shared string in the string
6474 table. If the string does not already exist in the table, it is created
6475 first.  Turns on READONLY and FAKE.  The string's hash is stored in the UV
6476 slot of the SV; if the C<hash> parameter is non-zero, that value is used;
6477 otherwise the hash is computed.  The idea here is that as the string table
6478 is used for shared hash keys these strings will have SvPVX_const == HeKEY and
6479 hash lookup will avoid string compare.
6480
6481 =cut
6482 */
6483
6484 SV *
6485 Perl_newSVpvn_share(pTHX_ const char *src, I32 len, U32 hash)
6486 {
6487     register SV *sv;
6488     bool is_utf8 = FALSE;
6489     if (len < 0) {
6490         STRLEN tmplen = -len;
6491         is_utf8 = TRUE;
6492         /* See the note in hv.c:hv_fetch() --jhi */
6493         src = (char*)bytes_from_utf8((const U8*)src, &tmplen, &is_utf8);
6494         len = tmplen;
6495     }
6496     if (!hash)
6497         PERL_HASH(hash, src, len);
6498     new_SV(sv);
6499     sv_upgrade(sv, SVt_PV);
6500     SvPV_set(sv, sharepvn(src, is_utf8?-len:len, hash));
6501     SvCUR_set(sv, len);
6502     SvLEN_set(sv, 0);
6503     SvREADONLY_on(sv);
6504     SvFAKE_on(sv);
6505     SvPOK_on(sv);
6506     if (is_utf8)
6507         SvUTF8_on(sv);
6508     return sv;
6509 }
6510
6511
6512 #if defined(PERL_IMPLICIT_CONTEXT)
6513
6514 /* pTHX_ magic can't cope with varargs, so this is a no-context
6515  * version of the main function, (which may itself be aliased to us).
6516  * Don't access this version directly.
6517  */
6518
6519 SV *
6520 Perl_newSVpvf_nocontext(const char* pat, ...)
6521 {
6522     dTHX;
6523     register SV *sv;
6524     va_list args;
6525     va_start(args, pat);
6526     sv = vnewSVpvf(pat, &args);
6527     va_end(args);
6528     return sv;
6529 }
6530 #endif
6531
6532 /*
6533 =for apidoc newSVpvf
6534
6535 Creates a new SV and initializes it with the string formatted like
6536 C<sprintf>.
6537
6538 =cut
6539 */
6540
6541 SV *
6542 Perl_newSVpvf(pTHX_ const char* pat, ...)
6543 {
6544     register SV *sv;
6545     va_list args;
6546     va_start(args, pat);
6547     sv = vnewSVpvf(pat, &args);
6548     va_end(args);
6549     return sv;
6550 }
6551
6552 /* backend for newSVpvf() and newSVpvf_nocontext() */
6553
6554 SV *
6555 Perl_vnewSVpvf(pTHX_ const char* pat, va_list* args)
6556 {
6557     register SV *sv;
6558     new_SV(sv);
6559     sv_vsetpvfn(sv, pat, strlen(pat), args, Null(SV**), 0, Null(bool*));
6560     return sv;
6561 }
6562
6563 /*
6564 =for apidoc newSVnv
6565
6566 Creates a new SV and copies a floating point value into it.
6567 The reference count for the SV is set to 1.
6568
6569 =cut
6570 */
6571
6572 SV *
6573 Perl_newSVnv(pTHX_ NV n)
6574 {
6575     register SV *sv;
6576
6577     new_SV(sv);
6578     sv_setnv(sv,n);
6579     return sv;
6580 }
6581
6582 /*
6583 =for apidoc newSViv
6584
6585 Creates a new SV and copies an integer into it.  The reference count for the
6586 SV is set to 1.
6587
6588 =cut
6589 */
6590
6591 SV *
6592 Perl_newSViv(pTHX_ IV i)
6593 {
6594     register SV *sv;
6595
6596     new_SV(sv);
6597     sv_setiv(sv,i);
6598     return sv;
6599 }
6600
6601 /*
6602 =for apidoc newSVuv
6603
6604 Creates a new SV and copies an unsigned integer into it.
6605 The reference count for the SV is set to 1.
6606
6607 =cut
6608 */
6609
6610 SV *
6611 Perl_newSVuv(pTHX_ UV u)
6612 {
6613     register SV *sv;
6614
6615     new_SV(sv);
6616     sv_setuv(sv,u);
6617     return sv;
6618 }
6619
6620 /*
6621 =for apidoc newRV_noinc
6622
6623 Creates an RV wrapper for an SV.  The reference count for the original
6624 SV is B<not> incremented.
6625
6626 =cut
6627 */
6628
6629 SV *
6630 Perl_newRV_noinc(pTHX_ SV *tmpRef)
6631 {
6632     register SV *sv;
6633
6634     new_SV(sv);
6635     sv_upgrade(sv, SVt_RV);
6636     SvTEMP_off(tmpRef);
6637     SvRV_set(sv, tmpRef);
6638     SvROK_on(sv);
6639     return sv;
6640 }
6641
6642 /* newRV_inc is the official function name to use now.
6643  * newRV_inc is in fact #defined to newRV in sv.h
6644  */
6645
6646 SV *
6647 Perl_newRV(pTHX_ SV *tmpRef)
6648 {
6649     return newRV_noinc(SvREFCNT_inc(tmpRef));
6650 }
6651
6652 /*
6653 =for apidoc newSVsv
6654
6655 Creates a new SV which is an exact duplicate of the original SV.
6656 (Uses C<sv_setsv>).
6657
6658 =cut
6659 */
6660
6661 SV *
6662 Perl_newSVsv(pTHX_ register SV *old)
6663 {
6664     register SV *sv;
6665
6666     if (!old)
6667         return NULL;
6668     if (SvTYPE(old) == SVTYPEMASK) {
6669         if (ckWARN_d(WARN_INTERNAL))
6670             Perl_warner(aTHX_ packWARN(WARN_INTERNAL), "semi-panic: attempt to dup freed string");
6671         return Nullsv;
6672     }
6673     new_SV(sv);
6674     /* SV_GMAGIC is the default for sv_setv()
6675        SV_NOSTEAL prevents TEMP buffers being, well, stolen, and saves games
6676        with SvTEMP_off and SvTEMP_on round a call to sv_setsv.  */
6677     sv_setsv_flags(sv, old, SV_GMAGIC | SV_NOSTEAL);
6678     return sv;
6679 }
6680
6681 /*
6682 =for apidoc sv_reset
6683
6684 Underlying implementation for the C<reset> Perl function.
6685 Note that the perl-level function is vaguely deprecated.
6686
6687 =cut
6688 */
6689
6690 void
6691 Perl_sv_reset(pTHX_ register const char *s, HV *stash)
6692 {
6693     dVAR;
6694     char todo[PERL_UCHAR_MAX+1];
6695
6696     if (!stash)
6697         return;
6698
6699     if (!*s) {          /* reset ?? searches */
6700         MAGIC * const mg = mg_find((SV *)stash, PERL_MAGIC_symtab);
6701         if (mg) {
6702             PMOP *pm = (PMOP *) mg->mg_obj;
6703             while (pm) {
6704                 pm->op_pmdynflags &= ~PMdf_USED;
6705                 pm = pm->op_pmnext;
6706             }
6707         }
6708         return;
6709     }
6710
6711     /* reset variables */
6712
6713     if (!HvARRAY(stash))
6714         return;
6715
6716     Zero(todo, 256, char);
6717     while (*s) {
6718         I32 max;
6719         I32 i = (unsigned char)*s;
6720         if (s[1] == '-') {
6721             s += 2;
6722         }
6723         max = (unsigned char)*s++;
6724         for ( ; i <= max; i++) {
6725             todo[i] = 1;
6726         }
6727         for (i = 0; i <= (I32) HvMAX(stash); i++) {
6728             HE *entry;
6729             for (entry = HvARRAY(stash)[i];
6730                  entry;
6731                  entry = HeNEXT(entry))
6732             {
6733                 register GV *gv;
6734                 register SV *sv;
6735
6736                 if (!todo[(U8)*HeKEY(entry)])
6737                     continue;
6738                 gv = (GV*)HeVAL(entry);
6739                 sv = GvSV(gv);
6740                 if (sv) {
6741                     if (SvTHINKFIRST(sv)) {
6742                         if (!SvREADONLY(sv) && SvROK(sv))
6743                             sv_unref(sv);
6744                         /* XXX Is this continue a bug? Why should THINKFIRST
6745                            exempt us from resetting arrays and hashes?  */
6746                         continue;
6747                     }
6748                     SvOK_off(sv);
6749                     if (SvTYPE(sv) >= SVt_PV) {
6750                         SvCUR_set(sv, 0);
6751                         if (SvPVX_const(sv) != Nullch)
6752                             *SvPVX(sv) = '\0';
6753                         SvTAINT(sv);
6754                     }
6755                 }
6756                 if (GvAV(gv)) {
6757                     av_clear(GvAV(gv));
6758                 }
6759                 if (GvHV(gv) && !HvNAME_get(GvHV(gv))) {
6760 #if defined(VMS)
6761                     Perl_die(aTHX_ "Can't reset %%ENV on this system");
6762 #else /* ! VMS */
6763                     hv_clear(GvHV(gv));
6764 #  if defined(USE_ENVIRON_ARRAY)
6765                     if (gv == PL_envgv)
6766                         my_clearenv();
6767 #  endif /* USE_ENVIRON_ARRAY */
6768 #endif /* VMS */
6769                 }
6770             }
6771         }
6772     }
6773 }
6774
6775 /*
6776 =for apidoc sv_2io
6777
6778 Using various gambits, try to get an IO from an SV: the IO slot if its a
6779 GV; or the recursive result if we're an RV; or the IO slot of the symbol
6780 named after the PV if we're a string.
6781
6782 =cut
6783 */
6784
6785 IO*
6786 Perl_sv_2io(pTHX_ SV *sv)
6787 {
6788     IO* io;
6789     GV* gv;
6790
6791     switch (SvTYPE(sv)) {
6792     case SVt_PVIO:
6793         io = (IO*)sv;
6794         break;
6795     case SVt_PVGV:
6796         gv = (GV*)sv;
6797         io = GvIO(gv);
6798         if (!io)
6799             Perl_croak(aTHX_ "Bad filehandle: %s", GvNAME(gv));
6800         break;
6801     default:
6802         if (!SvOK(sv))
6803             Perl_croak(aTHX_ PL_no_usym, "filehandle");
6804         if (SvROK(sv))
6805             return sv_2io(SvRV(sv));
6806         gv = gv_fetchsv(sv, 0, SVt_PVIO);
6807         if (gv)
6808             io = GvIO(gv);
6809         else
6810             io = 0;
6811         if (!io)
6812             Perl_croak(aTHX_ "Bad filehandle: %"SVf, sv);
6813         break;
6814     }
6815     return io;
6816 }
6817
6818 /*
6819 =for apidoc sv_2cv
6820
6821 Using various gambits, try to get a CV from an SV; in addition, try if
6822 possible to set C<*st> and C<*gvp> to the stash and GV associated with it.
6823 The flags in C<lref> are passed to sv_fetchsv.
6824
6825 =cut
6826 */
6827
6828 CV *
6829 Perl_sv_2cv(pTHX_ SV *sv, HV **st, GV **gvp, I32 lref)
6830 {
6831     dVAR;
6832     GV *gv = Nullgv;
6833     CV *cv = Nullcv;
6834
6835     if (!sv)
6836         return *st = NULL, *gvp = Nullgv, Nullcv;
6837     switch (SvTYPE(sv)) {
6838     case SVt_PVCV:
6839         *st = CvSTASH(sv);
6840         *gvp = Nullgv;
6841         return (CV*)sv;
6842     case SVt_PVHV:
6843     case SVt_PVAV:
6844         *st = NULL;
6845         *gvp = Nullgv;
6846         return Nullcv;
6847     case SVt_PVGV:
6848         gv = (GV*)sv;
6849         *gvp = gv;
6850         *st = GvESTASH(gv);
6851         goto fix_gv;
6852
6853     default:
6854         SvGETMAGIC(sv);
6855         if (SvROK(sv)) {
6856             SV * const *sp = &sv;       /* Used in tryAMAGICunDEREF macro. */
6857             tryAMAGICunDEREF(to_cv);
6858
6859             sv = SvRV(sv);
6860             if (SvTYPE(sv) == SVt_PVCV) {
6861                 cv = (CV*)sv;
6862                 *gvp = Nullgv;
6863                 *st = CvSTASH(cv);
6864                 return cv;
6865             }
6866             else if(isGV(sv))
6867                 gv = (GV*)sv;
6868             else
6869                 Perl_croak(aTHX_ "Not a subroutine reference");
6870         }
6871         else if (isGV(sv))
6872             gv = (GV*)sv;
6873         else
6874             gv = gv_fetchsv(sv, lref, SVt_PVCV);
6875         *gvp = gv;
6876         if (!gv) {
6877             *st = NULL;
6878             return Nullcv;
6879         }
6880         /* Some flags to gv_fetchsv mean don't really create the GV  */
6881         if (SvTYPE(gv) != SVt_PVGV) {
6882             *st = NULL;
6883             return NULL;
6884         }
6885         *st = GvESTASH(gv);
6886     fix_gv:
6887         if (lref && !GvCVu(gv)) {
6888             SV *tmpsv;
6889             ENTER;
6890             tmpsv = NEWSV(704,0);
6891             gv_efullname3(tmpsv, gv, Nullch);
6892             /* XXX this is probably not what they think they're getting.
6893              * It has the same effect as "sub name;", i.e. just a forward
6894              * declaration! */
6895             newSUB(start_subparse(FALSE, 0),
6896                    newSVOP(OP_CONST, 0, tmpsv),
6897                    Nullop,
6898                    Nullop);
6899             LEAVE;
6900             if (!GvCVu(gv))
6901                 Perl_croak(aTHX_ "Unable to create sub named \"%"SVf"\"",
6902                            sv);
6903         }
6904         return GvCVu(gv);
6905     }
6906 }
6907
6908 /*
6909 =for apidoc sv_true
6910
6911 Returns true if the SV has a true value by Perl's rules.
6912 Use the C<SvTRUE> macro instead, which may call C<sv_true()> or may
6913 instead use an in-line version.
6914
6915 =cut
6916 */
6917
6918 I32
6919 Perl_sv_true(pTHX_ register SV *sv)
6920 {
6921     if (!sv)
6922         return 0;
6923     if (SvPOK(sv)) {
6924         register const XPV* const tXpv = (XPV*)SvANY(sv);
6925         if (tXpv &&
6926                 (tXpv->xpv_cur > 1 ||
6927                 (tXpv->xpv_cur && *sv->sv_u.svu_pv != '0')))
6928             return 1;
6929         else
6930             return 0;
6931     }
6932     else {
6933         if (SvIOK(sv))
6934             return SvIVX(sv) != 0;
6935         else {
6936             if (SvNOK(sv))
6937                 return SvNVX(sv) != 0.0;
6938             else
6939                 return sv_2bool(sv);
6940         }
6941     }
6942 }
6943
6944 /*
6945 =for apidoc sv_pvn_force
6946
6947 Get a sensible string out of the SV somehow.
6948 A private implementation of the C<SvPV_force> macro for compilers which
6949 can't cope with complex macro expressions. Always use the macro instead.
6950
6951 =for apidoc sv_pvn_force_flags
6952
6953 Get a sensible string out of the SV somehow.
6954 If C<flags> has C<SV_GMAGIC> bit set, will C<mg_get> on C<sv> if
6955 appropriate, else not. C<sv_pvn_force> and C<sv_pvn_force_nomg> are
6956 implemented in terms of this function.
6957 You normally want to use the various wrapper macros instead: see
6958 C<SvPV_force> and C<SvPV_force_nomg>
6959
6960 =cut
6961 */
6962
6963 char *
6964 Perl_sv_pvn_force_flags(pTHX_ SV *sv, STRLEN *lp, I32 flags)
6965 {
6966
6967     if (SvTHINKFIRST(sv) && !SvROK(sv))
6968         sv_force_normal_flags(sv, 0);
6969
6970     if (SvPOK(sv)) {
6971         if (lp)
6972             *lp = SvCUR(sv);
6973     }
6974     else {
6975         char *s;
6976         STRLEN len;
6977  
6978         if (SvREADONLY(sv) && !(flags & SV_MUTABLE_RETURN)) {
6979             const char * const ref = sv_reftype(sv,0);
6980             if (PL_op)
6981                 Perl_croak(aTHX_ "Can't coerce readonly %s to string in %s",
6982                            ref, OP_NAME(PL_op));
6983             else
6984                 Perl_croak(aTHX_ "Can't coerce readonly %s to string", ref);
6985         }
6986         if (SvTYPE(sv) > SVt_PVLV && SvTYPE(sv) != SVt_PVFM)
6987             Perl_croak(aTHX_ "Can't coerce %s to string in %s", sv_reftype(sv,0),
6988                 OP_NAME(PL_op));
6989         s = sv_2pv_flags(sv, &len, flags);
6990         if (lp)
6991             *lp = len;
6992
6993         if (s != SvPVX_const(sv)) {     /* Almost, but not quite, sv_setpvn() */
6994             if (SvROK(sv))
6995                 sv_unref(sv);
6996             SvUPGRADE(sv, SVt_PV);              /* Never FALSE */
6997             SvGROW(sv, len + 1);
6998             Move(s,SvPVX(sv),len,char);
6999             SvCUR_set(sv, len);
7000             *SvEND(sv) = '\0';
7001         }
7002         if (!SvPOK(sv)) {
7003             SvPOK_on(sv);               /* validate pointer */
7004             SvTAINT(sv);
7005             DEBUG_c(PerlIO_printf(Perl_debug_log, "0x%"UVxf" 2pv(%s)\n",
7006                                   PTR2UV(sv),SvPVX_const(sv)));
7007         }
7008     }
7009     return SvPVX_mutable(sv);
7010 }
7011
7012 /*
7013 =for apidoc sv_pvbyten_force
7014
7015 The backend for the C<SvPVbytex_force> macro. Always use the macro instead.
7016
7017 =cut
7018 */
7019
7020 char *
7021 Perl_sv_pvbyten_force(pTHX_ SV *sv, STRLEN *lp)
7022 {
7023     sv_pvn_force(sv,lp);
7024     sv_utf8_downgrade(sv,0);
7025     *lp = SvCUR(sv);
7026     return SvPVX(sv);
7027 }
7028
7029 /*
7030 =for apidoc sv_pvutf8n_force
7031
7032 The backend for the C<SvPVutf8x_force> macro. Always use the macro instead.
7033
7034 =cut
7035 */
7036
7037 char *
7038 Perl_sv_pvutf8n_force(pTHX_ SV *sv, STRLEN *lp)
7039 {
7040     sv_pvn_force(sv,lp);
7041     sv_utf8_upgrade(sv);
7042     *lp = SvCUR(sv);
7043     return SvPVX(sv);
7044 }
7045
7046 /*
7047 =for apidoc sv_reftype
7048
7049 Returns a string describing what the SV is a reference to.
7050
7051 =cut
7052 */
7053
7054 char *
7055 Perl_sv_reftype(pTHX_ const SV *sv, int ob)
7056 {
7057     /* The fact that I don't need to downcast to char * everywhere, only in ?:
7058        inside return suggests a const propagation bug in g++.  */
7059     if (ob && SvOBJECT(sv)) {
7060         char * const name = HvNAME_get(SvSTASH(sv));
7061         return name ? name : (char *) "__ANON__";
7062     }
7063     else {
7064         switch (SvTYPE(sv)) {
7065         case SVt_NULL:
7066         case SVt_IV:
7067         case SVt_NV:
7068         case SVt_RV:
7069         case SVt_PV:
7070         case SVt_PVIV:
7071         case SVt_PVNV:
7072         case SVt_PVMG:
7073         case SVt_PVBM:
7074                                 if (SvVOK(sv))
7075                                     return "VSTRING";
7076                                 if (SvROK(sv))
7077                                     return "REF";
7078                                 else
7079                                     return "SCALAR";
7080
7081         case SVt_PVLV:          return (char *)  (SvROK(sv) ? "REF"
7082                                 /* tied lvalues should appear to be
7083                                  * scalars for backwards compatitbility */
7084                                 : (LvTYPE(sv) == 't' || LvTYPE(sv) == 'T')
7085                                     ? "SCALAR" : "LVALUE");
7086         case SVt_PVAV:          return "ARRAY";
7087         case SVt_PVHV:          return "HASH";
7088         case SVt_PVCV:          return "CODE";
7089         case SVt_PVGV:          return "GLOB";
7090         case SVt_PVFM:          return "FORMAT";
7091         case SVt_PVIO:          return "IO";
7092         default:                return "UNKNOWN";
7093         }
7094     }
7095 }
7096
7097 /*
7098 =for apidoc sv_isobject
7099
7100 Returns a boolean indicating whether the SV is an RV pointing to a blessed
7101 object.  If the SV is not an RV, or if the object is not blessed, then this
7102 will return false.
7103
7104 =cut
7105 */
7106
7107 int
7108 Perl_sv_isobject(pTHX_ SV *sv)
7109 {
7110     if (!sv)
7111         return 0;
7112     SvGETMAGIC(sv);
7113     if (!SvROK(sv))
7114         return 0;
7115     sv = (SV*)SvRV(sv);
7116     if (!SvOBJECT(sv))
7117         return 0;
7118     return 1;
7119 }
7120
7121 /*
7122 =for apidoc sv_isa
7123
7124 Returns a boolean indicating whether the SV is blessed into the specified
7125 class.  This does not check for subtypes; use C<sv_derived_from> to verify
7126 an inheritance relationship.
7127
7128 =cut
7129 */
7130
7131 int
7132 Perl_sv_isa(pTHX_ SV *sv, const char *name)
7133 {
7134     const char *hvname;
7135     if (!sv)
7136         return 0;
7137     SvGETMAGIC(sv);
7138     if (!SvROK(sv))
7139         return 0;
7140     sv = (SV*)SvRV(sv);
7141     if (!SvOBJECT(sv))
7142         return 0;
7143     hvname = HvNAME_get(SvSTASH(sv));
7144     if (!hvname)
7145         return 0;
7146
7147     return strEQ(hvname, name);
7148 }
7149
7150 /*
7151 =for apidoc newSVrv
7152
7153 Creates a new SV for the RV, C<rv>, to point to.  If C<rv> is not an RV then
7154 it will be upgraded to one.  If C<classname> is non-null then the new SV will
7155 be blessed in the specified package.  The new SV is returned and its
7156 reference count is 1.
7157
7158 =cut
7159 */
7160
7161 SV*
7162 Perl_newSVrv(pTHX_ SV *rv, const char *classname)
7163 {
7164     SV *sv;
7165
7166     new_SV(sv);
7167
7168     SV_CHECK_THINKFIRST_COW_DROP(rv);
7169     SvAMAGIC_off(rv);
7170
7171     if (SvTYPE(rv) >= SVt_PVMG) {
7172         const U32 refcnt = SvREFCNT(rv);
7173         SvREFCNT(rv) = 0;
7174         sv_clear(rv);
7175         SvFLAGS(rv) = 0;
7176         SvREFCNT(rv) = refcnt;
7177     }
7178
7179     if (SvTYPE(rv) < SVt_RV)
7180         sv_upgrade(rv, SVt_RV);
7181     else if (SvTYPE(rv) > SVt_RV) {
7182         SvPV_free(rv);
7183         SvCUR_set(rv, 0);
7184         SvLEN_set(rv, 0);
7185     }
7186
7187     SvOK_off(rv);
7188     SvRV_set(rv, sv);
7189     SvROK_on(rv);
7190
7191     if (classname) {
7192         HV* const stash = gv_stashpv(classname, TRUE);
7193         (void)sv_bless(rv, stash);
7194     }
7195     return sv;
7196 }
7197
7198 /*
7199 =for apidoc sv_setref_pv
7200
7201 Copies a pointer into a new SV, optionally blessing the SV.  The C<rv>
7202 argument will be upgraded to an RV.  That RV will be modified to point to
7203 the new SV.  If the C<pv> argument is NULL then C<PL_sv_undef> will be placed
7204 into the SV.  The C<classname> argument indicates the package for the
7205 blessing.  Set C<classname> to C<Nullch> to avoid the blessing.  The new SV
7206 will have a reference count of 1, and the RV will be returned.
7207
7208 Do not use with other Perl types such as HV, AV, SV, CV, because those
7209 objects will become corrupted by the pointer copy process.
7210
7211 Note that C<sv_setref_pvn> copies the string while this copies the pointer.
7212
7213 =cut
7214 */
7215
7216 SV*
7217 Perl_sv_setref_pv(pTHX_ SV *rv, const char *classname, void *pv)
7218 {
7219     if (!pv) {
7220         sv_setsv(rv, &PL_sv_undef);
7221         SvSETMAGIC(rv);
7222     }
7223     else
7224         sv_setiv(newSVrv(rv,classname), PTR2IV(pv));
7225     return rv;
7226 }
7227
7228 /*
7229 =for apidoc sv_setref_iv
7230
7231 Copies an integer into a new SV, optionally blessing the SV.  The C<rv>
7232 argument will be upgraded to an RV.  That RV will be modified to point to
7233 the new SV.  The C<classname> argument indicates the package for the
7234 blessing.  Set C<classname> to C<Nullch> to avoid the blessing.  The new SV
7235 will have a reference count of 1, and the RV will be returned.
7236
7237 =cut
7238 */
7239
7240 SV*
7241 Perl_sv_setref_iv(pTHX_ SV *rv, const char *classname, IV iv)
7242 {
7243     sv_setiv(newSVrv(rv,classname), iv);
7244     return rv;
7245 }
7246
7247 /*
7248 =for apidoc sv_setref_uv
7249
7250 Copies an unsigned integer into a new SV, optionally blessing the SV.  The C<rv>
7251 argument will be upgraded to an RV.  That RV will be modified to point to
7252 the new SV.  The C<classname> argument indicates the package for the
7253 blessing.  Set C<classname> to C<Nullch> to avoid the blessing.  The new SV
7254 will have a reference count of 1, and the RV will be returned.
7255
7256 =cut
7257 */
7258
7259 SV*
7260 Perl_sv_setref_uv(pTHX_ SV *rv, const char *classname, UV uv)
7261 {
7262     sv_setuv(newSVrv(rv,classname), uv);
7263     return rv;
7264 }
7265
7266 /*
7267 =for apidoc sv_setref_nv
7268
7269 Copies a double into a new SV, optionally blessing the SV.  The C<rv>
7270 argument will be upgraded to an RV.  That RV will be modified to point to
7271 the new SV.  The C<classname> argument indicates the package for the
7272 blessing.  Set C<classname> to C<Nullch> to avoid the blessing.  The new SV
7273 will have a reference count of 1, and the RV will be returned.
7274
7275 =cut
7276 */
7277
7278 SV*
7279 Perl_sv_setref_nv(pTHX_ SV *rv, const char *classname, NV nv)
7280 {
7281     sv_setnv(newSVrv(rv,classname), nv);
7282     return rv;
7283 }
7284
7285 /*
7286 =for apidoc sv_setref_pvn
7287
7288 Copies a string into a new SV, optionally blessing the SV.  The length of the
7289 string must be specified with C<n>.  The C<rv> argument will be upgraded to
7290 an RV.  That RV will be modified to point to the new SV.  The C<classname>
7291 argument indicates the package for the blessing.  Set C<classname> to
7292 C<Nullch> to avoid the blessing.  The new SV will have a reference count
7293 of 1, and the RV will be returned.
7294
7295 Note that C<sv_setref_pv> copies the pointer while this copies the string.
7296
7297 =cut
7298 */
7299
7300 SV*
7301 Perl_sv_setref_pvn(pTHX_ SV *rv, const char *classname, const char *pv, STRLEN n)
7302 {
7303     sv_setpvn(newSVrv(rv,classname), pv, n);
7304     return rv;
7305 }
7306
7307 /*
7308 =for apidoc sv_bless
7309
7310 Blesses an SV into a specified package.  The SV must be an RV.  The package
7311 must be designated by its stash (see C<gv_stashpv()>).  The reference count
7312 of the SV is unaffected.
7313
7314 =cut
7315 */
7316
7317 SV*
7318 Perl_sv_bless(pTHX_ SV *sv, HV *stash)
7319 {
7320     SV *tmpRef;
7321     if (!SvROK(sv))
7322         Perl_croak(aTHX_ "Can't bless non-reference value");
7323     tmpRef = SvRV(sv);
7324     if (SvFLAGS(tmpRef) & (SVs_OBJECT|SVf_READONLY)) {
7325         if (SvREADONLY(tmpRef))
7326             Perl_croak(aTHX_ PL_no_modify);
7327         if (SvOBJECT(tmpRef)) {
7328             if (SvTYPE(tmpRef) != SVt_PVIO)
7329                 --PL_sv_objcount;
7330             SvREFCNT_dec(SvSTASH(tmpRef));
7331         }
7332     }
7333     SvOBJECT_on(tmpRef);
7334     if (SvTYPE(tmpRef) != SVt_PVIO)
7335         ++PL_sv_objcount;
7336     SvUPGRADE(tmpRef, SVt_PVMG);
7337     SvSTASH_set(tmpRef, (HV*)SvREFCNT_inc(stash));
7338
7339     if (Gv_AMG(stash))
7340         SvAMAGIC_on(sv);
7341     else
7342         SvAMAGIC_off(sv);
7343
7344     if(SvSMAGICAL(tmpRef))
7345         if(mg_find(tmpRef, PERL_MAGIC_ext) || mg_find(tmpRef, PERL_MAGIC_uvar))
7346             mg_set(tmpRef);
7347
7348
7349
7350     return sv;
7351 }
7352
7353 /* Downgrades a PVGV to a PVMG.
7354  */
7355
7356 STATIC void
7357 S_sv_unglob(pTHX_ SV *sv)
7358 {
7359     void *xpvmg;
7360
7361     assert(SvTYPE(sv) == SVt_PVGV);
7362     SvFAKE_off(sv);
7363     if (GvGP(sv))
7364         gp_free((GV*)sv);
7365     if (GvSTASH(sv)) {
7366         sv_del_backref((SV*)GvSTASH(sv), sv);
7367         GvSTASH(sv) = NULL;
7368     }
7369     sv_unmagic(sv, PERL_MAGIC_glob);
7370     Safefree(GvNAME(sv));
7371     GvMULTI_off(sv);
7372
7373     /* need to keep SvANY(sv) in the right arena */
7374     xpvmg = new_XPVMG();
7375     StructCopy(SvANY(sv), xpvmg, XPVMG);
7376     del_XPVGV(SvANY(sv));
7377     SvANY(sv) = xpvmg;
7378
7379     SvFLAGS(sv) &= ~SVTYPEMASK;
7380     SvFLAGS(sv) |= SVt_PVMG;
7381 }
7382
7383 /*
7384 =for apidoc sv_unref_flags
7385
7386 Unsets the RV status of the SV, and decrements the reference count of
7387 whatever was being referenced by the RV.  This can almost be thought of
7388 as a reversal of C<newSVrv>.  The C<cflags> argument can contain
7389 C<SV_IMMEDIATE_UNREF> to force the reference count to be decremented
7390 (otherwise the decrementing is conditional on the reference count being
7391 different from one or the reference being a readonly SV).
7392 See C<SvROK_off>.
7393
7394 =cut
7395 */
7396
7397 void
7398 Perl_sv_unref_flags(pTHX_ SV *ref, U32 flags)
7399 {
7400     SV* const target = SvRV(ref);
7401
7402     if (SvWEAKREF(ref)) {
7403         sv_del_backref(target, ref);
7404         SvWEAKREF_off(ref);
7405         SvRV_set(ref, NULL);
7406         return;
7407     }
7408     SvRV_set(ref, NULL);
7409     SvROK_off(ref);
7410     /* You can't have a || SvREADONLY(target) here, as $a = $$a, where $a was
7411        assigned to as BEGIN {$a = \"Foo"} will fail.  */
7412     if (SvREFCNT(target) != 1 || (flags & SV_IMMEDIATE_UNREF))
7413         SvREFCNT_dec(target);
7414     else /* XXX Hack, but hard to make $a=$a->[1] work otherwise */
7415         sv_2mortal(target);     /* Schedule for freeing later */
7416 }
7417
7418 /*
7419 =for apidoc sv_untaint
7420
7421 Untaint an SV. Use C<SvTAINTED_off> instead.
7422 =cut
7423 */
7424
7425 void
7426 Perl_sv_untaint(pTHX_ SV *sv)
7427 {
7428     if (SvTYPE(sv) >= SVt_PVMG && SvMAGIC(sv)) {
7429         MAGIC * const mg = mg_find(sv, PERL_MAGIC_taint);
7430         if (mg)
7431             mg->mg_len &= ~1;
7432     }
7433 }
7434
7435 /*
7436 =for apidoc sv_tainted
7437
7438 Test an SV for taintedness. Use C<SvTAINTED> instead.
7439 =cut
7440 */
7441
7442 bool
7443 Perl_sv_tainted(pTHX_ SV *sv)
7444 {
7445     if (SvTYPE(sv) >= SVt_PVMG && SvMAGIC(sv)) {
7446         const MAGIC * const mg = mg_find(sv, PERL_MAGIC_taint);
7447         if (mg && (mg->mg_len & 1) )
7448             return TRUE;
7449     }
7450     return FALSE;
7451 }
7452
7453 /*
7454 =for apidoc sv_setpviv
7455
7456 Copies an integer into the given SV, also updating its string value.
7457 Does not handle 'set' magic.  See C<sv_setpviv_mg>.
7458
7459 =cut
7460 */
7461
7462 void
7463 Perl_sv_setpviv(pTHX_ SV *sv, IV iv)
7464 {
7465     char buf[TYPE_CHARS(UV)];
7466     char *ebuf;
7467     char * const ptr = uiv_2buf(buf, iv, 0, 0, &ebuf);
7468
7469     sv_setpvn(sv, ptr, ebuf - ptr);
7470 }
7471
7472 /*
7473 =for apidoc sv_setpviv_mg
7474
7475 Like C<sv_setpviv>, but also handles 'set' magic.
7476
7477 =cut
7478 */
7479
7480 void
7481 Perl_sv_setpviv_mg(pTHX_ SV *sv, IV iv)
7482 {
7483     sv_setpviv(sv, iv);
7484     SvSETMAGIC(sv);
7485 }
7486
7487 #if defined(PERL_IMPLICIT_CONTEXT)
7488
7489 /* pTHX_ magic can't cope with varargs, so this is a no-context
7490  * version of the main function, (which may itself be aliased to us).
7491  * Don't access this version directly.
7492  */
7493
7494 void
7495 Perl_sv_setpvf_nocontext(SV *sv, const char* pat, ...)
7496 {
7497     dTHX;
7498     va_list args;
7499     va_start(args, pat);
7500     sv_vsetpvf(sv, pat, &args);
7501     va_end(args);
7502 }
7503
7504 /* pTHX_ magic can't cope with varargs, so this is a no-context
7505  * version of the main function, (which may itself be aliased to us).
7506  * Don't access this version directly.
7507  */
7508
7509 void
7510 Perl_sv_setpvf_mg_nocontext(SV *sv, const char* pat, ...)
7511 {
7512     dTHX;
7513     va_list args;
7514     va_start(args, pat);
7515     sv_vsetpvf_mg(sv, pat, &args);
7516     va_end(args);
7517 }
7518 #endif
7519
7520 /*
7521 =for apidoc sv_setpvf
7522
7523 Works like C<sv_catpvf> but copies the text into the SV instead of
7524 appending it.  Does not handle 'set' magic.  See C<sv_setpvf_mg>.
7525
7526 =cut
7527 */
7528
7529 void
7530 Perl_sv_setpvf(pTHX_ SV *sv, const char* pat, ...)
7531 {
7532     va_list args;
7533     va_start(args, pat);
7534     sv_vsetpvf(sv, pat, &args);
7535     va_end(args);
7536 }
7537
7538 /*
7539 =for apidoc sv_vsetpvf
7540
7541 Works like C<sv_vcatpvf> but copies the text into the SV instead of
7542 appending it.  Does not handle 'set' magic.  See C<sv_vsetpvf_mg>.
7543
7544 Usually used via its frontend C<sv_setpvf>.
7545
7546 =cut
7547 */
7548
7549 void
7550 Perl_sv_vsetpvf(pTHX_ SV *sv, const char* pat, va_list* args)
7551 {
7552     sv_vsetpvfn(sv, pat, strlen(pat), args, Null(SV**), 0, Null(bool*));
7553 }
7554
7555 /*
7556 =for apidoc sv_setpvf_mg
7557
7558 Like C<sv_setpvf>, but also handles 'set' magic.
7559
7560 =cut
7561 */
7562
7563 void
7564 Perl_sv_setpvf_mg(pTHX_ SV *sv, const char* pat, ...)
7565 {
7566     va_list args;
7567     va_start(args, pat);
7568     sv_vsetpvf_mg(sv, pat, &args);
7569     va_end(args);
7570 }
7571
7572 /*
7573 =for apidoc sv_vsetpvf_mg
7574
7575 Like C<sv_vsetpvf>, but also handles 'set' magic.
7576
7577 Usually used via its frontend C<sv_setpvf_mg>.
7578
7579 =cut
7580 */
7581
7582 void
7583 Perl_sv_vsetpvf_mg(pTHX_ SV *sv, const char* pat, va_list* args)
7584 {
7585     sv_vsetpvfn(sv, pat, strlen(pat), args, Null(SV**), 0, Null(bool*));
7586     SvSETMAGIC(sv);
7587 }
7588
7589 #if defined(PERL_IMPLICIT_CONTEXT)
7590
7591 /* pTHX_ magic can't cope with varargs, so this is a no-context
7592  * version of the main function, (which may itself be aliased to us).
7593  * Don't access this version directly.
7594  */
7595
7596 void
7597 Perl_sv_catpvf_nocontext(SV *sv, const char* pat, ...)
7598 {
7599     dTHX;
7600     va_list args;
7601     va_start(args, pat);
7602     sv_vcatpvf(sv, pat, &args);
7603     va_end(args);
7604 }
7605
7606 /* pTHX_ magic can't cope with varargs, so this is a no-context
7607  * version of the main function, (which may itself be aliased to us).
7608  * Don't access this version directly.
7609  */
7610
7611 void
7612 Perl_sv_catpvf_mg_nocontext(SV *sv, const char* pat, ...)
7613 {
7614     dTHX;
7615     va_list args;
7616     va_start(args, pat);
7617     sv_vcatpvf_mg(sv, pat, &args);
7618     va_end(args);
7619 }
7620 #endif
7621
7622 /*
7623 =for apidoc sv_catpvf
7624
7625 Processes its arguments like C<sprintf> and appends the formatted
7626 output to an SV.  If the appended data contains "wide" characters
7627 (including, but not limited to, SVs with a UTF-8 PV formatted with %s,
7628 and characters >255 formatted with %c), the original SV might get
7629 upgraded to UTF-8.  Handles 'get' magic, but not 'set' magic.  See
7630 C<sv_catpvf_mg>. If the original SV was UTF-8, the pattern should be
7631 valid UTF-8; if the original SV was bytes, the pattern should be too.
7632
7633 =cut */
7634
7635 void
7636 Perl_sv_catpvf(pTHX_ SV *sv, const char* pat, ...)
7637 {
7638     va_list args;
7639     va_start(args, pat);
7640     sv_vcatpvf(sv, pat, &args);
7641     va_end(args);
7642 }
7643
7644 /*
7645 =for apidoc sv_vcatpvf
7646
7647 Processes its arguments like C<vsprintf> and appends the formatted output
7648 to an SV.  Does not handle 'set' magic.  See C<sv_vcatpvf_mg>.
7649
7650 Usually used via its frontend C<sv_catpvf>.
7651
7652 =cut
7653 */
7654
7655 void
7656 Perl_sv_vcatpvf(pTHX_ SV *sv, const char* pat, va_list* args)
7657 {
7658     sv_vcatpvfn(sv, pat, strlen(pat), args, Null(SV**), 0, Null(bool*));
7659 }
7660
7661 /*
7662 =for apidoc sv_catpvf_mg
7663
7664 Like C<sv_catpvf>, but also handles 'set' magic.
7665
7666 =cut
7667 */
7668
7669 void
7670 Perl_sv_catpvf_mg(pTHX_ SV *sv, const char* pat, ...)
7671 {
7672     va_list args;
7673     va_start(args, pat);
7674     sv_vcatpvf_mg(sv, pat, &args);
7675     va_end(args);
7676 }
7677
7678 /*
7679 =for apidoc sv_vcatpvf_mg
7680
7681 Like C<sv_vcatpvf>, but also handles 'set' magic.
7682
7683 Usually used via its frontend C<sv_catpvf_mg>.
7684
7685 =cut
7686 */
7687
7688 void
7689 Perl_sv_vcatpvf_mg(pTHX_ SV *sv, const char* pat, va_list* args)
7690 {
7691     sv_vcatpvfn(sv, pat, strlen(pat), args, Null(SV**), 0, Null(bool*));
7692     SvSETMAGIC(sv);
7693 }
7694
7695 /*
7696 =for apidoc sv_vsetpvfn
7697
7698 Works like C<sv_vcatpvfn> but copies the text into the SV instead of
7699 appending it.
7700
7701 Usually used via one of its frontends C<sv_vsetpvf> and C<sv_vsetpvf_mg>.
7702
7703 =cut
7704 */
7705
7706 void
7707 Perl_sv_vsetpvfn(pTHX_ SV *sv, const char *pat, STRLEN patlen, va_list *args, SV **svargs, I32 svmax, bool *maybe_tainted)
7708 {
7709     sv_setpvn(sv, "", 0);
7710     sv_vcatpvfn(sv, pat, patlen, args, svargs, svmax, maybe_tainted);
7711 }
7712
7713 STATIC I32
7714 S_expect_number(pTHX_ char** pattern)
7715 {
7716     I32 var = 0;
7717     switch (**pattern) {
7718     case '1': case '2': case '3':
7719     case '4': case '5': case '6':
7720     case '7': case '8': case '9':
7721         var = *(*pattern)++ - '0';
7722         while (isDIGIT(**pattern)) {
7723             I32 tmp = var * 10 + (*(*pattern)++ - '0');
7724             if (tmp < var)
7725                 Perl_croak(aTHX_ "Integer overflow in format string for %s", (PL_op ? OP_NAME(PL_op) : "sv_vcatpvfn"));
7726             var = tmp;
7727         }
7728     }
7729     return var;
7730 }
7731
7732 STATIC char *
7733 S_F0convert(NV nv, char *endbuf, STRLEN *len)
7734 {
7735     const int neg = nv < 0;
7736     UV uv;
7737
7738     if (neg)
7739         nv = -nv;
7740     if (nv < UV_MAX) {
7741         char *p = endbuf;
7742         nv += 0.5;
7743         uv = (UV)nv;
7744         if (uv & 1 && uv == nv)
7745             uv--;                       /* Round to even */
7746         do {
7747             const unsigned dig = uv % 10;
7748             *--p = '0' + dig;
7749         } while (uv /= 10);
7750         if (neg)
7751             *--p = '-';
7752         *len = endbuf - p;
7753         return p;
7754     }
7755     return Nullch;
7756 }
7757
7758
7759 /*
7760 =for apidoc sv_vcatpvfn
7761
7762 Processes its arguments like C<vsprintf> and appends the formatted output
7763 to an SV.  Uses an array of SVs if the C style variable argument list is
7764 missing (NULL).  When running with taint checks enabled, indicates via
7765 C<maybe_tainted> if results are untrustworthy (often due to the use of
7766 locales).
7767
7768 Usually used via one of its frontends C<sv_vcatpvf> and C<sv_vcatpvf_mg>.
7769
7770 =cut
7771 */
7772
7773
7774 #define VECTORIZE_ARGS  vecsv = va_arg(*args, SV*);\
7775                         vecstr = (U8*)SvPV_const(vecsv,veclen);\
7776                         vec_utf8 = DO_UTF8(vecsv);
7777
7778 /* XXX maybe_tainted is never assigned to, so the doc above is lying. */
7779
7780 void
7781 Perl_sv_vcatpvfn(pTHX_ SV *sv, const char *pat, STRLEN patlen, va_list *args, SV **svargs, I32 svmax, bool *maybe_tainted)
7782 {
7783     char *p;
7784     char *q;
7785     const char *patend;
7786     STRLEN origlen;
7787     I32 svix = 0;
7788     static const char nullstr[] = "(null)";
7789     SV *argsv = Nullsv;
7790     bool has_utf8 = DO_UTF8(sv);    /* has the result utf8? */
7791     const bool pat_utf8 = has_utf8; /* the pattern is in utf8? */
7792     SV *nsv = Nullsv;
7793     /* Times 4: a decimal digit takes more than 3 binary digits.
7794      * NV_DIG: mantissa takes than many decimal digits.
7795      * Plus 32: Playing safe. */
7796     char ebuf[IV_DIG * 4 + NV_DIG + 32];
7797     /* large enough for "%#.#f" --chip */
7798     /* what about long double NVs? --jhi */
7799
7800     PERL_UNUSED_ARG(maybe_tainted);
7801
7802     /* no matter what, this is a string now */
7803     (void)SvPV_force(sv, origlen);
7804
7805     /* special-case "", "%s", and "%-p" (SVf - see below) */
7806     if (patlen == 0)
7807         return;
7808     if (patlen == 2 && pat[0] == '%' && pat[1] == 's') {
7809         if (args) {
7810             const char * const s = va_arg(*args, char*);
7811             sv_catpv(sv, s ? s : nullstr);
7812         }
7813         else if (svix < svmax) {
7814             sv_catsv(sv, *svargs);
7815         }
7816         return;
7817     }
7818     if (args && patlen == 3 && pat[0] == '%' &&
7819                 pat[1] == '-' && pat[2] == 'p') {
7820         argsv = va_arg(*args, SV*);
7821         sv_catsv(sv, argsv);
7822         return;
7823     }
7824
7825 #ifndef USE_LONG_DOUBLE
7826     /* special-case "%.<number>[gf]" */
7827     if ( !args && patlen <= 5 && pat[0] == '%' && pat[1] == '.'
7828          && (pat[patlen-1] == 'g' || pat[patlen-1] == 'f') ) {
7829         unsigned digits = 0;
7830         const char *pp;
7831
7832         pp = pat + 2;
7833         while (*pp >= '0' && *pp <= '9')
7834             digits = 10 * digits + (*pp++ - '0');
7835         if (pp - pat == (int)patlen - 1) {
7836             NV nv;
7837
7838             if (svix < svmax)
7839                 nv = SvNV(*svargs);
7840             else
7841                 return;
7842             if (*pp == 'g') {
7843                 /* Add check for digits != 0 because it seems that some
7844                    gconverts are buggy in this case, and we don't yet have
7845                    a Configure test for this.  */
7846                 if (digits && digits < sizeof(ebuf) - NV_DIG - 10) {
7847                      /* 0, point, slack */
7848                     Gconvert(nv, (int)digits, 0, ebuf);
7849                     sv_catpv(sv, ebuf);
7850                     if (*ebuf)  /* May return an empty string for digits==0 */
7851                         return;
7852                 }
7853             } else if (!digits) {
7854                 STRLEN l;
7855
7856                 if ((p = F0convert(nv, ebuf + sizeof ebuf, &l))) {
7857                     sv_catpvn(sv, p, l);
7858                     return;
7859                 }
7860             }
7861         }
7862     }
7863 #endif /* !USE_LONG_DOUBLE */
7864
7865     if (!args && svix < svmax && DO_UTF8(*svargs))
7866         has_utf8 = TRUE;
7867
7868     patend = (char*)pat + patlen;
7869     for (p = (char*)pat; p < patend; p = q) {
7870         bool alt = FALSE;
7871         bool left = FALSE;
7872         bool vectorize = FALSE;
7873         bool vectorarg = FALSE;
7874         bool vec_utf8 = FALSE;
7875         char fill = ' ';
7876         char plus = 0;
7877         char intsize = 0;
7878         STRLEN width = 0;
7879         STRLEN zeros = 0;
7880         bool has_precis = FALSE;
7881         STRLEN precis = 0;
7882         const I32 osvix = svix;
7883         bool is_utf8 = FALSE;  /* is this item utf8?   */
7884 #ifdef HAS_LDBL_SPRINTF_BUG
7885         /* This is to try to fix a bug with irix/nonstop-ux/powerux and
7886            with sfio - Allen <allens@cpan.org> */
7887         bool fix_ldbl_sprintf_bug = FALSE;
7888 #endif
7889
7890         char esignbuf[4];
7891         U8 utf8buf[UTF8_MAXBYTES+1];
7892         STRLEN esignlen = 0;
7893
7894         const char *eptr = Nullch;
7895         STRLEN elen = 0;
7896         SV *vecsv = Nullsv;
7897         const U8 *vecstr = Null(U8*);
7898         STRLEN veclen = 0;
7899         char c = 0;
7900         int i;
7901         unsigned base = 0;
7902         IV iv = 0;
7903         UV uv = 0;
7904         /* we need a long double target in case HAS_LONG_DOUBLE but
7905            not USE_LONG_DOUBLE
7906         */
7907 #if defined(HAS_LONG_DOUBLE) && LONG_DOUBLESIZE > DOUBLESIZE
7908         long double nv;
7909 #else
7910         NV nv;
7911 #endif
7912         STRLEN have;
7913         STRLEN need;
7914         STRLEN gap;
7915         const char *dotstr = ".";
7916         STRLEN dotstrlen = 1;
7917         I32 efix = 0; /* explicit format parameter index */
7918         I32 ewix = 0; /* explicit width index */
7919         I32 epix = 0; /* explicit precision index */
7920         I32 evix = 0; /* explicit vector index */
7921         bool asterisk = FALSE;
7922
7923         /* echo everything up to the next format specification */
7924         for (q = p; q < patend && *q != '%'; ++q) ;
7925         if (q > p) {
7926             if (has_utf8 && !pat_utf8)
7927                 sv_catpvn_utf8_upgrade(sv, p, q - p, nsv);
7928             else
7929                 sv_catpvn(sv, p, q - p);
7930             p = q;
7931         }
7932         if (q++ >= patend)
7933             break;
7934
7935 /*
7936     We allow format specification elements in this order:
7937         \d+\$              explicit format parameter index
7938         [-+ 0#]+           flags
7939         v|\*(\d+\$)?v      vector with optional (optionally specified) arg
7940         0                  flag (as above): repeated to allow "v02"     
7941         \d+|\*(\d+\$)?     width using optional (optionally specified) arg
7942         \.(\d*|\*(\d+\$)?) precision using optional (optionally specified) arg
7943         [hlqLV]            size
7944     [%bcdefginopsuxDFOUX] format (mandatory)
7945 */
7946
7947         if (args) {
7948 /*  
7949         As of perl5.9.3, printf format checking is on by default.
7950         Internally, perl uses %p formats to provide an escape to
7951         some extended formatting.  This block deals with those
7952         extensions: if it does not match, (char*)q is reset and
7953         the normal format processing code is used.
7954
7955         Currently defined extensions are:
7956                 %p              include pointer address (standard)      
7957                 %-p     (SVf)   include an SV (previously %_)
7958                 %-<num>p        include an SV with precision <num>      
7959                 %1p     (VDf)   include a v-string (as %vd)
7960                 %<num>p         reserved for future extensions
7961
7962         Robin Barker 2005-07-14
7963 */
7964             char* r = q; 
7965             bool sv = FALSE;    
7966             STRLEN n = 0;
7967             if (*q == '-')
7968                 sv = *q++;
7969             n = expect_number(&q);
7970             if (*q++ == 'p') {
7971                 if (sv) {                       /* SVf */
7972                     if (n) {
7973                         precis = n;
7974                         has_precis = TRUE;
7975                     }
7976                     argsv = va_arg(*args, SV*);
7977                     eptr = SvPVx_const(argsv, elen);
7978                     if (DO_UTF8(argsv))
7979                         is_utf8 = TRUE;
7980                     goto string;
7981                 }
7982 #if vdNUMBER
7983                 else if (n == vdNUMBER) {       /* VDf */
7984                     vectorize = TRUE;
7985                     VECTORIZE_ARGS
7986                     goto format_vd;
7987                 }
7988 #endif
7989                 else if (n) {
7990                     if (ckWARN_d(WARN_INTERNAL))
7991                         Perl_warner(aTHX_ packWARN(WARN_INTERNAL),
7992                         "internal %%<num>p might conflict with future printf extensions");
7993                 }
7994             }
7995             q = r; 
7996         }
7997
7998         if ( (width = expect_number(&q)) ) {
7999             if (*q == '$') {
8000                 ++q;
8001                 efix = width;
8002             } else {
8003                 goto gotwidth;
8004             }
8005         }
8006
8007         /* FLAGS */
8008
8009         while (*q) {
8010             switch (*q) {
8011             case ' ':
8012             case '+':
8013                 plus = *q++;
8014                 continue;
8015
8016             case '-':
8017                 left = TRUE;
8018                 q++;
8019                 continue;
8020
8021             case '0':
8022                 fill = *q++;
8023                 continue;
8024
8025             case '#':
8026                 alt = TRUE;
8027                 q++;
8028                 continue;
8029
8030             default:
8031                 break;
8032             }
8033             break;
8034         }
8035
8036       tryasterisk:
8037         if (*q == '*') {
8038             q++;
8039             if ( (ewix = expect_number(&q)) )
8040                 if (*q++ != '$')
8041                     goto unknown;
8042             asterisk = TRUE;
8043         }
8044         if (*q == 'v') {
8045             q++;
8046             if (vectorize)
8047                 goto unknown;
8048             if ((vectorarg = asterisk)) {
8049                 evix = ewix;
8050                 ewix = 0;
8051                 asterisk = FALSE;
8052             }
8053             vectorize = TRUE;
8054             goto tryasterisk;
8055         }
8056
8057         if (!asterisk)
8058         {
8059             if( *q == '0' )
8060                 fill = *q++;
8061             width = expect_number(&q);
8062         }
8063
8064         if (vectorize) {
8065             if (vectorarg) {
8066                 if (args)
8067                     vecsv = va_arg(*args, SV*);
8068                 else if (evix) {
8069                     vecsv = (evix > 0 && evix <= svmax)
8070                         ? svargs[evix-1] : &PL_sv_undef;
8071                 } else {
8072                     vecsv = svix < svmax ? svargs[svix++] : &PL_sv_undef;
8073                 }
8074                 dotstr = SvPV_const(vecsv, dotstrlen);
8075                 /* Keep the DO_UTF8 test *after* the SvPV call, else things go
8076                    bad with tied or overloaded values that return UTF8.  */
8077                 if (DO_UTF8(vecsv))
8078                     is_utf8 = TRUE;
8079                 else if (has_utf8) {
8080                     vecsv = sv_mortalcopy(vecsv);
8081                     sv_utf8_upgrade(vecsv);
8082                     dotstr = SvPV_const(vecsv, dotstrlen);
8083                     is_utf8 = TRUE;
8084                 }                   
8085             }
8086             if (args) {
8087                 VECTORIZE_ARGS
8088             }
8089             else if (efix ? (efix > 0 && efix <= svmax) : svix < svmax) {
8090                 vecsv = svargs[efix ? efix-1 : svix++];
8091                 vecstr = (U8*)SvPV_const(vecsv,veclen);
8092                 vec_utf8 = DO_UTF8(vecsv);
8093
8094                 /* if this is a version object, we need to convert
8095                  * back into v-string notation and then let the
8096                  * vectorize happen normally
8097                  */
8098                 if (sv_derived_from(vecsv, "version")) {
8099                     char *version = savesvpv(vecsv);
8100                     vecsv = sv_newmortal();
8101                     /* scan_vstring is expected to be called during
8102                      * tokenization, so we need to fake up the end
8103                      * of the buffer for it
8104                      */
8105                     PL_bufend = version + veclen;
8106                     scan_vstring(version, vecsv);
8107                     vecstr = (U8*)SvPV_const(vecsv, veclen);
8108                     vec_utf8 = DO_UTF8(vecsv);
8109                     Safefree(version);
8110                 }
8111             }
8112             else {
8113                 vecstr = (U8*)"";
8114                 veclen = 0;
8115             }
8116         }
8117
8118         if (asterisk) {
8119             if (args)
8120                 i = va_arg(*args, int);
8121             else
8122                 i = (ewix ? ewix <= svmax : svix < svmax) ?
8123                     SvIVx(svargs[ewix ? ewix-1 : svix++]) : 0;
8124             left |= (i < 0);
8125             width = (i < 0) ? -i : i;
8126         }
8127       gotwidth:
8128
8129         /* PRECISION */
8130
8131         if (*q == '.') {
8132             q++;
8133             if (*q == '*') {
8134                 q++;
8135                 if ( ((epix = expect_number(&q))) && (*q++ != '$') )
8136                     goto unknown;
8137                 /* XXX: todo, support specified precision parameter */
8138                 if (epix)
8139                     goto unknown;
8140                 if (args)
8141                     i = va_arg(*args, int);
8142                 else
8143                     i = (ewix ? ewix <= svmax : svix < svmax)
8144                         ? SvIVx(svargs[ewix ? ewix-1 : svix++]) : 0;
8145                 precis = (i < 0) ? 0 : i;
8146             }
8147             else {
8148                 precis = 0;
8149                 while (isDIGIT(*q))
8150                     precis = precis * 10 + (*q++ - '0');
8151             }
8152             has_precis = TRUE;
8153         }
8154
8155         /* SIZE */
8156
8157         switch (*q) {
8158 #ifdef WIN32
8159         case 'I':                       /* Ix, I32x, and I64x */
8160 #  ifdef WIN64
8161             if (q[1] == '6' && q[2] == '4') {
8162                 q += 3;
8163                 intsize = 'q';
8164                 break;
8165             }
8166 #  endif
8167             if (q[1] == '3' && q[2] == '2') {
8168                 q += 3;
8169                 break;
8170             }
8171 #  ifdef WIN64
8172             intsize = 'q';
8173 #  endif
8174             q++;
8175             break;
8176 #endif
8177 #if defined(HAS_QUAD) || defined(HAS_LONG_DOUBLE)
8178         case 'L':                       /* Ld */
8179             /* FALL THROUGH */
8180 #ifdef HAS_QUAD
8181         case 'q':                       /* qd */
8182 #endif
8183             intsize = 'q';
8184             q++;
8185             break;
8186 #endif
8187         case 'l':
8188 #if defined(HAS_QUAD) || defined(HAS_LONG_DOUBLE)
8189             if (*(q + 1) == 'l') {      /* lld, llf */
8190                 intsize = 'q';
8191                 q += 2;
8192                 break;
8193              }
8194 #endif
8195             /* FALL THROUGH */
8196         case 'h':
8197             /* FALL THROUGH */
8198         case 'V':
8199             intsize = *q++;
8200             break;
8201         }
8202
8203         /* CONVERSION */
8204
8205         if (*q == '%') {
8206             eptr = q++;
8207             elen = 1;
8208             if (vectorize) {
8209                 c = '%';
8210                 goto unknown;
8211             }
8212             goto string;
8213         }
8214
8215         if (!vectorize && !args) {
8216             if (efix) {
8217                 const I32 i = efix-1;
8218                 argsv = (i >= 0 && i < svmax) ? svargs[i] : &PL_sv_undef;
8219             } else {
8220                 argsv = (svix >= 0 && svix < svmax)
8221                     ? svargs[svix++] : &PL_sv_undef;
8222             }
8223         }
8224
8225         switch (c = *q++) {
8226
8227             /* STRINGS */
8228
8229         case 'c':
8230             if (vectorize)
8231                 goto unknown;
8232             uv = (args) ? va_arg(*args, int) : SvIVx(argsv);
8233             if ((uv > 255 ||
8234                  (!UNI_IS_INVARIANT(uv) && SvUTF8(sv)))
8235                 && !IN_BYTES) {
8236                 eptr = (char*)utf8buf;
8237                 elen = uvchr_to_utf8((U8*)eptr, uv) - utf8buf;
8238                 is_utf8 = TRUE;
8239             }
8240             else {
8241                 c = (char)uv;
8242                 eptr = &c;
8243                 elen = 1;
8244             }
8245             goto string;
8246
8247         case 's':
8248             if (vectorize)
8249                 goto unknown;
8250             if (args) {
8251                 eptr = va_arg(*args, char*);
8252                 if (eptr)
8253 #ifdef MACOS_TRADITIONAL
8254                   /* On MacOS, %#s format is used for Pascal strings */
8255                   if (alt)
8256                     elen = *eptr++;
8257                   else
8258 #endif
8259                     elen = strlen(eptr);
8260                 else {
8261                     eptr = (char *)nullstr;
8262                     elen = sizeof nullstr - 1;
8263                 }
8264             }
8265             else {
8266                 eptr = SvPVx_const(argsv, elen);
8267                 if (DO_UTF8(argsv)) {
8268                     if (has_precis && precis < elen) {
8269                         I32 p = precis;
8270                         sv_pos_u2b(argsv, &p, 0); /* sticks at end */
8271                         precis = p;
8272                     }
8273                     if (width) { /* fudge width (can't fudge elen) */
8274                         width += elen - sv_len_utf8(argsv);
8275                     }
8276                     is_utf8 = TRUE;
8277                 }
8278             }
8279
8280         string:
8281             if (has_precis && elen > precis)
8282                 elen = precis;
8283             break;
8284
8285             /* INTEGERS */
8286
8287         case 'p':
8288             if (alt || vectorize)
8289                 goto unknown;
8290             uv = PTR2UV(args ? va_arg(*args, void*) : argsv);
8291             base = 16;
8292             goto integer;
8293
8294         case 'D':
8295 #ifdef IV_IS_QUAD
8296             intsize = 'q';
8297 #else
8298             intsize = 'l';
8299 #endif
8300             /* FALL THROUGH */
8301         case 'd':
8302         case 'i':
8303 #if vdNUMBER
8304         format_vd:
8305 #endif
8306             if (vectorize) {
8307                 STRLEN ulen;
8308                 if (!veclen)
8309                     continue;
8310                 if (vec_utf8)
8311                     uv = utf8n_to_uvchr(vecstr, veclen, &ulen,
8312                                         UTF8_ALLOW_ANYUV);
8313                 else {
8314                     uv = *vecstr;
8315                     ulen = 1;
8316                 }
8317                 vecstr += ulen;
8318                 veclen -= ulen;
8319                 if (plus)
8320                      esignbuf[esignlen++] = plus;
8321             }
8322             else if (args) {
8323                 switch (intsize) {
8324                 case 'h':       iv = (short)va_arg(*args, int); break;
8325                 case 'l':       iv = va_arg(*args, long); break;
8326                 case 'V':       iv = va_arg(*args, IV); break;
8327                 default:        iv = va_arg(*args, int); break;
8328 #ifdef HAS_QUAD
8329                 case 'q':       iv = va_arg(*args, Quad_t); break;
8330 #endif
8331                 }
8332             }
8333             else {
8334                 IV tiv = SvIVx(argsv); /* work around GCC bug #13488 */
8335                 switch (intsize) {
8336                 case 'h':       iv = (short)tiv; break;
8337                 case 'l':       iv = (long)tiv; break;
8338                 case 'V':
8339                 default:        iv = tiv; break;
8340 #ifdef HAS_QUAD
8341                 case 'q':       iv = (Quad_t)tiv; break;
8342 #endif
8343                 }
8344             }
8345             if ( !vectorize )   /* we already set uv above */
8346             {
8347                 if (iv >= 0) {
8348                     uv = iv;
8349                     if (plus)
8350                         esignbuf[esignlen++] = plus;
8351                 }
8352                 else {
8353                     uv = -iv;
8354                     esignbuf[esignlen++] = '-';
8355                 }
8356             }
8357             base = 10;
8358             goto integer;
8359
8360         case 'U':
8361 #ifdef IV_IS_QUAD
8362             intsize = 'q';
8363 #else
8364             intsize = 'l';
8365 #endif
8366             /* FALL THROUGH */
8367         case 'u':
8368             base = 10;
8369             goto uns_integer;
8370
8371         case 'b':
8372             base = 2;
8373             goto uns_integer;
8374
8375         case 'O':
8376 #ifdef IV_IS_QUAD
8377             intsize = 'q';
8378 #else
8379             intsize = 'l';
8380 #endif
8381             /* FALL THROUGH */
8382         case 'o':
8383             base = 8;
8384             goto uns_integer;
8385
8386         case 'X':
8387         case 'x':
8388             base = 16;
8389
8390         uns_integer:
8391             if (vectorize) {
8392                 STRLEN ulen;
8393         vector:
8394                 if (!veclen)
8395                     continue;
8396                 if (vec_utf8)
8397                     uv = utf8n_to_uvchr(vecstr, veclen, &ulen,
8398                                         UTF8_ALLOW_ANYUV);
8399                 else {
8400                     uv = *vecstr;
8401                     ulen = 1;
8402                 }
8403                 vecstr += ulen;
8404                 veclen -= ulen;
8405             }
8406             else if (args) {
8407                 switch (intsize) {
8408                 case 'h':  uv = (unsigned short)va_arg(*args, unsigned); break;
8409                 case 'l':  uv = va_arg(*args, unsigned long); break;
8410                 case 'V':  uv = va_arg(*args, UV); break;
8411                 default:   uv = va_arg(*args, unsigned); break;
8412 #ifdef HAS_QUAD
8413                 case 'q':  uv = va_arg(*args, Uquad_t); break;
8414 #endif
8415                 }
8416             }
8417             else {
8418                 UV tuv = SvUVx(argsv); /* work around GCC bug #13488 */
8419                 switch (intsize) {
8420                 case 'h':       uv = (unsigned short)tuv; break;
8421                 case 'l':       uv = (unsigned long)tuv; break;
8422                 case 'V':
8423                 default:        uv = tuv; break;
8424 #ifdef HAS_QUAD
8425                 case 'q':       uv = (Uquad_t)tuv; break;
8426 #endif
8427                 }
8428             }
8429
8430         integer:
8431             {
8432                 char *ptr = ebuf + sizeof ebuf;
8433                 switch (base) {
8434                     unsigned dig;
8435                 case 16:
8436                     if (!uv)
8437                         alt = FALSE;
8438                     p = (char*)((c == 'X')
8439                                 ? "0123456789ABCDEF" : "0123456789abcdef");
8440                     do {
8441                         dig = uv & 15;
8442                         *--ptr = p[dig];
8443                     } while (uv >>= 4);
8444                     if (alt) {
8445                         esignbuf[esignlen++] = '0';
8446                         esignbuf[esignlen++] = c;  /* 'x' or 'X' */
8447                     }
8448                     break;
8449                 case 8:
8450                     do {
8451                         dig = uv & 7;
8452                         *--ptr = '0' + dig;
8453                     } while (uv >>= 3);
8454                     if (alt && *ptr != '0')
8455                         *--ptr = '0';
8456                     break;
8457                 case 2:
8458                     if (!uv)
8459                         alt = FALSE;
8460                     do {
8461                         dig = uv & 1;
8462                         *--ptr = '0' + dig;
8463                     } while (uv >>= 1);
8464                     if (alt) {
8465                         esignbuf[esignlen++] = '0';
8466                         esignbuf[esignlen++] = 'b';
8467                     }
8468                     break;
8469                 default:                /* it had better be ten or less */
8470                     do {
8471                         dig = uv % base;
8472                         *--ptr = '0' + dig;
8473                     } while (uv /= base);
8474                     break;
8475                 }
8476                 elen = (ebuf + sizeof ebuf) - ptr;
8477                 eptr = ptr;
8478                 if (has_precis) {
8479                     if (precis > elen)
8480                         zeros = precis - elen;
8481                     else if (precis == 0 && elen == 1 && *eptr == '0')
8482                         elen = 0;
8483                 }
8484             }
8485             break;
8486
8487             /* FLOATING POINT */
8488
8489         case 'F':
8490             c = 'f';            /* maybe %F isn't supported here */
8491             /* FALL THROUGH */
8492         case 'e': case 'E':
8493         case 'f':
8494         case 'g': case 'G':
8495             if (vectorize)
8496                 goto unknown;
8497
8498             /* This is evil, but floating point is even more evil */
8499
8500             /* for SV-style calling, we can only get NV
8501                for C-style calling, we assume %f is double;
8502                for simplicity we allow any of %Lf, %llf, %qf for long double
8503             */
8504             switch (intsize) {
8505             case 'V':
8506 #if defined(USE_LONG_DOUBLE)
8507                 intsize = 'q';
8508 #endif
8509                 break;
8510 /* [perl #20339] - we should accept and ignore %lf rather than die */
8511             case 'l':
8512                 /* FALL THROUGH */
8513             default:
8514 #if defined(USE_LONG_DOUBLE)
8515                 intsize = args ? 0 : 'q';
8516 #endif
8517                 break;
8518             case 'q':
8519 #if defined(HAS_LONG_DOUBLE)
8520                 break;
8521 #else
8522                 /* FALL THROUGH */
8523 #endif
8524             case 'h':
8525                 goto unknown;
8526             }
8527
8528             /* now we need (long double) if intsize == 'q', else (double) */
8529             nv = (args) ?
8530 #if LONG_DOUBLESIZE > DOUBLESIZE
8531                 intsize == 'q' ?
8532                     va_arg(*args, long double) :
8533                     va_arg(*args, double)
8534 #else
8535                     va_arg(*args, double)
8536 #endif
8537                 : SvNVx(argsv);
8538
8539             need = 0;
8540             if (c != 'e' && c != 'E') {
8541                 i = PERL_INT_MIN;
8542                 /* FIXME: if HAS_LONG_DOUBLE but not USE_LONG_DOUBLE this
8543                    will cast our (long double) to (double) */
8544                 (void)Perl_frexp(nv, &i);
8545                 if (i == PERL_INT_MIN)
8546                     Perl_die(aTHX_ "panic: frexp");
8547                 if (i > 0)
8548                     need = BIT_DIGITS(i);
8549             }
8550             need += has_precis ? precis : 6; /* known default */
8551
8552             if (need < width)
8553                 need = width;
8554
8555 #ifdef HAS_LDBL_SPRINTF_BUG
8556             /* This is to try to fix a bug with irix/nonstop-ux/powerux and
8557                with sfio - Allen <allens@cpan.org> */
8558
8559 #  ifdef DBL_MAX
8560 #    define MY_DBL_MAX DBL_MAX
8561 #  else /* XXX guessing! HUGE_VAL may be defined as infinity, so not using */
8562 #    if DOUBLESIZE >= 8
8563 #      define MY_DBL_MAX 1.7976931348623157E+308L
8564 #    else
8565 #      define MY_DBL_MAX 3.40282347E+38L
8566 #    endif
8567 #  endif
8568
8569 #  ifdef HAS_LDBL_SPRINTF_BUG_LESS1 /* only between -1L & 1L - Allen */
8570 #    define MY_DBL_MAX_BUG 1L
8571 #  else
8572 #    define MY_DBL_MAX_BUG MY_DBL_MAX
8573 #  endif
8574
8575 #  ifdef DBL_MIN
8576 #    define MY_DBL_MIN DBL_MIN
8577 #  else  /* XXX guessing! -Allen */
8578 #    if DOUBLESIZE >= 8
8579 #      define MY_DBL_MIN 2.2250738585072014E-308L
8580 #    else
8581 #      define MY_DBL_MIN 1.17549435E-38L
8582 #    endif
8583 #  endif
8584
8585             if ((intsize == 'q') && (c == 'f') &&
8586                 ((nv < MY_DBL_MAX_BUG) && (nv > -MY_DBL_MAX_BUG)) &&
8587                 (need < DBL_DIG)) {
8588                 /* it's going to be short enough that
8589                  * long double precision is not needed */
8590
8591                 if ((nv <= 0L) && (nv >= -0L))
8592                     fix_ldbl_sprintf_bug = TRUE; /* 0 is 0 - easiest */
8593                 else {
8594                     /* would use Perl_fp_class as a double-check but not
8595                      * functional on IRIX - see perl.h comments */
8596
8597                     if ((nv >= MY_DBL_MIN) || (nv <= -MY_DBL_MIN)) {
8598                         /* It's within the range that a double can represent */
8599 #if defined(DBL_MAX) && !defined(DBL_MIN)
8600                         if ((nv >= ((long double)1/DBL_MAX)) ||
8601                             (nv <= (-(long double)1/DBL_MAX)))
8602 #endif
8603                         fix_ldbl_sprintf_bug = TRUE;
8604                     }
8605                 }
8606                 if (fix_ldbl_sprintf_bug == TRUE) {
8607                     double temp;
8608
8609                     intsize = 0;
8610                     temp = (double)nv;
8611                     nv = (NV)temp;
8612                 }
8613             }
8614
8615 #  undef MY_DBL_MAX
8616 #  undef MY_DBL_MAX_BUG
8617 #  undef MY_DBL_MIN
8618
8619 #endif /* HAS_LDBL_SPRINTF_BUG */
8620
8621             need += 20; /* fudge factor */
8622             if (PL_efloatsize < need) {
8623                 Safefree(PL_efloatbuf);
8624                 PL_efloatsize = need + 20; /* more fudge */
8625                 Newx(PL_efloatbuf, PL_efloatsize, char);
8626                 PL_efloatbuf[0] = '\0';
8627             }
8628
8629             if ( !(width || left || plus || alt) && fill != '0'
8630                  && has_precis && intsize != 'q' ) {    /* Shortcuts */
8631                 /* See earlier comment about buggy Gconvert when digits,
8632                    aka precis is 0  */
8633                 if ( c == 'g' && precis) {
8634                     Gconvert((NV)nv, (int)precis, 0, PL_efloatbuf);
8635                     /* May return an empty string for digits==0 */
8636                     if (*PL_efloatbuf) {
8637                         elen = strlen(PL_efloatbuf);
8638                         goto float_converted;
8639                     }
8640                 } else if ( c == 'f' && !precis) {
8641                     if ((eptr = F0convert(nv, ebuf + sizeof ebuf, &elen)))
8642                         break;
8643                 }
8644             }
8645             {
8646                 char *ptr = ebuf + sizeof ebuf;
8647                 *--ptr = '\0';
8648                 *--ptr = c;
8649                 /* FIXME: what to do if HAS_LONG_DOUBLE but not PERL_PRIfldbl? */
8650 #if defined(HAS_LONG_DOUBLE) && defined(PERL_PRIfldbl)
8651                 if (intsize == 'q') {
8652                     /* Copy the one or more characters in a long double
8653                      * format before the 'base' ([efgEFG]) character to
8654                      * the format string. */
8655                     static char const prifldbl[] = PERL_PRIfldbl;
8656                     char const *p = prifldbl + sizeof(prifldbl) - 3;
8657                     while (p >= prifldbl) { *--ptr = *p--; }
8658                 }
8659 #endif
8660                 if (has_precis) {
8661                     base = precis;
8662                     do { *--ptr = '0' + (base % 10); } while (base /= 10);
8663                     *--ptr = '.';
8664                 }
8665                 if (width) {
8666                     base = width;
8667                     do { *--ptr = '0' + (base % 10); } while (base /= 10);
8668                 }
8669                 if (fill == '0')
8670                     *--ptr = fill;
8671                 if (left)
8672                     *--ptr = '-';
8673                 if (plus)
8674                     *--ptr = plus;
8675                 if (alt)
8676                     *--ptr = '#';
8677                 *--ptr = '%';
8678
8679                 /* No taint.  Otherwise we are in the strange situation
8680                  * where printf() taints but print($float) doesn't.
8681                  * --jhi */
8682 #if defined(HAS_LONG_DOUBLE)
8683                 elen = ((intsize == 'q')
8684                         ? my_sprintf(PL_efloatbuf, ptr, nv)
8685                         : my_sprintf(PL_efloatbuf, ptr, (double)nv));
8686 #else
8687                 elen = my_sprintf(PL_efloatbuf, ptr, nv);
8688 #endif
8689             }
8690         float_converted:
8691             eptr = PL_efloatbuf;
8692             break;
8693
8694             /* SPECIAL */
8695
8696         case 'n':
8697             if (vectorize)
8698                 goto unknown;
8699             i = SvCUR(sv) - origlen;
8700             if (args) {
8701                 switch (intsize) {
8702                 case 'h':       *(va_arg(*args, short*)) = i; break;
8703                 default:        *(va_arg(*args, int*)) = i; break;
8704                 case 'l':       *(va_arg(*args, long*)) = i; break;
8705                 case 'V':       *(va_arg(*args, IV*)) = i; break;
8706 #ifdef HAS_QUAD
8707                 case 'q':       *(va_arg(*args, Quad_t*)) = i; break;
8708 #endif
8709                 }
8710             }
8711             else
8712                 sv_setuv_mg(argsv, (UV)i);
8713             continue;   /* not "break" */
8714
8715             /* UNKNOWN */
8716
8717         default:
8718       unknown:
8719             if (!args
8720                 && (PL_op->op_type == OP_PRTF || PL_op->op_type == OP_SPRINTF)
8721                 && ckWARN(WARN_PRINTF))
8722             {
8723                 SV * const msg = sv_newmortal();
8724                 Perl_sv_setpvf(aTHX_ msg, "Invalid conversion in %sprintf: ",
8725                           (PL_op->op_type == OP_PRTF) ? "" : "s");
8726                 if (c) {
8727                     if (isPRINT(c))
8728                         Perl_sv_catpvf(aTHX_ msg,
8729                                        "\"%%%c\"", c & 0xFF);
8730                     else
8731                         Perl_sv_catpvf(aTHX_ msg,
8732                                        "\"%%\\%03"UVof"\"",
8733                                        (UV)c & 0xFF);
8734                 } else
8735                     sv_catpv(msg, "end of string");
8736                 Perl_warner(aTHX_ packWARN(WARN_PRINTF), "%"SVf, msg); /* yes, this is reentrant */
8737             }
8738
8739             /* output mangled stuff ... */
8740             if (c == '\0')
8741                 --q;
8742             eptr = p;
8743             elen = q - p;
8744
8745             /* ... right here, because formatting flags should not apply */
8746             SvGROW(sv, SvCUR(sv) + elen + 1);
8747             p = SvEND(sv);
8748             Copy(eptr, p, elen, char);
8749             p += elen;
8750             *p = '\0';
8751             SvCUR_set(sv, p - SvPVX_const(sv));
8752             svix = osvix;
8753             continue;   /* not "break" */
8754         }
8755
8756         /* calculate width before utf8_upgrade changes it */
8757         have = esignlen + zeros + elen;
8758         if (have < zeros)
8759             Perl_croak_nocontext(PL_memory_wrap);
8760
8761         if (is_utf8 != has_utf8) {
8762              if (is_utf8) {
8763                   if (SvCUR(sv))
8764                        sv_utf8_upgrade(sv);
8765              }
8766              else {
8767                   SV * const nsv = sv_2mortal(newSVpvn(eptr, elen));
8768                   sv_utf8_upgrade(nsv);
8769                   eptr = SvPVX_const(nsv);
8770                   elen = SvCUR(nsv);
8771              }
8772              SvGROW(sv, SvCUR(sv) + elen + 1);
8773              p = SvEND(sv);
8774              *p = '\0';
8775         }
8776
8777         need = (have > width ? have : width);
8778         gap = need - have;
8779
8780         if (need >= (((STRLEN)~0) - SvCUR(sv) - dotstrlen - 1))
8781             Perl_croak_nocontext(PL_memory_wrap);
8782         SvGROW(sv, SvCUR(sv) + need + dotstrlen + 1);
8783         p = SvEND(sv);
8784         if (esignlen && fill == '0') {
8785             int i;
8786             for (i = 0; i < (int)esignlen; i++)
8787                 *p++ = esignbuf[i];
8788         }
8789         if (gap && !left) {
8790             memset(p, fill, gap);
8791             p += gap;
8792         }
8793         if (esignlen && fill != '0') {
8794             int i;
8795             for (i = 0; i < (int)esignlen; i++)
8796                 *p++ = esignbuf[i];
8797         }
8798         if (zeros) {
8799             int i;
8800             for (i = zeros; i; i--)
8801                 *p++ = '0';
8802         }
8803         if (elen) {
8804             Copy(eptr, p, elen, char);
8805             p += elen;
8806         }
8807         if (gap && left) {
8808             memset(p, ' ', gap);
8809             p += gap;
8810         }
8811         if (vectorize) {
8812             if (veclen) {
8813                 Copy(dotstr, p, dotstrlen, char);
8814                 p += dotstrlen;
8815             }
8816             else
8817                 vectorize = FALSE;              /* done iterating over vecstr */
8818         }
8819         if (is_utf8)
8820             has_utf8 = TRUE;
8821         if (has_utf8)
8822             SvUTF8_on(sv);
8823         *p = '\0';
8824         SvCUR_set(sv, p - SvPVX_const(sv));
8825         if (vectorize) {
8826             esignlen = 0;
8827             goto vector;
8828         }
8829     }
8830 }
8831
8832 /* =========================================================================
8833
8834 =head1 Cloning an interpreter
8835
8836 All the macros and functions in this section are for the private use of
8837 the main function, perl_clone().
8838
8839 The foo_dup() functions make an exact copy of an existing foo thinngy.
8840 During the course of a cloning, a hash table is used to map old addresses
8841 to new addresses. The table is created and manipulated with the
8842 ptr_table_* functions.
8843
8844 =cut
8845
8846 ============================================================================*/
8847
8848
8849 #if defined(USE_ITHREADS)
8850
8851 #ifndef GpREFCNT_inc
8852 #  define GpREFCNT_inc(gp)      ((gp) ? (++(gp)->gp_refcnt, (gp)) : (GP*)NULL)
8853 #endif
8854
8855
8856 #define sv_dup_inc(s,t) SvREFCNT_inc(sv_dup(s,t))
8857 #define av_dup(s,t)     (AV*)sv_dup((SV*)s,t)
8858 #define av_dup_inc(s,t) (AV*)SvREFCNT_inc(sv_dup((SV*)s,t))
8859 #define hv_dup(s,t)     (HV*)sv_dup((SV*)s,t)
8860 #define hv_dup_inc(s,t) (HV*)SvREFCNT_inc(sv_dup((SV*)s,t))
8861 #define cv_dup(s,t)     (CV*)sv_dup((SV*)s,t)
8862 #define cv_dup_inc(s,t) (CV*)SvREFCNT_inc(sv_dup((SV*)s,t))
8863 #define io_dup(s,t)     (IO*)sv_dup((SV*)s,t)
8864 #define io_dup_inc(s,t) (IO*)SvREFCNT_inc(sv_dup((SV*)s,t))
8865 #define gv_dup(s,t)     (GV*)sv_dup((SV*)s,t)
8866 #define gv_dup_inc(s,t) (GV*)SvREFCNT_inc(sv_dup((SV*)s,t))
8867 #define SAVEPV(p)       (p ? savepv(p) : Nullch)
8868 #define SAVEPVN(p,n)    (p ? savepvn(p,n) : Nullch)
8869
8870
8871 /* Duplicate a regexp. Required reading: pregcomp() and pregfree() in
8872    regcomp.c. AMS 20010712 */
8873
8874 REGEXP *
8875 Perl_re_dup(pTHX_ const REGEXP *r, CLONE_PARAMS *param)
8876 {
8877     dVAR;
8878     REGEXP *ret;
8879     int i, len, npar;
8880     struct reg_substr_datum *s;
8881
8882     if (!r)
8883         return (REGEXP *)NULL;
8884
8885     if ((ret = (REGEXP *)ptr_table_fetch(PL_ptr_table, r)))
8886         return ret;
8887
8888     len = r->offsets[0];
8889     npar = r->nparens+1;
8890
8891     Newxc(ret, sizeof(regexp) + (len+1)*sizeof(regnode), char, regexp);
8892     Copy(r->program, ret->program, len+1, regnode);
8893
8894     Newx(ret->startp, npar, I32);
8895     Copy(r->startp, ret->startp, npar, I32);
8896     Newx(ret->endp, npar, I32);
8897     Copy(r->startp, ret->startp, npar, I32);
8898
8899     Newx(ret->substrs, 1, struct reg_substr_data);
8900     for (s = ret->substrs->data, i = 0; i < 3; i++, s++) {
8901         s->min_offset = r->substrs->data[i].min_offset;
8902         s->max_offset = r->substrs->data[i].max_offset;
8903         s->substr     = sv_dup_inc(r->substrs->data[i].substr, param);
8904         s->utf8_substr = sv_dup_inc(r->substrs->data[i].utf8_substr, param);
8905     }
8906
8907     ret->regstclass = NULL;
8908     if (r->data) {
8909         struct reg_data *d;
8910         const int count = r->data->count;
8911         int i;
8912
8913         Newxc(d, sizeof(struct reg_data) + count*sizeof(void *),
8914                 char, struct reg_data);
8915         Newx(d->what, count, U8);
8916
8917         d->count = count;
8918         for (i = 0; i < count; i++) {
8919             d->what[i] = r->data->what[i];
8920             switch (d->what[i]) {
8921                 /* legal options are one of: sfpont
8922                    see also regcomp.h and pregfree() */
8923             case 's':
8924                 d->data[i] = sv_dup_inc((SV *)r->data->data[i], param);
8925                 break;
8926             case 'p':
8927                 d->data[i] = av_dup_inc((AV *)r->data->data[i], param);
8928                 break;
8929             case 'f':
8930                 /* This is cheating. */
8931                 Newx(d->data[i], 1, struct regnode_charclass_class);
8932                 StructCopy(r->data->data[i], d->data[i],
8933                             struct regnode_charclass_class);
8934                 ret->regstclass = (regnode*)d->data[i];
8935                 break;
8936             case 'o':
8937                 /* Compiled op trees are readonly, and can thus be
8938                    shared without duplication. */
8939                 OP_REFCNT_LOCK;
8940                 d->data[i] = (void*)OpREFCNT_inc((OP*)r->data->data[i]);
8941                 OP_REFCNT_UNLOCK;
8942                 break;
8943             case 'n':
8944                 d->data[i] = r->data->data[i];
8945                 break;
8946             case 't':
8947                 d->data[i] = r->data->data[i];
8948                 OP_REFCNT_LOCK;
8949                 ((reg_trie_data*)d->data[i])->refcount++;
8950                 OP_REFCNT_UNLOCK;
8951                 break;
8952             default:
8953                 Perl_croak(aTHX_ "panic: re_dup unknown data code '%c'", r->data->what[i]);
8954             }
8955         }
8956
8957         ret->data = d;
8958     }
8959     else
8960         ret->data = NULL;
8961
8962     Newx(ret->offsets, 2*len+1, U32);
8963     Copy(r->offsets, ret->offsets, 2*len+1, U32);
8964
8965     ret->precomp        = SAVEPVN(r->precomp, r->prelen);
8966     ret->refcnt         = r->refcnt;
8967     ret->minlen         = r->minlen;
8968     ret->prelen         = r->prelen;
8969     ret->nparens        = r->nparens;
8970     ret->lastparen      = r->lastparen;
8971     ret->lastcloseparen = r->lastcloseparen;
8972     ret->reganch        = r->reganch;
8973
8974     ret->sublen         = r->sublen;
8975
8976     if (RX_MATCH_COPIED(ret))
8977         ret->subbeg  = SAVEPVN(r->subbeg, r->sublen);
8978     else
8979         ret->subbeg = Nullch;
8980 #ifdef PERL_OLD_COPY_ON_WRITE
8981     ret->saved_copy = Nullsv;
8982 #endif
8983
8984     ptr_table_store(PL_ptr_table, r, ret);
8985     return ret;
8986 }
8987
8988 /* duplicate a file handle */
8989
8990 PerlIO *
8991 Perl_fp_dup(pTHX_ PerlIO *fp, char type, CLONE_PARAMS *param)
8992 {
8993     PerlIO *ret;
8994
8995     PERL_UNUSED_ARG(type);
8996
8997     if (!fp)
8998         return (PerlIO*)NULL;
8999
9000     /* look for it in the table first */
9001     ret = (PerlIO*)ptr_table_fetch(PL_ptr_table, fp);
9002     if (ret)
9003         return ret;
9004
9005     /* create anew and remember what it is */
9006     ret = PerlIO_fdupopen(aTHX_ fp, param, PERLIO_DUP_CLONE);
9007     ptr_table_store(PL_ptr_table, fp, ret);
9008     return ret;
9009 }
9010
9011 /* duplicate a directory handle */
9012
9013 DIR *
9014 Perl_dirp_dup(pTHX_ DIR *dp)
9015 {
9016     if (!dp)
9017         return (DIR*)NULL;
9018     /* XXX TODO */
9019     return dp;
9020 }
9021
9022 /* duplicate a typeglob */
9023
9024 GP *
9025 Perl_gp_dup(pTHX_ GP *gp, CLONE_PARAMS* param)
9026 {
9027     GP *ret;
9028     if (!gp)
9029         return (GP*)NULL;
9030     /* look for it in the table first */
9031     ret = (GP*)ptr_table_fetch(PL_ptr_table, gp);
9032     if (ret)
9033         return ret;
9034
9035     /* create anew and remember what it is */
9036     Newxz(ret, 1, GP);
9037     ptr_table_store(PL_ptr_table, gp, ret);
9038
9039     /* clone */
9040     ret->gp_refcnt      = 0;                    /* must be before any other dups! */
9041     ret->gp_sv          = sv_dup_inc(gp->gp_sv, param);
9042     ret->gp_io          = io_dup_inc(gp->gp_io, param);
9043     ret->gp_form        = cv_dup_inc(gp->gp_form, param);
9044     ret->gp_av          = av_dup_inc(gp->gp_av, param);
9045     ret->gp_hv          = hv_dup_inc(gp->gp_hv, param);
9046     ret->gp_egv = gv_dup(gp->gp_egv, param);/* GvEGV is not refcounted */
9047     ret->gp_cv          = cv_dup_inc(gp->gp_cv, param);
9048     ret->gp_cvgen       = gp->gp_cvgen;
9049     ret->gp_line        = gp->gp_line;
9050     ret->gp_file        = gp->gp_file;          /* points to COP.cop_file */
9051     return ret;
9052 }
9053
9054 /* duplicate a chain of magic */
9055
9056 MAGIC *
9057 Perl_mg_dup(pTHX_ MAGIC *mg, CLONE_PARAMS* param)
9058 {
9059     MAGIC *mgprev = (MAGIC*)NULL;
9060     MAGIC *mgret;
9061     if (!mg)
9062         return (MAGIC*)NULL;
9063     /* look for it in the table first */
9064     mgret = (MAGIC*)ptr_table_fetch(PL_ptr_table, mg);
9065     if (mgret)
9066         return mgret;
9067
9068     for (; mg; mg = mg->mg_moremagic) {
9069         MAGIC *nmg;
9070         Newxz(nmg, 1, MAGIC);
9071         if (mgprev)
9072             mgprev->mg_moremagic = nmg;
9073         else
9074             mgret = nmg;
9075         nmg->mg_virtual = mg->mg_virtual;       /* XXX copy dynamic vtable? */
9076         nmg->mg_private = mg->mg_private;
9077         nmg->mg_type    = mg->mg_type;
9078         nmg->mg_flags   = mg->mg_flags;
9079         if (mg->mg_type == PERL_MAGIC_qr) {
9080             nmg->mg_obj = (SV*)re_dup((REGEXP*)mg->mg_obj, param);
9081         }
9082         else if(mg->mg_type == PERL_MAGIC_backref) {
9083             /* The backref AV has its reference count deliberately bumped by
9084                1.  */
9085             nmg->mg_obj = SvREFCNT_inc(av_dup_inc((AV*) mg->mg_obj, param));
9086         }
9087         else if (mg->mg_type == PERL_MAGIC_symtab) {
9088             nmg->mg_obj = mg->mg_obj;
9089         }
9090         else {
9091             nmg->mg_obj = (mg->mg_flags & MGf_REFCOUNTED)
9092                               ? sv_dup_inc(mg->mg_obj, param)
9093                               : sv_dup(mg->mg_obj, param);
9094         }
9095         nmg->mg_len     = mg->mg_len;
9096         nmg->mg_ptr     = mg->mg_ptr;   /* XXX random ptr? */
9097         if (mg->mg_ptr && mg->mg_type != PERL_MAGIC_regex_global) {
9098             if (mg->mg_len > 0) {
9099                 nmg->mg_ptr     = SAVEPVN(mg->mg_ptr, mg->mg_len);
9100                 if (mg->mg_type == PERL_MAGIC_overload_table &&
9101                         AMT_AMAGIC((AMT*)mg->mg_ptr))
9102                 {
9103                     const AMT * const amtp = (AMT*)mg->mg_ptr;
9104                     AMT * const namtp = (AMT*)nmg->mg_ptr;
9105                     I32 i;
9106                     for (i = 1; i < NofAMmeth; i++) {
9107                         namtp->table[i] = cv_dup_inc(amtp->table[i], param);
9108                     }
9109                 }
9110             }
9111             else if (mg->mg_len == HEf_SVKEY)
9112                 nmg->mg_ptr     = (char*)sv_dup_inc((SV*)mg->mg_ptr, param);
9113         }
9114         if ((mg->mg_flags & MGf_DUP) && mg->mg_virtual && mg->mg_virtual->svt_dup) {
9115             CALL_FPTR(nmg->mg_virtual->svt_dup)(aTHX_ nmg, param);
9116         }
9117         mgprev = nmg;
9118     }
9119     return mgret;
9120 }
9121
9122 /* create a new pointer-mapping table */
9123
9124 PTR_TBL_t *
9125 Perl_ptr_table_new(pTHX)
9126 {
9127     PTR_TBL_t *tbl;
9128     Newxz(tbl, 1, PTR_TBL_t);
9129     tbl->tbl_max        = 511;
9130     tbl->tbl_items      = 0;
9131     Newxz(tbl->tbl_ary, tbl->tbl_max + 1, PTR_TBL_ENT_t*);
9132     return tbl;
9133 }
9134
9135 #define PTR_TABLE_HASH(ptr) \
9136   ((PTR2UV(ptr) >> 3) ^ (PTR2UV(ptr) >> (3 + 7)) ^ (PTR2UV(ptr) >> (3 + 17)))
9137
9138 /* 
9139    we use the PTE_SVSLOT 'reservation' made above, both here (in the
9140    following define) and at call to new_body_inline made below in 
9141    Perl_ptr_table_store()
9142  */
9143
9144 #define del_pte(p)     del_body_type(p, PTE_SVSLOT)
9145
9146 /* map an existing pointer using a table */
9147
9148 STATIC PTR_TBL_ENT_t *
9149 S_ptr_table_find(pTHX_ PTR_TBL_t *tbl, const void *sv) {
9150     PTR_TBL_ENT_t *tblent;
9151     const UV hash = PTR_TABLE_HASH(sv);
9152     assert(tbl);
9153     tblent = tbl->tbl_ary[hash & tbl->tbl_max];
9154     for (; tblent; tblent = tblent->next) {
9155         if (tblent->oldval == sv)
9156             return tblent;
9157     }
9158     return 0;
9159 }
9160
9161 void *
9162 Perl_ptr_table_fetch(pTHX_ PTR_TBL_t *tbl, const void *sv)
9163 {
9164     PTR_TBL_ENT_t const *const tblent = S_ptr_table_find(aTHX_ tbl, sv);
9165     return tblent ? tblent->newval : (void *) 0;
9166 }
9167
9168 /* add a new entry to a pointer-mapping table */
9169
9170 void
9171 Perl_ptr_table_store(pTHX_ PTR_TBL_t *tbl, const void *oldsv, void *newsv)
9172 {
9173     PTR_TBL_ENT_t *tblent = S_ptr_table_find(aTHX_ tbl, oldsv);
9174
9175     if (tblent) {
9176         tblent->newval = newsv;
9177     } else {
9178         const UV entry = PTR_TABLE_HASH(oldsv) & tbl->tbl_max;
9179
9180         new_body_inline(tblent, sizeof(struct ptr_tbl_ent), PTE_SVSLOT);
9181         tblent->oldval = oldsv;
9182         tblent->newval = newsv;
9183         tblent->next = tbl->tbl_ary[entry];
9184         tbl->tbl_ary[entry] = tblent;
9185         tbl->tbl_items++;
9186         if (tblent->next && tbl->tbl_items > tbl->tbl_max)
9187             ptr_table_split(tbl);
9188     }
9189 }
9190
9191 /* double the hash bucket size of an existing ptr table */
9192
9193 void
9194 Perl_ptr_table_split(pTHX_ PTR_TBL_t *tbl)
9195 {
9196     PTR_TBL_ENT_t **ary = tbl->tbl_ary;
9197     const UV oldsize = tbl->tbl_max + 1;
9198     UV newsize = oldsize * 2;
9199     UV i;
9200
9201     Renew(ary, newsize, PTR_TBL_ENT_t*);
9202     Zero(&ary[oldsize], newsize-oldsize, PTR_TBL_ENT_t*);
9203     tbl->tbl_max = --newsize;
9204     tbl->tbl_ary = ary;
9205     for (i=0; i < oldsize; i++, ary++) {
9206         PTR_TBL_ENT_t **curentp, **entp, *ent;
9207         if (!*ary)
9208             continue;
9209         curentp = ary + oldsize;
9210         for (entp = ary, ent = *ary; ent; ent = *entp) {
9211             if ((newsize & PTR_TABLE_HASH(ent->oldval)) != i) {
9212                 *entp = ent->next;
9213                 ent->next = *curentp;
9214                 *curentp = ent;
9215                 continue;
9216             }
9217             else
9218                 entp = &ent->next;
9219         }
9220     }
9221 }
9222
9223 /* remove all the entries from a ptr table */
9224
9225 void
9226 Perl_ptr_table_clear(pTHX_ PTR_TBL_t *tbl)
9227 {
9228     if (tbl && tbl->tbl_items) {
9229         register PTR_TBL_ENT_t * const * const array = tbl->tbl_ary;
9230         UV riter = tbl->tbl_max;
9231
9232         do {
9233             PTR_TBL_ENT_t *entry = array[riter];
9234
9235             while (entry) {
9236                 PTR_TBL_ENT_t * const oentry = entry;
9237                 entry = entry->next;
9238                 del_pte(oentry);
9239             }
9240         } while (riter--);
9241
9242         tbl->tbl_items = 0;
9243     }
9244 }
9245
9246 /* clear and free a ptr table */
9247
9248 void
9249 Perl_ptr_table_free(pTHX_ PTR_TBL_t *tbl)
9250 {
9251     if (!tbl) {
9252         return;
9253     }
9254     ptr_table_clear(tbl);
9255     Safefree(tbl->tbl_ary);
9256     Safefree(tbl);
9257 }
9258
9259
9260 void
9261 Perl_rvpv_dup(pTHX_ SV *dstr, const SV *sstr, CLONE_PARAMS* param)
9262 {
9263     if (SvROK(sstr)) {
9264         SvRV_set(dstr, SvWEAKREF(sstr)
9265                        ? sv_dup(SvRV(sstr), param)
9266                        : sv_dup_inc(SvRV(sstr), param));
9267
9268     }
9269     else if (SvPVX_const(sstr)) {
9270         /* Has something there */
9271         if (SvLEN(sstr)) {
9272             /* Normal PV - clone whole allocated space */
9273             SvPV_set(dstr, SAVEPVN(SvPVX_const(sstr), SvLEN(sstr)-1));
9274             if (SvREADONLY(sstr) && SvFAKE(sstr)) {
9275                 /* Not that normal - actually sstr is copy on write.
9276                    But we are a true, independant SV, so:  */
9277                 SvREADONLY_off(dstr);
9278                 SvFAKE_off(dstr);
9279             }
9280         }
9281         else {
9282             /* Special case - not normally malloced for some reason */
9283             if ((SvREADONLY(sstr) && SvFAKE(sstr))) {
9284                 /* A "shared" PV - clone it as "shared" PV */
9285                 SvPV_set(dstr,
9286                          HEK_KEY(hek_dup(SvSHARED_HEK_FROM_PV(SvPVX_const(sstr)),
9287                                          param)));
9288             }
9289             else {
9290                 /* Some other special case - random pointer */
9291                 SvPV_set(dstr, SvPVX(sstr));            
9292             }
9293         }
9294     }
9295     else {
9296         /* Copy the Null */
9297         if (SvTYPE(dstr) == SVt_RV)
9298             SvRV_set(dstr, NULL);
9299         else
9300             SvPV_set(dstr, 0);
9301     }
9302 }
9303
9304 /* duplicate an SV of any type (including AV, HV etc) */
9305
9306 SV *
9307 Perl_sv_dup(pTHX_ const SV *sstr, CLONE_PARAMS* param)
9308 {
9309     dVAR;
9310     SV *dstr;
9311
9312     if (!sstr || SvTYPE(sstr) == SVTYPEMASK)
9313         return Nullsv;
9314     /* look for it in the table first */
9315     dstr = (SV*)ptr_table_fetch(PL_ptr_table, sstr);
9316     if (dstr)
9317         return dstr;
9318
9319     if(param->flags & CLONEf_JOIN_IN) {
9320         /** We are joining here so we don't want do clone
9321             something that is bad **/
9322         if (SvTYPE(sstr) == SVt_PVHV) {
9323             const char * const hvname = HvNAME_get(sstr);
9324             if (hvname)
9325                 /** don't clone stashes if they already exist **/
9326                 return (SV*)gv_stashpv(hvname,0);
9327         }
9328     }
9329
9330     /* create anew and remember what it is */
9331     new_SV(dstr);
9332
9333 #ifdef DEBUG_LEAKING_SCALARS
9334     dstr->sv_debug_optype = sstr->sv_debug_optype;
9335     dstr->sv_debug_line = sstr->sv_debug_line;
9336     dstr->sv_debug_inpad = sstr->sv_debug_inpad;
9337     dstr->sv_debug_cloned = 1;
9338 #  ifdef NETWARE
9339     dstr->sv_debug_file = savepv(sstr->sv_debug_file);
9340 #  else
9341     dstr->sv_debug_file = savesharedpv(sstr->sv_debug_file);
9342 #  endif
9343 #endif
9344
9345     ptr_table_store(PL_ptr_table, sstr, dstr);
9346
9347     /* clone */
9348     SvFLAGS(dstr)       = SvFLAGS(sstr);
9349     SvFLAGS(dstr)       &= ~SVf_OOK;            /* don't propagate OOK hack */
9350     SvREFCNT(dstr)      = 0;                    /* must be before any other dups! */
9351
9352 #ifdef DEBUGGING
9353     if (SvANY(sstr) && PL_watch_pvx && SvPVX_const(sstr) == PL_watch_pvx)
9354         PerlIO_printf(Perl_debug_log, "watch at %p hit, found string \"%s\"\n",
9355                       PL_watch_pvx, SvPVX_const(sstr));
9356 #endif
9357
9358     /* don't clone objects whose class has asked us not to */
9359     if (SvOBJECT(sstr) && ! (SvFLAGS(SvSTASH(sstr)) & SVphv_CLONEABLE)) {
9360         SvFLAGS(dstr) &= ~SVTYPEMASK;
9361         SvOBJECT_off(dstr);
9362         return dstr;
9363     }
9364
9365     switch (SvTYPE(sstr)) {
9366     case SVt_NULL:
9367         SvANY(dstr)     = NULL;
9368         break;
9369     case SVt_IV:
9370         SvANY(dstr)     = (XPVIV*)((char*)&(dstr->sv_u.svu_iv) - STRUCT_OFFSET(XPVIV, xiv_iv));
9371         SvIV_set(dstr, SvIVX(sstr));
9372         break;
9373     case SVt_NV:
9374         SvANY(dstr)     = new_XNV();
9375         SvNV_set(dstr, SvNVX(sstr));
9376         break;
9377     case SVt_RV:
9378         SvANY(dstr)     = &(dstr->sv_u.svu_rv);
9379         Perl_rvpv_dup(aTHX_ dstr, sstr, param);
9380         break;
9381     default:
9382         {
9383             /* These are all the types that need complex bodies allocating.  */
9384             void *new_body;
9385             const svtype sv_type = SvTYPE(sstr);
9386             const struct body_details *const sv_type_details
9387                 = bodies_by_type + sv_type;
9388
9389             switch (sv_type) {
9390             default:
9391                 Perl_croak(aTHX_ "Bizarre SvTYPE [%" IVdf "]",
9392                            (IV)SvTYPE(sstr));
9393                 break;
9394
9395             case SVt_PVGV:
9396                 if (GvUNIQUE((GV*)sstr)) {
9397                     /* Do sharing here, and fall through */
9398                 }
9399             case SVt_PVIO:
9400             case SVt_PVFM:
9401             case SVt_PVHV:
9402             case SVt_PVAV:
9403             case SVt_PVBM:
9404             case SVt_PVCV:
9405             case SVt_PVLV:
9406             case SVt_PVMG:
9407             case SVt_PVNV:
9408             case SVt_PVIV:
9409             case SVt_PV:
9410                 assert(sv_type_details->size);
9411                 if (sv_type_details->arena) {
9412                     new_body_inline(new_body, sv_type_details->size, sv_type);
9413                     new_body
9414                         = (void*)((char*)new_body - sv_type_details->offset);
9415                 } else {
9416                     new_body = new_NOARENA(sv_type_details);
9417                 }
9418             }
9419             assert(new_body);
9420             SvANY(dstr) = new_body;
9421
9422 #ifndef PURIFY
9423             Copy(((char*)SvANY(sstr)) + sv_type_details->offset,
9424                  ((char*)SvANY(dstr)) + sv_type_details->offset,
9425                  sv_type_details->copy, char);
9426 #else
9427             Copy(((char*)SvANY(sstr)),
9428                  ((char*)SvANY(dstr)),
9429                  sv_type_details->size + sv_type_details->offset, char);
9430 #endif
9431
9432             if (sv_type != SVt_PVAV && sv_type != SVt_PVHV)
9433                 Perl_rvpv_dup(aTHX_ dstr, sstr, param);
9434
9435             /* The Copy above means that all the source (unduplicated) pointers
9436                are now in the destination.  We can check the flags and the
9437                pointers in either, but it's possible that there's less cache
9438                missing by always going for the destination.
9439                FIXME - instrument and check that assumption  */
9440             if (sv_type >= SVt_PVMG) {
9441                 if (SvMAGIC(dstr))
9442                     SvMAGIC_set(dstr, mg_dup(SvMAGIC(dstr), param));
9443                 if (SvSTASH(dstr))
9444                     SvSTASH_set(dstr, hv_dup_inc(SvSTASH(dstr), param));
9445             }
9446
9447             /* The cast silences a GCC warning about unhandled types.  */
9448             switch ((int)sv_type) {
9449             case SVt_PV:
9450                 break;
9451             case SVt_PVIV:
9452                 break;
9453             case SVt_PVNV:
9454                 break;
9455             case SVt_PVMG:
9456                 break;
9457             case SVt_PVBM:
9458                 break;
9459             case SVt_PVLV:
9460                 /* XXX LvTARGOFF sometimes holds PMOP* when DEBUGGING */
9461                 if (LvTYPE(dstr) == 't') /* for tie: unrefcnted fake (SV**) */
9462                     LvTARG(dstr) = dstr;
9463                 else if (LvTYPE(dstr) == 'T') /* for tie: fake HE */
9464                     LvTARG(dstr) = (SV*)he_dup((HE*)LvTARG(dstr), 0, param);
9465                 else
9466                     LvTARG(dstr) = sv_dup_inc(LvTARG(dstr), param);
9467                 break;
9468             case SVt_PVGV:
9469                 GvNAME(dstr)    = SAVEPVN(GvNAME(dstr), GvNAMELEN(dstr));
9470                 GvSTASH(dstr)   = hv_dup(GvSTASH(dstr), param);
9471                 /* Don't call sv_add_backref here as it's going to be created
9472                    as part of the magic cloning of the symbol table.  */
9473                 GvGP(dstr)      = gp_dup(GvGP(dstr), param);
9474                 (void)GpREFCNT_inc(GvGP(dstr));
9475                 break;
9476             case SVt_PVIO:
9477                 IoIFP(dstr)     = fp_dup(IoIFP(dstr), IoTYPE(dstr), param);
9478                 if (IoOFP(dstr) == IoIFP(sstr))
9479                     IoOFP(dstr) = IoIFP(dstr);
9480                 else
9481                     IoOFP(dstr) = fp_dup(IoOFP(dstr), IoTYPE(dstr), param);
9482                 /* PL_rsfp_filters entries have fake IoDIRP() */
9483                 if (IoDIRP(dstr) && !(IoFLAGS(dstr) & IOf_FAKE_DIRP))
9484                     IoDIRP(dstr)        = dirp_dup(IoDIRP(dstr));
9485                 if(IoFLAGS(dstr) & IOf_FAKE_DIRP) {
9486                     /* I have no idea why fake dirp (rsfps)
9487                        should be treated differently but otherwise
9488                        we end up with leaks -- sky*/
9489                     IoTOP_GV(dstr)      = gv_dup_inc(IoTOP_GV(dstr), param);
9490                     IoFMT_GV(dstr)      = gv_dup_inc(IoFMT_GV(dstr), param);
9491                     IoBOTTOM_GV(dstr)   = gv_dup_inc(IoBOTTOM_GV(dstr), param);
9492                 } else {
9493                     IoTOP_GV(dstr)      = gv_dup(IoTOP_GV(dstr), param);
9494                     IoFMT_GV(dstr)      = gv_dup(IoFMT_GV(dstr), param);
9495                     IoBOTTOM_GV(dstr)   = gv_dup(IoBOTTOM_GV(dstr), param);
9496                 }
9497                 IoTOP_NAME(dstr)        = SAVEPV(IoTOP_NAME(dstr));
9498                 IoFMT_NAME(dstr)        = SAVEPV(IoFMT_NAME(dstr));
9499                 IoBOTTOM_NAME(dstr)     = SAVEPV(IoBOTTOM_NAME(dstr));
9500                 break;
9501             case SVt_PVAV:
9502                 if (AvARRAY((AV*)sstr)) {
9503                     SV **dst_ary, **src_ary;
9504                     SSize_t items = AvFILLp((AV*)sstr) + 1;
9505
9506                     src_ary = AvARRAY((AV*)sstr);
9507                     Newxz(dst_ary, AvMAX((AV*)sstr)+1, SV*);
9508                     ptr_table_store(PL_ptr_table, src_ary, dst_ary);
9509                     SvPV_set(dstr, (char*)dst_ary);
9510                     AvALLOC((AV*)dstr) = dst_ary;
9511                     if (AvREAL((AV*)sstr)) {
9512                         while (items-- > 0)
9513                             *dst_ary++ = sv_dup_inc(*src_ary++, param);
9514                     }
9515                     else {
9516                         while (items-- > 0)
9517                             *dst_ary++ = sv_dup(*src_ary++, param);
9518                     }
9519                     items = AvMAX((AV*)sstr) - AvFILLp((AV*)sstr);
9520                     while (items-- > 0) {
9521                         *dst_ary++ = &PL_sv_undef;
9522                     }
9523                 }
9524                 else {
9525                     SvPV_set(dstr, Nullch);
9526                     AvALLOC((AV*)dstr)  = (SV**)NULL;
9527                 }
9528                 break;
9529             case SVt_PVHV:
9530                 {
9531                     HEK *hvname = 0;
9532
9533                     if (HvARRAY((HV*)sstr)) {
9534                         STRLEN i = 0;
9535                         const bool sharekeys = !!HvSHAREKEYS(sstr);
9536                         XPVHV * const dxhv = (XPVHV*)SvANY(dstr);
9537                         XPVHV * const sxhv = (XPVHV*)SvANY(sstr);
9538                         char *darray;
9539                         Newx(darray, PERL_HV_ARRAY_ALLOC_BYTES(dxhv->xhv_max+1)
9540                             + (SvOOK(sstr) ? sizeof(struct xpvhv_aux) : 0),
9541                             char);
9542                         HvARRAY(dstr) = (HE**)darray;
9543                         while (i <= sxhv->xhv_max) {
9544                             const HE *source = HvARRAY(sstr)[i];
9545                             HvARRAY(dstr)[i] = source
9546                                 ? he_dup(source, sharekeys, param) : 0;
9547                             ++i;
9548                         }
9549                         if (SvOOK(sstr)) {
9550                             struct xpvhv_aux * const saux = HvAUX(sstr);
9551                             struct xpvhv_aux * const daux = HvAUX(dstr);
9552                             /* This flag isn't copied.  */
9553                             /* SvOOK_on(hv) attacks the IV flags.  */
9554                             SvFLAGS(dstr) |= SVf_OOK;
9555
9556                             hvname = saux->xhv_name;
9557                             daux->xhv_name
9558                                 = hvname ? hek_dup(hvname, param) : hvname;
9559
9560                             daux->xhv_riter = saux->xhv_riter;
9561                             daux->xhv_eiter = saux->xhv_eiter
9562                                 ? he_dup(saux->xhv_eiter,
9563                                          (bool)!!HvSHAREKEYS(sstr), param) : 0;
9564                             daux->xhv_backreferences = saux->xhv_backreferences
9565                                 ? (AV*) SvREFCNT_inc(
9566                                                      sv_dup((SV*)saux->
9567                                                             xhv_backreferences,
9568                                                             param))
9569                                 : 0;
9570                         }
9571                     }
9572                     else {
9573                         SvPV_set(dstr, Nullch);
9574                     }
9575                     /* Record stashes for possible cloning in Perl_clone(). */
9576                     if(hvname)
9577                         av_push(param->stashes, dstr);
9578                 }
9579                 break;
9580             case SVt_PVFM:
9581             case SVt_PVCV:
9582                 /* NOTE: not refcounted */
9583                 CvSTASH(dstr)   = hv_dup(CvSTASH(dstr), param);
9584                 OP_REFCNT_LOCK;
9585                 CvROOT(dstr)    = OpREFCNT_inc(CvROOT(dstr));
9586                 OP_REFCNT_UNLOCK;
9587                 if (CvCONST(dstr)) {
9588                     CvXSUBANY(dstr).any_ptr = GvUNIQUE(CvGV(dstr)) ?
9589                         SvREFCNT_inc(CvXSUBANY(dstr).any_ptr) :
9590                         sv_dup_inc((SV *)CvXSUBANY(dstr).any_ptr, param);
9591                 }
9592                 /* don't dup if copying back - CvGV isn't refcounted, so the
9593                  * duped GV may never be freed. A bit of a hack! DAPM */
9594                 CvGV(dstr)      = (param->flags & CLONEf_JOIN_IN) ?
9595                     Nullgv : gv_dup(CvGV(dstr), param) ;
9596                 if (!(param->flags & CLONEf_COPY_STACKS)) {
9597                     CvDEPTH(dstr) = 0;
9598                 }
9599                 PAD_DUP(CvPADLIST(dstr), CvPADLIST(sstr), param);
9600                 CvOUTSIDE(dstr) =
9601                     CvWEAKOUTSIDE(sstr)
9602                     ? cv_dup(    CvOUTSIDE(dstr), param)
9603                     : cv_dup_inc(CvOUTSIDE(dstr), param);
9604                 if (!CvXSUB(dstr))
9605                     CvFILE(dstr) = SAVEPV(CvFILE(dstr));
9606                 break;
9607             }
9608         }
9609     }
9610
9611     if (SvOBJECT(dstr) && SvTYPE(dstr) != SVt_PVIO)
9612         ++PL_sv_objcount;
9613
9614     return dstr;
9615  }
9616
9617 /* duplicate a context */
9618
9619 PERL_CONTEXT *
9620 Perl_cx_dup(pTHX_ PERL_CONTEXT *cxs, I32 ix, I32 max, CLONE_PARAMS* param)
9621 {
9622     PERL_CONTEXT *ncxs;
9623
9624     if (!cxs)
9625         return (PERL_CONTEXT*)NULL;
9626
9627     /* look for it in the table first */
9628     ncxs = (PERL_CONTEXT*)ptr_table_fetch(PL_ptr_table, cxs);
9629     if (ncxs)
9630         return ncxs;
9631
9632     /* create anew and remember what it is */
9633     Newxz(ncxs, max + 1, PERL_CONTEXT);
9634     ptr_table_store(PL_ptr_table, cxs, ncxs);
9635
9636     while (ix >= 0) {
9637         PERL_CONTEXT * const cx = &cxs[ix];
9638         PERL_CONTEXT * const ncx = &ncxs[ix];
9639         ncx->cx_type    = cx->cx_type;
9640         if (CxTYPE(cx) == CXt_SUBST) {
9641             Perl_croak(aTHX_ "Cloning substitution context is unimplemented");
9642         }
9643         else {
9644             ncx->blk_oldsp      = cx->blk_oldsp;
9645             ncx->blk_oldcop     = cx->blk_oldcop;
9646             ncx->blk_oldmarksp  = cx->blk_oldmarksp;
9647             ncx->blk_oldscopesp = cx->blk_oldscopesp;
9648             ncx->blk_oldpm      = cx->blk_oldpm;
9649             ncx->blk_gimme      = cx->blk_gimme;
9650             switch (CxTYPE(cx)) {
9651             case CXt_SUB:
9652                 ncx->blk_sub.cv         = (cx->blk_sub.olddepth == 0
9653                                            ? cv_dup_inc(cx->blk_sub.cv, param)
9654                                            : cv_dup(cx->blk_sub.cv,param));
9655                 ncx->blk_sub.argarray   = (cx->blk_sub.hasargs
9656                                            ? av_dup_inc(cx->blk_sub.argarray, param)
9657                                            : NULL);
9658                 ncx->blk_sub.savearray  = av_dup_inc(cx->blk_sub.savearray, param);
9659                 ncx->blk_sub.olddepth   = cx->blk_sub.olddepth;
9660                 ncx->blk_sub.hasargs    = cx->blk_sub.hasargs;
9661                 ncx->blk_sub.lval       = cx->blk_sub.lval;
9662                 ncx->blk_sub.retop      = cx->blk_sub.retop;
9663                 break;
9664             case CXt_EVAL:
9665                 ncx->blk_eval.old_in_eval = cx->blk_eval.old_in_eval;
9666                 ncx->blk_eval.old_op_type = cx->blk_eval.old_op_type;
9667                 ncx->blk_eval.old_namesv = sv_dup_inc(cx->blk_eval.old_namesv, param);
9668                 ncx->blk_eval.old_eval_root = cx->blk_eval.old_eval_root;
9669                 ncx->blk_eval.cur_text  = sv_dup(cx->blk_eval.cur_text, param);
9670                 ncx->blk_eval.retop = cx->blk_eval.retop;
9671                 break;
9672             case CXt_LOOP:
9673                 ncx->blk_loop.label     = cx->blk_loop.label;
9674                 ncx->blk_loop.resetsp   = cx->blk_loop.resetsp;
9675                 ncx->blk_loop.redo_op   = cx->blk_loop.redo_op;
9676                 ncx->blk_loop.next_op   = cx->blk_loop.next_op;
9677                 ncx->blk_loop.last_op   = cx->blk_loop.last_op;
9678                 ncx->blk_loop.iterdata  = (CxPADLOOP(cx)
9679                                            ? cx->blk_loop.iterdata
9680                                            : gv_dup((GV*)cx->blk_loop.iterdata, param));
9681                 ncx->blk_loop.oldcomppad
9682                     = (PAD*)ptr_table_fetch(PL_ptr_table,
9683                                             cx->blk_loop.oldcomppad);
9684                 ncx->blk_loop.itersave  = sv_dup_inc(cx->blk_loop.itersave, param);
9685                 ncx->blk_loop.iterlval  = sv_dup_inc(cx->blk_loop.iterlval, param);
9686                 ncx->blk_loop.iterary   = av_dup_inc(cx->blk_loop.iterary, param);
9687                 ncx->blk_loop.iterix    = cx->blk_loop.iterix;
9688                 ncx->blk_loop.itermax   = cx->blk_loop.itermax;
9689                 break;
9690             case CXt_FORMAT:
9691                 ncx->blk_sub.cv         = cv_dup(cx->blk_sub.cv, param);
9692                 ncx->blk_sub.gv         = gv_dup(cx->blk_sub.gv, param);
9693                 ncx->blk_sub.dfoutgv    = gv_dup_inc(cx->blk_sub.dfoutgv, param);
9694                 ncx->blk_sub.hasargs    = cx->blk_sub.hasargs;
9695                 ncx->blk_sub.retop      = cx->blk_sub.retop;
9696                 break;
9697             case CXt_BLOCK:
9698             case CXt_NULL:
9699                 break;
9700             }
9701         }
9702         --ix;
9703     }
9704     return ncxs;
9705 }
9706
9707 /* duplicate a stack info structure */
9708
9709 PERL_SI *
9710 Perl_si_dup(pTHX_ PERL_SI *si, CLONE_PARAMS* param)
9711 {
9712     PERL_SI *nsi;
9713
9714     if (!si)
9715         return (PERL_SI*)NULL;
9716
9717     /* look for it in the table first */
9718     nsi = (PERL_SI*)ptr_table_fetch(PL_ptr_table, si);
9719     if (nsi)
9720         return nsi;
9721
9722     /* create anew and remember what it is */
9723     Newxz(nsi, 1, PERL_SI);
9724     ptr_table_store(PL_ptr_table, si, nsi);
9725
9726     nsi->si_stack       = av_dup_inc(si->si_stack, param);
9727     nsi->si_cxix        = si->si_cxix;
9728     nsi->si_cxmax       = si->si_cxmax;
9729     nsi->si_cxstack     = cx_dup(si->si_cxstack, si->si_cxix, si->si_cxmax, param);
9730     nsi->si_type        = si->si_type;
9731     nsi->si_prev        = si_dup(si->si_prev, param);
9732     nsi->si_next        = si_dup(si->si_next, param);
9733     nsi->si_markoff     = si->si_markoff;
9734
9735     return nsi;
9736 }
9737
9738 #define POPINT(ss,ix)   ((ss)[--(ix)].any_i32)
9739 #define TOPINT(ss,ix)   ((ss)[ix].any_i32)
9740 #define POPLONG(ss,ix)  ((ss)[--(ix)].any_long)
9741 #define TOPLONG(ss,ix)  ((ss)[ix].any_long)
9742 #define POPIV(ss,ix)    ((ss)[--(ix)].any_iv)
9743 #define TOPIV(ss,ix)    ((ss)[ix].any_iv)
9744 #define POPBOOL(ss,ix)  ((ss)[--(ix)].any_bool)
9745 #define TOPBOOL(ss,ix)  ((ss)[ix].any_bool)
9746 #define POPPTR(ss,ix)   ((ss)[--(ix)].any_ptr)
9747 #define TOPPTR(ss,ix)   ((ss)[ix].any_ptr)
9748 #define POPDPTR(ss,ix)  ((ss)[--(ix)].any_dptr)
9749 #define TOPDPTR(ss,ix)  ((ss)[ix].any_dptr)
9750 #define POPDXPTR(ss,ix) ((ss)[--(ix)].any_dxptr)
9751 #define TOPDXPTR(ss,ix) ((ss)[ix].any_dxptr)
9752
9753 /* XXXXX todo */
9754 #define pv_dup_inc(p)   SAVEPV(p)
9755 #define pv_dup(p)       SAVEPV(p)
9756 #define svp_dup_inc(p,pp)       any_dup(p,pp)
9757
9758 /* map any object to the new equivent - either something in the
9759  * ptr table, or something in the interpreter structure
9760  */
9761
9762 void *
9763 Perl_any_dup(pTHX_ void *v, const PerlInterpreter *proto_perl)
9764 {
9765     void *ret;
9766
9767     if (!v)
9768         return (void*)NULL;
9769
9770     /* look for it in the table first */
9771     ret = ptr_table_fetch(PL_ptr_table, v);
9772     if (ret)
9773         return ret;
9774
9775     /* see if it is part of the interpreter structure */
9776     if (v >= (void*)proto_perl && v < (void*)(proto_perl+1))
9777         ret = (void*)(((char*)aTHX) + (((char*)v) - (char*)proto_perl));
9778     else {
9779         ret = v;
9780     }
9781
9782     return ret;
9783 }
9784
9785 /* duplicate the save stack */
9786
9787 ANY *
9788 Perl_ss_dup(pTHX_ PerlInterpreter *proto_perl, CLONE_PARAMS* param)
9789 {
9790     ANY * const ss      = proto_perl->Tsavestack;
9791     const I32 max       = proto_perl->Tsavestack_max;
9792     I32 ix              = proto_perl->Tsavestack_ix;
9793     ANY *nss;
9794     SV *sv;
9795     GV *gv;
9796     AV *av;
9797     HV *hv;
9798     void* ptr;
9799     int intval;
9800     long longval;
9801     GP *gp;
9802     IV iv;
9803     char *c = NULL;
9804     void (*dptr) (void*);
9805     void (*dxptr) (pTHX_ void*);
9806
9807     Newxz(nss, max, ANY);
9808
9809     while (ix > 0) {
9810         I32 i = POPINT(ss,ix);
9811         TOPINT(nss,ix) = i;
9812         switch (i) {
9813         case SAVEt_ITEM:                        /* normal string */
9814             sv = (SV*)POPPTR(ss,ix);
9815             TOPPTR(nss,ix) = sv_dup_inc(sv, param);
9816             sv = (SV*)POPPTR(ss,ix);
9817             TOPPTR(nss,ix) = sv_dup_inc(sv, param);
9818             break;
9819         case SAVEt_SV:                          /* scalar reference */
9820             sv = (SV*)POPPTR(ss,ix);
9821             TOPPTR(nss,ix) = sv_dup_inc(sv, param);
9822             gv = (GV*)POPPTR(ss,ix);
9823             TOPPTR(nss,ix) = gv_dup_inc(gv, param);
9824             break;
9825         case SAVEt_GENERIC_PVREF:               /* generic char* */
9826             c = (char*)POPPTR(ss,ix);
9827             TOPPTR(nss,ix) = pv_dup(c);
9828             ptr = POPPTR(ss,ix);
9829             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9830             break;
9831         case SAVEt_SHARED_PVREF:                /* char* in shared space */
9832             c = (char*)POPPTR(ss,ix);
9833             TOPPTR(nss,ix) = savesharedpv(c);
9834             ptr = POPPTR(ss,ix);
9835             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9836             break;
9837         case SAVEt_GENERIC_SVREF:               /* generic sv */
9838         case SAVEt_SVREF:                       /* scalar reference */
9839             sv = (SV*)POPPTR(ss,ix);
9840             TOPPTR(nss,ix) = sv_dup_inc(sv, param);
9841             ptr = POPPTR(ss,ix);
9842             TOPPTR(nss,ix) = svp_dup_inc((SV**)ptr, proto_perl);/* XXXXX */
9843             break;
9844         case SAVEt_AV:                          /* array reference */
9845             av = (AV*)POPPTR(ss,ix);
9846             TOPPTR(nss,ix) = av_dup_inc(av, param);
9847             gv = (GV*)POPPTR(ss,ix);
9848             TOPPTR(nss,ix) = gv_dup(gv, param);
9849             break;
9850         case SAVEt_HV:                          /* hash reference */
9851             hv = (HV*)POPPTR(ss,ix);
9852             TOPPTR(nss,ix) = hv_dup_inc(hv, param);
9853             gv = (GV*)POPPTR(ss,ix);
9854             TOPPTR(nss,ix) = gv_dup(gv, param);
9855             break;
9856         case SAVEt_INT:                         /* int reference */
9857             ptr = POPPTR(ss,ix);
9858             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9859             intval = (int)POPINT(ss,ix);
9860             TOPINT(nss,ix) = intval;
9861             break;
9862         case SAVEt_LONG:                        /* long reference */
9863             ptr = POPPTR(ss,ix);
9864             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9865             longval = (long)POPLONG(ss,ix);
9866             TOPLONG(nss,ix) = longval;
9867             break;
9868         case SAVEt_I32:                         /* I32 reference */
9869         case SAVEt_I16:                         /* I16 reference */
9870         case SAVEt_I8:                          /* I8 reference */
9871             ptr = POPPTR(ss,ix);
9872             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9873             i = POPINT(ss,ix);
9874             TOPINT(nss,ix) = i;
9875             break;
9876         case SAVEt_IV:                          /* IV reference */
9877             ptr = POPPTR(ss,ix);
9878             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9879             iv = POPIV(ss,ix);
9880             TOPIV(nss,ix) = iv;
9881             break;
9882         case SAVEt_SPTR:                        /* SV* reference */
9883             ptr = POPPTR(ss,ix);
9884             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9885             sv = (SV*)POPPTR(ss,ix);
9886             TOPPTR(nss,ix) = sv_dup(sv, param);
9887             break;
9888         case SAVEt_VPTR:                        /* random* reference */
9889             ptr = POPPTR(ss,ix);
9890             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9891             ptr = POPPTR(ss,ix);
9892             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9893             break;
9894         case SAVEt_PPTR:                        /* char* reference */
9895             ptr = POPPTR(ss,ix);
9896             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9897             c = (char*)POPPTR(ss,ix);
9898             TOPPTR(nss,ix) = pv_dup(c);
9899             break;
9900         case SAVEt_HPTR:                        /* HV* reference */
9901             ptr = POPPTR(ss,ix);
9902             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9903             hv = (HV*)POPPTR(ss,ix);
9904             TOPPTR(nss,ix) = hv_dup(hv, param);
9905             break;
9906         case SAVEt_APTR:                        /* AV* reference */
9907             ptr = POPPTR(ss,ix);
9908             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
9909             av = (AV*)POPPTR(ss,ix);
9910             TOPPTR(nss,ix) = av_dup(av, param);
9911             break;
9912         case SAVEt_NSTAB:
9913             gv = (GV*)POPPTR(ss,ix);
9914             TOPPTR(nss,ix) = gv_dup(gv, param);
9915             break;
9916         case SAVEt_GP:                          /* scalar reference */
9917             gp = (GP*)POPPTR(ss,ix);
9918             TOPPTR(nss,ix) = gp = gp_dup(gp, param);
9919             (void)GpREFCNT_inc(gp);
9920             gv = (GV*)POPPTR(ss,ix);
9921             TOPPTR(nss,ix) = gv_dup_inc(gv, param);
9922             c = (char*)POPPTR(ss,ix);
9923             TOPPTR(nss,ix) = pv_dup(c);
9924             iv = POPIV(ss,ix);
9925             TOPIV(nss,ix) = iv;
9926             iv = POPIV(ss,ix);
9927             TOPIV(nss,ix) = iv;
9928             break;
9929         case SAVEt_FREESV:
9930         case SAVEt_MORTALIZESV:
9931             sv = (SV*)POPPTR(ss,ix);
9932             TOPPTR(nss,ix) = sv_dup_inc(sv, param);
9933             break;
9934         case SAVEt_FREEOP:
9935             ptr = POPPTR(ss,ix);
9936             if (ptr && (((OP*)ptr)->op_private & OPpREFCOUNTED)) {
9937                 /* these are assumed to be refcounted properly */
9938                 OP *o;
9939                 switch (((OP*)ptr)->op_type) {
9940                 case OP_LEAVESUB:
9941                 case OP_LEAVESUBLV:
9942                 case OP_LEAVEEVAL:
9943                 case OP_LEAVE:
9944                 case OP_SCOPE:
9945                 case OP_LEAVEWRITE:
9946                     TOPPTR(nss,ix) = ptr;
9947                     o = (OP*)ptr;
9948                     OpREFCNT_inc(o);
9949                     break;
9950                 default:
9951                     TOPPTR(nss,ix) = Nullop;
9952                     break;
9953                 }
9954             }
9955             else
9956                 TOPPTR(nss,ix) = Nullop;
9957             break;
9958         case SAVEt_FREEPV:
9959             c = (char*)POPPTR(ss,ix);
9960             TOPPTR(nss,ix) = pv_dup_inc(c);
9961             break;
9962         case SAVEt_CLEARSV:
9963             longval = POPLONG(ss,ix);
9964             TOPLONG(nss,ix) = longval;
9965             break;
9966         case SAVEt_DELETE:
9967             hv = (HV*)POPPTR(ss,ix);
9968             TOPPTR(nss,ix) = hv_dup_inc(hv, param);
9969             c = (char*)POPPTR(ss,ix);
9970             TOPPTR(nss,ix) = pv_dup_inc(c);
9971             i = POPINT(ss,ix);
9972             TOPINT(nss,ix) = i;
9973             break;
9974         case SAVEt_DESTRUCTOR:
9975             ptr = POPPTR(ss,ix);
9976             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);  /* XXX quite arbitrary */
9977             dptr = POPDPTR(ss,ix);
9978             TOPDPTR(nss,ix) = DPTR2FPTR(void (*)(void*),
9979                                         any_dup(FPTR2DPTR(void *, dptr),
9980                                                 proto_perl));
9981             break;
9982         case SAVEt_DESTRUCTOR_X:
9983             ptr = POPPTR(ss,ix);
9984             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);  /* XXX quite arbitrary */
9985             dxptr = POPDXPTR(ss,ix);
9986             TOPDXPTR(nss,ix) = DPTR2FPTR(void (*)(pTHX_ void*),
9987                                          any_dup(FPTR2DPTR(void *, dxptr),
9988                                                  proto_perl));
9989             break;
9990         case SAVEt_REGCONTEXT:
9991         case SAVEt_ALLOC:
9992             i = POPINT(ss,ix);
9993             TOPINT(nss,ix) = i;
9994             ix -= i;
9995             break;
9996         case SAVEt_STACK_POS:           /* Position on Perl stack */
9997             i = POPINT(ss,ix);
9998             TOPINT(nss,ix) = i;
9999             break;
10000         case SAVEt_AELEM:               /* array element */
10001             sv = (SV*)POPPTR(ss,ix);
10002             TOPPTR(nss,ix) = sv_dup_inc(sv, param);
10003             i = POPINT(ss,ix);
10004             TOPINT(nss,ix) = i;
10005             av = (AV*)POPPTR(ss,ix);
10006             TOPPTR(nss,ix) = av_dup_inc(av, param);
10007             break;
10008         case SAVEt_HELEM:               /* hash element */
10009             sv = (SV*)POPPTR(ss,ix);
10010             TOPPTR(nss,ix) = sv_dup_inc(sv, param);
10011             sv = (SV*)POPPTR(ss,ix);
10012             TOPPTR(nss,ix) = sv_dup_inc(sv, param);
10013             hv = (HV*)POPPTR(ss,ix);
10014             TOPPTR(nss,ix) = hv_dup_inc(hv, param);
10015             break;
10016         case SAVEt_OP:
10017             ptr = POPPTR(ss,ix);
10018             TOPPTR(nss,ix) = ptr;
10019             break;
10020         case SAVEt_HINTS:
10021             i = POPINT(ss,ix);
10022             TOPINT(nss,ix) = i;
10023             break;
10024         case SAVEt_COMPPAD:
10025             av = (AV*)POPPTR(ss,ix);
10026             TOPPTR(nss,ix) = av_dup(av, param);
10027             break;
10028         case SAVEt_PADSV:
10029             longval = (long)POPLONG(ss,ix);
10030             TOPLONG(nss,ix) = longval;
10031             ptr = POPPTR(ss,ix);
10032             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
10033             sv = (SV*)POPPTR(ss,ix);
10034             TOPPTR(nss,ix) = sv_dup(sv, param);
10035             break;
10036         case SAVEt_BOOL:
10037             ptr = POPPTR(ss,ix);
10038             TOPPTR(nss,ix) = any_dup(ptr, proto_perl);
10039             longval = (long)POPBOOL(ss,ix);
10040             TOPBOOL(nss,ix) = (bool)longval;
10041             break;
10042         case SAVEt_SET_SVFLAGS:
10043             i = POPINT(ss,ix);
10044             TOPINT(nss,ix) = i;
10045             i = POPINT(ss,ix);
10046             TOPINT(nss,ix) = i;
10047             sv = (SV*)POPPTR(ss,ix);
10048             TOPPTR(nss,ix) = sv_dup(sv, param);
10049             break;
10050         default:
10051             Perl_croak(aTHX_ "panic: ss_dup inconsistency");
10052         }
10053     }
10054
10055     return nss;
10056 }
10057
10058
10059 /* if sv is a stash, call $class->CLONE_SKIP(), and set the SVphv_CLONEABLE
10060  * flag to the result. This is done for each stash before cloning starts,
10061  * so we know which stashes want their objects cloned */
10062
10063 static void
10064 do_mark_cloneable_stash(pTHX_ SV *sv)
10065 {
10066     const HEK * const hvname = HvNAME_HEK((HV*)sv);
10067     if (hvname) {
10068         GV* const cloner = gv_fetchmethod_autoload((HV*)sv, "CLONE_SKIP", 0);
10069         SvFLAGS(sv) |= SVphv_CLONEABLE; /* clone objects by default */
10070         if (cloner && GvCV(cloner)) {
10071             dSP;
10072             UV status;
10073
10074             ENTER;
10075             SAVETMPS;
10076             PUSHMARK(SP);
10077             XPUSHs(sv_2mortal(newSVhek(hvname)));
10078             PUTBACK;
10079             call_sv((SV*)GvCV(cloner), G_SCALAR);
10080             SPAGAIN;
10081             status = POPu;
10082             PUTBACK;
10083             FREETMPS;
10084             LEAVE;
10085             if (status)
10086                 SvFLAGS(sv) &= ~SVphv_CLONEABLE;
10087         }
10088     }
10089 }
10090
10091
10092
10093 /*
10094 =for apidoc perl_clone
10095
10096 Create and return a new interpreter by cloning the current one.
10097
10098 perl_clone takes these flags as parameters:
10099
10100 CLONEf_COPY_STACKS - is used to, well, copy the stacks also,
10101 without it we only clone the data and zero the stacks,
10102 with it we copy the stacks and the new perl interpreter is
10103 ready to run at the exact same point as the previous one.
10104 The pseudo-fork code uses COPY_STACKS while the
10105 threads->new doesn't.
10106
10107 CLONEf_KEEP_PTR_TABLE
10108 perl_clone keeps a ptr_table with the pointer of the old
10109 variable as a key and the new variable as a value,
10110 this allows it to check if something has been cloned and not
10111 clone it again but rather just use the value and increase the
10112 refcount. If KEEP_PTR_TABLE is not set then perl_clone will kill
10113 the ptr_table using the function
10114 C<ptr_table_free(PL_ptr_table); PL_ptr_table = NULL;>,
10115 reason to keep it around is if you want to dup some of your own
10116 variable who are outside the graph perl scans, example of this
10117 code is in threads.xs create
10118
10119 CLONEf_CLONE_HOST
10120 This is a win32 thing, it is ignored on unix, it tells perls
10121 win32host code (which is c++) to clone itself, this is needed on
10122 win32 if you want to run two threads at the same time,
10123 if you just want to do some stuff in a separate perl interpreter
10124 and then throw it away and return to the original one,
10125 you don't need to do anything.
10126
10127 =cut
10128 */
10129
10130 /* XXX the above needs expanding by someone who actually understands it ! */
10131 EXTERN_C PerlInterpreter *
10132 perl_clone_host(PerlInterpreter* proto_perl, UV flags);
10133
10134 PerlInterpreter *
10135 perl_clone(PerlInterpreter *proto_perl, UV flags)
10136 {
10137    dVAR;
10138 #ifdef PERL_IMPLICIT_SYS
10139
10140    /* perlhost.h so we need to call into it
10141    to clone the host, CPerlHost should have a c interface, sky */
10142
10143    if (flags & CLONEf_CLONE_HOST) {
10144        return perl_clone_host(proto_perl,flags);
10145    }
10146    return perl_clone_using(proto_perl, flags,
10147                             proto_perl->IMem,
10148                             proto_perl->IMemShared,
10149                             proto_perl->IMemParse,
10150                             proto_perl->IEnv,
10151                             proto_perl->IStdIO,
10152                             proto_perl->ILIO,
10153                             proto_perl->IDir,
10154                             proto_perl->ISock,
10155                             proto_perl->IProc);
10156 }
10157
10158 PerlInterpreter *
10159 perl_clone_using(PerlInterpreter *proto_perl, UV flags,
10160                  struct IPerlMem* ipM, struct IPerlMem* ipMS,
10161                  struct IPerlMem* ipMP, struct IPerlEnv* ipE,
10162                  struct IPerlStdIO* ipStd, struct IPerlLIO* ipLIO,
10163                  struct IPerlDir* ipD, struct IPerlSock* ipS,
10164                  struct IPerlProc* ipP)
10165 {
10166     /* XXX many of the string copies here can be optimized if they're
10167      * constants; they need to be allocated as common memory and just
10168      * their pointers copied. */
10169
10170     IV i;
10171     CLONE_PARAMS clone_params;
10172     CLONE_PARAMS* param = &clone_params;
10173
10174     PerlInterpreter *my_perl = (PerlInterpreter*)(*ipM->pMalloc)(ipM, sizeof(PerlInterpreter));
10175     /* for each stash, determine whether its objects should be cloned */
10176     S_visit(proto_perl, do_mark_cloneable_stash, SVt_PVHV, SVTYPEMASK);
10177     PERL_SET_THX(my_perl);
10178
10179 #  ifdef DEBUGGING
10180     Poison(my_perl, 1, PerlInterpreter);
10181     PL_op = Nullop;
10182     PL_curcop = (COP *)Nullop;
10183     PL_markstack = 0;
10184     PL_scopestack = 0;
10185     PL_savestack = 0;
10186     PL_savestack_ix = 0;
10187     PL_savestack_max = -1;
10188     PL_sig_pending = 0;
10189     Zero(&PL_debug_pad, 1, struct perl_debug_pad);
10190 #  else /* !DEBUGGING */
10191     Zero(my_perl, 1, PerlInterpreter);
10192 #  endif        /* DEBUGGING */
10193
10194     /* host pointers */
10195     PL_Mem              = ipM;
10196     PL_MemShared        = ipMS;
10197     PL_MemParse         = ipMP;
10198     PL_Env              = ipE;
10199     PL_StdIO            = ipStd;
10200     PL_LIO              = ipLIO;
10201     PL_Dir              = ipD;
10202     PL_Sock             = ipS;
10203     PL_Proc             = ipP;
10204 #else           /* !PERL_IMPLICIT_SYS */
10205     IV i;
10206     CLONE_PARAMS clone_params;
10207     CLONE_PARAMS* param = &clone_params;
10208     PerlInterpreter *my_perl = (PerlInterpreter*)PerlMem_malloc(sizeof(PerlInterpreter));
10209     /* for each stash, determine whether its objects should be cloned */
10210     S_visit(proto_perl, do_mark_cloneable_stash, SVt_PVHV, SVTYPEMASK);
10211     PERL_SET_THX(my_perl);
10212
10213 #    ifdef DEBUGGING
10214     Poison(my_perl, 1, PerlInterpreter);
10215     PL_op = Nullop;
10216     PL_curcop = (COP *)Nullop;
10217     PL_markstack = 0;
10218     PL_scopestack = 0;
10219     PL_savestack = 0;
10220     PL_savestack_ix = 0;
10221     PL_savestack_max = -1;
10222     PL_sig_pending = 0;
10223     Zero(&PL_debug_pad, 1, struct perl_debug_pad);
10224 #    else       /* !DEBUGGING */
10225     Zero(my_perl, 1, PerlInterpreter);
10226 #    endif      /* DEBUGGING */
10227 #endif          /* PERL_IMPLICIT_SYS */
10228     param->flags = flags;
10229     param->proto_perl = proto_perl;
10230
10231     Zero(&PL_body_arenaroots, 1, PL_body_arenaroots);
10232     Zero(&PL_body_roots, 1, PL_body_roots);
10233     
10234     PL_nice_chunk       = NULL;
10235     PL_nice_chunk_size  = 0;
10236     PL_sv_count         = 0;
10237     PL_sv_objcount      = 0;
10238     PL_sv_root          = Nullsv;
10239     PL_sv_arenaroot     = Nullsv;
10240
10241     PL_debug            = proto_perl->Idebug;
10242
10243     PL_hash_seed        = proto_perl->Ihash_seed;
10244     PL_rehash_seed      = proto_perl->Irehash_seed;
10245
10246 #ifdef USE_REENTRANT_API
10247     /* XXX: things like -Dm will segfault here in perlio, but doing
10248      *  PERL_SET_CONTEXT(proto_perl);
10249      * breaks too many other things
10250      */
10251     Perl_reentrant_init(aTHX);
10252 #endif
10253
10254     /* create SV map for pointer relocation */
10255     PL_ptr_table = ptr_table_new();
10256
10257     /* initialize these special pointers as early as possible */
10258     SvANY(&PL_sv_undef)         = NULL;
10259     SvREFCNT(&PL_sv_undef)      = (~(U32)0)/2;
10260     SvFLAGS(&PL_sv_undef)       = SVf_READONLY|SVt_NULL;
10261     ptr_table_store(PL_ptr_table, &proto_perl->Isv_undef, &PL_sv_undef);
10262
10263     SvANY(&PL_sv_no)            = new_XPVNV();
10264     SvREFCNT(&PL_sv_no)         = (~(U32)0)/2;
10265     SvFLAGS(&PL_sv_no)          = SVp_IOK|SVf_IOK|SVp_NOK|SVf_NOK
10266                                   |SVp_POK|SVf_POK|SVf_READONLY|SVt_PVNV;
10267     SvPV_set(&PL_sv_no, SAVEPVN(PL_No, 0));
10268     SvCUR_set(&PL_sv_no, 0);
10269     SvLEN_set(&PL_sv_no, 1);
10270     SvIV_set(&PL_sv_no, 0);
10271     SvNV_set(&PL_sv_no, 0);
10272     ptr_table_store(PL_ptr_table, &proto_perl->Isv_no, &PL_sv_no);
10273
10274     SvANY(&PL_sv_yes)           = new_XPVNV();
10275     SvREFCNT(&PL_sv_yes)        = (~(U32)0)/2;
10276     SvFLAGS(&PL_sv_yes)         = SVp_IOK|SVf_IOK|SVp_NOK|SVf_NOK
10277                                   |SVp_POK|SVf_POK|SVf_READONLY|SVt_PVNV;
10278     SvPV_set(&PL_sv_yes, SAVEPVN(PL_Yes, 1));
10279     SvCUR_set(&PL_sv_yes, 1);
10280     SvLEN_set(&PL_sv_yes, 2);
10281     SvIV_set(&PL_sv_yes, 1);
10282     SvNV_set(&PL_sv_yes, 1);
10283     ptr_table_store(PL_ptr_table, &proto_perl->Isv_yes, &PL_sv_yes);
10284
10285     /* create (a non-shared!) shared string table */
10286     PL_strtab           = newHV();
10287     HvSHAREKEYS_off(PL_strtab);
10288     hv_ksplit(PL_strtab, HvTOTALKEYS(proto_perl->Istrtab));
10289     ptr_table_store(PL_ptr_table, proto_perl->Istrtab, PL_strtab);
10290
10291     PL_compiling = proto_perl->Icompiling;
10292
10293     /* These two PVs will be free'd special way so must set them same way op.c does */
10294     PL_compiling.cop_stashpv = savesharedpv(PL_compiling.cop_stashpv);
10295     ptr_table_store(PL_ptr_table, proto_perl->Icompiling.cop_stashpv, PL_compiling.cop_stashpv);
10296
10297     PL_compiling.cop_file    = savesharedpv(PL_compiling.cop_file);
10298     ptr_table_store(PL_ptr_table, proto_perl->Icompiling.cop_file, PL_compiling.cop_file);
10299
10300     ptr_table_store(PL_ptr_table, &proto_perl->Icompiling, &PL_compiling);
10301     if (!specialWARN(PL_compiling.cop_warnings))
10302         PL_compiling.cop_warnings = sv_dup_inc(PL_compiling.cop_warnings, param);
10303     if (!specialCopIO(PL_compiling.cop_io))
10304         PL_compiling.cop_io = sv_dup_inc(PL_compiling.cop_io, param);
10305     PL_curcop           = (COP*)any_dup(proto_perl->Tcurcop, proto_perl);
10306
10307     /* pseudo environmental stuff */
10308     PL_origargc         = proto_perl->Iorigargc;
10309     PL_origargv         = proto_perl->Iorigargv;
10310
10311     param->stashes      = newAV();  /* Setup array of objects to call clone on */
10312
10313     /* Set tainting stuff before PerlIO_debug can possibly get called */
10314     PL_tainting         = proto_perl->Itainting;
10315     PL_taint_warn       = proto_perl->Itaint_warn;
10316
10317 #ifdef PERLIO_LAYERS
10318     /* Clone PerlIO tables as soon as we can handle general xx_dup() */
10319     PerlIO_clone(aTHX_ proto_perl, param);
10320 #endif
10321
10322     PL_envgv            = gv_dup(proto_perl->Ienvgv, param);
10323     PL_incgv            = gv_dup(proto_perl->Iincgv, param);
10324     PL_hintgv           = gv_dup(proto_perl->Ihintgv, param);
10325     PL_origfilename     = SAVEPV(proto_perl->Iorigfilename);
10326     PL_diehook          = sv_dup_inc(proto_perl->Idiehook, param);
10327     PL_warnhook         = sv_dup_inc(proto_perl->Iwarnhook, param);
10328
10329     /* switches */
10330     PL_minus_c          = proto_perl->Iminus_c;
10331     PL_patchlevel       = sv_dup_inc(proto_perl->Ipatchlevel, param);
10332     PL_localpatches     = proto_perl->Ilocalpatches;
10333     PL_splitstr         = proto_perl->Isplitstr;
10334     PL_preprocess       = proto_perl->Ipreprocess;
10335     PL_minus_n          = proto_perl->Iminus_n;
10336     PL_minus_p          = proto_perl->Iminus_p;
10337     PL_minus_l          = proto_perl->Iminus_l;
10338     PL_minus_a          = proto_perl->Iminus_a;
10339     PL_minus_E          = proto_perl->Iminus_E;
10340     PL_minus_F          = proto_perl->Iminus_F;
10341     PL_doswitches       = proto_perl->Idoswitches;
10342     PL_dowarn           = proto_perl->Idowarn;
10343     PL_doextract        = proto_perl->Idoextract;
10344     PL_sawampersand     = proto_perl->Isawampersand;
10345     PL_unsafe           = proto_perl->Iunsafe;
10346     PL_inplace          = SAVEPV(proto_perl->Iinplace);
10347     PL_e_script         = sv_dup_inc(proto_perl->Ie_script, param);
10348     PL_perldb           = proto_perl->Iperldb;
10349     PL_perl_destruct_level = proto_perl->Iperl_destruct_level;
10350     PL_exit_flags       = proto_perl->Iexit_flags;
10351
10352     /* magical thingies */
10353     /* XXX time(&PL_basetime) when asked for? */
10354     PL_basetime         = proto_perl->Ibasetime;
10355     PL_formfeed         = sv_dup(proto_perl->Iformfeed, param);
10356
10357     PL_maxsysfd         = proto_perl->Imaxsysfd;
10358     PL_multiline        = proto_perl->Imultiline;
10359     PL_statusvalue      = proto_perl->Istatusvalue;
10360 #ifdef VMS
10361     PL_statusvalue_vms  = proto_perl->Istatusvalue_vms;
10362 #else
10363     PL_statusvalue_posix = proto_perl->Istatusvalue_posix;
10364 #endif
10365     PL_encoding         = sv_dup(proto_perl->Iencoding, param);
10366
10367     sv_setpvn(PERL_DEBUG_PAD(0), "", 0);        /* For regex debugging. */
10368     sv_setpvn(PERL_DEBUG_PAD(1), "", 0);        /* ext/re needs these */
10369     sv_setpvn(PERL_DEBUG_PAD(2), "", 0);        /* even without DEBUGGING. */
10370
10371     /* Clone the regex array */
10372     PL_regex_padav = newAV();
10373     {
10374         const I32 len = av_len((AV*)proto_perl->Iregex_padav);
10375         SV* const * const regexen = AvARRAY((AV*)proto_perl->Iregex_padav);
10376         IV i;
10377         av_push(PL_regex_padav,
10378                 sv_dup_inc(regexen[0],param));
10379         for(i = 1; i <= len; i++) {
10380             const SV * const regex = regexen[i];
10381             SV * const sv =
10382                 SvREPADTMP(regex)
10383                     ? sv_dup_inc(regex, param)
10384                     : SvREFCNT_inc(
10385                         newSViv(PTR2IV(re_dup(
10386                                 INT2PTR(REGEXP *, SvIVX(regex)), param))))
10387                 ;
10388             av_push(PL_regex_padav, sv);
10389         }
10390     }
10391     PL_regex_pad = AvARRAY(PL_regex_padav);
10392
10393     /* shortcuts to various I/O objects */
10394     PL_stdingv          = gv_dup(proto_perl->Istdingv, param);
10395     PL_stderrgv         = gv_dup(proto_perl->Istderrgv, param);
10396     PL_defgv            = gv_dup(proto_perl->Idefgv, param);
10397     PL_argvgv           = gv_dup(proto_perl->Iargvgv, param);
10398     PL_argvoutgv        = gv_dup(proto_perl->Iargvoutgv, param);
10399     PL_argvout_stack    = av_dup_inc(proto_perl->Iargvout_stack, param);
10400
10401     /* shortcuts to regexp stuff */
10402     PL_replgv           = gv_dup(proto_perl->Ireplgv, param);
10403
10404     /* shortcuts to misc objects */
10405     PL_errgv            = gv_dup(proto_perl->Ierrgv, param);
10406
10407     /* shortcuts to debugging objects */
10408     PL_DBgv             = gv_dup(proto_perl->IDBgv, param);
10409     PL_DBline           = gv_dup(proto_perl->IDBline, param);
10410     PL_DBsub            = gv_dup(proto_perl->IDBsub, param);
10411     PL_DBsingle         = sv_dup(proto_perl->IDBsingle, param);
10412     PL_DBtrace          = sv_dup(proto_perl->IDBtrace, param);
10413     PL_DBsignal         = sv_dup(proto_perl->IDBsignal, param);
10414     PL_DBassertion      = sv_dup(proto_perl->IDBassertion, param);
10415     PL_lineary          = av_dup(proto_perl->Ilineary, param);
10416     PL_dbargs           = av_dup(proto_perl->Idbargs, param);
10417
10418     /* symbol tables */
10419     PL_defstash         = hv_dup_inc(proto_perl->Tdefstash, param);
10420     PL_curstash         = hv_dup(proto_perl->Tcurstash, param);
10421     PL_debstash         = hv_dup(proto_perl->Idebstash, param);
10422     PL_globalstash      = hv_dup(proto_perl->Iglobalstash, param);
10423     PL_curstname        = sv_dup_inc(proto_perl->Icurstname, param);
10424
10425     PL_beginav          = av_dup_inc(proto_perl->Ibeginav, param);
10426     PL_beginav_save     = av_dup_inc(proto_perl->Ibeginav_save, param);
10427     PL_checkav_save     = av_dup_inc(proto_perl->Icheckav_save, param);
10428     PL_endav            = av_dup_inc(proto_perl->Iendav, param);
10429     PL_checkav          = av_dup_inc(proto_perl->Icheckav, param);
10430     PL_initav           = av_dup_inc(proto_perl->Iinitav, param);
10431
10432     PL_sub_generation   = proto_perl->Isub_generation;
10433
10434     /* funky return mechanisms */
10435     PL_forkprocess      = proto_perl->Iforkprocess;
10436
10437     /* subprocess state */
10438     PL_fdpid            = av_dup_inc(proto_perl->Ifdpid, param);
10439
10440     /* internal state */
10441     PL_maxo             = proto_perl->Imaxo;
10442     if (proto_perl->Iop_mask)
10443         PL_op_mask      = SAVEPVN(proto_perl->Iop_mask, PL_maxo);
10444     else
10445         PL_op_mask      = Nullch;
10446     /* PL_asserting        = proto_perl->Iasserting; */
10447
10448     /* current interpreter roots */
10449     PL_main_cv          = cv_dup_inc(proto_perl->Imain_cv, param);
10450     PL_main_root        = OpREFCNT_inc(proto_perl->Imain_root);
10451     PL_main_start       = proto_perl->Imain_start;
10452     PL_eval_root        = proto_perl->Ieval_root;
10453     PL_eval_start       = proto_perl->Ieval_start;
10454
10455     /* runtime control stuff */
10456     PL_curcopdb         = (COP*)any_dup(proto_perl->Icurcopdb, proto_perl);
10457     PL_copline          = proto_perl->Icopline;
10458
10459     PL_filemode         = proto_perl->Ifilemode;
10460     PL_lastfd           = proto_perl->Ilastfd;
10461     PL_oldname          = proto_perl->Ioldname;         /* XXX not quite right */
10462     PL_Argv             = NULL;
10463     PL_Cmd              = Nullch;
10464     PL_gensym           = proto_perl->Igensym;
10465     PL_preambled        = proto_perl->Ipreambled;
10466     PL_preambleav       = av_dup_inc(proto_perl->Ipreambleav, param);
10467     PL_laststatval      = proto_perl->Ilaststatval;
10468     PL_laststype        = proto_perl->Ilaststype;
10469     PL_mess_sv          = Nullsv;
10470
10471     PL_ors_sv           = sv_dup_inc(proto_perl->Iors_sv, param);
10472
10473     /* interpreter atexit processing */
10474     PL_exitlistlen      = proto_perl->Iexitlistlen;
10475     if (PL_exitlistlen) {
10476         Newx(PL_exitlist, PL_exitlistlen, PerlExitListEntry);
10477         Copy(proto_perl->Iexitlist, PL_exitlist, PL_exitlistlen, PerlExitListEntry);
10478     }
10479     else
10480         PL_exitlist     = (PerlExitListEntry*)NULL;
10481
10482     PL_my_cxt_size = proto_perl->Imy_cxt_size;
10483     if (PL_my_cxt_size != -1) {
10484         Newx(PL_my_cxt_list, PL_my_cxt_size, void *);
10485         Copy(proto_perl->Imy_cxt_list, PL_my_cxt_list, PL_my_cxt_size, void *);
10486     }
10487     else
10488         PL_my_cxt_list  = (void**)NULL;
10489     PL_modglobal        = hv_dup_inc(proto_perl->Imodglobal, param);
10490     PL_custom_op_names  = hv_dup_inc(proto_perl->Icustom_op_names,param);
10491     PL_custom_op_descs  = hv_dup_inc(proto_perl->Icustom_op_descs,param);
10492
10493     PL_profiledata      = NULL;
10494     PL_rsfp             = fp_dup(proto_perl->Irsfp, '<', param);
10495     /* PL_rsfp_filters entries have fake IoDIRP() */
10496     PL_rsfp_filters     = av_dup_inc(proto_perl->Irsfp_filters, param);
10497
10498     PL_compcv                   = cv_dup(proto_perl->Icompcv, param);
10499
10500     PAD_CLONE_VARS(proto_perl, param);
10501
10502 #ifdef HAVE_INTERP_INTERN
10503     sys_intern_dup(&proto_perl->Isys_intern, &PL_sys_intern);
10504 #endif
10505
10506     /* more statics moved here */
10507     PL_generation       = proto_perl->Igeneration;
10508     PL_DBcv             = cv_dup(proto_perl->IDBcv, param);
10509
10510     PL_in_clean_objs    = proto_perl->Iin_clean_objs;
10511     PL_in_clean_all     = proto_perl->Iin_clean_all;
10512
10513     PL_uid              = proto_perl->Iuid;
10514     PL_euid             = proto_perl->Ieuid;
10515     PL_gid              = proto_perl->Igid;
10516     PL_egid             = proto_perl->Iegid;
10517     PL_nomemok          = proto_perl->Inomemok;
10518     PL_an               = proto_perl->Ian;
10519     PL_evalseq          = proto_perl->Ievalseq;
10520     PL_origenviron      = proto_perl->Iorigenviron;     /* XXX not quite right */
10521     PL_origalen         = proto_perl->Iorigalen;
10522 #ifdef PERL_USES_PL_PIDSTATUS
10523     PL_pidstatus        = newHV();                      /* XXX flag for cloning? */
10524 #endif
10525     PL_osname           = SAVEPV(proto_perl->Iosname);
10526     PL_sighandlerp      = proto_perl->Isighandlerp;
10527
10528     PL_runops           = proto_perl->Irunops;
10529
10530     Copy(proto_perl->Itokenbuf, PL_tokenbuf, 256, char);
10531
10532 #ifdef CSH
10533     PL_cshlen           = proto_perl->Icshlen;
10534     PL_cshname          = proto_perl->Icshname; /* XXX never deallocated */
10535 #endif
10536
10537     PL_lex_state        = proto_perl->Ilex_state;
10538     PL_lex_defer        = proto_perl->Ilex_defer;
10539     PL_lex_expect       = proto_perl->Ilex_expect;
10540     PL_lex_formbrack    = proto_perl->Ilex_formbrack;
10541     PL_lex_dojoin       = proto_perl->Ilex_dojoin;
10542     PL_lex_starts       = proto_perl->Ilex_starts;
10543     PL_lex_stuff        = sv_dup_inc(proto_perl->Ilex_stuff, param);
10544     PL_lex_repl         = sv_dup_inc(proto_perl->Ilex_repl, param);
10545     PL_lex_op           = proto_perl->Ilex_op;
10546     PL_lex_inpat        = proto_perl->Ilex_inpat;
10547     PL_lex_inwhat       = proto_perl->Ilex_inwhat;
10548     PL_lex_brackets     = proto_perl->Ilex_brackets;
10549     i = (PL_lex_brackets < 120 ? 120 : PL_lex_brackets);
10550     PL_lex_brackstack   = SAVEPVN(proto_perl->Ilex_brackstack,i);
10551     PL_lex_casemods     = proto_perl->Ilex_casemods;
10552     i = (PL_lex_casemods < 12 ? 12 : PL_lex_casemods);
10553     PL_lex_casestack    = SAVEPVN(proto_perl->Ilex_casestack,i);
10554
10555     Copy(proto_perl->Inextval, PL_nextval, 5, YYSTYPE);
10556     Copy(proto_perl->Inexttype, PL_nexttype, 5, I32);
10557     PL_nexttoke         = proto_perl->Inexttoke;
10558
10559     /* XXX This is probably masking the deeper issue of why
10560      * SvANY(proto_perl->Ilinestr) can be NULL at this point. For test case:
10561      * http://archive.develooper.com/perl5-porters%40perl.org/msg83298.html
10562      * (A little debugging with a watchpoint on it may help.)
10563      */
10564     if (SvANY(proto_perl->Ilinestr)) {
10565         PL_linestr              = sv_dup_inc(proto_perl->Ilinestr, param);
10566         i = proto_perl->Ibufptr - SvPVX_const(proto_perl->Ilinestr);
10567         PL_bufptr               = SvPVX(PL_linestr) + (i < 0 ? 0 : i);
10568         i = proto_perl->Ioldbufptr - SvPVX_const(proto_perl->Ilinestr);
10569         PL_oldbufptr    = SvPVX(PL_linestr) + (i < 0 ? 0 : i);
10570         i = proto_perl->Ioldoldbufptr - SvPVX_const(proto_perl->Ilinestr);
10571         PL_oldoldbufptr = SvPVX(PL_linestr) + (i < 0 ? 0 : i);
10572         i = proto_perl->Ilinestart - SvPVX_const(proto_perl->Ilinestr);
10573         PL_linestart    = SvPVX(PL_linestr) + (i < 0 ? 0 : i);
10574     }
10575     else {
10576         PL_linestr = NEWSV(65,79);
10577         sv_upgrade(PL_linestr,SVt_PVIV);
10578         sv_setpvn(PL_linestr,"",0);
10579         PL_bufptr = PL_oldbufptr = PL_oldoldbufptr = PL_linestart = SvPVX(PL_linestr);
10580     }
10581     PL_bufend           = SvPVX(PL_linestr) + SvCUR(PL_linestr);
10582     PL_pending_ident    = proto_perl->Ipending_ident;
10583     PL_sublex_info      = proto_perl->Isublex_info;     /* XXX not quite right */
10584
10585     PL_expect           = proto_perl->Iexpect;
10586
10587     PL_multi_start      = proto_perl->Imulti_start;
10588     PL_multi_end        = proto_perl->Imulti_end;
10589     PL_multi_open       = proto_perl->Imulti_open;
10590     PL_multi_close      = proto_perl->Imulti_close;
10591
10592     PL_error_count      = proto_perl->Ierror_count;
10593     PL_subline          = proto_perl->Isubline;
10594     PL_subname          = sv_dup_inc(proto_perl->Isubname, param);
10595
10596     /* XXX See comment on SvANY(proto_perl->Ilinestr) above */
10597     if (SvANY(proto_perl->Ilinestr)) {
10598         i = proto_perl->Ilast_uni - SvPVX_const(proto_perl->Ilinestr);
10599         PL_last_uni             = SvPVX(PL_linestr) + (i < 0 ? 0 : i);
10600         i = proto_perl->Ilast_lop - SvPVX_const(proto_perl->Ilinestr);
10601         PL_last_lop             = SvPVX(PL_linestr) + (i < 0 ? 0 : i);
10602         PL_last_lop_op  = proto_perl->Ilast_lop_op;
10603     }
10604     else {
10605         PL_last_uni     = SvPVX(PL_linestr);
10606         PL_last_lop     = SvPVX(PL_linestr);
10607         PL_last_lop_op  = 0;
10608     }
10609     PL_in_my            = proto_perl->Iin_my;
10610     PL_in_my_stash      = hv_dup(proto_perl->Iin_my_stash, param);
10611 #ifdef FCRYPT
10612     PL_cryptseen        = proto_perl->Icryptseen;
10613 #endif
10614
10615     PL_hints            = proto_perl->Ihints;
10616
10617     PL_amagic_generation        = proto_perl->Iamagic_generation;
10618
10619 #ifdef USE_LOCALE_COLLATE
10620     PL_collation_ix     = proto_perl->Icollation_ix;
10621     PL_collation_name   = SAVEPV(proto_perl->Icollation_name);
10622     PL_collation_standard       = proto_perl->Icollation_standard;
10623     PL_collxfrm_base    = proto_perl->Icollxfrm_base;
10624     PL_collxfrm_mult    = proto_perl->Icollxfrm_mult;
10625 #endif /* USE_LOCALE_COLLATE */
10626
10627 #ifdef USE_LOCALE_NUMERIC
10628     PL_numeric_name     = SAVEPV(proto_perl->Inumeric_name);
10629     PL_numeric_standard = proto_perl->Inumeric_standard;
10630     PL_numeric_local    = proto_perl->Inumeric_local;
10631     PL_numeric_radix_sv = sv_dup_inc(proto_perl->Inumeric_radix_sv, param);
10632 #endif /* !USE_LOCALE_NUMERIC */
10633
10634     /* utf8 character classes */
10635     PL_utf8_alnum       = sv_dup_inc(proto_perl->Iutf8_alnum, param);
10636     PL_utf8_alnumc      = sv_dup_inc(proto_perl->Iutf8_alnumc, param);
10637     PL_utf8_ascii       = sv_dup_inc(proto_perl->Iutf8_ascii, param);
10638     PL_utf8_alpha       = sv_dup_inc(proto_perl->Iutf8_alpha, param);
10639     PL_utf8_space       = sv_dup_inc(proto_perl->Iutf8_space, param);
10640     PL_utf8_cntrl       = sv_dup_inc(proto_perl->Iutf8_cntrl, param);
10641     PL_utf8_graph       = sv_dup_inc(proto_perl->Iutf8_graph, param);
10642     PL_utf8_digit       = sv_dup_inc(proto_perl->Iutf8_digit, param);
10643     PL_utf8_upper       = sv_dup_inc(proto_perl->Iutf8_upper, param);
10644     PL_utf8_lower       = sv_dup_inc(proto_perl->Iutf8_lower, param);
10645     PL_utf8_print       = sv_dup_inc(proto_perl->Iutf8_print, param);
10646     PL_utf8_punct       = sv_dup_inc(proto_perl->Iutf8_punct, param);
10647     PL_utf8_xdigit      = sv_dup_inc(proto_perl->Iutf8_xdigit, param);
10648     PL_utf8_mark        = sv_dup_inc(proto_perl->Iutf8_mark, param);
10649     PL_utf8_toupper     = sv_dup_inc(proto_perl->Iutf8_toupper, param);
10650     PL_utf8_totitle     = sv_dup_inc(proto_perl->Iutf8_totitle, param);
10651     PL_utf8_tolower     = sv_dup_inc(proto_perl->Iutf8_tolower, param);
10652     PL_utf8_tofold      = sv_dup_inc(proto_perl->Iutf8_tofold, param);
10653     PL_utf8_idstart     = sv_dup_inc(proto_perl->Iutf8_idstart, param);
10654     PL_utf8_idcont      = sv_dup_inc(proto_perl->Iutf8_idcont, param);
10655
10656     /* Did the locale setup indicate UTF-8? */
10657     PL_utf8locale       = proto_perl->Iutf8locale;
10658     /* Unicode features (see perlrun/-C) */
10659     PL_unicode          = proto_perl->Iunicode;
10660
10661     /* Pre-5.8 signals control */
10662     PL_signals          = proto_perl->Isignals;
10663
10664     /* times() ticks per second */
10665     PL_clocktick        = proto_perl->Iclocktick;
10666
10667     /* Recursion stopper for PerlIO_find_layer */
10668     PL_in_load_module   = proto_perl->Iin_load_module;
10669
10670     /* sort() routine */
10671     PL_sort_RealCmp     = proto_perl->Isort_RealCmp;
10672
10673     /* Not really needed/useful since the reenrant_retint is "volatile",
10674      * but do it for consistency's sake. */
10675     PL_reentrant_retint = proto_perl->Ireentrant_retint;
10676
10677     /* Hooks to shared SVs and locks. */
10678     PL_sharehook        = proto_perl->Isharehook;
10679     PL_lockhook         = proto_perl->Ilockhook;
10680     PL_unlockhook       = proto_perl->Iunlockhook;
10681     PL_threadhook       = proto_perl->Ithreadhook;
10682
10683     PL_runops_std       = proto_perl->Irunops_std;
10684     PL_runops_dbg       = proto_perl->Irunops_dbg;
10685
10686 #ifdef THREADS_HAVE_PIDS
10687     PL_ppid             = proto_perl->Ippid;
10688 #endif
10689
10690     /* swatch cache */
10691     PL_last_swash_hv    = NULL; /* reinits on demand */
10692     PL_last_swash_klen  = 0;
10693     PL_last_swash_key[0]= '\0';
10694     PL_last_swash_tmps  = (U8*)NULL;
10695     PL_last_swash_slen  = 0;
10696
10697     PL_glob_index       = proto_perl->Iglob_index;
10698     PL_srand_called     = proto_perl->Isrand_called;
10699     PL_uudmap['M']      = 0;            /* reinits on demand */
10700     PL_bitcount         = Nullch;       /* reinits on demand */
10701
10702     if (proto_perl->Ipsig_pend) {
10703         Newxz(PL_psig_pend, SIG_SIZE, int);
10704     }
10705     else {
10706         PL_psig_pend    = (int*)NULL;
10707     }
10708
10709     if (proto_perl->Ipsig_ptr) {
10710         Newxz(PL_psig_ptr,  SIG_SIZE, SV*);
10711         Newxz(PL_psig_name, SIG_SIZE, SV*);
10712         for (i = 1; i < SIG_SIZE; i++) {
10713             PL_psig_ptr[i]  = sv_dup_inc(proto_perl->Ipsig_ptr[i], param);
10714             PL_psig_name[i] = sv_dup_inc(proto_perl->Ipsig_name[i], param);
10715         }
10716     }
10717     else {
10718         PL_psig_ptr     = (SV**)NULL;
10719         PL_psig_name    = (SV**)NULL;
10720     }
10721
10722     /* thrdvar.h stuff */
10723
10724     if (flags & CLONEf_COPY_STACKS) {
10725         /* next allocation will be PL_tmps_stack[PL_tmps_ix+1] */
10726         PL_tmps_ix              = proto_perl->Ttmps_ix;
10727         PL_tmps_max             = proto_perl->Ttmps_max;
10728         PL_tmps_floor           = proto_perl->Ttmps_floor;
10729         Newxz(PL_tmps_stack, PL_tmps_max, SV*);
10730         i = 0;
10731         while (i <= PL_tmps_ix) {
10732             PL_tmps_stack[i]    = sv_dup_inc(proto_perl->Ttmps_stack[i], param);
10733             ++i;
10734         }
10735
10736         /* next PUSHMARK() sets *(PL_markstack_ptr+1) */
10737         i = proto_perl->Tmarkstack_max - proto_perl->Tmarkstack;
10738         Newxz(PL_markstack, i, I32);
10739         PL_markstack_max        = PL_markstack + (proto_perl->Tmarkstack_max
10740                                                   - proto_perl->Tmarkstack);
10741         PL_markstack_ptr        = PL_markstack + (proto_perl->Tmarkstack_ptr
10742                                                   - proto_perl->Tmarkstack);
10743         Copy(proto_perl->Tmarkstack, PL_markstack,
10744              PL_markstack_ptr - PL_markstack + 1, I32);
10745
10746         /* next push_scope()/ENTER sets PL_scopestack[PL_scopestack_ix]
10747          * NOTE: unlike the others! */
10748         PL_scopestack_ix        = proto_perl->Tscopestack_ix;
10749         PL_scopestack_max       = proto_perl->Tscopestack_max;
10750         Newxz(PL_scopestack, PL_scopestack_max, I32);
10751         Copy(proto_perl->Tscopestack, PL_scopestack, PL_scopestack_ix, I32);
10752
10753         /* NOTE: si_dup() looks at PL_markstack */
10754         PL_curstackinfo         = si_dup(proto_perl->Tcurstackinfo, param);
10755
10756         /* PL_curstack          = PL_curstackinfo->si_stack; */
10757         PL_curstack             = av_dup(proto_perl->Tcurstack, param);
10758         PL_mainstack            = av_dup(proto_perl->Tmainstack, param);
10759
10760         /* next PUSHs() etc. set *(PL_stack_sp+1) */
10761         PL_stack_base           = AvARRAY(PL_curstack);
10762         PL_stack_sp             = PL_stack_base + (proto_perl->Tstack_sp
10763                                                    - proto_perl->Tstack_base);
10764         PL_stack_max            = PL_stack_base + AvMAX(PL_curstack);
10765
10766         /* next SSPUSHFOO() sets PL_savestack[PL_savestack_ix]
10767          * NOTE: unlike the others! */
10768         PL_savestack_ix         = proto_perl->Tsavestack_ix;
10769         PL_savestack_max        = proto_perl->Tsavestack_max;
10770         /*Newxz(PL_savestack, PL_savestack_max, ANY);*/
10771         PL_savestack            = ss_dup(proto_perl, param);
10772     }
10773     else {
10774         init_stacks();
10775         ENTER;                  /* perl_destruct() wants to LEAVE; */
10776     }
10777
10778     PL_start_env        = proto_perl->Tstart_env;       /* XXXXXX */
10779     PL_top_env          = &PL_start_env;
10780
10781     PL_op               = proto_perl->Top;
10782
10783     PL_Sv               = Nullsv;
10784     PL_Xpv              = (XPV*)NULL;
10785     PL_na               = proto_perl->Tna;
10786
10787     PL_statbuf          = proto_perl->Tstatbuf;
10788     PL_statcache        = proto_perl->Tstatcache;
10789     PL_statgv           = gv_dup(proto_perl->Tstatgv, param);
10790     PL_statname         = sv_dup_inc(proto_perl->Tstatname, param);
10791 #ifdef HAS_TIMES
10792     PL_timesbuf         = proto_perl->Ttimesbuf;
10793 #endif
10794
10795     PL_tainted          = proto_perl->Ttainted;
10796     PL_curpm            = proto_perl->Tcurpm;   /* XXX No PMOP ref count */
10797     PL_rs               = sv_dup_inc(proto_perl->Trs, param);
10798     PL_last_in_gv       = gv_dup(proto_perl->Tlast_in_gv, param);
10799     PL_ofs_sv           = sv_dup_inc(proto_perl->Tofs_sv, param);
10800     PL_defoutgv         = gv_dup_inc(proto_perl->Tdefoutgv, param);
10801     PL_chopset          = proto_perl->Tchopset; /* XXX never deallocated */
10802     PL_toptarget        = sv_dup_inc(proto_perl->Ttoptarget, param);
10803     PL_bodytarget       = sv_dup_inc(proto_perl->Tbodytarget, param);
10804     PL_formtarget       = sv_dup(proto_perl->Tformtarget, param);
10805
10806     PL_restartop        = proto_perl->Trestartop;
10807     PL_in_eval          = proto_perl->Tin_eval;
10808     PL_delaymagic       = proto_perl->Tdelaymagic;
10809     PL_dirty            = proto_perl->Tdirty;
10810     PL_localizing       = proto_perl->Tlocalizing;
10811
10812     PL_errors           = sv_dup_inc(proto_perl->Terrors, param);
10813     PL_hv_fetch_ent_mh  = Nullhe;
10814     PL_modcount         = proto_perl->Tmodcount;
10815     PL_lastgotoprobe    = Nullop;
10816     PL_dumpindent       = proto_perl->Tdumpindent;
10817
10818     PL_sortcop          = (OP*)any_dup(proto_perl->Tsortcop, proto_perl);
10819     PL_sortstash        = hv_dup(proto_perl->Tsortstash, param);
10820     PL_firstgv          = gv_dup(proto_perl->Tfirstgv, param);
10821     PL_secondgv         = gv_dup(proto_perl->Tsecondgv, param);
10822     PL_efloatbuf        = Nullch;               /* reinits on demand */
10823     PL_efloatsize       = 0;                    /* reinits on demand */
10824
10825     /* regex stuff */
10826
10827     PL_screamfirst      = NULL;
10828     PL_screamnext       = NULL;
10829     PL_maxscream        = -1;                   /* reinits on demand */
10830     PL_lastscream       = Nullsv;
10831
10832     PL_watchaddr        = NULL;
10833     PL_watchok          = Nullch;
10834
10835     PL_regdummy         = proto_perl->Tregdummy;
10836     PL_regprecomp       = Nullch;
10837     PL_regnpar          = 0;
10838     PL_regsize          = 0;
10839     PL_colorset         = 0;            /* reinits PL_colors[] */
10840     /*PL_colors[6]      = {0,0,0,0,0,0};*/
10841     PL_reginput         = Nullch;
10842     PL_regbol           = Nullch;
10843     PL_regeol           = Nullch;
10844     PL_regstartp        = (I32*)NULL;
10845     PL_regendp          = (I32*)NULL;
10846     PL_reglastparen     = (U32*)NULL;
10847     PL_reglastcloseparen        = (U32*)NULL;
10848     PL_regtill          = Nullch;
10849     PL_reg_start_tmp    = (char**)NULL;
10850     PL_reg_start_tmpl   = 0;
10851     PL_regdata          = (struct reg_data*)NULL;
10852     PL_bostr            = Nullch;
10853     PL_reg_flags        = 0;
10854     PL_reg_eval_set     = 0;
10855     PL_regnarrate       = 0;
10856     PL_regprogram       = (regnode*)NULL;
10857     PL_regindent        = 0;
10858     PL_regcc            = (CURCUR*)NULL;
10859     PL_reg_call_cc      = (struct re_cc_state*)NULL;
10860     PL_reg_re           = (regexp*)NULL;
10861     PL_reg_ganch        = Nullch;
10862     PL_reg_sv           = Nullsv;
10863     PL_reg_match_utf8   = FALSE;
10864     PL_reg_magic        = (MAGIC*)NULL;
10865     PL_reg_oldpos       = 0;
10866     PL_reg_oldcurpm     = (PMOP*)NULL;
10867     PL_reg_curpm        = (PMOP*)NULL;
10868     PL_reg_oldsaved     = Nullch;
10869     PL_reg_oldsavedlen  = 0;
10870 #ifdef PERL_OLD_COPY_ON_WRITE
10871     PL_nrs              = Nullsv;
10872 #endif
10873     PL_reg_maxiter      = 0;
10874     PL_reg_leftiter     = 0;
10875     PL_reg_poscache     = Nullch;
10876     PL_reg_poscache_size= 0;
10877
10878     /* RE engine - function pointers */
10879     PL_regcompp         = proto_perl->Tregcompp;
10880     PL_regexecp         = proto_perl->Tregexecp;
10881     PL_regint_start     = proto_perl->Tregint_start;
10882     PL_regint_string    = proto_perl->Tregint_string;
10883     PL_regfree          = proto_perl->Tregfree;
10884
10885     PL_reginterp_cnt    = 0;
10886     PL_reg_starttry     = 0;
10887
10888     /* Pluggable optimizer */
10889     PL_peepp            = proto_perl->Tpeepp;
10890
10891     PL_stashcache       = newHV();
10892
10893     if (!(flags & CLONEf_KEEP_PTR_TABLE)) {
10894         ptr_table_free(PL_ptr_table);
10895         PL_ptr_table = NULL;
10896     }
10897
10898     /* Call the ->CLONE method, if it exists, for each of the stashes
10899        identified by sv_dup() above.
10900     */
10901     while(av_len(param->stashes) != -1) {
10902         HV* const stash = (HV*) av_shift(param->stashes);
10903         GV* const cloner = gv_fetchmethod_autoload(stash, "CLONE", 0);
10904         if (cloner && GvCV(cloner)) {
10905             dSP;
10906             ENTER;
10907             SAVETMPS;
10908             PUSHMARK(SP);
10909             XPUSHs(sv_2mortal(newSVhek(HvNAME_HEK(stash))));
10910             PUTBACK;
10911             call_sv((SV*)GvCV(cloner), G_DISCARD);
10912             FREETMPS;
10913             LEAVE;
10914         }
10915     }
10916
10917     SvREFCNT_dec(param->stashes);
10918
10919     /* orphaned? eg threads->new inside BEGIN or use */
10920     if (PL_compcv && ! SvREFCNT(PL_compcv)) {
10921         (void)SvREFCNT_inc(PL_compcv);
10922         SAVEFREESV(PL_compcv);
10923     }
10924
10925     return my_perl;
10926 }
10927
10928 #endif /* USE_ITHREADS */
10929
10930 /*
10931 =head1 Unicode Support
10932
10933 =for apidoc sv_recode_to_utf8
10934
10935 The encoding is assumed to be an Encode object, on entry the PV
10936 of the sv is assumed to be octets in that encoding, and the sv
10937 will be converted into Unicode (and UTF-8).
10938
10939 If the sv already is UTF-8 (or if it is not POK), or if the encoding
10940 is not a reference, nothing is done to the sv.  If the encoding is not
10941 an C<Encode::XS> Encoding object, bad things will happen.
10942 (See F<lib/encoding.pm> and L<Encode>).
10943
10944 The PV of the sv is returned.
10945
10946 =cut */
10947
10948 char *
10949 Perl_sv_recode_to_utf8(pTHX_ SV *sv, SV *encoding)
10950 {
10951     dVAR;
10952     if (SvPOK(sv) && !SvUTF8(sv) && !IN_BYTES && SvROK(encoding)) {
10953         SV *uni;
10954         STRLEN len;
10955         const char *s;
10956         dSP;
10957         ENTER;
10958         SAVETMPS;
10959         save_re_context();
10960         PUSHMARK(sp);
10961         EXTEND(SP, 3);
10962         XPUSHs(encoding);
10963         XPUSHs(sv);
10964 /*
10965   NI-S 2002/07/09
10966   Passing sv_yes is wrong - it needs to be or'ed set of constants
10967   for Encode::XS, while UTf-8 decode (currently) assumes a true value means
10968   remove converted chars from source.
10969
10970   Both will default the value - let them.
10971
10972         XPUSHs(&PL_sv_yes);
10973 */
10974         PUTBACK;
10975         call_method("decode", G_SCALAR);
10976         SPAGAIN;
10977         uni = POPs;
10978         PUTBACK;
10979         s = SvPV_const(uni, len);
10980         if (s != SvPVX_const(sv)) {
10981             SvGROW(sv, len + 1);
10982             Move(s, SvPVX(sv), len + 1, char);
10983             SvCUR_set(sv, len);
10984         }
10985         FREETMPS;
10986         LEAVE;
10987         SvUTF8_on(sv);
10988         return SvPVX(sv);
10989     }
10990     return SvPOKp(sv) ? SvPVX(sv) : NULL;
10991 }
10992
10993 /*
10994 =for apidoc sv_cat_decode
10995
10996 The encoding is assumed to be an Encode object, the PV of the ssv is
10997 assumed to be octets in that encoding and decoding the input starts
10998 from the position which (PV + *offset) pointed to.  The dsv will be
10999 concatenated the decoded UTF-8 string from ssv.  Decoding will terminate
11000 when the string tstr appears in decoding output or the input ends on
11001 the PV of the ssv. The value which the offset points will be modified
11002 to the last input position on the ssv.
11003
11004 Returns TRUE if the terminator was found, else returns FALSE.
11005
11006 =cut */
11007
11008 bool
11009 Perl_sv_cat_decode(pTHX_ SV *dsv, SV *encoding,
11010                    SV *ssv, int *offset, char *tstr, int tlen)
11011 {
11012     dVAR;
11013     bool ret = FALSE;
11014     if (SvPOK(ssv) && SvPOK(dsv) && SvROK(encoding) && offset) {
11015         SV *offsv;
11016         dSP;
11017         ENTER;
11018         SAVETMPS;
11019         save_re_context();
11020         PUSHMARK(sp);
11021         EXTEND(SP, 6);
11022         XPUSHs(encoding);
11023         XPUSHs(dsv);
11024         XPUSHs(ssv);
11025         XPUSHs(offsv = sv_2mortal(newSViv(*offset)));
11026         XPUSHs(sv_2mortal(newSVpvn(tstr, tlen)));
11027         PUTBACK;
11028         call_method("cat_decode", G_SCALAR);
11029         SPAGAIN;
11030         ret = SvTRUE(TOPs);
11031         *offset = SvIV(offsv);
11032         PUTBACK;
11033         FREETMPS;
11034         LEAVE;
11035     }
11036     else
11037         Perl_croak(aTHX_ "Invalid argument to sv_cat_decode");
11038     return ret;
11039
11040 }
11041
11042 /* ---------------------------------------------------------------------
11043  *
11044  * support functions for report_uninit()
11045  */
11046
11047 /* the maxiumum size of array or hash where we will scan looking
11048  * for the undefined element that triggered the warning */
11049
11050 #define FUV_MAX_SEARCH_SIZE 1000
11051
11052 /* Look for an entry in the hash whose value has the same SV as val;
11053  * If so, return a mortal copy of the key. */
11054
11055 STATIC SV*
11056 S_find_hash_subscript(pTHX_ HV *hv, SV* val)
11057 {
11058     dVAR;
11059     register HE **array;
11060     I32 i;
11061
11062     if (!hv || SvMAGICAL(hv) || !HvARRAY(hv) ||
11063                         (HvTOTALKEYS(hv) > FUV_MAX_SEARCH_SIZE))
11064         return Nullsv;
11065
11066     array = HvARRAY(hv);
11067
11068     for (i=HvMAX(hv); i>0; i--) {
11069         register HE *entry;
11070         for (entry = array[i]; entry; entry = HeNEXT(entry)) {
11071             if (HeVAL(entry) != val)
11072                 continue;
11073             if (    HeVAL(entry) == &PL_sv_undef ||
11074                     HeVAL(entry) == &PL_sv_placeholder)
11075                 continue;
11076             if (!HeKEY(entry))
11077                 return Nullsv;
11078             if (HeKLEN(entry) == HEf_SVKEY)
11079                 return sv_mortalcopy(HeKEY_sv(entry));
11080             return sv_2mortal(newSVpvn(HeKEY(entry), HeKLEN(entry)));
11081         }
11082     }
11083     return Nullsv;
11084 }
11085
11086 /* Look for an entry in the array whose value has the same SV as val;
11087  * If so, return the index, otherwise return -1. */
11088
11089 STATIC I32
11090 S_find_array_subscript(pTHX_ AV *av, SV* val)
11091 {
11092     SV** svp;
11093     I32 i;
11094     if (!av || SvMAGICAL(av) || !AvARRAY(av) ||
11095                         (AvFILLp(av) > FUV_MAX_SEARCH_SIZE))
11096         return -1;
11097
11098     svp = AvARRAY(av);
11099     for (i=AvFILLp(av); i>=0; i--) {
11100         if (svp[i] == val && svp[i] != &PL_sv_undef)
11101             return i;
11102     }
11103     return -1;
11104 }
11105
11106 /* S_varname(): return the name of a variable, optionally with a subscript.
11107  * If gv is non-zero, use the name of that global, along with gvtype (one
11108  * of "$", "@", "%"); otherwise use the name of the lexical at pad offset
11109  * targ.  Depending on the value of the subscript_type flag, return:
11110  */
11111
11112 #define FUV_SUBSCRIPT_NONE      1       /* "@foo"          */
11113 #define FUV_SUBSCRIPT_ARRAY     2       /* "$foo[aindex]"  */
11114 #define FUV_SUBSCRIPT_HASH      3       /* "$foo{keyname}" */
11115 #define FUV_SUBSCRIPT_WITHIN    4       /* "within @foo"   */
11116
11117 STATIC SV*
11118 S_varname(pTHX_ GV *gv, const char gvtype, PADOFFSET targ,
11119         SV* keyname, I32 aindex, int subscript_type)
11120 {
11121
11122     SV * const name = sv_newmortal();
11123     if (gv) {
11124         char buffer[2];
11125         buffer[0] = gvtype;
11126         buffer[1] = 0;
11127
11128         /* as gv_fullname4(), but add literal '^' for $^FOO names  */
11129
11130         gv_fullname4(name, gv, buffer, 0);
11131
11132         if ((unsigned int)SvPVX(name)[1] <= 26) {
11133             buffer[0] = '^';
11134             buffer[1] = SvPVX(name)[1] + 'A' - 1;
11135
11136             /* Swap the 1 unprintable control character for the 2 byte pretty
11137                version - ie substr($name, 1, 1) = $buffer; */
11138             sv_insert(name, 1, 1, buffer, 2);
11139         }
11140     }
11141     else {
11142         U32 unused;
11143         CV * const cv = find_runcv(&unused);
11144         SV *sv;
11145         AV *av;
11146
11147         if (!cv || !CvPADLIST(cv))
11148             return Nullsv;
11149         av = (AV*)(*av_fetch(CvPADLIST(cv), 0, FALSE));
11150         sv = *av_fetch(av, targ, FALSE);
11151         /* SvLEN in a pad name is not to be trusted */
11152         sv_setpv(name, SvPV_nolen_const(sv));
11153     }
11154
11155     if (subscript_type == FUV_SUBSCRIPT_HASH) {
11156         SV * const sv = NEWSV(0,0);
11157         *SvPVX(name) = '$';
11158         Perl_sv_catpvf(aTHX_ name, "{%s}",
11159             pv_display(sv,SvPVX_const(keyname), SvCUR(keyname), 0, 32));
11160         SvREFCNT_dec(sv);
11161     }
11162     else if (subscript_type == FUV_SUBSCRIPT_ARRAY) {
11163         *SvPVX(name) = '$';
11164         Perl_sv_catpvf(aTHX_ name, "[%"IVdf"]", (IV)aindex);
11165     }
11166     else if (subscript_type == FUV_SUBSCRIPT_WITHIN)
11167         sv_insert(name, 0, 0,  "within ", 7);
11168
11169     return name;
11170 }
11171
11172
11173 /*
11174 =for apidoc find_uninit_var
11175
11176 Find the name of the undefined variable (if any) that caused the operator o
11177 to issue a "Use of uninitialized value" warning.
11178 If match is true, only return a name if it's value matches uninit_sv.
11179 So roughly speaking, if a unary operator (such as OP_COS) generates a
11180 warning, then following the direct child of the op may yield an
11181 OP_PADSV or OP_GV that gives the name of the undefined variable. On the
11182 other hand, with OP_ADD there are two branches to follow, so we only print
11183 the variable name if we get an exact match.
11184
11185 The name is returned as a mortal SV.
11186
11187 Assumes that PL_op is the op that originally triggered the error, and that
11188 PL_comppad/PL_curpad points to the currently executing pad.
11189
11190 =cut
11191 */
11192
11193 STATIC SV *
11194 S_find_uninit_var(pTHX_ OP* obase, SV* uninit_sv, bool match)
11195 {
11196     dVAR;
11197     SV *sv;
11198     AV *av;
11199     GV *gv;
11200     OP *o, *o2, *kid;
11201
11202     if (!obase || (match && (!uninit_sv || uninit_sv == &PL_sv_undef ||
11203                             uninit_sv == &PL_sv_placeholder)))
11204         return Nullsv;
11205
11206     switch (obase->op_type) {
11207
11208     case OP_RV2AV:
11209     case OP_RV2HV:
11210     case OP_PADAV:
11211     case OP_PADHV:
11212       {
11213         const bool pad  = (obase->op_type == OP_PADAV || obase->op_type == OP_PADHV);
11214         const bool hash = (obase->op_type == OP_PADHV || obase->op_type == OP_RV2HV);
11215         I32 index = 0;
11216         SV *keysv = Nullsv;
11217         int subscript_type = FUV_SUBSCRIPT_WITHIN;
11218
11219         if (pad) { /* @lex, %lex */
11220             sv = PAD_SVl(obase->op_targ);
11221             gv = Nullgv;
11222         }
11223         else {
11224             if (cUNOPx(obase)->op_first->op_type == OP_GV) {
11225             /* @global, %global */
11226                 gv = cGVOPx_gv(cUNOPx(obase)->op_first);
11227                 if (!gv)
11228                     break;
11229                 sv = hash ? (SV*)GvHV(gv): (SV*)GvAV(gv);
11230             }
11231             else /* @{expr}, %{expr} */
11232                 return find_uninit_var(cUNOPx(obase)->op_first,
11233                                                     uninit_sv, match);
11234         }
11235
11236         /* attempt to find a match within the aggregate */
11237         if (hash) {
11238             keysv = S_find_hash_subscript(aTHX_ (HV*)sv, uninit_sv);
11239             if (keysv)
11240                 subscript_type = FUV_SUBSCRIPT_HASH;
11241         }
11242         else {
11243             index = S_find_array_subscript(aTHX_ (AV*)sv, uninit_sv);
11244             if (index >= 0)
11245                 subscript_type = FUV_SUBSCRIPT_ARRAY;
11246         }
11247
11248         if (match && subscript_type == FUV_SUBSCRIPT_WITHIN)
11249             break;
11250
11251         return varname(gv, hash ? '%' : '@', obase->op_targ,
11252                                     keysv, index, subscript_type);
11253       }
11254
11255     case OP_PADSV:
11256         if (match && PAD_SVl(obase->op_targ) != uninit_sv)
11257             break;
11258         return varname(Nullgv, '$', obase->op_targ,
11259                                     Nullsv, 0, FUV_SUBSCRIPT_NONE);
11260
11261     case OP_GVSV:
11262         gv = cGVOPx_gv(obase);
11263         if (!gv || (match && GvSV(gv) != uninit_sv))
11264             break;
11265         return varname(gv, '$', 0, Nullsv, 0, FUV_SUBSCRIPT_NONE);
11266
11267     case OP_AELEMFAST:
11268         if (obase->op_flags & OPf_SPECIAL) { /* lexical array */
11269             if (match) {
11270                 SV **svp;
11271                 av = (AV*)PAD_SV(obase->op_targ);
11272                 if (!av || SvRMAGICAL(av))
11273                     break;
11274                 svp = av_fetch(av, (I32)obase->op_private, FALSE);
11275                 if (!svp || *svp != uninit_sv)
11276                     break;
11277             }
11278             return varname(Nullgv, '$', obase->op_targ,
11279                     Nullsv, (I32)obase->op_private, FUV_SUBSCRIPT_ARRAY);
11280         }
11281         else {
11282             gv = cGVOPx_gv(obase);
11283             if (!gv)
11284                 break;
11285             if (match) {
11286                 SV **svp;
11287                 av = GvAV(gv);
11288                 if (!av || SvRMAGICAL(av))
11289                     break;
11290                 svp = av_fetch(av, (I32)obase->op_private, FALSE);
11291                 if (!svp || *svp != uninit_sv)
11292                     break;
11293             }
11294             return varname(gv, '$', 0,
11295                     Nullsv, (I32)obase->op_private, FUV_SUBSCRIPT_ARRAY);
11296         }
11297         break;
11298
11299     case OP_EXISTS:
11300         o = cUNOPx(obase)->op_first;
11301         if (!o || o->op_type != OP_NULL ||
11302                 ! (o->op_targ == OP_AELEM || o->op_targ == OP_HELEM))
11303             break;
11304         return find_uninit_var(cBINOPo->op_last, uninit_sv, match);
11305
11306     case OP_AELEM:
11307     case OP_HELEM:
11308         if (PL_op == obase)
11309             /* $a[uninit_expr] or $h{uninit_expr} */
11310             return find_uninit_var(cBINOPx(obase)->op_last, uninit_sv, match);
11311
11312         gv = Nullgv;
11313         o = cBINOPx(obase)->op_first;
11314         kid = cBINOPx(obase)->op_last;
11315
11316         /* get the av or hv, and optionally the gv */
11317         sv = Nullsv;
11318         if  (o->op_type == OP_PADAV || o->op_type == OP_PADHV) {
11319             sv = PAD_SV(o->op_targ);
11320         }
11321         else if ((o->op_type == OP_RV2AV || o->op_type == OP_RV2HV)
11322                 && cUNOPo->op_first->op_type == OP_GV)
11323         {
11324             gv = cGVOPx_gv(cUNOPo->op_first);
11325             if (!gv)
11326                 break;
11327             sv = o->op_type == OP_RV2HV ? (SV*)GvHV(gv) : (SV*)GvAV(gv);
11328         }
11329         if (!sv)
11330             break;
11331
11332         if (kid && kid->op_type == OP_CONST && SvOK(cSVOPx_sv(kid))) {
11333             /* index is constant */
11334             if (match) {
11335                 if (SvMAGICAL(sv))
11336                     break;
11337                 if (obase->op_type == OP_HELEM) {
11338                     HE* he = hv_fetch_ent((HV*)sv, cSVOPx_sv(kid), 0, 0);
11339                     if (!he || HeVAL(he) != uninit_sv)
11340                         break;
11341                 }
11342                 else {
11343                     SV * const * const svp = av_fetch((AV*)sv, SvIV(cSVOPx_sv(kid)), FALSE);
11344                     if (!svp || *svp != uninit_sv)
11345                         break;
11346                 }
11347             }
11348             if (obase->op_type == OP_HELEM)
11349                 return varname(gv, '%', o->op_targ,
11350                             cSVOPx_sv(kid), 0, FUV_SUBSCRIPT_HASH);
11351             else
11352                 return varname(gv, '@', o->op_targ, Nullsv,
11353                             SvIV(cSVOPx_sv(kid)), FUV_SUBSCRIPT_ARRAY);
11354         }
11355         else  {
11356             /* index is an expression;
11357              * attempt to find a match within the aggregate */
11358             if (obase->op_type == OP_HELEM) {
11359                 SV * const keysv = S_find_hash_subscript(aTHX_ (HV*)sv, uninit_sv);
11360                 if (keysv)
11361                     return varname(gv, '%', o->op_targ,
11362                                                 keysv, 0, FUV_SUBSCRIPT_HASH);
11363             }
11364             else {
11365                 const I32 index = S_find_array_subscript(aTHX_ (AV*)sv, uninit_sv);
11366                 if (index >= 0)
11367                     return varname(gv, '@', o->op_targ,
11368                                         Nullsv, index, FUV_SUBSCRIPT_ARRAY);
11369             }
11370             if (match)
11371                 break;
11372             return varname(gv,
11373                 (o->op_type == OP_PADAV || o->op_type == OP_RV2AV)
11374                 ? '@' : '%',
11375                 o->op_targ, Nullsv, 0, FUV_SUBSCRIPT_WITHIN);
11376         }
11377
11378         break;
11379
11380     case OP_AASSIGN:
11381         /* only examine RHS */
11382         return find_uninit_var(cBINOPx(obase)->op_first, uninit_sv, match);
11383
11384     case OP_OPEN:
11385         o = cUNOPx(obase)->op_first;
11386         if (o->op_type == OP_PUSHMARK)
11387             o = o->op_sibling;
11388
11389         if (!o->op_sibling) {
11390             /* one-arg version of open is highly magical */
11391
11392             if (o->op_type == OP_GV) { /* open FOO; */
11393                 gv = cGVOPx_gv(o);
11394                 if (match && GvSV(gv) != uninit_sv)
11395                     break;
11396                 return varname(gv, '$', 0,
11397                             Nullsv, 0, FUV_SUBSCRIPT_NONE);
11398             }
11399             /* other possibilities not handled are:
11400              * open $x; or open my $x;  should return '${*$x}'
11401              * open expr;               should return '$'.expr ideally
11402              */
11403              break;
11404         }
11405         goto do_op;
11406
11407     /* ops where $_ may be an implicit arg */
11408     case OP_TRANS:
11409     case OP_SUBST:
11410     case OP_MATCH:
11411         if ( !(obase->op_flags & OPf_STACKED)) {
11412             if (uninit_sv == ((obase->op_private & OPpTARGET_MY)
11413                                  ? PAD_SVl(obase->op_targ)
11414                                  : DEFSV))
11415             {
11416                 sv = sv_newmortal();
11417                 sv_setpvn(sv, "$_", 2);
11418                 return sv;
11419             }
11420         }
11421         goto do_op;
11422
11423     case OP_PRTF:
11424     case OP_PRINT:
11425         /* skip filehandle as it can't produce 'undef' warning  */
11426         o = cUNOPx(obase)->op_first;
11427         if ((obase->op_flags & OPf_STACKED) && o->op_type == OP_PUSHMARK)
11428             o = o->op_sibling->op_sibling;
11429         goto do_op2;
11430
11431
11432     case OP_RV2SV:
11433     case OP_CUSTOM:
11434     case OP_ENTERSUB:
11435         match = 1; /* XS or custom code could trigger random warnings */
11436         goto do_op;
11437
11438     case OP_SCHOMP:
11439     case OP_CHOMP:
11440         if (SvROK(PL_rs) && uninit_sv == SvRV(PL_rs))
11441             return sv_2mortal(newSVpvn("${$/}", 5));
11442         /* FALL THROUGH */
11443
11444     default:
11445     do_op:
11446         if (!(obase->op_flags & OPf_KIDS))
11447             break;
11448         o = cUNOPx(obase)->op_first;
11449         
11450     do_op2:
11451         if (!o)
11452             break;
11453
11454         /* if all except one arg are constant, or have no side-effects,
11455          * or are optimized away, then it's unambiguous */
11456         o2 = Nullop;
11457         for (kid=o; kid; kid = kid->op_sibling) {
11458             if (kid &&
11459                 (    (kid->op_type == OP_CONST && SvOK(cSVOPx_sv(kid)))
11460                   || (kid->op_type == OP_NULL  && ! (kid->op_flags & OPf_KIDS))
11461                   || (kid->op_type == OP_PUSHMARK)
11462                 )
11463             )
11464                 continue;
11465             if (o2) { /* more than one found */
11466                 o2 = Nullop;
11467                 break;
11468             }
11469             o2 = kid;
11470         }
11471         if (o2)
11472             return find_uninit_var(o2, uninit_sv, match);
11473
11474         /* scan all args */
11475         while (o) {
11476             sv = find_uninit_var(o, uninit_sv, 1);
11477             if (sv)
11478                 return sv;
11479             o = o->op_sibling;
11480         }
11481         break;
11482     }
11483     return Nullsv;
11484 }
11485
11486
11487 /*
11488 =for apidoc report_uninit
11489
11490 Print appropriate "Use of uninitialized variable" warning
11491
11492 =cut
11493 */
11494
11495 void
11496 Perl_report_uninit(pTHX_ SV* uninit_sv)
11497 {
11498     if (PL_op) {
11499         SV* varname = Nullsv;
11500         if (uninit_sv) {
11501             varname = find_uninit_var(PL_op, uninit_sv,0);
11502             if (varname)
11503                 sv_insert(varname, 0, 0, " ", 1);
11504         }
11505         Perl_warner(aTHX_ packWARN(WARN_UNINITIALIZED), PL_warn_uninit,
11506                 varname ? SvPV_nolen_const(varname) : "",
11507                 " in ", OP_DESC(PL_op));
11508     }
11509     else
11510         Perl_warner(aTHX_ packWARN(WARN_UNINITIALIZED), PL_warn_uninit,
11511                     "", "", "");
11512 }
11513
11514 /*
11515  * Local variables:
11516  * c-indentation-style: bsd
11517  * c-basic-offset: 4
11518  * indent-tabs-mode: t
11519  * End:
11520  *
11521  * ex: set ts=8 sts=4 sw=4 noet:
11522  */