$Carp::ExportLevel confusion in Exporter
[p5sagit/p5-mst-13.2.git] / pod / perldelta.pod
1 =head1 NAME
2
3 perldelta - what's new for perl v5.7.0
4
5 =head1 DESCRIPTION
6
7 This document describes differences between the 5.6.0 release and
8 the 5.7.0 release.
9
10 =head1 Security Vulnerability Closed
11
12 A potential security vulnerability in the optional suidperl component
13 of Perl has been identified.  suidperl is neither built nor installed
14 by default.  As of September the 2nd, 2000, the only known vulnerable
15 platform is Linux, most likely all Linux distributions.  CERT and
16 various vendors have been alerted about the vulnerability.
17
18 The problem was caused by Perl trying to report a suspected security
19 exploit attempt using an external program, /bin/mail.  On Linux
20 platforms the /bin/mail program had an undocumented feature which
21 when combined with suidperl gave access to a root shell, resulting in
22 a serious compromise instead of reporting the exploit attempt.  If you
23 don't have /bin/mail, or if you have 'safe setuid scripts', or if
24 suidperl is not installed, you are safe.
25
26 The exploit attempt reporting feature has been completely removed from
27 the Perl 5.7.0 release, so that particular vulnerability isn't there
28 anymore.  However, further security vulnerabilities are,
29 unfortunately, always possible.  The suidperl code is being reviewed
30 and if deemed too risky to continue to be supported, it may be
31 completely removed from future releases.  In any case, suidperl should
32 only be used by security experts who know exactly what they are doing
33 and why they are using suidperl instead of some other solution such as
34 sudo (see http://www.courtesan.com/sudo/).
35
36 =head1 Incompatible Changes
37
38 =over 4
39
40 =item *
41
42 Arrays now always interpolate into double-quoted strings:
43 constructs like "foo@bar" now always assume C<@bar> is an array,
44 whether or not the compiler has seen use of C<@bar>.
45
46 =item *
47
48 The semantics of bless(REF, REF) were unclear and until someone proves
49 it to make some sense, it is forbidden.
50
51 =item *
52
53 A reference to a reference now stringify as "REF(0x81485ec)" instead
54 of "SCALAR(0x81485ec)" in order to be more consistent with the return
55 value of ref().
56
57 =item *
58
59 The very dusty examples in the eg/ directory have been removed.
60 Suggestions for new shiny examples welcome but the main issue is that
61 the examples need to be documented, tested and (most importantly)
62 maintained.
63
64 =item *
65
66 The obsolete chat2 library that should never have been allowed
67 to escape the laboratory has been decommissioned.
68
69 =item *
70
71 The unimplemented POSIX regex features [[.cc.]] and [[=c=]] are still
72 recognised but now cause fatal errors.  The previous behaviour of
73 ignoring them by default and warning if requested was unacceptable
74 since it, in a way, falsely promised that the features could be used.
75
76 =item *
77
78 lstat(FILEHANDLE) now gives a warning because the operation makes no sense.
79 In future releases this may become a fatal error.
80
81 =item *
82
83 The long deprecated uppercase aliases for the string comparison
84 operators (EQ, NE, LT, LE, GE, GT) have now been removed.
85
86 =item *
87
88 The regular expression captured submatches ($1, $2, ...) are now
89 more consistently unset if the match fails, instead of leaving false
90 data lying around in them.
91
92 =item *
93
94 The tr///C and tr///U features have been removed and will not return;
95 the interface was a mistake.  Sorry about that.  For similar
96 functionality, see pack('U0', ...) and pack('C0', ...).
97
98 =back
99
100 =head1 Core Enhancements
101
102 =over 4
103
104 =item *
105
106 C<perl -d:Module=arg,arg,arg> now works (previously one couldn't pass
107 in multiple arguments.)
108
109 =item *
110
111 my __PACKAGE__ now works.
112
113 =item *
114
115 C<no Module;> now works even if there is no "sub unimport" in the Module.
116
117 =item *
118
119 The numerical comparison operators return C<undef> if either operand
120 is a NaN.  Previously the behaviour was unspecified.
121
122 =item *
123
124 C<pack('U0a*', ...)> can now be used to force a string to UTF8.
125
126 =item *
127
128 prototype(\&) is now available.
129
130 =item *
131
132 There is now an UNTIE method.
133
134 =back
135
136 =head1 Modules and Pragmata
137
138 =head2 New Modules
139
140 =over 4
141
142 =item *
143
144 File::Temp allows one to create temporary files and directories in an
145 easy, portable, and secure way.
146
147 =item *
148
149 Storable gives persistence to Perl data structures by allowing the
150 storage and retrieval of Perl data to and from files in a fast and
151 compact binary format.
152
153 =back
154
155 =head2 Updated And Improved Modules and Pragmata
156
157 =over 4
158
159 =item *
160
161 The following independently supported modules have been updated to
162 newer versions from CPAN: CGI, CPAN, DB_File, File::Spec, Getopt::Long,
163 the podlators bundle, Pod::LaTeX, Pod::Parser, Term::ANSIColor, Test.
164
165 =item *
166
167 Bug fixes and minor enhancements have been applied to B::Deparse,
168 Data::Dumper, IO::Poll, IO::Socket::INET, Math::BigFloat,
169 Math::Complex, Math::Trig, Net::protoent, the re pragma, SelfLoader,
170 Sys::SysLog, Test::Harness, Text::Wrap, UNIVERSAL, and the warnings
171 pragma.
172
173 =item *
174
175 The attributes::reftype() now works on tied arguments.
176
177 =item *
178
179 AutoLoader can now be disabled with C<no AutoLoader;>,
180
181 =item *
182
183 The English module can now be used without the infamous performance
184 hit by saying
185
186         use English '-no_performance_hit';
187
188 (Assuming, of course, that one doesn't need the troublesome variables
189 C<$`>, C<$&>, or C<$'>.)  Also, introduced C<@LAST_MATCH_START> and
190 C<@LAST_MATCH_END> English aliases for C<@-> and C<@+>.
191
192 =item *
193
194 File::Find now has pre- and post-processing callbacks.  It also
195 correctly changes directories when chasing symbolic links.  Callbacks
196 (naughtily) exiting with "next;" instead of "return;" now work.
197
198 =item *
199
200 File::Glob::glob() renamed to File::Glob::bsd_glob() to avoid
201 prototype mismatch with CORE::glob().
202
203 =item *
204
205 IPC::Open3 now allows the use of numeric file descriptors.
206
207 =item *
208
209 use lib now works identically to @INC.  Removing directories
210 with 'no lib' now works.
211
212 =item *
213
214 C<%INC> now localised in a Safe compartment so that use/require work.
215
216 =item *
217
218 The Shell module now has an OO interface.
219
220 =item *
221
222 =back
223
224 =head1 Utility Changes
225
226 =over 4
227
228 =item *
229
230 The Emacs perl mode (emacs/cperl-mode.el) has been updated to version
231 4.31.
232
233 =item *
234
235 Perlbug is now much more robust.  It also sends the bug report to
236 perl.org, not perl.com.
237
238 =item *
239
240 The perlcc utility has been rewritten and its user interface (that is,
241 command line) is much more like that of the UNIX C compiler, cc.
242
243 =item *
244
245 The xsubpp utility for extension writers now understands POD
246 documentation embedded in the *.xs files.
247
248 =back
249
250 =head1 New Documentation
251
252 =over 4
253
254 =item *
255
256 perl56delta details the changes between the 5.005 release and the
257 5.6.0 release.
258
259 =item *
260
261 perldebtut is a Perl debugging tutorial.
262
263 =item *
264
265 perlebcdic contains considerations for running Perl on EBCDIC platforms.
266 Note that unfortunately EBCDIC platforms that used to supported back in
267 Perl 5.005 are still unsupported by Perl 5.7.0; the plan, however, is to
268 bring them back to the fold.  
269
270 =item *
271
272 perlnewmod tells about writing and submitting a new module.
273
274 =item *
275
276 perlposix-bc explains using Perl on the POSIX-BC platform
277 (an EBCDIC mainframe platform).
278
279 =item *
280
281 perlretut is a regular expression tutorial.
282
283 =item *
284
285 perlrequick is a regular expressions quick-start guide.
286 Yes, much quicker than perlretut.
287
288 =item *
289
290 perlutil explains the command line utilities packaged with the Perl
291 distribution.
292
293 =back
294
295 =head1 Performance Enhancements
296
297 =over 4
298
299 =item *
300
301 map() that changes the size of the list should now work faster.
302
303 =item *
304  
305 sort() has been changed to use mergesort internally as opposed to the
306 earlier quicksort.  For very small lists this may result in slightly
307 slower sorting times, but in general the speedup should be at least
308 20%.  Additional bonuses are that the worst case behaviour of sort()
309 is now better (in computer science terms it now runs in time O(N log N),
310 as opposed to quicksort's Theta(N**2) worst-case run time behaviour),
311 and that sort() is now stable (meaning that elements with identical
312 keys will stay ordered as they were before the sort).
313
314 =back
315
316 =head1 Installation and Configuration Improvements
317
318 =head2 Generic Improvements
319
320 =over 4
321
322 =item *
323
324 INSTALL now explains how you can configure Perl to use 64-bit
325 integers even on non-64-bit platforms.
326
327 =item *
328
329 Policy.sh policy change: if you are reusing a Policy.sh file
330 (see INSTALL) and you use Configure -Dprefix=/foo/bar and in the old
331 Policy $prefix eq $siteprefix and $prefix eq $vendorprefix, all of
332 them will now be changed to the new prefix, /foo/bar.  (Previously
333 only $prefix changed.)  If you do not like this new behaviour,
334 specify prefix, siteprefix, and vendorprefix explicitly.
335
336 =item *
337
338 A new optional location for Perl libraries, otherlibdirs, is available.
339 It can be used for example for vendor add-ons without disturbing Perl's
340 own library directories.
341
342 =item *
343
344 In many platforms the vendor-supplied 'cc' is too stripped-down to
345 build Perl (basically, 'cc' doesn't do ANSI C).  If this seems
346 to be the case and 'cc' does not seem to be the GNU C compiler
347 'gcc', an automatic attempt is made to find and use 'gcc' instead.
348
349 =item *
350
351 gcc needs to closely track the operating system release to avoid
352 build problems. If Configure finds that gcc was built for a different
353 operating system release than is running, it now gives a clearly visible
354 warning that there may be trouble ahead.
355
356 =item *
357
358 If binary compatibility with the 5.005 release is not wanted, Configure
359 no longer suggests including the 5.005 modules in @INC.
360
361 =item *
362
363 Configure C<-S> can now run non-interactively.
364
365 =item *
366
367 configure.gnu now works with options with whitespace in them.
368
369 =item *
370
371 installperl now outputs everything to STDERR.
372
373 =item *
374
375 $Config{byteorder} is now computed dynamically (this is more robust
376 with "fat binaries" where an executable image contains binaries for
377 more than one binary platform.)
378
379 =item *
380
381 Configure no longer included the DBM libraries (dbm, gdbm, db, ndbm)
382 when building the Perl binary. The only exception to this is SunOS 4.x,
383 which needs them.
384
385 =back
386
387 =head1 Selected Bug Fixes
388
389 =over 4
390
391 =item *
392
393 Several debugger fixes: exit code now reflects the script exit code,
394 condition C<"0"> now treated correctly, the C<d> command now checks
395 line number, the C<$.> no longer gets corrupted, all debugger output now
396 goes correctly to the socket if RemotePort is set.
397
398 =item *
399
400 C<*foo{FORMAT}> now works.
401
402 =item *
403
404 Lexical warnings now propagating correctly between scopes.
405
406 =item *
407
408 Line renumbering with eval and C<#line> now works.
409
410 =item *
411
412 Fixed numerous memory leaks, especially in eval "".
413
414 =item *
415
416 Modulus of unsigned numbers now works (4063328477 % 65535 used to
417 return 27406, instead of 27047).
418
419 =item *
420
421 Some "not a number" warnings introduced in 5.6.0 eliminated to be
422 more compatible with 5.005.  Infinity is now recognised as a number.
423
424 =item *
425
426 our() variables will not cause "will not stay shared" warnings.
427
428 =item *
429
430 pack "Z" now correctly terminates the string with "\0".
431
432 =item *
433
434 Fix password routines which in some shadow password platforms
435 (e.g. HP-UX) caused getpwent() to return every other entry.
436
437 =item *
438
439 printf() no longer resets the numeric locale to "C".
440
441 =item *
442
443 C<q(a\\b)> now parses correctly as C<'a\\b'>.
444
445 =item *
446
447 Printing quads (64-bit integers) with printf/sprintf now works
448 without the q L ll prefixes (assuming you are on a quad-capable platform).
449
450 =item *
451
452 Regular expressions on references and overloaded scalars now work.
453
454 =item *
455
456 scalar() now forces scalar context even when used in void context.
457
458 =item *
459         
460 sort() arguments are now compiled in the right wantarray context
461 (they were accidentally using the context of the sort() itself).
462
463 =item *
464
465 Changed the POSIX character class C<[[:space:]]> to include the (very
466 rare) vertical tab character.  Added a new POSIX-ish character class
467 C<[[:blank:]]> which stands for horizontal whitespace (currently,
468 the space and the tab).
469
470 =item *
471
472 $AUTOLOAD, sort(), lock(), and spawning subprocesses
473 in multiple threads simultaneously are now thread-safe.
474
475 =item *
476
477 Allow read-only string on left hand side of non-modifying tr///.
478
479 =item *
480
481 Several Unicode fixes (but still not perfect).
482
483 =over 8
484
485 =item *
486
487 BOMs (byte order marks) in the beginning of Perl files
488 (scripts, modules) should now be transparently skipped.
489 UTF-16 (UCS-2)encoded Perl files should now be read correctly.
490
491 =item *
492
493 The character tables have been updated to Unicode 3.0.1.
494
495 =item *
496
497 chr() for values greater than 127 now create utf8 when under use
498 utf8.
499
500 =item *
501
502 Comparing with utf8 data does not magically upgrade non-utf8 data into
503 utf8.
504
505 =item *
506
507 C<IsAlnum>, C<IsAlpha>, and C<IsWord> now match titlecase.
508
509 =item *
510
511 Concatenation with the C<.> operator or via variable interpolation,
512 C<eq>, C<substr>, C<reverse>, C<quotemeta>, the C<x> operator,
513 substitution with C<s///>, single-quoted UTF8, should now work--in
514 theory.
515
516 =item *
517
518 The C<tr///> operator now works I<slightly> better but is still rather
519 broken.  Note that the C<tr///CU> functionality has been removed (but
520 see pack('U0', ...)).
521
522 =item *
523
524 vec() now tries to work with characters <= 255 when possible, but it leaves
525 higher character values in place.  In that case, if vec() was used to modify
526 the string, it is no longer considered to be utf8-encoded.
527
528 =item *
529
530 Zero entries were missing from the Unicode classes like C<IsDigit>.
531
532 =back
533
534 =item *
535
536 UNIVERSAL::isa no longer caches methods incorrectly.  (This broke
537 the Tk extension with 5.6.0.)
538
539 =back
540
541 =head2 Platform Specific Changes and Fixes
542
543 =over 4
544
545 =item *
546
547 BSDI 4.*
548
549 Perl now works on post-4.0 BSD/OSes.
550
551 =item *
552
553 All BSDs
554
555 Setting C<$0> now works (as much as possible; see perlvar for details).
556
557 =item *
558
559 Cygwin
560
561 Numerous updates; currently synchronised with Cygwin 1.1.4.
562
563 =item *
564
565 EPOC
566
567 EPOC update after Perl 5.6.0.  See README.epoc.
568
569 =item *
570
571 FreeBSD 3.*
572
573 Perl now works on post-3.0 FreeBSDs.
574
575 =item *
576
577 HP-UX
578
579 README.hpux updated; C<Configure -Duse64bitall> now almost works.
580
581 =item *
582
583 IRIX
584
585 Numerous compilation flag and hint enhancements; accidental mixing
586 of 32-bit and 64-bit libraries (a doomed attempt) made much harder.
587
588 =item *
589
590 Linux
591
592 Long doubles should now work (see INSTALL).
593
594 =item *
595
596 MacOS Classic
597
598 Compilation of the standard Perl distribution in MacOS Classic should
599 now work if you have the Metrowerks development environment and
600 the missing Mac-specific toolkit bits.  Contact the macperl mailing
601 list for details.
602
603 =item *
604
605 MPE/iX
606
607 MPE/iX update after Perl 5.6.0.  See README.mpeix.
608
609 =item *
610
611 NetBSD/sparc
612
613 Perl now works on NetBSD/sparc.
614
615 =item *
616
617 OS/2
618
619 Now works with usethreads (see INSTALL).
620
621 =item *
622
623 Solaris
624
625 64-bitness using the Sun Workshop compiler now works.
626
627 =item *
628
629 Tru64 (aka Digital UNIX, aka DEC OSF/1)
630
631 The operating system version letter now recorded in $Config{osvers}.
632 Allow compiling with gcc (previously explicitly forbidden).  Compiling
633 with gcc still not recommended because buggy code results, even with
634 gcc 2.95.2.
635
636 =item *
637
638 Unicos
639
640 Fixed various alignment problems that lead into core dumps either
641 during build or later; no longer dies on math errors at runtime;
642 now using full quad integers (64 bits), previously was using 
643 only 46 bit integers for speed.
644
645 =item *
646
647 VMS
648
649 chdir() now works better despite a CRT bug; now works with MULTIPLICITY
650 (see INSTALL); now works with Perl's malloc.
651
652 =item *
653
654 Windows
655
656 =over 8
657
658 =item *
659
660 accept() no longer leaks memory.
661
662 =item *
663
664 Better chdir() return value for a non-existent directory.
665
666 =item *
667
668 New %ENV entries now propagate to subprocesses.
669
670 =item *
671
672 $ENV{LIB} now used to search for libs under Visual C.
673
674 =item *
675
676 A failed (pseudo)fork now returns undef and sets errno to EAGAIN.
677
678 =item *
679
680 Allow REG_EXPAND_SZ keys in the registry.
681
682 =item *
683
684 Can now send() from all threads, not just the first one.
685
686 =item *
687
688 Fake signal handling reenabled, bugs and all.
689
690 =item *
691
692 Less stack reserved per thread so that more threads can run
693 concurrently. (Still 16M per thread.)
694
695 =item *
696
697 C<File::Spec->tmpdir()> now prefers C:/temp over /tmp
698 (works better when perl is running as service).
699
700 =item *
701
702 Better UNC path handling under ithreads.
703
704 =item *
705
706 wait() and waitpid() now work much better.
707
708 =item *
709
710 winsock handle leak fixed.
711
712 =back
713
714 =head1 New or Changed Diagnostics
715
716 All regular expression compilation error messages are now hopefully
717 easier to understand both because the error message now comes before
718 the failed regex and because the point of failure is now clearly
719 marked.
720
721 The various "opened only for", "on closed", "never opened" warnings
722 drop the C<main::> prefix for filehandles in the C<main> package,
723 for example C<STDIN> instead of <main::STDIN>. 
724
725 The "Unrecognized escape" warning has been extended to include C<\8>,
726 C<\9>, and C<\_>.  There is no need to escape any of the C<\w> characters.
727
728 =head1 Changed Internals
729
730 =over 4
731
732 =item *
733
734 perlapi.pod (a companion to perlguts) now attempts to document the
735 internal API.
736
737 =item *
738
739 You can now build a really minimal perl called microperl.
740 Building microperl does not require even running Configure;
741 C<make -f Makefile.micro> should be enough.  Beware: microperl makes
742 many assumptions, some of which may be too bold; the resulting
743 executable may crash or otherwise misbehave in wondrous ways.
744 For careful hackers only.
745
746 =item *
747
748 Added rsignal(), whichsig(), do_join() to the publicised API.
749
750 =item *
751
752 Made possible to propagate customised exceptions via croak()ing.
753
754 =item *
755
756 Added is_utf8_char(), is_utf8_string(), bytes_to_utf8(), and utf8_to_bytes().
757
758 =item *
759
760 Now xsubs can have attributes just like subs.
761
762 =back
763
764 =head1 Known Problems
765
766 =head2 Unicode Support Still Far From Perfect
767
768 We're working on it.  Stay tuned.
769
770 =head2 EBCDIC Still A Lost Platform
771
772 The plan is to bring them back.
773
774 =head2 Building Extensions Can Fail Because Of Largefiles
775
776 Certain extensions like mod_perl and BSD::Resource are known to have
777 issues with `largefiles', a change brought by Perl 5.6.0 in which file
778 offsets default to 64 bits wide, where supported.  Modules may fail to
779 compile at all or compile and work incorrectly.  Currently there is no
780 good solution for the problem, but Configure now provides appropriate
781 non-largefile ccflags, ldflags, libswanted, and libs in the %Config
782 hash (e.g., $Config{ccflags_nolargefiles}) so the extensions that are
783 having problems can try configuring themselves without the
784 largefileness.  This is admittedly not a clean solution, and the
785 solution may not even work at all.  One potential failure is whether
786 one can (or, if one can, whether it's a good idea) link together at
787 all binaries with different ideas about file offsets, all this is
788 platform-dependent.
789
790 =head2 ftmp-security tests warn 'system possibly insecure'
791
792 Don't panic.  Read INSTALL 'make test' section instead. 
793
794 =head2 Test lib/posix Subtest 9 Fails In LP64-Configured HP-UX
795
796 If perl is configured with -Duse64bitall, the successful result of the
797 subtest 10 of lib/posix may arrive before the successful result of the
798 subtest 9, which confuses the test harness so much that it thinks the
799 subtest 9 failed.
800
801 =head2 Long Doubles Still Don't Work In Solaris
802
803 The experimental long double support is still very much so in Solaris.
804 (Other platforms like Linux and Tru64 are beginning to solidify in
805 this area.)
806
807 =head2 Linux With Sfio Fails op/misc Test 48
808
809 No known fix.
810
811 =head2 Storable tests fail in some platforms
812
813 If any Storable tests fail the use of Storable is not advisable.
814
815 =over 4
816
817 =item *
818
819 Many Storable tests fail on AIX configured with 64 bit integers.
820
821 So far unidentified problems break Storable in AIX if Perl is
822 configured to use 64 bit integers.  AIX in 32-bit mode works and
823 other 64-bit platforms work with Storable.
824
825 =item *
826
827 DOS DJGPP may hang when testing Storable.
828
829 =item *
830
831 st-06compat fails in UNICOS and UNICOS/mk.
832
833 This means that you cannot read old (pre-Storable-0.7) Storable images
834 made in other platforms.
835
836 =item *
837
838 st-store.t and st-retrieve may fail with Compaq C 6.2 on OpenVMS Alpha 7.2.
839
840 =head2 Threads Are Still Experimental
841
842 Multithreading is still an experimental feature.  Some platforms
843 emit the following message for lib/thr5005
844
845     #
846     # This is a KNOWN FAILURE, and one of the reasons why threading
847     # is still an experimental feature.  It is here to stop people
848     # from deploying threads in production. ;-)
849     #
850  
851 and another known thread-related warning is
852
853    pragma/overload......Unbalanced saves: 3 more saves than restores
854    panic: magic_mutexfree during global destruction.
855    ok
856    lib/selfloader.......Unbalanced saves: 3 more saves than restores
857    panic: magic_mutexfree during global destruction.
858    ok
859    lib/st-dclone........Unbalanced saves: 3 more saves than restores
860    panic: magic_mutexfree during global destruction.
861    ok
862
863 =head2 The Compiler Suite Is Still Experimental
864
865 The compiler suite is slowly getting better but is nowhere near
866 working order yet.  The backend part that has seen perhaps the most
867 progress is the bytecode compiler.
868
869 =back
870
871 =head1 Reporting Bugs
872
873 If you find what you think is a bug, you might check the articles
874 recently posted to the comp.lang.perl.misc newsgroup and the perl
875 bug database at http://bugs.perl.org.  There may also be
876 information at http://www.perl.com/perl/, the Perl Home Page.
877
878 If you believe you have an unreported bug, please run the B<perlbug>
879 program included with your release.  Be sure to trim your bug down
880 to a tiny but sufficient test case.  Your bug report, along with the
881 output of C<perl -V>, will be sent off to perlbug@perl.org to be
882 analysed by the Perl porting team.
883
884 =head1 SEE ALSO
885
886 The F<Changes> file for exhaustive details on what changed.
887
888 The F<INSTALL> file for how to build Perl.
889
890 The F<README> file for general stuff.
891
892 The F<Artistic> and F<Copying> files for copyright information.
893
894 =head1 HISTORY
895
896 Written by Jarkko Hietaniemi <F<jhi@iki.fi>>, with many contributions
897 from The Perl Porters and Perl Users submitting feedback and patches.
898
899 Send omissions or corrections to <F<perlbug@perl.org>>.
900
901 =cut