c8f2a5849959670cd6bb10a40bf0468cef608c22
[p5sagit/p5-mst-13.2.git] / pod / perldelta.pod
1 =head1 NAME
2
3 perldelta - what's new for perl v5.7.0
4
5 =head1 DESCRIPTION
6
7 This document describes differences between the 5.6.0 release and
8 the 5.7.0 release.
9
10 =head1 Security Vulnerability Closed
11
12 A potential security vulnerability in the optional suidperl component
13 of Perl has been identified.  suidperl is neither built nor installed
14 by default.  As of August the 20th, 2000, the only known vulnerable
15 platform is Linux, most likely all Linux distributions.  CERT and
16 various vendors have been alerted about the vulnerability.
17
18 The problem was caused by Perl trying to report a suspected security
19 exploit attempt using an external program, /bin/mail.  On Linux
20 platforms the /bin/mail program had an undocumented feature which gave
21 access to a root shell, resulting in a serious compromise instead of
22 reporting the exploit attempt.  If you don't have /bin/mail, or if you
23 have 'safe setuid scripts', or if suidperl is not installed, you
24 are safe.
25
26 The exploit attempt reporting feature has been completely removed from
27 the Perl 5.7.0 release, so that particular vulnerability isn't there
28 anymore.  However, further security vulnerabilities are,
29 unfortunately, always possible.  The suidperl code is being reviewed
30 and if deemed too risky to continue to be supported, it may be
31 completely removed from future releases.  In any case, suidperl should
32 only be used by security experts who know exactly what they are doing
33 and why they are using suidperl instead of some other solution such as
34 sudo (see http://www.courtesan.com/sudo/).
35
36 =head1 Incompatible Changes
37
38 =over 4
39
40 =item *
41
42 Arrays now always interpolate into double-quoted strings:
43 constructs like "foo@bar" now always assume C<@bar> is an array,
44 whether or not the compiler has seen use of C<@bar>.
45
46 =item *
47
48 The semantics of bless(REF, REF) were unclear and until someone proves
49 it to make some sense, it is forbidden.
50
51 =item *
52
53 The very dusty examples in the eg/ directory have been removed.
54 Suggestions for new shiny examples welcome but the main issue is that
55 the examples need to be documented, tested and (most importantly)
56 maintained.
57
58 =item *
59
60 The obsolete chat2 library that should never have been allowed
61 to escape the laboratory has been decommissioned.
62
63 =item *
64
65 The unimplemented POSIX regex features [[.cc.]] and [[=c=]] are still
66 recognised but now cause fatal errors.  The previous behaviour of
67 ignoring them by default and warning if requested was unacceptable
68 since it, in a way, falsely promised that the features could be used.
69
70 =item *
71
72 lstat(FILEHANDLE) now gives a warning because the operation makes no sense.
73 In future releases this may become a fatal error.
74
75 =item *
76
77 The long deprecated uppercase aliases for the string comparison
78 operators (EQ, NE, LT, LE, GE, GT) have now been removed.
79
80 =item *
81
82 The regular expression captured submatches ($1, $2, ...) are now
83 more consistently unset if the match fails, instead of leaving false
84 data lying around in them.
85
86 =item *
87
88 The tr///C and tr///U features have been removed and will not return;
89 the interface was a mistake.  Sorry about that.  For similar
90 functionality, see pack('U0', ...) and pack('C0', ...).
91
92 =back
93
94 =head1 Core Enhancements
95
96 =over 4
97
98 =item *
99
100 C<perl -d:Module=arg,arg,arg> now works (previously one couldn't pass
101 in multiple arguments.)
102
103 =item *
104
105 my __PACKAGE__ now works.
106
107 =item *
108
109 C<no Module;> now works even if there is no "sub unimport" in the Module.
110
111 =item *
112
113 The numerical comparison operators return C<undef> if either operand
114 is a NaN.  Previously the behaviour was unspecified.
115
116 =item *
117
118 C<pack('U0a*', ...)> can now be used to force a string to UTF8.
119
120 =item *
121
122 prototype(\&) is now available.
123
124 =item *
125
126 There is now an UNTIE method.
127
128 =back
129
130 =head1 Modules and Pragmata
131
132 =head2 New Modules
133
134 =over 4
135
136 =item *
137
138 File::Temp allows one to create temporary files and directories in an
139 easy, portable, and secure way.
140
141 =item *
142
143 Storable gives persistence to Perl data structures by allowing the
144 storage and retrieval of Perl data to and from files in a fast and
145 compact binary format.
146
147 =back
148
149 =head2 Updated And Improved Modules and Pragmata
150
151 =over 4
152
153 =item *
154
155 The following independently supported modules have been updated to
156 newer versions from CPAN: CGI, CPAN, DB_File, File::Spec, Getopt::Long,
157 the podlators bundle, Pod::LaTeX, Pod::Parser, Term::ANSIColor, Test.
158
159 =item *
160
161 Bug fixes and minor enhancements have been applied to B::Deparse,
162 Data::Dumper, IO::Poll, IO::Socket::INET, Math::BigFloat,
163 Math::Complex, Math::Trig, Net::protoent, the re pragma, SelfLoader,
164 Sys::SysLog, Test::Harness, Text::Wrap, UNIVERSAL, and the warnings
165 pragma.
166
167 =item *
168
169 The attributes::reftype() now works on tied arguments.
170
171 =item *
172
173 AutoLoader can now be disabled with C<no AutoLoader;>,
174
175 =item *
176
177 The English module can now be used without the infamous performance
178 hit by saying
179
180         use English '-no_performance_hit';
181
182 (Assuming, of course, that one doesn't need the troublesome variables
183 C<$`>, C<$&>, or C<$'>.)  Also, introduce C<@LAST_MATCH_START> and
184 C<@LAST_MATCH_END> English aliases for C<@-> and C<@+>.
185
186 =item *
187
188 File::Find now has pre- and post-processing callbacks.  It also
189 correctly changes directories when chasing symbolic links.  Callbacks
190 (naughtily) exiting with "next;" instead of "return;" now work.
191
192 =item *
193
194 File::Glob::glob() renamed to File::Glob::bsd_glob() to avoid
195 prototype mismatch with CORE::glob().
196
197 =item *
198
199 IPC::Open3 now allows the use of numeric file descriptors.
200
201 =item *
202
203 use lib now works identically to @INC.  Removing directories
204 with 'no lib' now works.
205
206 =item *
207
208 C<%INC> now localised in a Safe compartment so that use/require work.
209
210 =item *
211
212 The Shell module now has an OO interface.
213
214 =item *
215
216 =back
217
218 =head1 Utility Changes
219
220 =over 4
221
222 =item *
223
224 The Emacs perl mode (emacs/cperl-mode.el) has been updated to version 4.31.
225
226 =item *
227
228 Perlbug is now much more robust.  It also sends the bug report to perl.org,
229 not perl.com.
230
231 =item *
232
233 The perlcc utility has been rewritten and its user interface (that is,
234 command line) is much more like that of the UNIX C compiler, cc.
235
236 =item *
237
238 The xsubpp utility for extension writers now understands POD
239 documentation embedded in the *.xs files.
240
241 =back
242
243 =head1 New Documentation
244
245 =over 4
246
247 =item *
248
249 perl56delta details the changes between the 5.005 release and the
250 5.6.0 release.
251
252 =item *
253
254 perldebtut is a Perl debugging tutorial.
255
256 =item *
257
258 perlebcdic contains considerations for running Perl on EBCDIC platforms.
259 Note that unfortunately EBCDIC platforms that used to supported back in
260 Perl 5.005 are still unsupported by Perl 5.7.0; the plan, however, is to
261 bring them back to the fold.  
262
263 =item *
264
265 perlnewmod tells about writing and submitting a new module.
266
267 =item *
268
269 perlposix-bc explains using Perl on the POSIX-BC platform
270 (an EBCDIC mainframe platform).
271
272 =item *
273
274 perlretut is a regular expression tutorial.
275
276 =item *
277
278 perlrequick is a regular expressions quick-start guide.
279 Yes, much quicker than perlretut.
280
281 =item *
282
283 perlutil explains the command line utilities packaged with the Perl
284 distribution.
285
286 =back
287
288 =head1 Performance Enhancements
289
290 =over 4
291
292 =item *
293
294 map() that changes the size of the list should now work faster.
295
296 =back
297
298 =head1 Installation and Configuration Improvements
299
300 =head2 Generic Improvements
301
302 =over 4
303
304 =item *
305
306 INSTALL now explains how you can configure perl to use 64-bit
307 integers even on non-64-bit platforms.
308
309 =item *
310
311 Policy.sh policy change: if you are reusing a Policy.sh file (see
312 INSTALL) and you use Configure -Dprefix=/foo/bar and in the old
313 Policy $prefix eq $siteprefix and $prefix eq $vendorprefix, all of
314 them will now be changed to the new prefix, /foo/bar.  (Previously
315 only $prefix changed.)  If you do not like this new behaviour,
316 specify prefix, siteprefix, and vendorprefix explicitly.
317
318 =item *
319
320 A new optional location for Perl libraries, otherlibdirs, is available.
321 It can be used for example for vendor add-ons without disturbing Perl's
322 own library directories.
323
324 =item *
325
326 In many platforms the vendor-supplied 'cc' is too stripped-down to
327 build Perl (basically, 'cc' doesn't do ANSI C).  If this seems
328 to be the case and 'cc' does not seem to be the GNU C compiler
329 'gcc', an automatic attempt is made to find and use 'gcc' instead.
330
331 =item *
332
333 gcc needs to closely track the operating system release to avoid
334 build problems. If Configure finds that gcc was built for a different
335 operating system release than is running, it now gives a clearly visible
336 warning that there may be trouble ahead.
337
338 =item *
339
340 If binary compatibility with the 5.005 release is not wanted, Configure
341 no longer suggests including the 5.005 modules in @INC.
342
343 =item *
344
345 Configure C<-S> can now run non-interactively.
346
347 =item *
348
349 configure.gnu now works with options with whitespace in them.
350
351 =item *
352
353 installperl now outputs everything to STDERR.
354
355 =item *
356
357 $Config{byteorder} is now computed dynamically (this is more robust
358 with "fat binaries" where an executable image contains binaries for
359 more than one binary platform.)
360
361 =back
362
363 =head1 Selected Bug Fixes
364
365 =over 4
366
367 =item *
368
369 Several debugger fixes: exit code now reflects the script exit code,
370 condition C<"0"> now treated correctly, the C<d> command now checks
371 line number, the C<$.> no longer gets corrupted, all debugger output now
372 goes correctly to the socket if RemotePort is set.
373
374 =item *
375
376 C<*foo{FORMAT}> now works.
377
378 =item *
379
380 Lexical warnings now propagating correctly between scopes.
381
382 =item *
383
384 Line renumbering with eval and C<#line> now works.
385
386 =item *
387
388 Fixed numerous memory leaks, especially in eval "".
389
390 =item *
391
392 Modulus of unsigned numbers now works (4063328477 % 65535 used to
393 return 27406, instead of 27047).
394
395 =item *
396
397 Some "not a number" warnings introduced in 5.6.0 eliminated to be
398 more compatible with 5.005.  Infinity is now recognised as a number.
399
400 =item *
401
402 our() variables will not cause "will not stay shared" warnings.
403
404 =item *
405
406 pack "Z" now correctly terminates the string with "\0".
407
408 =item *
409
410 Fix password routines which in some shadow password platforms
411 (e.g. HP-UX) caused getpwent() to return every other entry.
412
413 =item *
414
415 printf() no longer resets the numeric locale to "C".
416
417 =item *
418
419 C<q(a\\b)> now parses correctly as C<'a\\b'>.
420
421 =item *
422
423 Printing quads (64-bit integers) with printf/sprintf now works
424 without the q L ll prefixes (assuming you are on a quad-capable platform).
425
426 =item *
427
428 Regular expressions on references and overloaded scalars now work.
429
430 =item *
431
432 scalar() now forces scalar context even when used in void context.
433
434 =item *
435         
436 sort() arguments are now compiled in the right wantarray context
437 (they were accidentally using the context of the sort() itself).
438
439 =item *
440
441 Changed the POSIX character class C<[[:space:]]> to include the (very
442 rare) vertical tab character.  Added a new POSIX-ish character class
443 C<[[:blank:]]> which stands for horizontal whitespace (currently,
444 the space and the tab).
445
446 =item *
447
448 $AUTOLOAD, sort(), lock(), and spawning subprocesses
449 in multiple threads simultaneously are now thread-safe.
450
451 =item *
452
453 Allow read-only string on left hand side of non-modifying tr///.
454
455 =item *
456
457 Several Unicode fixes (but still not perfect).
458
459 =over 8
460
461 =item *
462
463 BOMs (byte order marks) in the beginning of Perl files
464 (scripts, modules) should now be transparently skipped.
465 UTF16 encoded Perl files should now be read correctly.
466
467 =item *
468
469 The character tables have been updated to new Unicode 3.0 features.
470
471 =item *
472
473 chr() for values greater than 127 now create utf8 when under use
474 utf8.
475
476 =item *
477
478 Comparing with utf8 data does not magically upgrade non-utf8 data into
479 utf8.
480
481 =item *
482
483 C<IsAlnum>, C<IsAlpha>, and C<IsWord> now match titlecase.
484
485 =item *
486
487 Concatenation with the C<.> operator or via variable interpolation,
488 C<eq>, C<substr>, C<reverse>, C<quotemeta>, the C<x> operator,
489 substitution with C<s///>, single-quoted UTF8, should now work--in
490 theory.
491
492 =item *
493
494 The C<tr///> operator now works I<slightly> better but is still rather
495 broken.  Note that the C<tr///CU> functionality has been removed (but
496 see pack('U0', ...)).
497
498 =item *
499
500 Zero entries were missing from the Unicode classes like C<IsDigit>.
501
502 =back
503
504 =item *
505
506 UNIVERSAL::isa no longer caches methods incorrectly.  (This broke
507 the Tk extension with 5.6.0.)
508
509 =back
510
511 =head2 Platform Specific Changes and Fixes
512
513 =over 4
514
515 =item *
516
517 BSDI 4.*
518
519 Perl now works on post-4.0 BSD/OSes.
520
521 =item *
522
523 All BSDs
524
525 Setting C<$0> now works (as much as possible; see perlvar for details).
526
527 =item *
528
529 Cygwin
530
531 Numerous updates; currently synchronised with Cygwin 1.1.4.
532
533 =item *
534
535 EPOC
536
537 EPOC update after Perl 5.6.0.  See README.epoc.
538
539 =item *
540
541 FreeBSD 3.*
542
543 Perl now works on post-3.0 FreeBSDs.
544
545 =item *
546
547 HP-UX
548
549 README.hpux updated; C<Configure -Duse64bitall> now almost works.
550
551 =item *
552
553 IRIX
554
555 Numerous compilation flag and hint enhancements; accidental mixing
556 of 32-bit and 64-bit libraries (a doomed attempt) made much harder.
557
558 =item *
559
560 Linux
561
562 Long doubles should now work (see INSTALL).
563
564 =item *
565
566 MacOS Classic
567
568 Compilation of the standard Perl distribution in MacOS Classic should
569 now work if you have the Metrowerks development environment and
570 the missing Mac-specific toolkit bits.  Contact the macperl mailing
571 list for details.
572
573 =item *
574
575 MPE/iX
576
577 MPE/iX update after Perl 5.6.0.  See README.mpeix.
578
579 =item *
580
581 NetBSD/sparc
582
583 Perl now works on NetBSD/sparc.
584
585 =item *
586
587 OS/2
588
589 Now works with usethreads (see INSTALL).
590
591 =item *
592
593 Solaris
594
595 64-bitness using the Sun Workshop compiler now works.
596
597 =item *
598
599 Tru64 (aka Digital UNIX, aka DEC OSF/1)
600
601 The operating system version letter now recorded in $Config{osvers}.
602 Allow compiling with gcc (previously explicitly forbidden).  Compiling
603 with gcc still not recommended because buggy code results, even with
604 gcc 2.95.2.
605
606 =item *
607
608 Unicos
609
610 Fixed various alignment problems that lead into core dumps either
611 during build or later; no longer dies on math errors at runtime;
612 now using full quad integers (64 bits), previously was using 
613 only 46 bit integers for speed.
614
615 =item *
616
617 VMS
618
619 chdir() now works better despite a CRT bug; now works with MULTIPLICITY
620 (see INSTALL); now works with Perl's malloc.
621
622 =item *
623
624 Windows
625
626 =over 8
627
628 =item *
629
630 accept() no longer leaks memory.
631
632 =item *
633
634 Better chdir() return value for a non-existent directory.
635
636 =item *
637
638 New %ENV entries now propagate to subprocesses.
639
640 =item *
641
642 $ENV{LIB} now used to search for libs under Visual C.
643
644 =item *
645
646 A failed (pseudo)fork now returns undef and sets errno to EAGAIN.
647
648 =item *
649
650 Allow REG_EXPAND_SZ keys in the registry.
651
652 =item *
653
654 Can now send() from all threads, not just the first one.
655
656 =item *
657
658 Fake signal handling reenabled, bugs and all.
659
660 =item *
661
662 Less stack reserved per thread so that more threads can run
663 concurrently. (still 16M perl thread)
664
665 =item *
666
667 C<File::Spec->tmpdir()> now prefers C:/temp over /tmp
668 (works better when perl running as service).
669
670 =item *
671
672 Better UNC path handling under ithreads.
673
674 =item *
675
676 wait() and waitpid() now work much better.
677
678 =item *
679
680 winsock handle leak fixed.
681
682 =back
683
684 =head1 New or Changed Diagnostics
685
686 All regular expression compilation error messages are now hopefully
687 easier to understand both because the error message now comes before
688 the failed regex and because the point of failure is now clearly
689 marked.
690
691 The various "opened only for", "on closed", "never opened" warnings
692 drop the C<main::> prefix for filehandles in the C<main> package,
693 for example C<STDIN> instead of <main::STDIN>. 
694
695 The "Unrecognized escape" warning has been extended to include C<\8>,
696 C<\9>, and C<\_>.  There is no need to escape any of the C<\w> characters.
697
698 =head1 Changed Internals
699
700 =over 4
701
702 =item *
703
704 perlapi.pod (a companion to perlguts) now attempts to document the
705 internal API.
706
707 =item *
708
709 You can now build a really minimal perl called microperl.
710 Building microperl does not require even running Configure;
711 C<make -f Makefile.micro> should be enough.  Beware: microperl makes
712 many assumptions, some of which may be too bold; the resulting
713 executable may crash or otherwise misbehave in wondrous ways.  For
714 careful hackers only.
715
716 =item *
717
718 Added rsignal(), whichsig(), do_join() to the publicised API.
719
720 =item *
721
722 Made possible to propagate customised exceptions via croak()ing.
723
724 =item *
725
726 Added is_utf8_char(), is_utf8_string(), bytes_to_utf8(), and utf8_to_bytes().
727
728 =item *
729
730 Now xsubs can have attributes just like subs.
731
732 =back
733
734 =head1 Known Problems
735
736 =head2 Unicode Support Still Far From Perfect
737
738 We're working on it.  Stay tuned.
739
740 =head2 EBCDIC Still A Lost Platform
741
742 The plan is to bring them back.
743
744 =head2 Building Extensions Can Fail Because Of Largefiles
745
746 Certain extensions like mod_perl and BSD::Resource are known to have
747 issues with `largefiles', a change brought by Perl 5.6.0 in which file
748 offsets default to 64 bits wide, where supported.  Modules may fail to
749 compile at all or compile and work incorrectly.  Currently there is no
750 good solution for the problem, but Configure now provides appropriate
751 non-largefile ccflags, ldflags, libswanted, and libs in the %Config
752 hash (e.g., $Config{ccflags_nolargefiles}) so the extensions that are
753 having problems can try configuring themselves without the
754 largefileness.  This is admittedly not a clean solution, and the
755 solution may not even work at all.  One potential failure is whether
756 one can (or, if one can, whether it's a good idea) link together at
757 all binaries with different ideas about file offsets, all this is
758 platform-dependent.
759
760 =head2 ftmp-security tests warn 'system possibly insecure'
761
762 Don't panic.  Read INSTALL 'make test' section instead. 
763
764 =head2 Long Doubles Still Don't Work In Solaris
765
766 The experimental long double support is still very much so in Solaris.
767 (Other platforms like Linux and Tru64 are beginning to solidify in
768 this area.)
769
770 =head2 Storable tests fail in some platforms
771
772 If any Storable tests fail the use of Storable is not advisable.
773
774 =over 4
775
776 =item *
777
778 Many Storable tests fail on AIX configured with 64 bit integers.
779
780 So far unidentified problems break Storable in AIX if Perl is
781 configured to use 64 bit integers.  AIX in 32-bit mode works and
782 other 64-bit platforms work with Storable.
783
784 =item *
785
786 DOS DJGPP may hang when testing Storable.
787
788 =item *
789
790 st-06compat fails in UNICOS and UNICOS/mk.
791
792 This means that you cannot read old (pre-Storable-0.7) Storable images
793 made in other platforms.
794
795 =item *
796
797 st-store.t and st-retrieve may fail with Compaq C 6.2 on OpenVMS Alpha 7.2.
798
799 =head2 Threads Are Still Experimental
800
801 Multithreading is still an experimental feature.  Some platforms
802 emit the following message for lib/thr5005
803
804     #
805     # This is a KNOWN FAILURE, and one of the reasons why threading
806     # is still an experimental feature.  It is here to stop people
807     # from deploying threads in production. ;-)
808     #
809  
810 and another known warning is
811
812    pragma/overload......Unbalanced saves: 3 more saves than restores
813    panic: magic_mutexfree during global destruction.
814    ok
815    lib/selfloader.......Unbalanced saves: 3 more saves than restores
816    panic: magic_mutexfree during global destruction.
817    ok
818    lib/st-dclone........Unbalanced saves: 3 more saves than restores
819    panic: magic_mutexfree during global destruction.
820    ok
821
822 =head2 The Compiler Suite Is Still Experimental
823
824 The compiler suite is slowly getting better but is nowhere near yet.
825 The backend part that has seen perhaps the most progress is the
826 bytecode compiler.
827
828 =back
829
830 =head1 Reporting Bugs
831
832 If you find what you think is a bug, you might check the articles
833 recently posted to the comp.lang.perl.misc newsgroup and the perl
834 bug database at http://bugs.perl.org.  There may also be
835 information at http://www.perl.com/perl/, the Perl Home Page.
836
837 If you believe you have an unreported bug, please run the B<perlbug>
838 program included with your release.  Be sure to trim your bug down
839 to a tiny but sufficient test case.  Your bug report, along with the
840 output of C<perl -V>, will be sent off to perlbug@perl.org to be
841 analysed by the Perl porting team.
842
843 =head1 SEE ALSO
844
845 The F<Changes> file for exhaustive details on what changed.
846
847 The F<INSTALL> file for how to build Perl.
848
849 The F<README> file for general stuff.
850
851 The F<Artistic> and F<Copying> files for copyright information.
852
853 =head1 HISTORY
854
855 Written by Jarkko Hietaniemi <F<jhi@iki.fi>>, with many contributions
856 from The Perl Porters and Perl Users submitting feedback and patches.
857
858 Send omissions or corrections to <F<perlbug@perl.org>>.
859
860 =cut