pod/perldelta.pod

   1 =head1 NAME
   2
   3 perldelta - what's new for perl v5.7.0
   4
   5 =head1 DESCRIPTION
   6
   7 This document describes differences between the 5.6.0 release and
   8 the 5.7.0 release.
   9
  10 =head1 Security Vulnerability Closed
  11
  12 A potential security vulnerability in the optional suidperl component
  13 of Perl has been identified.  suidperl is neither built nor installed
  14 by default.  As of August the 20th, 2000, the only known vulnerable
  15 platform is Linux, most likely all Linux distributions.  CERT and
  16 various vendors have been alerted about the vulnerability.
  17
  18 The problem was caused by Perl trying to report a suspected security
  19 exploit attempt using an external program, /bin/mail.  On Linux
  20 platforms the /bin/mail program had an undocumented feature which gave
  21 access to a root shell, resulting in a serious compromise instead of
  22 reporting the exploit attempt.  If you don't have /bin/mail, or if you
  23 have 'safe setuid scripts', or if suidperl is not installed, you
  24 are safe.
  25
  26 The exploit attempt reporting feature has been completely removed from
  27 the Perl 5.7.0 release, so that particular vulnerability isn't there
  28 anymore.  However, further security vulnerabilities are,
  29 unfortunately, always possible.  The suidperl code is being reviewed
  30 and if deemed too risky to continue to be supported, it may be
  31 completely removed from future releases.  In any case, suidperl should
  32 only be used by security experts who know exactly what they are doing
  33 and why they are using suidperl instead of some other solution such as
  34 sudo (see http://www.courtesan.com/sudo/).
  35
  36 =head1 Incompatible Changes
  37
  38 =over 4
  39
  40 =item *
  41
  42 Arrays now always interpolate into double-quoted strings:
  43 constructs like "foo@bar" now always assume C<@bar> is an array,
  44 whether or not the compiler has seen use of C<@bar>.
  45
  46 =item *
  47
  48 The semantics of bless(REF, REF) were unclear and until someone proves
  49 it to make some sense, it is forbidden.
  50
  51 =item *
  52
  53 The very dusty examples in the eg/ directory have been removed.
  54 Suggestions for new shiny examples welcome but the main issue is that
  55 the examples need to be documented, tested and (most importantly)
  56 maintained.
  57
  58 =item *
  59
  60 The obsolete chat2 library that should never have been allowed
  61 to escape the laboratory has been decommissioned.
  62
  63 =item *
  64
  65 The unimplemented POSIX regex features [[.cc.]] and [[=c=]] are still
  66 recognised but now cause fatal errors.  The previous behaviour of
  67 ignoring them by default and warning if requested was unacceptable
  68 since it, in a way, falsely promised that the features could be used.
  69
  70 =item *
  71
  72 lstat(FILEHANDLE) now gives a warning because the operation makes no sense.
  73 In future releases this may become a fatal error.
  74
  75 =item *
  76
  77 The long deprecated uppercase aliases for the string comparison
  78 operators (EQ, NE, LT, LE, GE, GT) have now been removed.
  79
  80 =item *
  81
  82 The regular expression captured submatches ($1, $2, ...) are now
  83 more consistently unset if the match fails, instead of leaving false
  84 data lying around in them.
  85
  86 =item *
  87
  88 The tr///C and tr///U features have been removed and will not return;
  89 the interface was a mistake.  Sorry about that.  For similar
  90 functionality, see pack('U0', ...) and pack('C0', ...).
  91
  92 =back
  93
  94 =head1 Core Enhancements
  95
  96 =over 4
  97
  98 =item *
  99
 100 C<perl -d:Module=arg,arg,arg> now works (previously one couldn't pass
 101 in multiple arguments.)
 102
 103 =item *
 104
 105 my __PACKAGE__ now works.
 106
 107 =item *
 108
 109 C<no Module;> now works even if there is no "sub unimport" in the Module.
 110
 111 =item *
 112
 113 The numerical comparison operators return C<undef> if either operand
 114 is a NaN.  Previously the behaviour was unspecified.
 115
 116 =item *
 117
 118 C<pack('U0a*', ...)> can now be used to force a string to UTF8.
 119
 120 =item *
 121
 122 prototype(\&) is now available.
 123
 124 =item *
 125
 126 There is now an UNTIE method.
 127
 128 =back
 129
 130 =head1 Modules and Pragmata
 131
 132 =head2 New Modules
 133
 134 =over 4
 135
 136 =item *
 137
 138 File::Temp allows one to create temporary files and directories in an
 139 easy, portable, and secure way.
 140
 141 =item *
 142
 143 Storable gives persistence to Perl data structures by allowing the
 144 storage and retrieval of Perl data to and from files in a fast and
 145 compact binary format.
 146
 147 =back
 148
 149 =head2 Updated And Improved Modules and Pragmata
 150
 151 =over 4
 152
 153 =item *
 154
 155 The following independently supported modules have been updated to
 156 newer versions from CPAN: CGI, CPAN, DB_File, File::Spec, Getopt::Long,
 157 the podlators bundle, Pod::LaTeX, Pod::Parser, Term::ANSIColor, Test.
 158
 159 =item *
 160
 161 Bug fixes and minor enhancements have been applied to B::Deparse,
 162 Data::Dumper, IO::Poll, IO::Socket::INET, Math::BigFloat,
 163 Math::Complex, Math::Trig, Net::protoent, re, SelfLoader, Sys::SysLog,
 164 Test::Harness, Text::Wrap, UNIVERSAL.
 165
 166 =item *
 167
 168 The attributes::reftype() now works on tied arguments.
 169
 170 =item *
 171
 172 AutoLoader can now be disabled with C<no AutoLoader;>,
 173
 174 =item *
 175
 176 The English module can now be used without the infamous performance
 177 hit by saying
 178
 179         use English '-no_performance_hit';
 180
 181 (Assuming, of course, that one doesn't need the troublesome variables
 182 C<$`>, C<$&>, or C<$'>.)  Also, introduce C<@LAST_MATCH_START> and
 183 C<@LAST_MATCH_END> English aliases for C<@-> and C<@+>.
 184
 185 =item *
 186
 187 File::Find now has pre- and post-processing callbacks.  It also
 188 correctly changes directories when chasing symbolic links.  Callbacks
 189 (naughtily) exiting with "next;" instead of "return;" now work.
 190
 191 =item *
 192
 193 File::Glob::glob() renamed to File::Glob::bsd_glob() to avoid
 194 prototype mismatch with CORE::glob().
 195
 196 =item *
 197
 198 IPC::Open3 now allows the use of numeric file descriptors.
 199
 200 =item *
 201
 202 use lib now works identically to @INC.  Removing directories
 203 with 'no lib' now works.
 204
 205 =item *
 206
 207 C<%INC> now localised in a Safe compartment so that use/require work.
 208
 209 =item *
 210
 211 The Shell module now has an OO interface.
 212
 213 =back
 214
 215 =head1 Utility Changes
 216
 217 =over 4
 218
 219 =item *
 220
 221 The Emacs perl mode (emacs/cperl-mode.el) has been updated to version 4.31.
 222
 223 =item *
 224
 225 Perlbug is now much more robust.  It also sends the bug report to perl.org,
 226 not perl.com.
 227
 228 =item *
 229
 230 The perlcc utility has been rewritten and its user interface (that is,
 231 command line) is much more like that of the UNIX C compiler, cc.
 232
 233 =item *
 234
 235 The xsubpp utility for extension writers now understands POD
 236 documentation embedded in the *.xs files.
 237
 238 =back
 239
 240 =head1 New Documentation
 241
 242 =over 4
 243
 244 =item *
 245
 246 perl56delta details the changes between the 5.005 release and the
 247 5.6.0 release.
 248
 249 =item *
 250
 251 perldebtut is a Perl debugging tutorial.
 252
 253 =item *
 254
 255 perlebcdic contains considerations for running Perl on EBCDIC platforms.
 256 Note that unfortunately EBCDIC platforms that used to supported back in
 257 Perl 5.005 are still unsupported by Perl 5.7.0; the plan, however, is to
 258 bring them back to the fold.
 259
 260 =item *
 261
 262 perlnewmod tells about writing and submitting a new module.
 263
 264 =item *
 265
 266 perlposix-bc explains using Perl on the POSIX-BC platform
 267 (an EBCDIC mainframe platform).
 268
 269 =item *
 270
 271 perlretut is a regular expression tutorial.
 272
 273 =item *
 274
 275 perlrequick is a regular expressions quick-start guide.
 276 Yes, much quicker than perlretut.
 277
 278 =item *
 279
 280 perlutil explains the command line utilities packaged with the Perl
 281 distribution.
 282
 283 =back
 284
 285 =head1 Performance Enhancements
 286
 287 =over 4
 288
 289 =item *
 290
 291 map() that changes the size of the list should now work faster.
 292
 293 =back
 294
 295 =head1 Installation and Configuration Improvements
 296
 297 =head2 Generic Improvements
 298
 299 =over 4
 300
 301 =item *
 302
 303 INSTALL now explains how you can configure perl to use 64-bit
 304 integers even on non-64-bit platforms.
 305
 306 =item *
 307
 308 Policy.sh policy change: if you are reusing a Policy.sh file (see
 309 INSTALL) and you use Configure -Dprefix=/foo/bar and in the old
 310 Policy $prefix eq $siteprefix and $prefix eq $vendorprefix, all of
 311 them will now be changed to the new prefix, /foo/bar.  (Previously
 312 only $prefix changed.)  If you do not like this new behaviour,
 313 specify prefix, siteprefix, and vendorprefix explicitly.
 314
 315 =item *
 316
 317 A new optional location for Perl libraries, otherlibdirs, is available.
 318 It can be used for example for vendor add-ons without disturbing Perl's
 319 own library directories.
 320
 321 =item *
 322
 323 In many platforms the vendor-supplied 'cc' is too stripped-down to
 324 build Perl (basically, 'cc' doesn't do ANSI C).  If this seems
 325 to be the case and 'cc' does not seem to be the GNU C compiler
 326 'gcc', an automatic attempt is made to find and use 'gcc' instead.
 327
 328 =item *
 329
 330 gcc needs to closely track the operating system release to avoid
 331 build problems. If Configure finds that gcc was built for a different
 332 operating system release than is running, it now gives a clearly visible
 333 warning that there may be trouble ahead.
 334
 335 =item *
 336
 337 If binary compatibility with the 5.005 release is not wanted, Configure
 338 no longer suggests including the 5.005 modules in @INC.
 339
 340 =item *
 341
 342 Configure C<-S> can now run non-interactively.
 343
 344 =item *
 345
 346 configure.gnu now works with options with whitespace in them.
 347
 348 =item *
 349
 350 installperl now outputs everything to STDERR.
 351
 352 =item *
 353
 354 $Config{byteorder} is now computed dynamically (this is more robust
 355 with "fat binaries" where an executable image contains binaries for
 356 more than one binary platform.)
 357
 358 =back
 359
 360 =head1 Selected Bug Fixes
 361
 362 =over 4
 363
 364 =item *
 365
 366 Several debugger fixes: exit code now reflects the script exit code,
 367 condition C<"0"> now treated correctly, the C<d> command now checks
 368 line number, the C<$.> no longer gets corrupted, all debugger output now
 369 goes correctly to the socket if RemotePort is set.
 370
 371 =item *
 372
 373 C<*foo{FORMAT}> now works.
 374
 375 =item *
 376
 377 Lexical warnings now propagating correctly between scopes.
 378
 379 =item *
 380
 381 Line renumbering with eval and C<#line> now works.
 382
 383 =item *
 384
 385 Fixed numerous memory leaks, especially in eval "".
 386
 387 =item *
 388
 389 Modulus of unsigned numbers now works (4063328477 % 65535 used to
 390 return 27406, instead of 27047).
 391
 392 =item *
 393
 394 Some "not a number" warnings introduced in 5.6.0 eliminated to be
 395 more compatible with 5.005.  Infinity is now recognised as a number.
 396
 397 =item *
 398
 399 our() variables will not cause "will not stay shared" warnings.
 400
 401 =item *
 402
 403 pack "Z" now correctly terminates the string with "\0".
 404
 405 =item *
 406
 407 Fix password routines which in some shadow password platforms
 408 (e.g. HP-UX) caused getpwent() to return every other entry.
 409
 410 =item *
 411
 412 printf() no longer resets the numeric locale to "C".
 413
 414 =item *
 415
 416 C<q(a\\b)> now parses correctly as C<'a\\b'>.
 417
 418 =item *
 419
 420 Printing quads (64-bit integers) with printf/sprintf now works
 421 without the q L ll prefixes (assuming you are on a quad-capable platform).
 422
 423 =item *
 424
 425 Regular expressions on references and overloaded scalars now work.
 426
 427 =item *
 428
 429 scalar() now forces scalar context even when used in void context.
 430
 431 =item *
 432
 433 sort() arguments are now compiled in the right wantarray context
 434 (they were accidentally using the context of the sort() itself).
 435
 436 =item *
 437
 438 Changed the POSIX character class C<[[:space:]]> to include the (very
 439 rare) vertical tab character.  Added a new POSIX-ish character class
 440 C<[[:blank:]]> which stands for horizontal whitespace (currently,
 441 the space and the tab).
 442
 443 =item *
 444
 445 $AUTOLOAD, sort(), lock(), and spawning subprocesses
 446 in multiple threads simultaneously are now thread-safe.
 447
 448 =item *
 449
 450 Allow read-only string on left hand side of non-modifying tr///.
 451
 452 =item *
 453
 454 Several Unicode fixes (but still not perfect).
 455
 456 =over 8
 457
 458 =item *
 459
 460 BOMs (byte order marks) in the beginning of Perl files
 461 (scripts, modules) should now be transparently skipped.
 462 UTF16 encoded Perl files should now be read correctly.
 463
 464 =item *
 465
 466 The character tables have been updated to new Unicode 3.0 features.
 467
 468 =item *
 469
 470 chr() for values greater than 127 now create utf8 when under use
 471 utf8.
 472
 473 =item *
 474
 475 Comparing with utf8 data does not magically upgrade non-utf8 data into
 476 utf8.
 477
 478 =item *
 479
 480 C<IsAlnum>, C<IsAlpha>, and C<IsWord> now match titlecase.
 481
 482 =item *
 483
 484 Concatenation with the C<.> operator or via variable interpolation,
 485 C<eq>, C<substr>, C<reverse>, C<quotemeta>, the C<x> operator,
 486 substitution with C<s///>, single-quoted UTF8, should now work--in
 487 theory.
 488
 489 =item *
 490
 491 The C<tr///> operator now works I<slightly> better but is still rather
 492 broken.  Note that the C<tr///CU> functionality has been removed (but
 493 see pack('U0', ...)).
 494
 495 =item *
 496
 497 Zero entries were missing from the Unicode classes like C<IsDigit>.
 498
 499 =back
 500
 501 =item *
 502
 503 UNIVERSAL::isa no longer caches methods incorrectly.  (This broke
 504 the Tk extension with 5.6.0.)
 505
 506 =back
 507
 508 =head2 Platform Specific Changes and Fixes
 509
 510 =over 4
 511
 512 =item *
 513
 514 BSDI 4.*
 515
 516 Perl now works on post-4.0 BSD/OSes.
 517
 518 =item *
 519
 520 All BSDs
 521
 522 Setting C<$0> now works (as much as possible; see perlvar for details).
 523
 524 =item *
 525
 526 Cygwin
 527
 528 Numerous updates; currently synchronised with Cygwin 1.1.4.
 529
 530 =item *
 531
 532 EPOC
 533
 534 EPOC update after Perl 5.6.0.  See README.epoc.
 535
 536 =item *
 537
 538 FreeBSD 3.*
 539
 540 Perl now works on post-3.0 FreeBSDs.
 541
 542 =item *
 543
 544 HP-UX
 545
 546 README.hpux updated; C<Configure -Duse64bitall> now almost works.
 547
 548 =item *
 549
 550 IRIX
 551
 552 Numerous compilation flag and hint enhancements; accidental mixing
 553 of 32-bit and 64-bit libraries (a doomed attempt) made much harder.
 554
 555 =item *
 556
 557 Linux
 558
 559 Long doubles should now work (see INSTALL).
 560
 561 =item *
 562
 563 MacOS Classic
 564
 565 Compilation of the standard Perl distribution in MacOS Classic should
 566 now work if you have the Metrowerks development environment and
 567 the missing Mac-specific toolkit bits.  Contact the macperl mailing
 568 list for details.
 569
 570 =item *
 571
 572 MPE/iX
 573
 574 MPE/iX update after Perl 5.6.0.  See README.mpeix.
 575
 576 =item *
 577
 578 NetBSD/sparc
 579
 580 Perl now works on NetBSD/sparc.
 581
 582 =item *
 583
 584 OS/2
 585
 586 Now works with usethreads (see INSTALL).
 587
 588 =item *
 589
 590 Solaris
 591
 592 64-bitness using the Sun Workshop compiler now works.
 593
 594 =item *
 595
 596 Tru64 (aka Digital UNIX, aka DEC OSF/1)
 597
 598 The operating system version letter now recorded in $Config{osvers}.
 599 Allow compiling with gcc (previously explicitly forbidden).  Compiling
 600 with gcc still not recommended because buggy code results, even with
 601 gcc 2.95.2.
 602
 603 =item *
 604
 605 Unicos
 606
 607 Fixed various alignment problems that lead into core dumps either
 608 during build or later; no longer dies on math errors at runtime;
 609 now using full quad integers (64 bits), previously was using
 610 only 46 bit integers for speed.
 611
 612 =item *
 613
 614 VMS
 615
 616 chdir() now works better despite a CRT bug; now works with MULTIPLICITY
 617 (see INSTALL); now works with Perl's malloc.
 618
 619 =item *
 620
 621 Windows
 622
 623 =over 8
 624
 625 =item *
 626
 627 accept() no longer leaks memory.
 628
 629 =item *
 630
 631 Better chdir() return value for a non-existent directory.
 632
 633 =item *
 634
 635 New %ENV entries now propagate to subprocesses.
 636
 637 =item *
 638
 639 $ENV{LIB} now used to search for libs under Visual C.
 640
 641 =item *
 642
 643 A failed (pseudo)fork now returns undef and sets errno to EAGAIN.
 644
 645 =item *
 646
 647 Allow REG_EXPAND_SZ keys in the registry.
 648
 649 =item *
 650
 651 Can now send() from all threads, not just the first one.
 652
 653 =item *
 654
 655 Fake signal handling reenabled, bugs and all.
 656
 657 =item *
 658
 659 Less stack reserved per thread so that more threads can run
 660 concurrently. (still 16M perl thread)
 661
 662 =item *
 663
 664 C<File::Spec->tmpdir()> now prefers C:/temp over /tmp
 665 (works better when perl running as service).
 666
 667 =item *
 668
 669 Better UNC path handling under ithreads.
 670
 671 =item *
 672
 673 wait() and waitpid() now work much better.
 674
 675 =item *
 676
 677 winsock handle leak fixed.
 678
 679 =back
 680
 681 =head1 New or Changed Diagnostics
 682
 683 All regular expression compilation error messages are now hopefully
 684 easier to understand both because the error message now comes before
 685 the failed regex and because the point of failure is now clearly
 686 marked.
 687
 688 The various "opened only for", "on closed", "never opened" warnings
 689 drop the C<main::> prefix for filehandles in the C<main> package,
 690 for example C<STDIN> instead of <main::STDIN>.
 691
 692 The "Unrecognized escape" warning has been extended to include C<\8>,
 693 C<\9>, and C<\_>.  There is no need to escape any of the C<\w> characters.
 694
 695 =head1 Changed Internals
 696
 697 =over 4
 698
 699 =item *
 700
 701 perlapi.pod (a companion to perlguts) now attempts to document the
 702 internal API.
 703
 704 =item *
 705
 706 You can now build a really minimal perl called microperl.
 707 Building microperl does not require even running Configure;
 708 C<make -f Makefile.micro> should be enough.  Beware: microperl makes
 709 many assumptions, some of which may be too bold; the resulting
 710 executable may crash or otherwise misbehave in wondrous ways.  For
 711 careful hackers only.
 712
 713 =item *
 714
 715 Added rsignal(), whichsig(), do_join() to the publicised API.
 716
 717 =item *
 718
 719 Made possible to propagate customised exceptions via croak()ing.
 720
 721 =item *
 722
 723 Added is_utf8_char(), is_utf8_string(), bytes_to_utf8(), and utf8_to_bytes().
 724
 725 =item *
 726
 727 Now xsubs can have attributes just like subs.
 728
 729 =back
 730
 731 =head1 Known Problems
 732
 733 =head2 Unicode Support Still Far From Perfect
 734
 735 We're working on it.  Stay tuned.
 736
 737 =head2 EBCDIC Still A Lost Platform
 738
 739 The plan is to bring them back.
 740
 741 =head2 Building Extensions Can Fail Because Of Largefiles
 742
 743 Certain extensions like mod_perl and BSD::Resource are known to have
 744 issues with `largefiles', a change brought by Perl 5.6.0 in which file
 745 offsets default to 64 bits wide, where supported.  Modules may fail to
 746 compile at all or compile and work incorrectly.  Currently there is no
 747 good solution for the problem, but Configure now provides appropriate
 748 non-largefile ccflags, ldflags, libswanted, and libs in the %Config
 749 hash (e.g., $Config{ccflags_nolargefiles}) so the extensions that are
 750 having problems can try configuring themselves without the
 751 largefileness.  This is admittedly not a clean solution, and the
 752 solution may not even work at all.  One potential failure is whether
 753 one can (or, if one can, whether it's a good idea) link together at
 754 all binaries with different ideas about file offsets, all this is
 755 platform-dependent.
 756
 757 =head2 ftmp-posix subtest 6 fails in VMS
 758
 759 The test exposes a flushing bug in the VMS port of Perl, this failure
 760 as such can be ignored.
 761
 762 =head2 ftmp-security tests warn 'system possibly insecure'
 763
 764 Don't panic.  Read INSTALL 'make test' section instead.
 765
 766 =head2 Long Doubles Still Don't Work In Solaris
 767
 768 The experimental long double support is still very much so in Solaris.
 769 (Other platforms like Linux and Tru64 are beginning to solidify in this area.)
 770
 771 =head2 Storable tests fail in some platforms
 772
 773 =over 4
 774
 775 =item *
 776
 777 Many Storable tests fail on AIX configured with 64 bit integers.
 778
 779 So far unidentified problems break Storable in AIX if Perl is
 780 configured to use 64 bit integers.  AIX in 32-bit mode works and
 781 other 64-bit platforms work with Storable.
 782
 783 =item *
 784
 785 DOS DJGPP may hang when testing Storable.
 786
 787 =item *
 788
 789 st-06compat fails in UNICOS and UNICOS/mk.
 790
 791 This means that you cannot read old (pre-Storable-0.7) Storable images
 792 made in other platforms.
 793
 794 =back
 795
 796 =head1 Reporting Bugs
 797
 798 If you find what you think is a bug, you might check the articles
 799 recently posted to the comp.lang.perl.misc newsgroup and the perl
 800 bug database at http://bugs.perl.org.  There may also be
 801 information at http://www.perl.com/perl/, the Perl Home Page.
 802
 803 If you believe you have an unreported bug, please run the B<perlbug>
 804 program included with your release.  Be sure to trim your bug down
 805 to a tiny but sufficient test case.  Your bug report, along with the
 806 output of C<perl -V>, will be sent off to perlbug@perl.org to be
 807 analysed by the Perl porting team.
 808
 809 =head1 SEE ALSO
 810
 811 The F<Changes> file for exhaustive details on what changed.
 812
 813 The F<INSTALL> file for how to build Perl.
 814
 815 The F<README> file for general stuff.
 816
 817 The F<Artistic> and F<Copying> files for copyright information.
 818
 819 =head1 HISTORY
 820
 821 Written by Jarkko Hietaniemi <F<jhi@iki.fi>>, with many contributions
 822 from The Perl Porters and Perl Users submitting feedback and patches.
 823
 824 Send omissions or corrections to <F<perlbug@perl.org>>.
 825
 826 =cut