Port lib/unicore/mktables to VMS.

This is mostly just making filename comparisons and lookups of filenames
in hashes case blind, which is necessary since filename case is not
(by default) preserved.

Silence Win32 compiler warning

Subject: Re: Smoke [5.11.2] v5.11.2-105-gc2123ae FAIL(F) MSWin32 Win2000 SP4 (x86/1 cpu)
Message-ID: <20091204140536.GD2582@plum.flirble.org>

(amended to fix the obvious typo)

pp_sort.c typo: stabilty

I'm now working on the sort code in th perl compiler as you can see :)
--
Reini Urban
http://phpwiki.org/  http://murbreak.at/

From b8c749be70f51499fe1ffd9e483ee3a0a8305d9b Mon Sep 17 00:00:00 2001
From: Reini Urban <rurban@cpan.org>
Date: Thu, 3 Dec 2009 19:44:57 +0000
Subject: [PATCH] fix typo: stabilty

Signed-off-by: H.Merijn Brand <h.m.brand@xs4all.nl>

Another C<return NORMAL> needed post bb4c52e023e0, missed from 805bf316c58a.

Revert makefile part of the Unicode 5.2 patch

lib/unicore/version was getting removed by "make distclean".

Add new Unicode data file in MANIFEST

Unicode 5.2

[perl #70802] -i'*' refuses to work

Ensure that pp_qr returns a new regexp SV each time. Resolves RT #69852.

Instead of returning a(nother) reference to the (pre-compiled) regexp in the
optree, use reg_temp_copy() to create a copy of it, and return a reference to
that. This resolves issues about Regexp::DESTROY not being called in a timely
fashion (the original bug tracked by RT #69852), as well as bugs related to
blessing regexps, and of assigning to regexps, as described in correspondence
added to the ticket.

It transpires that we also need to undo the SvPVX() sharing when ithreads
cloning a Regexp SV, because mother_re is set to NULL, instead of a cloned
copy of the mother_re. This change might fix bugs with regexps and threads in
certain other situations, but as yet neither tests nor bug reports have
indicated any problems, so it might not actually be an edge case that it's
possible to reach.

work-around Carp/overloading miniperl problem

Cleanup all scopes before exiting a pseudo-forked process.

perl_destruct() contains an assertion that the scope stack
is empty.  The remaining scopes are due to fork() being
called from within a BEGIN block.

Revert commit cbdd5331.

Commit a09dc31d1 says:

    It's possible that someone has built a module with -DDEBUGGING,
    but they're using it against a perl built non-DEBUGGING, [...]

which means that the PL_scopestack_name symbol must always be exported.

Add another hint about setting WIN64=undef to build a 32-bit Perl.

Of course anyone who read README.win32 already knew this. :)

Don't redefine isnan() macro if MinGW already defined one.

Update to reflect that I release 5.11.2

-Dmad: double free or corruption

> If your perl has -Dmad, the following program crashes:
>
> $ bleadperl -we '$x="x" x 257; eval "for $x"'
> *** glibc detected *** bleadperl: double free or corruption (!prev): 0x0000000001dca670 ***

Change 6136c704 changed S_scan_ident from:

   e = d + destlen - 3;

to:

   register char * const e = d + destlen + 3;

where e is used to mark the end of the buffer, this meant that the
various buffer end checks allowed the various buffers supplied
S_scan_ident to overflow.

Attached is a fix, various tests with fencepost checks on different
identifier lengths, and the specific case mentioned in the ticket.

Tony

Signed-off-by: H.Merijn Brand <h.m.brand@xs4all.nl>

make regen_perly following 5ca68648d92617d8.

-Dmad broken for c++

On Tue, Dec 01, 2009 at 08:22:38AM +0100, H.Merijn Brand wrote:
> perly.y: In function 'int Perl_madparse(PerlInterpreter*)':
> perly.y:335: error: cast from 'TOKEN*' to 'line_t' loses precision
> perly.y:348: error: cast from 'TOKEN*' to 'line_t' loses precision
> perly.y:430: error: cast from 'TOKEN*' to 'line_t' loses precision

Uses the same mechanism used in if, unless to retrieve an ival set in
toke.c

Signed-off-by: H.Merijn Brand <h.m.brand@xs4all.nl>

Make the new test work in the core and bump version of Safe to 2.20

[rt.cpan.org #51574] Safe.pm sort {} bug accessing $a and $b with -Dusethreads

Test modifiability of range elements

Document if.pm in perlfunc

Make distclean work again

Fix -DPERL_NO_UTF16_FILTER

Make split warn in void context

Handle $@ being assigned a read-only value (without error or busting the stack).

Discovered whilst investigating RT #70862.

Fix RT #70862 by converting ERRSV to GvSVn() to ensure a non-NULL GvSV().

Merge branch 'blead' of ssh://stevep@perl5.git.perl.org/gitroot/perl into blead

Add error codes for getaddrinfo() and getnameinfo()

mktables performance improvement

The attached patch got the easiest performance improvements to mktables.
Hopefully this is good enough for now.

This involved:

1) Nicholas' patch
2) I stored complete_name instead of recomputing it each time.
3) Used $_[xxx] instead of shift in very heavily used subroutines
4) removed trace accidentally left in.

I also changed the misspelled subroutine name discovered by Craig Berry.
I searched for any other misspellings and didn't find any.

Also removed trailing white space that keeps creeping back in, and now
this doesn't generate pod entries if not outputting a pod file, and
clarified warning message if no mktables.lst is present.

I couldn't figure out a way to conditionally use 'no overloading', as
it is called at compile time.  So I just commented out the old stuff
that will work for 5.8, with a note about using that if you want to
use 5.8

Document backreferences to groups that did not match

Also add a test for that, fill in test description, and sneak in a vim
modeline for re_tests

Allow a closing brace after an "use VERSION"

This fixes [perl #70884] : use VERSION in BLOCK without semicolon -> syntax error

-Dmad minitest failure bisect

I wrote:
>In my tests with -Dmad, I'm still getting a test failure ("panic: input
>overflow") from t/op/incfilter.t.  The underlying problem is the filter
>layer mishandling things when a filter function gives it a multiline
>string, so it generates an invalid SV state (strlen(SvPVX(PL_linestr))
>> SvCUR(PL_linestr)).  This faulty state also occurs without -Dmad,
>and so doesn't appear to be Mad-related, it just doesn't in practice
>cause the test panic without -Dmad.  I'm investigating this bug now.

It's fixed by the attached patch.  Since the bug is an inconsistency
in the SV data structure, it can't be sensibly tested from Perl code,
so I'm at a loss for writing a test script.  Hopefully that panic with
-Dmad is sufficient.

-zefram

Signed-off-by: H.Merijn Brand <h.m.brand@xs4all.nl>

-Dmad minitest failure bisect

Tony Cook wrote:
>Smokes with -Dmad have been failing during make minitest since the
>middle of last month.

Mostly fixed by the attached patch.  The fault is a logic error on my
part, probably from the early phase of developing the lexer API patch,
when I didn't properly understand the various buffer pointer variables.

In my tests with -Dmad, I'm still getting a test failure ("panic: input
overflow") from t/op/incfilter.t.  The underlying problem is the filter
layer mishandling things when a filter function gives it a multiline
string, so it generates an invalid SV state (strlen(SvPVX(PL_linestr))
> SvCUR(PL_linestr)).  This faulty state also occurs without -Dmad,
and so doesn't appear to be Mad-related, it just doesn't in practice
cause the test panic without -Dmad.  I'm investigating this bug now.

-zefram

Signed-off-by: H.Merijn Brand <h.m.brand@xs4all.nl>

perlbug reports "Message sent" even when it hasn't

perlbug doesn't check the return status of Mail::Send and so reports
"Message sent" even if it hasn't:

perl-5.11.2 breaks NYTProf savesrc option (Lexer API suspected)

Tim Bunce wrote:
>The primary issue is the off-by-one error in the array indexing.

There's a bit more to it than that.  The indexing was off-by-one for
*some* places that process a new line, but correct for others, so the
saved source as a whole was mangled rather than simply offset.  Also,
there were some redundant calls to update_debugger_info(), so some lines
got saved twice, in some cases off-by-one for one saving and not for
the other.  The saved source is, therefore, hopelessly broken in 5.11.2.

Attached patch fixes the source saving.  Includes a new test, which works
through all reachable places that source lines get saved.  This should
close RT #70804.

-zefram

Jerry's last patch to add a TODO test didn't update the test count.

Thanks to Nicholas++ for pointing this out

Moved the original test file from the previous patch into t/op/lex.t,

Aded details on the bug it fixes to the tests.

add interpolation test for [perl #70091]

(Updated by Jesse Vincent to put the test in comp rather than a new
toplevel test directory)

Also skip spaces after variable if we are within lexical brackets. Fixes #70091: Segmentation fault in hash lookup in regex substitution

Add assertions that pp_padav and pp_padhv push scalars of the correct type.

further windows makefiles fixes

Message-ID: <4B0D4F71.3010606@khwilliamson.com>

wrap uniprops.t; makefile changes for mktables

Message-ID: <4B0C4744.7080401@khwilliamson.com>

Add TODO test for perl #70748

Bump version and regenerate warnings.pm

Add tests.

Add code and starting perldoc for warnings::fatal_enabled.

This is an analog for warnings::enabled, except it tests whether the
given category has been set fatal using "use warnings FATAL => foo".
This is mostly for symmetry.

Assumes that the fatal bit for a category will have an offset one higher
than the regular bit for the category, because otherwise much rewriting
of __chk would be required.

Add missing library to VC++ section of Win32 dmake makefile

Avoid circularity in $(LINK_FLAGS) definition in Win32 dmake makefile

cleanup get_arena param-names, mark as May-Change

new param-names reflect actual usage.
Mark as may-change so we can add a reqid field later.

Slight rewording of last patch

add mention of PERL_MEM_LOG in perlrun.pod

Specify in Makefile what generates pod/perluniprops.pod

Fix Win32 makefiles as per f86864acbf97469fd9e5d5233d51ff743f4d8d6e

Remove generated file pod/perluniprops.pod from the source distribution

mktables not run unless needed

record version of Intel C during configure

Currently building with icc records an empty ccversion, the attached
change fixes that.

Tony

Signed-off-by: H.Merijn Brand <h.m.brand@xs4all.nl>

* Remove some end-of-line whitespace from perlebcdic

* Convert some pod files to UTF-8 (like all of the other pod files)

* Reword the sentence about checking unlink failures

Fix code-before-declaration error on Win32 with recent VC++ compilers

(We only #define SET_INVALID_PARAMETER_HANDLER for VC2005 and later, so
users of earlier compilers will not have seen this error)

Upgrade to threads 1.75

Don't suggest Mail::Send isn't availble if we're ignoring it

Move change c35076938c7236fb into embed.fnc, from the generated file proto.h

Added a perltodo about enabling/disabling individual warnings

Fix mktables calls in Win32 makefiles

Subject: Re: Smoke [5.11.2] v5.11.2-42-g02b203e FAIL(M) MSWin32 WinXP/.Net SP3 (x86/2 cpu)
Date: Mon, 23 Nov 2009 11:02:17 +0000
Message-ID: <20091123110217.GU2582@plum.flirble.org>

Make unicode semantics the default

disable Module::Build bundle_inc.t

More info about camel in perlrepository.pod

Signed-off-by: H.Merijn Brand <h.m.brand@xs4all.nl>

fix logic for a workaround in POSIX.xs

There is the assignment "RETVAL = 0" to silence the compiler in case
it incorrectly reports return of an undefined value.
This assignment should be present whenever *any* of the symbols is
not defined.  But the code was written so that the assignment was
compiled only when *none* of the symbols was defined.

Use hex instead of octal for larger code points

Add also mktables.lst to gitignore, since it's generated

Add new pod file to various lists and makefiles

Simplify title of perluniprops

The man standard requires the title to be on one line.

Add deprecation of goto to inner scopes to perldelta

Add Karl's text describing his Unicode property changes to perldelta

Merge branch 'mktables' into blead

Remove mktables.lst, since it's generated

Add new generated file lib/unicore/Heavy.pl to gitignore

Also remove from there files that are no longer generated by mktables.

Fix plan syntax in TAP output

mktables revamp

Fix unindented code in perlfunc after 5ed4f2ecec5b66feed399b9a24471aeac4242cdb

Resort MANIFEST - Latest Module::Build MANIFEST update broke sorting.

Add new warning introduced by last patch in perldiag.

deprecate "goto" to jump into a construct

Force OP_REQUIRE to scalar context at the end of ck_require and don't let it become void context. Fixes problem with require not always being in scalar context.

Add a TODO test for "require" always being in scalar context.

Make -UDEBUGGING the default on VMS for 5.12.0.

Like it has been everywhere else for ages and ages.  Also make
command-line selection of -UDEBUGGING and -DDEBUGGING work in
configure.com; before the only way to turn it off was by saying
no in answer to the interactive question.

Perl_pad_sv and Perl_hv_assert don't exist without -DDEBUGGING.

So let's not make them part of the API when they don't exist.

Declaration nit in vms.c's Perl_my_fwrite.

Don't use register storage class for something we later take the
address of.

Update generated Module::Build::ConfigData

Avoid logical name conflicts in File::Path::_rmtree on VMS.

already submitted upstream at:

http://rt.cpan.org/Public/Bug/Display.html?id=51588

Always add a manifest resource to perl.exe to specify the <trustInfo>
settings for Windows Vista and later.  Without this setting Windows
will treat perl.exe as a legacy application and apply various
heuristics like redirecting access to protected file system areas
(like the "Program Files" folder) to the users "VirtualStore"
instead of generating a proper "permission denied" error.

For VC8 and VC9 this manifest setting is automatically generated by
the compiler/linker (together with the binding information for their
respective runtime libraries); for all other compilers we need to
embed the manifest resource explicitly in the external resource file.

This change also requests the Microsoft Common-Controls version 6.0
(themed controls introduced in Windows XP) via the dependency list
in the assembly manifest.  For VC8 and VC9 this is specified using the
/manifestdependency linker commandline option instead.

quick-fix broken Module::Build::Platforms::VMS

Update count

Merge branch 'blead' of ssh://perl5.git.perl.org/gitroot/perl into blead

Fix bug #68260

File::Find was not resolving paths of the form "/..////../" correctly.
Fixed by adding a quantifier to the substitution parameter in
contract_name().

Parse embed.fnc first, then cross-check consistency between it and =for apidoc

Synchronise "may change"/"experimental" flags between embed.fnc and =for apidoc

Merge near-duplicate code for 'api' and 'guts'.