PerlIO::scalar: tests for trailing null

using Eric Brine’s function.

(PerlIO::)scalar.t: Add function for testing trailing null

[perl #108398] Make PerlIO::scalar add null terminator

perlunicode: Clarifications

B.pm: spaces after dots

B.pm: wording tweaks

Add Reini Urban to perldelta acknowledgements

regen pod issues

Make B’s pod fit in 79 cols

Document B::PV’s LEN and CUR methods

Increase $B::VERSION to 1.32

B.pm: fix and add B::IO documentation

add pod to B::IO Methods and IoTYPE.
fix IsSTD.

perldelta: Add ticket number to bug fix

Update perlfaq to CPAN version 5.0150038

  [DELTA]

  5.0150038 Thu 19 Jan 2012 21:10:06 +0100
    * Marpa::XS updated (Jeffrey Kegler)
    * Frameworks (wchristian, ranguard, bigpresh, kraih)
    * Cleanup (wchristian)
    * Users email (apeiron, ranguard)

Ignore and clean the byproducts of make install.html

The install.html target generates vms/README_vms.pod and files in two
directories, pod/perlfunc/ and pod/perlipc/
Add all three to .gitignore files, and add rules to delete the directories
when cleaning.

perldelta: For bb91448 and associated commits

Acknowledgements section in perldelta

regcomp.c: Comment changes

These were in part based on a review by Hugo van der Sanden (thank you
very much).

regcomp.c: Change variable meaning and hence name

I think it is clearer to note that what happens here is that the node
can match fewer characters than what it would normally be thought to,
and hence the returned value should be subtracted; it also means that
the absolute value need not be taken

mktables: Add non-final fold cp table

This will be useful in regcomp.c in later commits

regcomp.c: Remove no-longer used #defines

re/reg_fold.t: Add and revise comments

reg_fold.t: Test bracketed character classes

These were removed when things were very broken, but now they work,
except for things like

    "\N{LATIN SMALL LIGATURE FFI}" =~ /[a-z]{3}/i

where the multi-char fold crosses single bracketed character class
boundaries.  These will probably never be fixed in Perl in the general
case (using \F and fc() instead), but I expect that

    "\N{LATIN SMALL LIGATURE FFI}" =~ /[f][f][i]/i

will eventually be changed so the brackets are optimized away, and will
work.  Then these TODOs will start passing.

re/reg_fold.t: Test more code points

This statement was wrong that said all these things are tested in
fold_grind.t.  It will test them all when run with a particular option,
but due to time issues, it skips many code points.  reg_fold.t, on the
other hand, does just basic sanity testing, and so should always test
every code point for that.

re/reg_fold.t: Remove fixed TODOs

These TODOs have not been tested, mostly, for a while

re/reg_fold.t: Use /u rules for Unicode tests

These tests are for Unicode, so should have /u (instead of /d).

regcomp.c: Refactor join_exact() to eliminate extra passes

The strings in every EXACTFish node are examined for certain problematic
sequences and code points.  Prior to this patch, this was done in
several passes, but this refactors the routine to do it in a single
pass.

regcomp.c: Modify some comments

regex: Remove FOLDCHAR regnode type

This node type hasn't been used since 5.14.0.  Instead an ANYOFV node
was generated where formerly a FOLDCHAR node would have been used.  The
ANYOFV was used because it already existed and was up-to-date, whereas
FOLDCHAR would have needed some bug fixes to adapt it, even though it
would be faster in execution than ANYOFV; so the code for it was
retained in case it was needed.

However, both these solutions were defective, and a previous commit has
changed things to a different type of solution entirely.  Thus FOLDCHAR
is obsolescent and can be removed, though the code in it was used as a
base for some of the new solutions.

regex: Fix some tricky fold problems

As described in the comments, this changes the design of handling the
Unicode tricky fold characters to not generate a node for each possible
sequence but to get them to work within EXACTFish nodes.

The previous design(s) all used a node to handle these, which suffers
from the downfall that it precludes legitimate matches that would cross
the node boundary.

The new design is described in the comments.

regcomp.c: Rework join_exact()

This re formats and refactors portions of join_exact() that look for the
tricky Greek fold sequences.  I renamed various variables, etc, to help
me understand what was going on.  It turns out that there were two
off-by-one bugs that prevented this from working properly.

The first bug had the loop quit one too soon  The boundary should be
"<=", and not strictly less-than.  This means that if the sequence is
the last thing in the string (or only thing) it will not be found.
The other bug had the end-needle parameter be 1 too short, which means
that this would succeed with  only the first 3 bytes of the sequence
(now called 'tail'), thus matching many more things than it should
(provided it got the chance to match at all given the first bug).

regex: Add new node type EXACTFU_NO_TRIE

This new node is like EXACTFU but is not currently trie'able.  This adds
handling for it in regexec.c, but it is not currently generated; this
commit is preparing for future commits

regex: Add new node type EXACTFU_SS

This node will be used to distinguish between the case in a non-UTF8
pattern and string where something could be matched that is of different
lengths.  The only instance where this can happen is the LATIN SMALL
LETTER SHARP S can match the sequences "ss", "Ss", "sS", or "SS", hence
the name.

This node is not currently generated; this prepares for future commits

regcomp.c: Need to account for delta sizes

When a node can match varying sizes, the delta variable in the optimizer
needs to change to account for that, and it can no longer match a fixed
length string.

This code was adapted from the existing code for the FOLDCHAR node that
has to deal with the same problem.

regcomp.c: Change param to join_exact()

This changes a parameter to this function to instead of changing a running
total, return the actual value computed by the function; and it changes
the calling areas of code to compensate.

regcomp.c: regex start class for sharp s

Under most folding types, the optimizer start class should include all
of s, S, and the sharp s (\xdf) if it includes any of them.  The code
was neglecting the latter.  This is currently not relevant, as there is
special handling of the sharp s elsewhere in regcomp.c.  But this is a
step to changing that special handling to fix some bugs.

regcomp.c: white-space only and comments only

regcomp.c: Save computed value in variable for later use

This will be used in future commits.  Retrieving it via OP() doesn't
work in pass1 of the regex compiler.

regcomp.c: Make sure trie can handle node passed to it

regexec.c: white space only

regexec.c: EXACTF nodes can never be UTF

By definition a regex pattern that is in UTF-8 uses Unicode matching
rules, and EXACTF is non-Unicode (unless the target string is UTF-8).
Therefore an EXACTF node will never be generated for a UTF-8 pattern,
and there is no need to test for it being so.

regexp_noamp.t: Add comment

t/re/re_tests: Add some tests

t/re/re_tests: revise test

This is the wrong test for the cited ticket.  That one is for tests
occurring in bracketed character classes.

t/re/re_tests: Update comment

This reflects that now that there is autoloading of \N{}, such tests can
go in this file

util.c: Add comment

regcomp.c: Don't print incorrect debug info

The break out of the loop should be done before the debug statements
that indicate the things that happen only if the break isn't done.

regcomp.sym: Change comments

perl5db.t: add the DebugWrap class

This helper encapsulates a bit of repeated code in the debugger
tests to avoid quite so much copying and pasting.

Bump several file copyright dates

Sync copyright dates with actual changes according to git history.

[Plus run regen_perly.h to update the SHA-256 checksums, and
regen/regcharclass.pl to update regcharclass.h]

EU::Typemaps: Helper module for easy typemap inclusion in XS

In order to be able to deprecate certain typemaps from the core and send
them to a peaceful retirement on the CPAN, it's necessary to make it
easy to share and include these typemaps in case they're used despite
CPAN greps claiming the opposite. This helper module facilitates
non-copy-and-paste sharing of typemaps by adding a dependency and
including a single line of code in the XS.

Removed more unused boilerplate from perldelta

Bump the visible perl -V copyright to 2012

Add Steffen Schwigon to AUTHORS.

EU::Typemaps: Implement embedded-typemap dumping

This method will return a string representation of the typemap object
that can be included *verbatim* in an XS file.

Typo in perlre

Spotted by Jim Avera

Begin battering the perldelta into shape for v5.15.7

regen pod issues

overload.pm: Smaller indents for long lines

overload.pm: spaces after dots; wording tweak

Document new overload warning in overload.pm

as well as perldiag.

overload.pm: Doc tweaks

This sentence got mangled somehow, somewhen.

Increase $overloading::VERSION to 0.02

overloading.pm: Load Carp on demand

In overload::ov_method, use ‘no overloading’

Using this instead of Scalar::Util makes things marginally faster.

perldelta: another bug number

perldelta for #108480: $cow |= number

[perl #108480] $cow |= number undefines $cow

If a read-only scalar is passed to one of | & ^ and it decides to do
a numeric operation, the numeric flags on the read-only scalar are
turned off afterwards if they were not on to begin with.

This was introduced in commit b20c4ee1f, which did so to stop $x | "0"
from coercing the rhs and making it behave differently the second
time through.

What that commit did not take into account was that the read-only
flag is set on cow scalars, and the same pp function is used for the
assignment forms.  So it was turning off the numeric flags after
$cow |= 1, leaving $cow undef.

I made this numeric flag-twiddling apply only to read-only scalars
(supposedly), because that seemed the most conservative and acceptable
change.  I am actually in favour of extending it to all scalars, to
make these operators less surprising.  For that reason, this commit
preserves the current behaviour with cows in the non-assignment case:
they don’t get coerced into numbers.  Changing them to work the same
way as non-cow writable scalars would make things more consistent, but
more consistently buggy.  I would like to make this non-coercion apply
to all scalars in 5.18.

This commit simply skips the flag-twiddling on the lhs in the assign-
ment case.

perldelta for last two fixes

Don’t crash on @a =~ // warning

This is similar to bug #106726, caused by 579333ee9e3 and fixed
by c6fb3f6.

This bug was caused by c6771ab63d, which had exactly the same mistake.
Attempting to use find_runcv at compile time to find a variable name
is not going to work in general.  It only works by accident some
of the time.

[perl #106726] Don’t crash on length(@arr) warning

The RT ticket blames this on 676a678ac, but it was actually commit
579333ee9e3.  676a678ac extended this problem to evals (and modules),
but it already occurred in the main program.

This crashes:

    ./miniperl -Ilib -we 'sub {length my @forecasts}'

because it is trying to find the variable name for the warning in the
CV returned by find_runcv, but this is a *compile-time* warning, so
using find_runcv is just wrong.

It ends up looking for the array in PL_main_cv’s pad, instead of
PL_compcv.

avoid truncating time values when long is smaller than time_t

long is only 32-bits on x64 Win32, but time_t is 64-bits.  This was warning:

POSIX.xs(1777) : warning C4244: 'initializing' : conversion from 'time_t' to 'const long', possible loss of data

The check against (time_t)-1 is the approved check from ANSI C 89 and
99.

Avoid 'defined(@array) is deprecated' warnings in tests.

Commit 604a99bd464c92d7 enabled the warning for package arrays, but failed
to lexically disable the warning for the various tests for the construction.
Even though the construction is deprecated, we'd still like to know if the
behaviour changes, in case it wasn't intentional.

In Perl_refcounted_he_fetch_pvn(), eliminate nested ? : ternary operators.

Update Locale-Maketext to CPAN version 1.22

  [DELTA]

  2012-01-14
    * Minor POD documentation update to sync with upstream blead.

Make Pod::Html more robust against malformed L<> contents.

Pod::Html attempts to search for the contents to see if they are a suffix
of any entry in an existing list, using a regular expression.
Previously the contents were interpolated directly into a regex, which
meant that if they happened to be syntactically invalid regular expression
syntax, Pod::Html aborted with a runtime error.

Purge references to --netscape and --libpods, no longer in Pod::Html

The long deprecated --netscape flag was removed in commit 27b29ec338b08496.
This was originally added to control use of Netscape specific HTML
extensions, , but became a no-op when that functionality was removed.
--libpods was removed in commit 3b49d8d9ac841d8e.

However neither commit removed use of these flags by callers to Pod::Html,
notably in installhtml and the Makefiles that invoke it. Hence this commit.

perldelta: Typos and calrifications

perldelta up to 1a50d74bac4

perldelta for @& and PL_sawampersand

perldelta for tying and autoviv

perldelta for overload::Overloaded/can change

perldelta for += warning

Lower $overload::VERSION to 1.17

It doesn’t need to be increased twice between releases.

config.over is generated on some platforms, .gitignore it

avoid overflowing a 32-bit signed int

and the associated warning from Solaris C:

"regcomp.c", line 5294: warning: integer overflow detected: op "<<"

handle U suffixed unsigned int literals from regexp.h

Provide as much diagnostic information as possible in "panic: ..." messages.

The convention is that when the interpreter dies with an internal error, the
message starts "panic: ". Historically, many panic messages had been terse
fixed strings, which means that the out-of-range values that triggered the
panic are lost. Now we try to report these values, as such panics may not be
repeatable, and the original error message may be the only diagnostic we get
when we try to find the cause.

We can't report diagnostics when the panic message is generated by something
other than croak(), as we don't have *printf-style format strings. Don't
attempt to report values in panics related to *printf buffer overflows, as
attempting to format the values to strings may repeat or compound the
original error.

Increase $Math::BigInt::VERSION to 1.998

BigInt.pm: Suppress overload warning

BigInt.pm intentionally registered an unregisterable op.

perldiag.pod: Document overload’s invalid arg warning

overload.pm: Combine two loops

It should go faster if we only iterate through %arg once.

Test invalid arg warning from overload

overload.pm: Put invalid arg warning in "overload" category

Existing overload warnings work that way.

Suppress ‘useless’ warning in overload.pm

Emit a warning if an attempt is made to overload an invalid (e.g., misspelled) operator. For RT #74098.

defined(@array) now also warns for package variables.

Test that defined warns for package arrays and hashes.

Currently TODO'd for package arrays. The existing tests were only for
lexicals.

In Perl_feature_is_enabled() use cBOOL to convert the pointer to a "bool".

On some platforms which don't have a (real) bool type, bool is actually a
char, and hence (sadly) it's correct for the compiler to truncate when
assigning to it, instead of what the programmer thought was going to happen
(testing zero or not). In Perl_feature_is_enabled(), the expression is a
pointer, so if it converts to an integer with the bottom 8 bits zero, then
on these platforms it would truncate to "false". Not what was expected.

Shuffle my entry around to use my name instead of old email