Forward-port of rev. 51857:

Building with HP's cc on HP-UX turned up a couple of problems.
_PyGILState_NoteThreadState was declared as static inconsistently.
Make it static as it's not necessary outside of this module.

Some tests failed because errno was reset to 0. (I think the tests
that failed were at least: test_fcntl and test_mailbox).
Ensure that errno doesn't change after a call to Py_END_ALLOW_THREADS.
This only affected debug builds.

Add a "crasher" taken from the sgml bug report referenced in the comment

Properly handle a NULL returned from PyArena_New().
(Also fix some whitespace)

Klocwork #364.

Forward port of 51850 from release25-maint branch.

As mentioned on python-dev, reverting patch #1504333 because it introduced
an infinite loop in rev 47154.

This patch also adds a test to prevent the regression.

Remove the __unicode__ method from exceptions.  Allows unicode() to be called
on exception classes.  Would require introducing a tp_unicode slot to make it
work otherwise.

Fixes bug #1551432 and will be backported.

Fix typo in example

Use native SQLite types

Use native SQLite types

Explain SQLite a bit more clearly

Explain SQLite a bit more clearly

Add missing word

Add missing NEWS entry for rev 51803

The cast function did not accept c_char_p or c_wchar_p instances
as first argument, and failed with a 'bad argument to internal function'
error message.

Anonymous structure fields that have a bit-width specified did not work,
and they gave a strange error message from PyArg_ParseTuple:
    function takes exactly 2 arguments (3 given).

With tests.

Add a warning notice on top of the generated grammar.txt.

[Bug #1552726] Avoid repeatedly polling in interactive mode -- only put a timeout on the select()
if an input hook has been defined.  Patch by Richard Boulton.

This select() code is only executed with readline 2.1, or if
READLINE_CALLBACKS is defined.

Backport candidate for 2.5, 2.4, probably earlier versions too.

Typo fix

Fix a glaring error and update some version numbers.

Fix the speed regression in inspect.py by adding another cache to speed up getmodule(). Patch #1553314

Fix refcounts and add error checks.

Fixed subprocess bug #1531862 again, after removing tests
offending buildbot

Add news item for bug fix of SF bug report #1546372.

Fix missing import of the types module in logging.config.

Bug #1542051: Exceptions now correctly call PyObject_GC_UnTrack.
Also make sure that every exception class has __module__ set to
'exceptions'.

with and as are now keywords.  There are some generated files I can't recreate.

Bug #1550983: emit better error messages for erroneous relative
imports (if not in package and if beyond toplevel package).

Bug #1551427: fix a wrong NULL pointer check in the win32 version
of os.urandom().

Revert 51758 because it broke all the buildbots

Fixing #1531862: Do not close standard file descriptors in the
subprocess module.

Update the PCBuild8 solution.
Facilitate cross-compilation by having binaries in separate Win32 and x64 directories.
Rationalized configs by making proper use of platforms/configurations.
Remove pythoncore_pgo project.
Add new PGIRelease and PGORelease configurations to perform Profile Guided Optimisation.
Removed I64 support, but this can be easily added by copying the x64 platform settings.

[Bug #1526834] Fix crash in pdb when you do 'b f(';
the function name was placed into a regex pattern and the unbalanced paren
caused re.compile() to report an error

[Bug #1525469] SimpleXMLRPCServer still uses the sys.exc_{value,type} module-level globals instead of calling sys.exc_info().  Reported by Russell Warren

Rearrange example a bit, and show rpartition() when separator is not found

Bug #1552618: change docs of dict.has_key() to reflect recommendation
to use "in".

Fix a typo: 2013 -> 0213

Fix a few bugs on cjkcodecs found by Oren Tirosh:
- gbk and gb18030 codec now handle U+30FB KATAKANA MIDDLE DOT correctly.
- iso2022_jp_2 codec now encodes into G0 for KS X 1001, GB2312
  codepoints to conform the standard.
- iso2022_jp_3 and iso2022_jp_2004 codec can encode JIS X 2013:2
  codepoints now.

M-x untabify

Add a comment about some refactoring.  (There's probably more that should be done.)  I will reformat this file in the next checkin due to the inconsistent tabs/spaces.

Bug #1520864 (again): unpacking singleton tuples in list comprehensions and
generator expressions (x for x, in ... ) works again.

Sigh, I only fixed for loops the first time, not list comps and genexprs too.
I couldn't find any more unpacking cases where there is a similar bug lurking.

This code should be refactored to eliminate the duplication.  I'm sure
the listcomp/genexpr code can be refactored.  I'm not sure if the for loop
can re-use any of the same code though.

Will backport to 2.5 (the only place it matters).

Patch #1540470, for OpenBSD 4.0.  Backport candidate for 2.[34].

Add a NEWS entry for str.rpartition() change

This was found by Guido AFAIK on p3yk (sic) branch.

Fix SF #1552093, eval docstring typo (3 ps in mapping)

Fix SF bug #1546288, crash in dict_equal.

Add missing svn:eol-style property to text files.

Whitespace normalization.

"Conceptual" merge of rev 51711 from the 2.5 branch.

i_divmod():  As discussed on Python-Dev, changed the overflow
checking to live happily with recent gcc optimizations that
assume signed integer arithmetic never overflows.

This differs from the corresponding change on the 2.5 and 2.4
branches, using a less obscure approach, but one that /may/
tickle platform idiocies in their definitions of LONG_MIN.
The 2.4 + 2.5 change avoided introducing a dependence on
LONG_MIN, at the cost of substantially goofier code.

Fix endcase for str.rpartition()

NEWS entry on trunk for decimal module changes

Typo fix for decimal docs

Fix final documentation nits before backporting decimal module fixes to 2.5

Hmm, this test has failed at least twice recently on the OpenBSD and
Debian sparc buildbots.  Since this goes through a lot of tests
and hits the disk a lot it could be slow (especially if NFS is involved).
I'm not sure if that's the problem, but printing periodic msgs shouldn't hurt.
The code was stolen from test_compiler.

Add missing word in comment

Fix documentation nits for decimal context managers.

Further corrections to the decimal module context management documentation

Make decimal.ContextManager a private implementation detail of decimal.localcontext()

Bug #1550714: fix SystemError from itertools.tee on negative value for n.

Needs backport to 2.5.1 and earlier.

Bug #1548092: fix curses.tparm seg fault on invalid input.  Needs backport to 2.5.1 and earlier.

SF #1547931, fix typo (missing and).  Will backport to 2.5

evalfile() should be execfile().

- SF patch #1550263: Enhance and correct unittest docs
- various minor cleanups for improved consistency

Have pre-existing C files use 8 spaces indents (to match old PEP 7 style), but
have all new files use 4 spaces (to match current PEP 7 style).

Fix comment about indentation level in C files.

Make sure memory is properly cleaned up in file_init.

Backport candidate.

Remove the old decimal context management tests from test_contextlib (guess who didn't run the test suite before committing...)

Fix the wrongheaded implementation of context management in the decimal module and add unit tests. (python-dev discussion is ongoing regarding what we do about Python 2.5)

Doc fix: hashlib objects don't always return a digest of 16 bytes.
Backport candidate for 2.5.

Fix a buglet in the error reporting (SF bug report #1546372).

This should probably go into Python 2.5 or 2.5.1 as well.

Fix a couple of typos.

- Move functions common to all path modules into genericpath.py and have the
  OS speicifc path modules import them.
- Have os2emxpath import common functions fron ntpath instead of using copies

A new test here relied on preserving invisible trailing
whitespace in expected output.  Stop that.

Add missing svn:eol-style property to text files.

Whitespace normalization.

The regular expression engine in '_sre' can segfault when interpreting
bogus bytecode.  It is unclear whether this is a real bug or a "won't
fix" case like bogus_code_obj.py.

Build _ctypes.pyd for win AMD64 into the MSVC project file.
Since MSVC doesn't know about .asm files, a helper batch file is needed
to find ml64.exe in predefined locations.  The helper script hardcodes
the path to the MS Platform SDK.

Add missing file for _ctypes.pyd port to win64 on AMD64.

Port _ctypes.pyd to win64 on AMD64.

importing types is not necessary if we use isinstance

Patch #1545507: Exclude ctypes package in Win64 MSI file.
Will backport to 2.5.

Fix SF bug #1545837: array.array borks on deepcopy.
array.__deepcopy__() needs to take an argument, even if it doesn't actually
use it. Will backport to 2.5 and 2.4 (if applicable.)

Reverting the patch that tried to fix the issue whereby x**2 raises
OverflowError while x*x succeeds and produces infinity; apparently
these inconsistencies cannot be fixed across ``all'' platforms and
there's a widespread feeling that therefore ``every'' platform
should keep suffering forevermore.  Ah well.

Replace dead code with an assert.

Now that COMMENT tokens are reliably followed by NL or NEWLINE,
there is never a need to add extra newlines in untokenize.

Bug fixes large and small for tokenize.

Small: Always generate a NL or NEWLINE token following
       a COMMENT token.  The old code did not generate an NL token if
       the comment was on a line by itself.

Large: The output of untokenize() will now match the
       input exactly if it is passed the full token sequence.  The
       old, crufty output is still generated if a limited input
       sequence is provided, where limited means that it does not
       include position information for tokens.

Remaining bug: There is no CONTINUATION token (\) so there is no way
for untokenize() to handle such code.

Also, expanded the number of doctests in hopes of eventually removing
the old-style tests that compare against a golden file.

Bug fix candidate for Python 2.5.1. (Sigh.)

x**2 should about equal x*x (including for a float x such that the result is
inf) but didn't; added a test to test_float to verify that, and ignored the
ERANGE value for errno in the pow operation to make the new test pass (with
help from Marilyn Davis at the Google Python Sprint -- thanks!).

Baby steps towards better tests for tokenize

Move functional howto into trunk

Expose column offset information in parse trees.

Alexander Belopolsky pointed out that pos is a size_t

patch for documentation for recent uuid changes (from ping)

Try to get the windows bots working again with the new peephole.c

Patch #1541585: fix buffer overrun when performing repr() on
a unicode string in a build with wide unicode (UCS-4) support.

This code could be improved, so add an XXX comment.

Handle a few more error conditions.

Klocwork 301 and 302.  Will backport.

Patch #1542451: disallow continue anywhere under a finally

I'm undecided if this should be backported to 2.5 or 2.5.1.
Armin suggested to wait (I'm of the same opinion).  Thomas W thinks
it's fine to go in 2.5.

Fix a couple of ssize-t issues reported by Alexander Belopolsky on python-dev

Add assert to make Klocwork happy (#276)

Fix bug #1543303, tarfile adds padding that breaks gunzip.
Patch # 1543897.

Will backport to 2.5

Move peephole optimizer to separate file.  (Forgot .h in previous checkin.)

Move peephole optimizer to separate file.

Patch #1542948: fix urllib2 header casing issue. With new test.

Handle PyString_FromInternedString() failing (unlikely, but possible).

Klocwork #325

(I'm not backporting this, but if someone wants to, feel free.)