SF patch 637176: list.sort crasher

Armin Rigo's Draconian but effective fix for

SF bug 453523: list.sort crasher

slightly fiddled to catch more cases of list mutation.  The dreaded
internal "immutable list type" is gone!  OTOH, if you look at a list
*while* it's being sorted now, it will appear to be empty.  Better
than a core dump.

Clarified documentation of tempnam().
Closes SF bug #635656.

Update text to refer to 2.2.2
Remove an XXX item: I'm not going to write a section on the email package
    at this point

Remove extra word

SF patch 629637:  Add sample(population, k) method to the random module.
Used for random sampling without replacement.

delete reference to building on Minix, which will be unsupported in 2.3

Use PyInt_AsLong instead of PyInt_AS_LONG after the call to
PyNumber_Int, because now PyNumber_Int might return a long,
and PyInt_AsLong can handle that, whereas PyInt_AS_LONG can't.

This closes SF bug #629989.

Don't define _XOPEN_SOURCE and _POSIX_C_SOURCE on FreeBSD 5.0. Fixes #636318.

Forgot a paren in the MSVC + 64-bit + Intel case.

Added a blurb about the change to sys.version under MSVC.

Some help for SF 614770:  MSVC 7.0 compiler support

This changes sys.version under Microsoft builds to include the MS compiler
version number (_MSC_VER).  Since VC 6 and VC 7 are apparently
incompatible, and both can be installed on a single box, distutils needs
some way to figure out which version of MSVC a given Python was compiled
under.

As also suggested by MvL, got rid of #ifdef'ery for the defunct _M_ALPHA
target.

Bugfix candidate?  Hard to say.  As far as I'm concerned, VC 7 wasn't
a supported platform in the 2.2 line.  If somebody thinks it should be,
they can do the work.

Use new-style CHECK_TYPE to avoid modifying confdefs.h. Include sys/types.h
Fixes #636431.

Protect pyconfig.h from multiple inclusions.

Do not define _XOPEN_SOURCE on OpenBSD 2.x and 3.[012]. Fixes #635034

Don't define _XOPEN_SOURCE on OpenBSD 2.x and 3.[012].

Check whether we can take the address of chown, link, and symlink.

- Use imp to find appletrawmain.py in stead of hand-crafting the path
  to it.
- Allow for symlinks in the applet template.

- Building IDE is optional on waste being available, similar to building
  IDLE (it was a fatal error before)
- Shuffled a few things around to facilitate the experimental building
  of MacPython for Jaguar's pre-installed python.

Make private functions static so we don't pollute the namespace

Allow both string and Unicode objects in levels.

Don't try to convert the test filename to Unicode with -U.

Fix typo.

Look in db4 directories when checking for db4.

Search for tix subdirectories. Fixes #564729. Will backport to 2.2.

Restore to ANSI C.

Install the bz2 DLL on Windows.

I already forgot what I changed -- it wasn't important <wink>.

OK -- all tests pass on Windows now.  The rest were due to 3 more
binary-vs-text-mode screwups.

More tests run on Windows now.  Something is still wrong here, but no
idea what.  Added liberal XXX explanations for the next guy.

Many changes to get this to pass on Windows, and to make it easier to
figure out what the code was doing.  The fixes were a combination of
closing open files before deletion, opening files in binary mode, and
plain skipping things that can't work on Windows (BaseTest.decompress
uses a process gimmick that doesn't exist on Windows, and, even if it
did, assumes a "bunzip2" executable is on PATH).

Whitespace normalization.

Comment out the test docstrings so we can at least tell which tests are
failing.

Whitespace normalization.

Start building the bz2 module on Windows.

CAUTION:  The Python test still has many failures, but I'm out of time
for this now (already took much longer than hoped to get this far).
The base bz2 library does pass its own tests (see next).

CAUTION:  People building on Windows have to download and build tne
bz2 compression libraries now.  See PCbuild\readme.txt for complete
instructions.

Open at least one binary file in binary mode.  This allows a few of the
bz2 tests to pass on Windows; most are still failing.

bz2_compress/bz2_decompress:  more casting away LONG_LONG for
_PyString_Resize calls.

BZ2Decomp_decompress():  Fixed more long vs LONG_LONG confusions.

BZ2Comp_flush():  Fixed more int vs LONG_LONG confusions.

BZ2Comp_compress():  Explicitly cast the LONG_LONG size argument to
_PyString_Resize to int.

BZ2Comp_compress():  changed decl of totalout to LONG_LONG, since it's
solely used to hold LONG_LONG values, and the compiler rightfully warns
about potential data loss otherwise.

Repaired signed-vs-unsigned mismatch.

This couldn't compile on WIndows, due to hardcoded "long long".  Repaired.

Another attempt at making the set constructor both safe and fast.  [SF
bug 628246]

[Bug #233259] Ugly traceback for DistutilsPlatformError
  Fixed by catching all exceptions that are subclasses of DistutilsError,
  so only the error message will be printed.  You can still get the
  whole traceback by enabling the Distutils debugging mode.

Fix comment typo

* Modules/bz2module.c
  (BZ2File_dealloc): Call Util_DropReadAhead().
  (*): Included aesthetic changes by Neal Norwitz.

Simply delete the fpectl module, instead of leaving it commented out;
    if people want to compile it, they should edit Modules/Setup, not setup.py

Richie Hindle

This is Richie Hindle's patch:

[ 631276 ] Exceptions raised by line trace function

It conflicted with the patches from Armin I just checked it, so I had
to so some bits by hand.

Assorted patches from Armin Rigo:

[ 617309 ] getframe hook (Psyco #1)
[ 617311 ] Tiny profiling info (Psyco #2)
[ 617312 ] debugger-controlled jumps (Psyco #3)

These are forward ports from 2.2.2.

Make strip behave as documented. Will backport to 2.2.3.

Clarify the meaning of "requires Python 1.5.2".

Closes SF bug #634069 reporting the docs on the ** operator were out
of date and did not reflect the current CPython implementation.

_update():  Commented the new obscurity.  Materialized into a tuple
instead of into a list for a bit of speed/space savings.  Reopened the
bug report too (628246), as I'm unclear on why we don't sort out the
cause of the TypeError instead.

Closes SF bug #628246.

The _update method detected mutable elements by trapping TypeErrors.
Unfortunately, this masked useful TypeErrors raised by the iterable
itself.  For cases where it is possible for an iterable to raise
a TypeError, the iterable is pre-converted to a list outside the
try/except so that any TypeErrors propagate through.

Got rid of the python.rsrc resource file. The error message strings and
dialogs are now stored in Mac/Lib, and loaded on demand through macresource.
Not only does this simplify a MacPython based on Apple's Python, but
it also makes Mac error codes come out symbolically when running command
line python (if you have Mac/Lib in your path).

The resource files are copied from Mac/Resources. The old ones will disappear
after the OS9 build procedure has been adjusted.

Add documentation for the PEP 293 functionality:

The errors attribute can be changed after the reader/writer
is created.

For encoding there are two additional errors values:
"xmlcharrefreplace" and "backslashreplace".

These values can be extended via register_error().

Minor markup adjustments.

Restore attribute access so that the following work again:

   dir(xrange(10))
   xrange(10).__getitem__(4)

Use dynamic linking for the SHGetSpecialFolderPath function, it is not
always available on Windows NT. When the function cannot be loaded,
get_special_folder_path raises OSError, "function not available".

Compiled the exe, and rebuilt bdist_wininst.py.

Fix a small bug when sys.argv[0] has an absolute path.
See http://mail.python.org/pipermail/distutils-sig/2002-November/003039.html

Document the changed fdopen behaviour.
(Hope the markup is ok).

NEWS entry for the changed fdopen function.

Enforce valid filemode. Fixes SF Bug #623464.

Try linking the major/minor test program. Fixes #634444.

Fixed sre bug "[#581080] Provoking infinite scanner loops".

This bug happened because: 1) the scanner_search and scanner_match methods
were not checking the buffer limits before increasing the current pointer;
and 2) SRE_SEARCH was using "if (ptr == end)" as a loop break, instead of
"if (ptr >= end)".

* Modules/_sre.c
  (SRE_SEARCH): Check for "ptr >= end" to break loops, so that we don't
  hang forever if a pointer passing the buffer limit is used.
  (scanner_search,scanner_match): Don't increment the current pointer
  if we're going to pass the buffer limit.

* Misc/NEWS
  Mention the fix.

Script to create .app bundles. Largely untested.

Add --check-tkinter to setup.py. Install IDLE. Fixes #634078.

Use column= rather than col=; with Tk 8.4 col= no longer works.
[SF patch 634250 -- that was an IDLEFORK patch.]

Fixed bug "[#466200] ability to specify a 'verify' script".

* Lib/distutils/command/bdist_rpm.py
  (bdist_rpm.initialize_options): Included verify_script attribute.
  (bdist_rpm.finalize_package_data): Ensure that verify_script is a filename.
  (bdist_rpm._make_spec_file): Included verify_script in script_options
  tuple.

* Misc/NEWS
  Mention change.

Add next() and __iter__() methods to StreamReader, StreamReaderWriter
and StreamRecoder.

This closes SF bug #634246.

Make int("...") return a long if an int would overflow.

Also remove the 512 character limitation for int(u"...") and long(u"...").

This closes SF bug #629989.

Fix NameError exception ('name' undefined)

Handle really big steps in extended slices.

Fixes a test failure on 64 bit platforms (I hope).

Fix docstring typos

Old change (probably suggested by Jason Tishler) The GNU/Windows compiler is now called MinGW

[Patch #633635 from David M. Cooke]
    Make docs accurate; getch() in nodelay mode returns -1

[Patch #633635 from David M. Cooke]
   Make keyname raise ValueError if passed -1, avoiding a segfault
   Make getkey() match the docs and raise an exception in nodelay mode
   The return type of getch() is int, not chtype

Fixed bug #470582, using a modified version of patch #527371,
from Greg Chapman.

* Modules/_sre.c
  (lastmark_restore): New function, implementing algorithm to restore
  a state to a given lastmark. In addition to the similar algorithm used
  in a few places of SRE_MATCH, restore lastindex when restoring lastmark.
  (SRE_MATCH): Replace lastmark inline restoring by lastmark_restore(),
  function. Also include it where missing. In SRE_OP_MARK, set lastindex
  only if i > lastmark.

* Lib/test/re_tests.py
* Lib/test/test_sre.py
  Included regression tests for the fixed bugs.

* Misc/NEWS
  Mention fixes.

Fix for bug 631247: configure should test the build directory for
being on a case-insensitive filesystem, not the source directory.

Skip the test_nocaret test when running as jython. Jython happens to add
a caret in this case too.

Make the test pass for jython where there are no sys.executable.

By default when getting the search menu, the currently highligted
text is the search term.

Fix minor wording and 2 typos

Support sdist.

Whoops, fix the typo correctly this time

Use PyOS_snprintf() instead of sprintf and wrap the long line

Add an entry for pdb's new `pp' command.

Document the new `pp' command.

Implement a `pp' command, which is like `p' except that it
pretty-prints the value of its expression argument.

Fix minor typos

Minor cleanups, markup.

Document that images go away when they go away. Fixes #632323.

parse(), _parseheaders(), _parsebody(): A fix for SF bug #633527,
where in lax parsing, the first non-header line after a header block
(e.g. the first line not containing a colon, and not a continuation),
can be treated as the first body line, even without the RFC mandated
blank line separator.

rfc822 had this behavior, and I vaguely remember problems with this,
but can't remember details.  In any event, all the tests still pass,
so I guess we'll find out. ;/

This patch works by returning the non-header, non-continuation line
from _parseheader() and using that as the first header line prepended
to fp.read() if given.  It's usually None.

We use this approach instead of trying to seek/tell the file-like
object.

test_no_separating_blank_line(): A test for SF bug #633527, no
separating blank line between a header block and body text.

Tests both lax and strict parsing.

A message with no separating blank line between the headers and the
body.  A test message for SF bug #633527.

test_text_plain_in_a_multipart_digest(): A test of the fix for SF bug
#631350, where a subobject in a multipart/digest isn't a
message/rfc822.

_parsebody(): A fix for SF bug #631350, where a subobject in a
multipart/digest isn't a message/rfc822.  This is legal, but counter
to recommended practice in RFC 2046, $5.1.5.

The fix is to look at the content type after setting the default
content type.  If the maintype is then message or multipart, attach
the parsed subobject, otherwise use set_payload() to set the data of
the other object.

Test case, distilled from SF bug #631350, where a subobject in a
multipart/digest isn't a message/rfc822.  This is legal, but counter
to recommended practice in RFC 2046, $5.1.5.

Another round on SF patch 618135: gzip.py and files > 2G
The last round boosted "the limit" from 2GB to 4GB.  This round gets
rid of the 4GB limit.  For files > 4GB, gzip stores just the last 32
bits of the file size, and now we play along with that too.  Tested
by hand (on a 6+GB file) on Win2K.

Boosting from 2GB to 4GB was arguably enough "a bugfix".  Going beyond
that smells more like "new feature" to me.