Merge with 3.2

Issue 15777: Fix a refleak in _posixsubprocess.

It was exposed by 03c98d05b140 and dbbf3ccf72e8.

Close #2051: Oops, transposed the digits in the issue number in the previous commit

Close #2501: Permission bits are once again correctly copied from the source file to the cached bytecode file. Test by Eric Snow.

Issue #15037: Use correct path to system terminfo database.

Issue #15770: Check invalid arguments in test function. Patch by Victor Stinner.

mpd_qpowmod(): calculate result with zero-exponent for compatibility with
decimal.py. The hack to remove the ideal exponent is no longer required.

Issue #14292: Ensure that the OS X installer build configures the CXX
environment variable to a value comparable to what it sets for CC for
the benefit of C++ extension modules.
(Patch by Ronald Oussoren)

Issue #15645: Ensure 2to3 grammar pickles are properly installed.
(Patch by Ronald Oussoren)

issue #15645: null merge

Issue #15645: Ensure 2to3 grammar pickles are properly installed.
(Patch by Ronald Oussoren)

Suggested a whatsnew item

Issue #665194: Added a small optimization

Added test for a bug fixed in issue #665194.

#665194: fix variable name in exception code path.

It was correct in the original patch and I foobared it
when I restructured part of the code.

#665194: Update email.utils.localtime to use astimezone, and fix bug.

The new code correctly handles historic changes in UTC offsets.
A test for this should follow.

Original patch by Alexander Belopolsky.

Use zero bottom margin.

In the 32-bit build, dec_hash() raised InvalidOperation if the operand
had a coefficient with MAX_PREC=425000000 digits and a negative exponent.
Increasing the context limits above the official values fixes the issue
and is safe (in this case!).

1) Use _mpd_basedivmod() regardless of the length of the dividend. This is
   required for a corner case in dec_hash() in the following commit and also
   usually faster. dec_hash() needs some extra precision above MPD_MAX_PREC,
   and _mpd_base_ndivmod() is not audited for that.

2) Use _mpd_basemul() if the length of the smaller operand is less than
   or equal to 256. While this is technically an optimization, it is
   required for *testing* corner cases in dec_hash() in reasonable time.

Issue #15766: Fix a crash in imp.load_dynamic() on PyUnicode_FromString() failure

Fix for issue 15716: interpreter could crash when PYTHONEXECUTABLE was set on Mac OS X.

This is due to an off-by-one error: the allocated buffer didn't have room for a NUL
character at the end of the mbstowcs result.

(merge with 3.2)

Fix for issue 15716: interpreter could crash when PYTHONEXECUTABLE was set on Mac OS X.

This is due to an off-by-one error: the allocated buffer didn't have room for a NUL
character at the end of the mbstowcs result.

Update suspicious ignore file.

Issue #15747: skip chflags UF_IMMUTABLE tests if EOPNOTSUPP is raised.

This is necessary for ZFS systems, which don't support UF_IMMUTABLE.

(Note: this commit is a manual merge of 78699:019a2390b014 as both
_test_chflags_regular_file and test_lchflags_symlink differ between
3.2 and default.)

Block 78699:019a2390b014, this needs to be manually merged.

Issue #15747: skip chflags UF_IMMUTABLE tests if EOPNOTSUPP is raised.

This is necessary for ZFS systems, which don't support UF_IMMUTABLE.

Fix typo in error handling for WaitForMultipleObjects()

#15752: merge with 3.2.

#15752: s/assertRaisesRegexp/assertRaisesRegex/g

Address most of Ezio's comments. str/bytes/bytearray docs still need consolidation

Merge 3.2.

Issue #15736: Fix overflow in _PySequence_BytesToCharpArray().

Issue #15285: Refactor connect timeout test in test_timeout.

Issue #15285: Refactor connect timeout test in test_timeout.

Improve the pyvenv entry

Improved summary section in whatsnew

Issue #14954: Clarify the interaction of weak references and garbage collection.
Patch by Ethan Furman.

Issue #14954: Clarify the interaction of weak references and garbage collection.
Patch by Ethan Furman.

Fix Issue 15743 - improve urllib tests by removing deprecated method usages. Patch by Jeff Knupp.

#15199: Fix JavaScript's default MIME type to application/javascript

#15199: Fix JavaScript's default MIME type to application/javascript

Merge #15742: clarify sqlite parameter substitution example.

Suggestion and patch by Mike Hoy.

#15742: clarify sqlite parameter substitution example.

Suggestion and patch by Mike Hoy.

Issue #15726: Fix incorrect bounds checking in PyState_FindModule.
Patch by Robin Schreiber.

Issue #15726: Fix incorrect bounds checking in PyState_FindModule.
Patch by Robin Schreiber.

Merge 3.2.

Issue #15741: Fix potential NULL dereference. Found by Coverity.

Check return value of asdl_seq_new(). Found by Coverity.

Issue #12643: Respect sys.excepthook in code.InteractiveConsole

Merge 3.2.

Issue #15738: Fix a missing NULL check in subprocess_fork_exec().

Closes #15737: Fix potential NULL dereference in zipimport.c.

Merge 3.2.

Issue #15732: Fix (constructed) crash in _PySequence_BytesToCharpArray().
Found by Coverity.

Break up the 'someos' docs classification based on a more user-focused scheme, including creation of a separate 'Concurrent Execution' section

Close #4966: revamp the sequence docs in order to better explain the state of modern Python

s/path importer/path based finder/ (because the path based finder is not an importer and the simpler 'path finder' is too ambiguous)

Close #14846: Handle a sys.path entry going away

Close #14814: Avoid depending on struct by using newer features. Also use enumerate where appropriate (patch by Serhiy Storchaka). Declaring PEP 3144 final at this point - any further changes to code or docs can go in new issues.

Issue #14814: document the Interface APIs and fix various problems with the string representations (initial patch by Eli Bendersky).

Merge #13579: teach string.Formatter about 'a'.

Patch by Francisco Martín Brugué.

#13579: teach string.Formatter about 'a'.

Patch by Francisco Martín Brugué.

Issue #15728: Fix leak in PyUnicode_AsWideCharString(). Found by Coverity.

Issue #15595: Fix subprocess.Popen(universal_newlines=True)
for certain locales (utf-16 and utf-32 family).

Patch by Chris Jerdonek.

Issue #15595: Fix subprocess.Popen(universal_newlines=True)
for certain locales (utf-16 and utf-32 family).

Patch by Chris Jerdonek.

Use Thread.is_alive() instead of old-style Thread.isAlive() in subprocess.

Fixes #14668. Mention Windows Path manipulation option in the installer.

Brush subprocess tests a bit.

The latest NumPy revision no longer segfaults here.

Fix out-of-date comment in test_memoryview.

Mereg 3.2.

Check for NULL return value in PyStructSequence_NewType(). Found by Coverity.

Allow redemo.py to be used from the command line like other demos.

Allow redemo.py to be used from the command line like other demos.

Issue #15615: Add some tests for the json module's handling of invalid input data.
Patch by Kushal Das.

Issue #15615: Add some tests for the json module's handling of invalid input data.
Patch by Kushal Das.

Issue #15477: Merge fix from 3.2

Issue #15477: Add workaround for log1p(-0.0) on platforms where it's broken.

Merge 3.2: tutorial typo fix

tutorial typo fix

Issue #15586: fix prompts in some documentation examples

Merge #15636: add versionadded for decodebytes

#15636: add versionadded for decodebytes

Merge #15355: Mention already-executing Exception in generator docs.

Patch by Chris Jerdonek.

#15355: Mention already-executing Exception in generator docs.

Patch by Chris Jerdonek.

Merge #15694: reflow paragraph.

#15694: reflow paragraph.

Merge #15694: Link discussion of file objects to glossary entry.

This is analogous to the link for `flie objects` in the description of
'open' that exists in the 2.7 docs, and adds a similar link to the
io docs.

Patch by Chris Jerdonek.

#15694: Link discussion of file objects to glossary entry.

This is analogous to the link for `flie objects` in the description of
'open' that exists in the 2.7 docs, and adds a similar link to the
io docs.

Patch by Chris Jerdonek.

Closes #15632: regrtest.py: fix spurious refleaks due to various caches
filling up with random data.

Issue #15678: Fix menu customization for IDLE started from OS X
command lines.  It was broken as a side effect of the changes to
pythonw.c in b79d276041a8 for #15307.  Since sys.executable no
longer includes 'Python.app' in the path name, test for a
framework build instead.  This should give the previous behavior
in nearly all cases.  Whether the previous behavior is sensible
is left as an issue for later releases.  IDLE.app behavior was
not affected as it does its own manipulation of sys.executable.

Merge with 3.2 #15660

Issue 15660: Clarify 0 prefix for width field in str.format doc.

Issue #15640: Document importlib.abc.Finder as deprecated.

The code for the class itself isn't deprecated for
backwards-compatibility reasons, but the class shouldn't be directly
inherited by anyone anymore as the API is no longer as widely valid as
it used to be.

Issue #15715: Ignore failed imports triggered by the use of fromlist.

When the fromlist argument is specified for __import__() and the
attribute doesn't already exist, an import is attempted. If that fails
(e.g. module doesn't exist), the ImportError will now be silenced (for
backwards-compatibility). This *does not* affect
``from ... import ...`` statements.

Thanks to Eric Snow for the patch and Simon Feltman for reporting the
regression.

Merge

Issue #15412: Remove erroneous note about weakrefs

Merge

Issue #14501: Clarify that authentication keys are byte strings

Update the getpeercert() example with a real-world cert showing non-trivial issuer, subject and subjectAltName.