Merge 3.5 (doc)

Issue #26106: doc: Move text of licenses to parsed literal block

This change helps to ignore text of PSF, BEOPEN.com and CNRI licenses when
translating the documentation. Patch written by Julien Palard who is
translating Python 3.5 doc to french. Text of other licenses already used
preformatted format.

merge 3.5 (#26171)

merge 3.4 (#26171)

prevent buffer overflow in get_data (closes #26171)

merge 3.5

merge 3.4

fix refleak in error condition

merge 3.5 (#26172)

merge 3.4 (#26172)

remove script from epub (closes #26172)

Merge 3.5 (issue #24520)

Replace fpgetmask() with fedisableexcept()

Issue #24520: On FreeBSD, fpgetmask() was deprecated long time ago.
fedisableexcept() is now preferred.

co_lnotab supports negative line number delta

Issue #26107: The format of the co_lnotab attribute of code objects changes to
support negative line number delta.

Changes:

* assemble_lnotab(): if line number delta is less than -128 or greater than
  127, emit multiple (offset_delta, lineno_delta) in co_lnotab
* update functions decoding co_lnotab to use signed 8-bit integers

  - dis.findlinestarts()
  - PyCode_Addr2Line()
  - _PyCode_CheckLineNumber()
  - frame_setlineno()

* update lnotab_notes.txt
* increase importlib MAGIC_NUMBER to 3361
* document the change in What's New in Python 3.6
* cleanup also PyCode_Optimize() to use better variable names

merge from 3.5

issue25982 - Add a class definition for managers.Namespace in the multiprocessing docs.

issue25982 - Add a class definition for managers.Namespace in the multiprocessing docs.

Merge 3.5

Issue #26154: Add a new private _PyThreadState_UncheckedGet() function.

Add _PyThreadState_UncheckedGet()

Issue #26154: Add a new private _PyThreadState_UncheckedGet() function which
gets the current thread state, but don't call Py_FatalError() if it is NULL.

Python 3.5.1 removed the _PyThreadState_Current symbol from the Python C API to
no more expose complex and private atomic types. Atomic types depends on the
compiler or can even depend on compiler options. The new function
_PyThreadState_UncheckedGet() allows to get the variable value without having
to care of the exact implementation of atomic types.

Changes:

* Replace direct usage of the _PyThreadState_Current variable with a call to
  _PyThreadState_UncheckedGet().
* In pystate.c, replace direct usage of the _PyThreadState_Current variable
  with the PyThreadState_GET() macro for readability.
* Document also PyThreadState_Get() in pystate.h

Issue #26147: xmlrpc now works with strings not encodable with used
non-UTF-8 encoding.

Issue #26147: xmlrpc now works with strings not encodable with used
non-UTF-8 encoding.

Issue #5626: Remove misleading comment from socket.gethostname() documentation

A machine can have more than one IP addresses so
socket.gethostbyname(socket.gethostname()) probably won't return the correct
one.

Issue #5626: Remove misleading comment from socket.gethostname() documentation

A machine can have more than one IP addresses so
socket.gethostbyname(socket.gethostname()) probably won't return the correct
one.

Issue #26157: Fix typos in asyncio-eventloop.rst

Initial patch by Carlo Beccarini.

Issue #26157: Fix typos in asyncio-eventloop.rst

Initial patch by Carlo Beccarini.

Merge update to pip/setuptools

Merge update to pip/setuptools

Update pip to 8.0.0 and setuptools to 19.4

Issue #25935: Garbage collector now breaks reference loops with OrderedDict.

Issue #25935: Garbage collector now breaks reference loops with OrderedDict.

Issue #16620: Got rid of using undocumented function glob.glob1().

Issue #16620: Fixed AttributeError in msilib.Directory.glob().

Issue #16620: Fixed AttributeError in msilib.Directory.glob().

Merge 3.5

Fix BytecodeTestCase.assertNotInBytecode()

Issue #11816: Fix bytecode_helper to handle correctly errors. Don't use
unassigned variables.

merge 3.5 (#25731)

set tp_new from the class in the hierarchy that actually owns the descriptor (closes #25731)

Debugging by Eryk Sun.

merge from 3.5

issue23962 - Reference the correct TimeoutError in concurrent.futures documentation.

Patch contributed by Ryder Lewis.

issue23962 - Reference the correct TimeoutError in concurrent.futures documentation.

Patch contributed by Ryder Lewis.

Issue #25859: Merge NNTP test server from 3.5

Issue #25859: Reimplement NNTP test_starttls() using local server

The previous test relied on a remote server, which currently seems to be
shutting the connection down once TLS has been set up, causing an EOFError.
Now the test is implemented using a minimal NNTP server running in a
background thread.

Issue #25366: Skip test_with_pip when threading module is not available

Some dependencies of pip import threading module unconditionally so
we need to skip the test to make buildbots happy.

Issue #25366: Skip test_with_pip when threading module is not available

Some dependencies of pip import threading module unconditionally so
we need to skip the test to make buildbots happy.

Added exceptins for testing non-reversible import mapping for Issue #26013.

Added exceptins for testing non-reversible import mapping for Issue #26013.

Issue #26013: Added compatibility with broken protocol 2 pickles created
in old Python 3 versions (3.4.3 and lower).

Issue #26013: Added compatibility with broken protocol 2 pickles created
in old Python 3 versions (3.4.3 and lower).

Issue #9006: Added tests for XML RPC with non-UTF-8 encoding.

Issue #9006: Added tests for XML RPC with non-UTF-8 encoding.

Issue #26129: Deprecated accepting non-integers in grp.getgrgid().

subprocess._optim_args_from_interpreter_flags()

Issue #26100:

* Add subprocess._optim_args_from_interpreter_flags()
* Add test.support.optim_args_from_interpreter_flags()
* Use new functions in distutils, test_cmd_line_script, test_compileall and
  test_inspect

The change enables test_details() test of test_inspect when -O or -OO command
line option is used.

Fix test_compilepath() of test_compileall

Issue #26101: Exclude Lib/test/ from sys.path in test_compilepath(). The
directory contains invalid Python files like Lib/test/badsyntax_pep3120.py,
whereas the test ensures that all files can be compiled.

Fix indentation of continuation lines.

Fix two instances of wrong indentation.

Issue26069 - Update whatsnew/3.6.rst on traceback module's api removals.

Merge from 3.5

Issue26017 - Suggest enclosing command args in double quotes when using characters which get interpreted by shell.

Issue26017 - Suggest enclosing command args in double quotes when using characters which get interpreted by shell.

Issue #26139: libmpdec: disable /W4 warning (non-standard dllimport behavior).

Merge with 3.5

Issue #25905: Specify 'ascii' encoding for README.txt and NEWS.txt.
Re-encode CREDITS.txt to utf-8 and open it with 'utf-8'.

merge from 3.5

Issue26135 - In the tutorial section on modules, reference importlib.reload instead of imp.reload.

Issue26135 - In the tutorial section on modules, reference importlib.reload instead of imp.reload.

Issue #26071: bdist_wininst created binaries fail to start and find 32bit Python

Issue #26071: bdist_wininst created binaries fail to start and find 32bit Python

Issue #26073: Update the list of magic numbers in launcher

Issue #26073: Update the list of magic numbers in launcher

Issue #26065: Excludes venv from library when generating embeddable distro.

Issue #26065: Excludes venv from library when generating embeddable distro.

Merge

Issue #25850: Use cross-compilation by default for 64-bit Windows.

use public 'value'

Issue #25850: Use cross-compilation by default for 64-bit Windows.

Issue #25089: Adds short documentation section for modifying an install.

Issue #25089: Adds short documentation section for modifying an install.

Issue #23883: grp and pwd are None on Windows

Issue #23883: Removed redundant names from blacklists.

Issue #23883: Update news

Issue #23883: Add missing APIs to tarfile.__all__

Patch by Joel Taddei and Jacek Kołodziej.

Issue #23883: Add missing APIs to calendar.__all__

Patch by Joel Taddei and Jacek Kołodziej.

Issue #23883: Missing fileinput.__all__ APIs; patch by Mauro SM Rodrigues

Merge from 3.5

Issue26035 - Correct the argument names used in the docs of the traceback module. Make it consistent with module args.

Patch contributed by Upendra Kumar.

 Issue26035 - Correct the argument names used in the docs of the traceback module. Make it consistent with module args.

 Patch contributed by Upendra Kumar.

Issue #26127: Merge test_gdb fix from 3.5

Issue #14771: Redirect GDB's stdin to avoid messing the terminal settings

Otherwise, GDB seems to affect the terminal's foreground process group,
interfering with test_ioctl, which does not expect the foreground process to
change during the test. This change also solves the problem of the tests
being stopped in the shell if test_gdb is run twice in parallel.

Issue #26127: Merge tokenize documentation

Issue #26127: Fix links in tokenize documentation; patch by Silent Ghost

Make the error message regex more lenient so that it matches both
"certificate verify failed " and "CERTIFICATE_VERIFY_FAILED " as
some SSL libraries use different text than OpenSSL.

Make the error message regex more lenient so that it matches both
"certificate verify failed " and "CERTIFICATE_VERIFY_FAILED " as
some SSL libraries use different text than OpenSSL.

Make the error message regex more lenient so that it matches both
"certificate verify failed " and "CERTIFICATE_VERIFY_FAILED " as
some SSL libraries use different text than OpenSSL.

branch merge

revert change 87a9dff5106c: pure Enum members again evaluate to True;
update Finer Points section of docs to cover boolean evaluation;
add more tests for pure and mixed boolean evaluation

Issue #25791: Raise an ImportWarning when __spec__ or __package__ are
not defined for a relative import.

This is the start of work to try and clean up import semantics to rely
more on a module's spec than on the myriad attributes that get set on
a module. Thanks to Rose Ames for the patch.

Merge for issue #17633

Issue #17633: Improve support for namespace packages with zipimport.

Previously zipimport mistakenly limited namespace support to only the
top-level of the zipfile when it should have supported an arbitrary
depth.

Thanks to Phil Connel for the bug report and initial patch and Mike
Romberg for the final patch.

Merge 'used with permission' additions

Add some "used with permission" mentions where external resources are referenced.

Permission was validated prior to adding these markings.

Merge for issue #26114

Issue #26114: Remove a reference to 'Numerical Recipes'.

While no copyright violation occurred, the license which
'Numerical Recipes' operates under is not amenable to Python,
so to prevent confusion it's easier to simply remove its mention.

Issue #25940: Merge ETIMEDOUT fix from 3.5

Issue #25940: Merge ETIMEDOUT fix from 3.4 into 3.5

Issue #25940: Merge ETIMEDOUT fix from 3.3 into 3.4