Merge with 3.5

Issue #15660: Further clarify 0 prefix for width specifier in formats.

Issue #26581: Use the first coding cookie on a line, not the last one.

Issue #26581: Use the first coding cookie on a line, not the last one.

Issues #25643, #26581: Added new tests for detecting Python source code encoding.

Added new tests for detecting Python source code encoding.

Issue #12813: uuid.uuid4() no longer depends on ctypes

uuid.uuid4() always uses os.urandom() after 756d040aa8e8.

Issue #12813: uuid.uuid4() no longer depends on ctypes

uuid.uuid4() always uses os.urandom() after 756d040aa8e8.

Issue #19164: Improve exception message of uuid.UUID()

Patch by jgauthier.

Issue #19164: Improve exception message of uuid.UUID()

Patch by jgauthier.

Issue #26593: Fix typo in logging HOWTO

Patch by Andrew Szeto.

Issue #26593: Fix typo in logging HOWTO

Patch by Andrew Szeto.

Issue #19265: Improve test coverage of datetime.tzinfo

Without the patch, line 1010 of Lib/datetime.py wasn't covered
by the test suite.

Patch by Colin Williams.

Issue #19265: Improve test coverage of datetime.tzinfo

Without the patch, line 1010 of Lib/datetime.py wasn't covered
by the test suite.

Patch by Colin Williams.

Issue #18787: spwd.getspnam() now raises a PermissionError if the user
doesn't have privileges.

fix indentation in Py_DECREF()

Issue #26567: enhance ResourceWarning example

Try again to fix test_warnings on Windows

Issue #26567: normalize newlines in test_tracemalloc.

Issue #26560: Avoid potential ValueError in BaseHandler.start_response

Initial patch by Peter Inglesby.

Issue #26560: Avoid potential ValueError in BaseHandler.start_response

Initial patch by Peter Inglesby.

Try to fix test_warnings on Windows

Issue #26567.

ResourceWarning: Revert change on socket and scandir

io.FileIO has a safe implementation of destructor, but not socket nor scandir.

Fix test_logging

Issue #26568: Fix implementation of showwarning() and formatwarning() for
test_logging.

On ResourceWarning, log traceback where the object was allocated

Issue #26567:

* Add a new function PyErr_ResourceWarning() function to pass the destroyed
  object
* Add a source attribute to warnings.WarningMessage
* Add warnings._showwarnmsg() which uses tracemalloc to get the traceback where
  source object was allocated.

Add _showwarnmsg() and _formatwarnmsg() to warnings

Issue #26568: add new  _showwarnmsg() and _formatwarnmsg() functions to the
warnings module.

The C function warn_explicit() now calls warnings._showwarnmsg() with a
warnings.WarningMessage as parameter, instead of calling warnings.showwarning()
with multiple parameters.

_showwarnmsg() calls warnings.showwarning() if warnings.showwarning() was
replaced. Same for _formatwarnmsg(): call warnings.formatwarning() if it was
replaced.

Merge for issue #26095

Suggest people use feature detection in porting guide

Issue #26252: Add an example on how to register a finder

#26250: merge with 3.5.

#26250: document the sqlite3.Cursor.connection attribute.  Initial patches by Aviv Palivoda and Varpu Rantala.

Merge for issue #26271

Issue #26271: Fix the Freeze tool to use variables passed in from the
configure script related to compiler flags.

Thanks to Daniel Shaulov for the bug report and patch.

Doc: fix typos, patch written by Stefan Behnel

Fixed a typo.

Fixed a typo.

Issue #26580: Remove outdated reference to ftpmirror

Patch by SilentGhost.

Issue #26580: Remove outdated reference to ftpmirror

Patch by SilentGhost.

Enhance documentation on malloc debug hooks

Issue #26564, #26516, #26563.

Issue #26313: ssl.py _load_windows_store_certs fails if windows cert store is empty. Patch by Baji.

Issue #26313: ssl.py _load_windows_store_certs fails if windows cert store is empty. Patch by Baji.

Issue #26583: merge from 3.5

Issue #26583: Skip test_timestamp_overflow in test_import if bytecode
files cannot be written.

Merge 3.5 into default

Merge 3.4 into 3.5

Upgrade ensurepip._bundled pip to 8.1.1 and setuptools to 20.3

Merge 3.5

Issue #17603: Merge configure.ac fix from 3.5

Issue #17603: Check for st_blocks field without requiring fileblocks.o

Fix pyclbr to support importing packages

Issue #26569: Fix pyclbr.readmodule() and pyclbr.readmodule_ex() to support
importing packages.

Null merge 3.5

Null merge 3.5

Fix usage of PyMem_Malloc() in overlapped.c

Issue #26563: Replace PyMem_Malloc() with PyMem_RawFree() since
PostToQueueCallback() calls PyMem_RawFree() (previously PyMem_Free()) in a new
C thread which doesn't hold the GIL.

Fix usage of PyMem_Malloc() in overlapped.c

Issue #26563: Replace PyMem_Malloc() with PyMem_RawFree() since
PostToQueueCallback() calls PyMem_RawFree() (previously PyMem_Free()) in a new
C thread which doesn't hold the GIL.

Issue #26499: Fixes to HTTPResponse.readline() and read1(), by Silent Ghost

Py_FatalError: disable faulthandler earlier

Issue #26563: Py_FatalError: disable faulthandler before trying to flush
sys.stdout and sys.stderr.

Py_FatalError: disable faulthandler earlier

Issue #26563: Py_FatalError: disable faulthandler before trying to flush
sys.stdout and sys.stderr.

faulthandler now works in non-Python threads

Issue #26563:

* Add _PyGILState_GetInterpreterStateUnsafe() function: the single
  PyInterpreterState used by this process' GILState implementation.
* Enhance _Py_DumpTracebackThreads() to retrieve the interpreter state from
  autoInterpreterState in last resort. The function now accepts NULL for interp
  and current_tstate parameters.
* test_faulthandler: fix a ResourceWarning when test is interrupted by CTRL+c

Fix usage of PyMem_Malloc() in os.stat()

Issue #26563: Replace PyMem_Malloc() with PyMem_RawMalloc() in the Windows
implementation of os.stat(), since the code is called without holding the GIL.

Fail if PyMem_Malloc() is called without holding the GIL

Issue #26563: Debug hooks on Python memory allocators now raise a fatal error
if functions of the PyMem_Malloc() family are called without holding the GIL.

Fix compilation error of traceback.c on Windows

Issue #26564.

Issue #21042: Revert Linux find_library() to return just filename

This reverts most of revision 3092cf163eb4. The change worked on x86
architectures, but did not work on ARM, probably due to extra ABI flags in
the ldconfig output.

Issue #26499: Merge HTTPResponse fix from 3.5

regrtest: Fix module.__path__

Issue #26538: libregrtest: Fix setup_tests() to keep module.__path__ type
(_NamespacePath), don't convert to a list.

Add _NamespacePath.__setitem__() method to importlib._bootstrap_external.

Issue #26564: Fix test_capi

Oops, revert unwanted change used to create an example

Issue #26564.

On memory error, dump the memory block traceback

Issue #26564: _PyObject_DebugDumpAddress() now dumps the traceback where a
memory block was allocated on memory block. Use the tracemalloc module to get
the traceback.

Merge 3.5 (_tracemalloc)

_tracemalloc: store lineno as unsigned int

Issue #26564. Cleanup the code, lineno is never negative.

Enhance and rewrite traceback dump C functions

Issue #26564:

* Expose _Py_DumpASCII() and _Py_DumpDecimal() in traceback.h
* Change the type of the second _Py_DumpASCII() parameter from int to unsigned
  long
* Rewrite _Py_DumpDecimal() and dump_hexadecimal() to write directly characters
  in the expected order, avoid the need of reversing the string.
* dump_hexadecimal() limits width to the size of the buffer
* _Py_DumpASCII() does nothing if the object is not a Unicode string
* dump_frame() wrtites "???" as the line number if the line number is negative

Merge 3.5 (test_faulthandler)

faulthandler: Test Py_FatalError() with GIL released

Issue #26558.

_tracemalloc: filename cannot be NULL

Issue #26566: Rewrite test_signal.InterProcessSignalTests

* Add Lib/test/signalinterproctester.py
* Don't disable the garbage collector anymore
* Don't use os.fork() with a subprocess to not inherit existing signal handlers
  or threads: start from a fresh process
* Don't use UNIX kill command to send a signal but Python os.kill()
* Use a timeout of 10 seconds to wait for the signal instead of 1 second
* Always use signal.pause(), instead of time.wait(1), to wait for a signal
* Use context manager on subprocess.Popen
* remove code to retry on EINTR: it's no more needed since the PEP 475
* remove unused function exit_subprocess()
* Cleanup the code

Issue #26523: The multiprocessing thread pool (multiprocessing.dummy.Pool) was untested.

Issue #26523: The multiprocessing thread pool (multiprocessing.dummy.Pool) was untested.

#25320: Handle sockets in directories unittest discovery is scanning.

Patch from Victor van den Elzen.

#25320: Handle sockets in directories unittest discovery is scanning.

Patch from Victor van den Elzen.

Check the GIL in PyObject_Malloc()

Issue #26558: The debug hook of PyObject_Malloc() now checks that the GIL is
held when the function is called.

Add more checks on the GIL

Issue #10915, #15751, #26558:

* PyGILState_Check() now returns 1 (success) before the creation of the GIL and
  after the destruction of the GIL. It allows to use the function early in
  Python initialization and late in Python finalization.
* Add a flag to disable PyGILState_Check(). Disable PyGILState_Check() when
  Py_NewInterpreter() is called
* Add assert(PyGILState_Check()) to: _Py_dup(), _Py_fstat(), _Py_read()
  and _Py_write()

Issue #26516: Fix test_capi on AIX

Fix regex for parse a pointer address.

Merge 3.5 (test_venv)

Fix test_venv on FreeBSD buildbot

Ignore pip warning in test_venv.test_with_venv().

_pickle: Fix load_counted_tuple(), use Py_ssize_t for size

Fix a warning on Windows 64-bit.

posix_getcwd(): limit to INT_MAX on Windows

It's more to fix a conversion warning during compilation, I don't think that
Windows support current working directory larger than 2 GB ...

Merge 3.5 (test_site)

Skip test_site if USER_SITE cannot be created

Issue #17758: Skip test_site if site.USER_SITE directory doesn't exist and
cannot be created.

Issue #26516: Fix test_capi on 32-bit system

On 32-bit system, only 4 bytes after dumped for the tail.

Issue #26516: Fix test_capi on Windows

Pointers are formatted differently.

Issue #26558: Remove useless check in tracemalloc

The first instruction of tracemalloc_add_trace() is traceback_new() which
already checks the GIL.

Fix Py_FatalError() if called without the GIL

Issue #26558: If Py_FatalError() is called without the GIL, don't try to print
the current exception, nor try to flush stdout and stderr: only dump the
traceback of Python threads.

Fix Py_FatalError() if called without the GIL

Issue #26558: If Py_FatalError() is called without the GIL, don't try to print
the current exception, nor try to flush stdout and stderr: only dump the
traceback of Python threads.

Add PYTHONMALLOC env var

Issue #26516:

* Add PYTHONMALLOC environment variable to set the Python memory
  allocators and/or install debug hooks.
* PyMem_SetupDebugHooks() can now also be used on Python compiled in release
  mode.
* The PYTHONMALLOCSTATS environment variable can now also be used on Python
  compiled in release mode. It now has no effect if set to an empty string.
* In debug mode, debug hooks are now also installed on Python memory allocators
  when Python is configured without pymalloc.

Issue #20556: Used specific assert methods in threading tests.

Issue #20556: Used specific assert methods in threading tests.

Issue #747320: Use email.utils.formatdate() to avoid code duplication
in BaseHTTPRequestHandler

Initial patch by karlcow.

Issue #16181: cookiejar.http2time() now returns None if year is higher than datetime.MAXYEAR

Issue #16181: cookiejar.http2time() now returns None if year is higher than datetime.MAXYEAR

#24918: merge with 3.5.

#24918: fix CSS for code blocks when a side box is present.  Patch by Manvi B.

merge