Issue #18426: Fix NULL pointer dereference in C extension import when
PyModule_GetDef() returns an error.

Issue #18426: Fix NULL pointer dereference in C extension import when
PyModule_GetDef() returns an error.

#18116: getpass no longer always falls back to stdin.

Also fixes a resource warning that occurred when the fallback is taken.

Patch by Serhiy Storchaka.

(We couldn't figure out how to write tests for this.)

Merge: #18424: PEP8ify the tense of the sum docstring.

#18424: PEP8ify the tense of the sum docstring.

Merge: #18399: fix comment typo.

#18399: fix comment typo.

Patch by Andrew Rowe.

Issue #18408: Fix call_exc_trace(): if the traceback is NULL, use None when
building the tuple (type, value, traceback) passed to the callback.

PyTuple_Pack() does crash if an argument is NULL.

Issue #18308: don't take the scope ID into account when comparing IPv6
addresses.

Issue #18308: don't take the scope ID into account when comparing IPv6
addresses.

use $(LN) makefile variable instead of ln

use $(LN) makefile variable instead of ln

Add a spacing saving heuristic to deque's extend methods

Issue #18408: Fix select.select() to handle PyList_New() failure (MemoryError)
in set2list()

Issue #18408: Fix _PyMem_DebugRealloc()

Don't mark old extra memory dead before calling realloc(). realloc() can fail
and realloc() must not touch the original buffer on failure.

So mark old extra memory dead only on success if the new buffer did not move
(has the same address).

Issue #18408: _PyUnicodeWriter_Finish() now clears its buffer attribute in all
cases, so _PyUnicodeWriter_Dealloc() can be called after finish.

Issue #18408: Fix usage of _PyBytes_Resize()

_PyBytes_Resize(&v, new_size) sets v to NULL on error, so v cannot be used
anymore. Replace "Py_DECREF(v); v = NULL;" with "Py_CLEAR(v);".

Issue #18408: Fix PyCode_Optimize(): raise a MemoryError on memory allocation
failure.

Issue #18408: Fix zlib.compressobj() to handle PyThread_allocate_lock() failure
(MemoryError).

Issue #18408: Fix ConvParam() of the ctypes module to handle paramfunc failure
(MemoryError).

Avoid spurious non-fatal install errors for OS X frameworks:
for a framework install, the python shared library is installed in
the frameworkinstallstructure target, not in altbininstall.

Issue #18408: Fix _PyUnicodeWriter_Finish(): clear writer->buffer,
so _PyUnicodeWriter_Dealloc() can be called on the writer after finish.

fix indentation

Issue #18408: Fix call_function() of ceval.c to handle PyTuple_New() failure
(in load_args()), ex: MemoryError.

Issue #18408: Fix PyType_Ready() and type.__bases__ setter to handle
PyWeakref_NewRef() failure (ex: MemoryError).

Issue #18408: Fix marshal reader for Unicode strings: handle
PyUnicode_DecodeUTF8() failure (ex: MemoryError).

Issue #18408: Fix list.pop() to handle list_resize() failure (MemoryError).

Issue #18408: Fix PyDict_New() to handle correctly new_keys_object() failure
(MemoryError).

Issue #18408: PyObject_GC_NewVar() now raises SystemError exception if nitems
is negative

gcmodule.c: strip trailing spaces

#18403: merge with 3.3.

#18403: fix an off-by-one typo noticed by Xue Fuqiao.

Merge str.center tests from 3.3.

Add a couple of tests for str.center with non-ASCII chars.

Issue #18203: Add _PyMem_RawStrdup() and _PyMem_Strdup()

Replace strdup() with _PyMem_RawStrdup() or _PyMem_Strdup(), depending if the
GIL is held or not.

Issue #18203: Fix _Py_DecodeUTF8_surrogateescape(), use PyMem_RawMalloc() as _Py_char2wchar()

Issue #18227: pyexpat now uses a static XML_Memory_Handling_Suite. cElementTree uses the same approach since at least Python 2.6

Issue #18203:  Replace malloc() with PyMem_Malloc() in _PySequence_BytesToCharpArray()

Issue #18203: Replace malloc() with PyMem_Malloc() to allocate arena objects

Issue #18203: Replace malloc() with PyMem_RawMalloc() to allocate thread locks

Issue #18227: "Free" function of bz2, lzma and zlib modules has no return value (void)

Issue #18203: Replace malloc() with PyMem_Malloc() in _ssl for the password

Issue #18227: Use PyMem_RawAlloc() in bz2, lzma and zlib modules

Issue #18203: Fix decode_ascii_surrogateescape(), use PyMem_RawMalloc() as _Py_char2wchar()

Fix a compiler warning in posix_sendfile() on FreeBSD:

Modules/posixmodule.c: In function 'posix_sendfile':
Modules/posixmodule.c:7700: warning: ISO C90 forbids mixed declarations and code

Issue #18203: Replace malloc() with PyMem_Malloc() in Python modules

Replace malloc() with PyMem_Malloc() when the GIL is held, or with
PyMem_RawMalloc() otherwise.

Issue #18203: Replace malloc() with PyMem_RawMalloc() at Python initialization

* Replace malloc() with PyMem_RawMalloc()
* Replace PyMem_Malloc() with PyMem_RawMalloc() where the GIL is not held.
* _Py_char2wchar() now returns a buffer allocated by PyMem_RawMalloc(), instead
  of PyMem_Malloc()

Issue #18203: Fix Py_Finalize(): destroy the GIL after the last call to
PyMem_Malloc() or PyObject_Malloc().

For example, PyCFunction_Fini() calls PyObject_GC_Del() which calls
PyObject_FREE().

Fix #ifdef

Use macros for marking and checking endpoints in the doubly-linked list of blocks.

* Add comment explaining the endpoint checks
* Only do the checks in a debug build
* Simplify newblock() to only require a length argument
  and leave the link updates to the calling code.
* Also add comment for the freelisting logic.

#18106: refactor tests to use subtests and proper assert methods.  Patch by Vajrasky Kok.

#17198: merge with 3.3.

#17198: Fix a NameError in the dbm module.  Patch by Valentina Mukhamedzhanova.

Merge #18013: Fix cgi.FieldStorage to parse the W3C sample form.

Issue #18013: Fix cgi.FieldStorage to parse the W3C sample form.

#18020: improve html.escape speed by an order of magnitude.  Patch by Matt Bryant.

(3.3->default) Issue #18377: Code cleanup in Python Launcher

This changeset fixes a number of compiler warnings in the Python Launcher
binary for OSX. It also cleans up whitespace usage in those sources.

Issue #18377: Code cleanup in Python Launcher

This changeset fixes a number of compiler warnings in the Python Launcher
binary for OSX. It also cleans up whitespace usage in those sources.

(3.3->default) Cleanup of documentation change from #17860

Reformulated the textual change, and applied it to the docstring as well.

Cleanup of documentation change from #17860

Reformulated the textual change, and applied it to the docstring as well.

merge

Improve variable names in deque_count()

Issue #3329: Fix _PyObject_ArenaVirtualFree()

According to VirtualFree() documentation, the size must be zero if the "free
type" is MEM_RELEASE.

Issue #17206: On Windows, increase the stack size from 2 MB to 4.2 MB to fix
a stack overflow in the marshal module (fix a crash in test_marshal).
Patch written by Jeremy Kloth.

Issue #3329: Implement the PEP 445

Add new enum:

* PyMemAllocatorDomain

Add new structures:

* PyMemAllocator
* PyObjectArenaAllocator

Add new functions:

* PyMem_RawMalloc(), PyMem_RawRealloc(), PyMem_RawFree()
* PyMem_GetAllocator(), PyMem_SetAllocator()
* PyObject_GetArenaAllocator(), PyObject_SetArenaAllocator()
* PyMem_SetupDebugHooks()

Changes:

* PyMem_Malloc()/PyObject_Realloc() now always call malloc()/realloc(), instead
  of calling PyObject_Malloc()/PyObject_Realloc() in debug mode.
* PyObject_Malloc()/PyObject_Realloc() now falls back to
  PyMem_Malloc()/PyMem_Realloc() for allocations larger than 512 bytes.
* Redesign debug checks on memory block allocators as hooks, instead of using C
  macros

Apply the PyObject_VAR_HEAD and Py_SIZE macros
to be consistent with practices in other modules.

merge

merge for issue #18351.

Refactor deque_traverse().

Hoist conditional expression out of the loop.
Use rightblock as the guard instead of checking for NULL.

Issue #18351: Fix various issues with
importlib._bootstrap._get_sourcefile().

Thanks to its only use by the C API, it was never properly tested
until now.

Thanks to Neal Norwitz for discovering the bug and Madison May for the patch.

Remove unnecessary branches from count() and reverse().

Issue #18364: Stop using the ImportError._not_found hack.

The private attribute was leaking out of importlib and led to at least
one person noticing it. Switch to another hack which won't leak
outside of importlib and is nearly as robust.

#18380: merge with 3.3.

#18380: pass regex flags to the right argument.  Patch by Valentina Mukhamedzhanova.

test_ftplib: silence a BytesWarning when checking TypeError

test_ftplib: silence a BytesWarning when checking TypeError

(3.3->default) Issue #12990: The "Python Launcher" on OSX could not launch python scripts that have paths that include wide characters.

Issue #12990: The "Python Launcher" on OSX could not launch python scripts that have paths that include wide characters.

Issue #18375: merge with 3.3

Issue #18375: Assume --randomize when --randseed is used for running the testsuite.

(3.3->default) Issue #17860: explicitly mention that std* streams are opened in binary mode by default.

The documentation does mention that the streams are opened in text mode
when univeral_newlines is true, but not that that they are opened in
binary mode when that argument is false and that seems to confuse at
least some users.

Issue #17860: explicitly mention that std* streams are opened in binary mode by default.

The documentation does mention that the streams are opened in text mode
when univeral_newlines is true, but not that that they are opened in
binary mode when that argument is false and that seems to confuse at
least some users.

Speed-up deque indexing by changing the deque block length to a power of two.

The division and modulo calculation in deque_item() can be compiled
to fast bitwise operations when the BLOCKLEN is a power of two.

Timing before:

 ~/cpython $ py -m timeit -r7 -s 'from collections import deque' -s 'd=deque(range(10))' 'd[5]'
10000000 loops, best of 7: 0.0627 usec per loop

Timing after:

~/cpython $ py -m timeit -r7 -s 'from collections import deque' -s 'd=deque(range(10))' 'd[5]'
10000000 loops, best of 7: 0.0581 usec per loop

Issue #18347: ElementTree's html serializer now preserves the case of closing tags.

Issue #18347: ElementTree's html serializer now preserves the case of closing tags.

Issue #15767: Excise the remaining instances of ModuleNotFoundError

Remove dead code in test_exceptions.

Move test_import over to unittest.main().

Issue #15767: back out 8a0ed9f63c6e, finishing the removal of
ModuleNotFoundError.

Issue #15767: Revert 3a50025f1900 for ModuleNotFoundError

Issue #15767: Back out 8d28d44f3a9a related to ModuleNotFoundError.

Issue #18200: Back out usage of ModuleNotFoundError (8d28d44f3a9a)

Consolidate tests section.

Issue #11185: Fix test_wait4 under AIX.  Patch by Sébastien Sablé.

Issue #11185: Fix test_wait4 under AIX.  Patch by Sébastien Sablé.

(Merge 3.3) test_time.test_monotonic(): use a longer sleep to try to make the test more reliable

test_time.test_monotonic(): use a longer sleep to try to make the test more reliable

(Merge 3.3) test_faulthandler: skip test_read_null() on AIX

AIX maps the first page of memory at address zero as valid, read-only.  Reading
NULL is not a fault on AIX. This is utilized by IBM compiler optimizations.
One speculatively can indirect through a pointer which may be null without
first testing if null and defer the test before using the value.

test_faulthandler: skip test_read_null() on AIX

AIX maps the first page of memory at address zero as valid, read-only.  Reading
NULL is not a fault on AIX. This is utilized by IBM compiler optimizations.
One speculatively can indirect through a pointer which may be null without
first testing if null and defer the test before using the value.

#18312: merge from 3.3.