Issue #29371: merge with 3.6

Issue #29371: merge with 3.5

Issue #29371: Clarify bitwise OR operation in doctest option flags.

Issue #28164: Improves test on Windows 7

Issue #28164: Improves test on Windows 7

Includes ensurepip and venv packages in nuget package.

Includes ensurepip and venv packages in nuget package.

Includes ensurepip and venv packages in nuget package.

merge

Substitute a more readable f-string

Optimize deque index, insert and rotate() methods

Issue #29452: Use METH_FASTCALL calling convention for index(), insert() and
rotate() methods of collections.deque to avoid the creation a temporary tuple
to pass position arguments. Speedup on deque methods:

* d.rotate(): 1.10x faster
* d.rotate(1): 1.24x faster
* d.insert(): 1.18x faster
* d.index(): 1.24x faster

Prohibit implicit C function declarations

Issue #27659: use -Werror=implicit-function-declaration when possible (GCC and
Clang, but it depends on the compiler version).

Patch written by Chi Hsuan Yen.

regrtest: don't fail immediately if a child does crash

Issue #29362: Catch a crash of a worker process as a normal failure and
continue to run next tests. It allows to get the usual test summary: single
line result (OK/FAIL), total duration, etc.

Merge from 3.6

Fix usage of data directive

Issue #29460: _PyArg_NoKeywords(), _PyArg_NoStackKeywords() and
_PyArg_NoPositional() now are macros.

Issue #29405: Make total calculation in _guess_delimiter more accurate.

Issue #20186: Regenerated Argument Clinic.

Merge from 3.6

Adds precheck for console filename to fix Windows 7.

Issue #28489: Merge from 3.6

Issue #28489: Fix comment in tokenizer.c

Patch by Ryan Gonzalez.

Merge from 3.6

Updates test_winconsoleio to better show the source of its issues.

Issue #29319: Prevent RunMainFromImporter overwriting sys.path[0].

Issue #29319: Prevent RunMainFromImporter overwriting sys.path[0].

Issue #29319: Prevent RunMainFromImporter overwriting sys.path[0].

Issue #29326: Ignores blank lines in ._pth files (Patch by Alexey Izbyshev)

Issue #29326: Ignores blank lines in ._pth files (Patch by Alexey Izbyshev)

Merge issue #28164 and issue #29409

Issue #28164: Correctly handle special console filenames (patch by Eryk Sun)

Issue #29392: Prevent crash when passing invalid arguments into msvcrt module.

Issue #29392: Prevent crash when passing invalid arguments into msvcrt module.

Issue #29392: Prevent crash when passing invalid arguments into msvcrt module.

Issue #29416: Prevent infinite loop in pathlib.Path.mkdir

Issue #29416: Prevent infinite loop in pathlib.Path.mkdir

Issue #29416: Prevent infinite loop in pathlib.Path.mkdir

Issue #29409: Implement PEP 529 for io.FileIO (Patch by Eryk Sun)

Issue #29444: Fixed out-of-bounds buffer access in the group() method of
the match object.  Based on patch by WGH.

Issue #29444: Fixed out-of-bounds buffer access in the group() method of
the match object.  Based on patch by WGH.

Issue #29444: Fixed out-of-bounds buffer access in the group() method of
the match object.  Based on patch by WGH.

Merge 3.6.

Issue29439: _decimal on Android requires linking with libm.
Patch by Chi Hsuan Yen.

Reduce load factor (from 66% to 60%) to improve effectiveness of linear probing.
Decreased density gives better collision statistics (average of 2.5 probes in a
full table versus 3.0 previously) and fewer occurences of starting a second
possibly overlapping sequence of 10 linear probes.  Makes resizes a little more
frequent but each with less work (fewer insertions and fewer collisions).

Issue #20186: Converted the tracemalloc module to Argument Clinic.
Based on patch by Georg Brandl.

Issue #20186: Converted the symtable module to Argument Clinic.
Original patch by Georg Brandl.

Removed redundant Argument Clinic directives.

Issue #20185: Converted the gc module to Argument Clinic.

Issue #29300: Use Argument Clinic for getting struct object from the format.

Issue #27867: Silenced may-be-used-uninitialized warnings after
using PySlice_GetIndicesEx() in debug builds.

Issue #27867: Silenced may-be-used-uninitialized warnings after
using PySlice_GetIndicesEx() in debug builds.

Issue #27867: Silenced may-be-used-uninitialized warnings after
using PySlice_GetIndicesEx() in debug builds.

Issue #29198: Merge from 3.6

Issue #29198: Merge from 3.5

Issue #29198: Fix indentation and markup in typing.rst

Patch by Jelle Zijlstra.

Issue #29198: Merge from 3.6

Issue #29198: Merge from 3.5

Issue #29198: Document typing.AsyncGenerator

Patch by Jelle Zijlstra.

Issue #29311: Regenerate Argument Clinic.

null merge

Issue #29263: LOAD_METHOD support for C methods

Calling builtin method is at most 10% faster.

Closes #29213: Merged fix from 3.6.

Fixes #29213: merged fix from 3.5.

Fixes #29213: regularised EOLs of venv scripts.

Closes #24875: Merged fix from 3.6.

Fixes #24875: Merged fix from 3.5.

Fixes #24875: pip can now be installed in a venv with --system-site-packages.

Remove unnecessary variables.
* so->used never gets changed during a resize
* so->filled only changes when dummies are present and being eliminated

Issue #29421: Make int.to_bytes() and int.from_bytes() slightly faster
(10-20% for small integers).

Rename struct.unpack() 2nd parameter to "buffer"

Issue #29300: Rename struct.unpack() second parameter from "inputstr" to
"buffer", and use the Py_buffer type.

Fix also unit tests on struct.unpack() which passed a Unicode string instead of
a bytes string as struct.unpack() second parameter. The purpose of
test_trailing_counter() is to test invalid format strings, not to test the
buffer parameter.

Null merge 3.6

Merge 3.5

Issue #29300: test_struct tests unpack_from() with keywords

Add an unit test on the _struct.Struct.unpack_from() method to test passing
arguments as keywords.

Issue #29300: Convert _struct module to Argument Clinic

* The struct module now requires contiguous buffers.
* Convert most functions and methods of the _struct module to Argument Clinic
* Use "Py_buffer" type for the "buffer" argument. Argument Clinic is
  responsible to create and release the Py_buffer object.
* Use "PyStructObject *" type for self to avoid explicit conversions.
* Add an unit test on the _struct.Struct.unpack_from() method to test passing
  arguments as keywords.
* Rephrase docstrings.
* Rename "fmt" argument to "format" in docstrings and the documentation.

As a side effect, functions and methods which used METH_VARARGS calling
convention like struct.pack() now use the METH_FASTCALL calling convention
which avoids the creation of temporary tuple to pass positional arguments and
so is faster. For example, struct.pack("i", 1) becomes 1.56x faster (-36%)::

    $ ./python -m perf timeit \
        -s 'import struct; pack=struct.pack' 'pack("i", 1)' \
        --compare-to=../default-ref/python
    Median +- std dev: 119 ns +- 1 ns -> 76.8 ns +- 0.4 ns: 1.56x faster (-36%)
    Significant (t=295.91)

Patch co-written with Serhiy Storchaka.

Issue #29368: Fix _Pickle_FastCall() usage in do_append()

_Pickle_FastCall() has a surprising API: it decrements the reference counter of
its second argument.

Issue #29368: The extend() method is now called instead of the append()
method when unpickle collections.deque and other list-like objects.
This can speed up unpickling to 2 times.

Issue #29381: merge with 3.6

Issue #29381: Clarify ordering of UNIX shebang line as source encoding line

Backed out changeset 3d712292f2fa

Issue #29381: Clarify ordering of UNIX shebang line as source encoding line

Issue #20185: Converted the int class to Argument Clinic.
Based on patch by Vajrasky Kok.

Issue #29407: Merge from 3.6

Issue #29407: Merge from 3.5

Issue #29407: Remove redundant ensure_future() calls in factorial example

Issue #29377: Add three new wrappers to types.py (Manuel Krebber).

Fix test_gdb.test_wrapper_call() on Python 2

Issue #29367. On Python 2, __init__ name is render as u'__init__'.

Issue #29286: Rename private PyArg_UnpackStack_impl() to unpack_stack()

Rename also "l" argument to "nargs".

Document that _PyFunction_FastCallDict() must copy kwargs

Issue #29318: Caller and callee functions must not share the dictionary:
kwargs must be copied.

Make test_gdb.test_wrapper_call() make reliable

Issue #29367. Use two break points to prevent breakpoint during Python
initialization.

python-gdb.py supports method-wrapper

Issue #29367: python-gdb.py now supports also method-wrapper (wrapperobject)
objects.

Merge 3.6

Merge 3.5

Issue #29169: Fix NEWS entry.

merge 3.6 (#29398)

merge 3.5 (#29398)

gc types needs to be allocated as such (closes #29398)

Issue #29218: Remove unused install_misc command

It has been documented as unused since 6c6844a2fa30 (2000-05-25)

Patch by Eric N. Vander Weele.

merge 3.6

merge 3.5

- Issue #29169: Update zlib to 1.2.10.