Issue #26257: Merge buffer_tests cleanup from 3.5

Issue #26671: Fixed #ifdef indentation.

Backed out changeset 8dc144e47252

Issue #26671: Fixed #ifdef indentation.

Adds version info to all signed binaries on Windows

Adds version info to all signed binaries on Windows.

Issue #26671: Enhanced path_converter.

Exceptions raised during converting argument of correct type are no longer
overridded with TypeError. Some error messages are now more detailed.

Issue #22570: Renamed Py_SETREF to Py_XSETREF.

Issue #22570: Renamed Py_SETREF to Py_XSETREF.

Issue #26257: Eliminate buffer_tests.py and fix ByteArrayAsStringTest

ByteArrayAsStringTest.fixtype() was converting test data to bytes, not byte-
array, therefore many of the test cases inherited in this class were not
actually being run on the bytearray type.

The tests in buffer_tests.py were redundant with methods in string_tests
.MixinStrUnicodeUserStringTest and string_tests.CommonTest. These methods are
now moved into string_tests.BaseTest, where they will also get run for bytes
and bytearray.

This change also moves test_additional_split(), test_additional_rsplit(), and
test_strip() from CommonTest to BaseTest, meaning these tests are now run for
bytes and bytearray. I plan to eliminate redundancies with existing tests in
test_bytes.py soon.

Merge typing.py 3.5->3.6 (Text, ItemsView).

Add Text=str. Make ItemsView derive from AbstractSet, not Set (which is the concrete set).

Merge upstream typing.py changes from 3.5 branch.

Many changes from the upstream repo (https://github.com/python/typing).

This syncs to rev 7b43ada77821d23e55e3a4b35f6055a59b9e1ad7 there.

Summary:

- Add typing.DefaultDict (as a generic variant of collections.defaultdict).

- Use collections.Reversible if it exists (only relevant for Python 3.6).

- Revamped generic class behavior to conform to updated PEP 484.

- Improve speed of Generic.__new__.

- Make sure __init__ is called for new Generic instances. Fix issue #26391.

- Refactor async support to be compatible with 3.2, 3.3, 3.4.

- Remove 'io' and 're' from __all__ (they still exist, just not
  included by "import *"). Fix issue #26234.

- Change @overload -- you can now use it outside stubs (you still
  cannot call the decorated function though).

Issue #6953: Merge readline doc from 3.5

Issue #6953: Rearrange and expand Readline module documentation

* Group functions into six new subsections
* Document the underlying Readline function or variable accessed
* get_history_length() returns the history file limit
* clear_history() is conditionally compiled in
* Clarify zero and one bases for history item indexes
* parse_and_bind() uses its argument directly as an init line
* Change "command line" to "line buffer" for consistency
* read_init_file() also executes the file
* read_history_file() replaces the previous history
* write_history_file() overwrites any existing file
* Differentiate history file lines from history list items, which could be
  multi-line
* Add more information about completion, also addressing Issue #10796
* libedit (Editline) may be used on any platform; detection is OS X specific

Merge typo fixes from 3.5

Fix typos in documentation and comments

Add collections.Reversible. Patch by Ivan Levkivskyi. Fixes issue #25987.

Issue #23735: Merge sighandler_t fix from 3.5

Issue #23735: Avoid sighandler_t Gnu-ism

Issue #23735: Merge Readline resize handling from 3.5

Issue #23735: Add SIGWINCH handler for Readline 6.3+ support, by Eric Price

Issue #25951: Fix SSLSocket.sendall() to return None, by Aviv Palivoda

Issue #26586: Simple enhancements to BaseHTTPRequestHandler by Xiang Zhang

Issue #26586: Merge excessive HTTP header handling from 3.5

Issue #26586: Handle excessive header fields in http.server, by Xiang Zhang

Issue #26679: Fix description of KEY_PPAGE and KEY_NPAGE constants

Patch by Robert Bachmann and SilentGhost.

Issue #26679: Fix description of KEY_PPAGE and KEY_NPAGE constants

Patch by Robert Bachmann and SilentGhost.

Issue #26688: Fix module name in mock docs

Patch by Ashley Anderson.

Issue #26688: Fix module name in mock docs

Patch by Ashley Anderson.

Issue #26678: Merge datetime doc fixes from 3.5

Merged documentation update from 3.5.

Added a cookbook recipe for a logging context manager.

Issue #26678: Fix indexing of datetime.tzinfo and timezone classes

Also fix links to the “tzinfo” class and attributes.

Merge 3.5 (asyncio)

asyncio: Don't log ConnectionAbortedError

Issue #26509: In fatal error handlers, don't log ConnectionAbortedError which
occur on Windows.

Merge 3.5 (asyncio)

asyncio: allow None as wait timeout

Fix GH#325: Allow to pass None as a timeout value to disable timeout logic.

Change written by Andrew Svetlov and merged by Guido van Rossum.

asyncio: sync overlapped.c with GitHub

On Python 3.3, use aliases:

* PyMem_RawMalloc = PyMem_Malloc
* PyMem_RawFree = PyMem_Free

These aliases are not need in Python 3.5, but this change makes synchronization
of code base simpler.

Issue #26676: Add missing XMLPullParser to ElementTree.__all__

Revert back to 3.6.0, buildbots do not want chocolate for 04-01

Python 8: no pep8, no chocolate!

Issue #22854: Merge test fix from 3.5

Issue #22854: Fix logic for skipping test

Remove redundant leading zeroes in PEP references.

Remove redundant leading zeroes in PEP references.

Issue #22854: Merge Windows pipe skipping from 3.5

Issue #22854: Skip pipe seek tests on Windows

Issue #22854: Skip pipe seekable() tests on Windows

Issue #22854: Merge UnsupportedOperation fixes from 3.5

Issue #22854: Clarify documentation about UnsupportedOperation and add tests

Also change BufferedReader.writable() and BufferedWriter.readable() to always
return False.

Issue #26492: Exhausted iterator of array.array now conforms with the behavior
of iterators of other mutable sequences: it lefts exhausted even if iterated
array is extended.

Issue #26492: Added additional tests for exhausted iterators of mutable sequences.

Issue #26492: Added additional tests for exhausted iterators of mutable sequences.

Issue #26494: Fixed crash on iterating exhausting iterators.

Affected classes are generic sequence iterators, iterators of str, bytes,
bytearray, list, tuple, set, frozenset, dict, OrderedDict, corresponding
views and os.scandir() iterator.

Issue #26494: Fixed crash on iterating exhausting iterators.

Affected classes are generic sequence iterators, iterators of str, bytes,
bytearray, list, tuple, set, frozenset, dict, OrderedDict, corresponding
views and os.scandir() iterator.

Fix typo in xml.dom.pulldom.rst

Reported by Matthew Cole on docs@p.o.

Fix typo in xml.dom.pulldom.rst

Reported by Matthew Cole on docs@p.o.

Issue #26295: Enhanc test_regrtest.test_tools_script_run_tests()

Pass all regrtest options, not only --testdir.

Issue #26295: Fix test_regrtest.test_tools_buildbot_test()

Pass also --testdir option.

Issue #26295: test_regrtest now uses a temporary directory

test_forever() stores its state into the builtins module since the test module
is reloaded at each run.

Remove also warning to detect leaked tests of a previous run.

Issue #26295: When using "python3 -m test --testdir=TESTDIR", regrtest doesn't
add "test." prefix to test module names.

regrtest also prepends testdir to sys.path.

Merge 3.5 (test_urllibnet)

test_urllibnet: set timeout on test_fileno()

Use the default timeout of 30 seconds to avoid blocking forever.

doctest now supports packages

Issue #26641: doctest.DocFileTest and doctest.testfile() now support packages
(module splitted into multiple directories) for the package parameter.

Merge 3.5 (test_unittest)

Fix ResourceWarning in test_unittest when interrupted

Null merge 3.5

Issue #25911: Backport os._DummyDirEntry fixes

* Fix test_os.BytesWalkTests on Windows
* Mimick better the reference os.DirEntry on Windows
* _DummyDirEntry now caches os.stat() result
* _DummyDirEntry constructor now tries to get os.stat()
* Fix os._DummyDirEntry.is_symlink(), don't follow symbolic links:
  use os.stat(path, follow_symlinks=False).

Merge 3.5 (regrtest)

Issue #26643: Add missing shutil resources to regrtest.py

Fix os._DummyDirEntry.is_symlink()

Issue #25911: Fix os._DummyDirEntry.is_symlink(), don't follow symbolic links:
use os.stat(path, follow_symlinks=False).

fix typo in comment

Thanks Arfrever for the report :)

Merge 3.5

Document None as timeout for asyncio.timeout()

Issue #25314: Merge argparse doc from 3.5

Issue #23804: Merge SSL zero read fix from 3.5

Issue #23804: Fix SSL recv/read(0) to not return 1024 bytes

Issue #26130: Remove redundant variable 's' from Parser/parser.c

Patch by Oren Milman.

Issue #25195: Fix a regression in mock.MagicMock

_Call is a subclass of tuple (changeset 3603bae63c13 only works
for classes) so we need to implement __ne__ ourselves.

Patch by Andrew Plummer.

Issue #25195: Fix a regression in mock.MagicMock

_Call is a subclass of tuple (changeset 3603bae63c13 only works
for classes) so we need to implement __ne__ ourselves.

Patch by Andrew Plummer.

Issue #23758: Improve num_params docs of create_{function,aggregate} functions

If you pass -1, the callable can take any number of arguments.

Added tests to verify the behavior.

Initial patch by Cédric Krier.

Issue #23758: Improve num_params docs of create_{function,aggregate} functions

If you pass -1, the callable can take any number of arguments.

Added tests to verify the behavior.

Initial patch by Cédric Krier.

Document sqlite3.Cursor.close()

The behaviour of the close method is tested by ClosedCurTests
in Lib/sqlite3/test/dbapi.py.

This is basically a backport of https://github.com/ghaering/pysqlite/issues/73.

Document sqlite3.Cursor.close()

The behaviour of the close method is tested by ClosedCurTests
in Lib/sqlite3/test/dbapi.py.

This is basically a backport of https://github.com/ghaering/pysqlite/issues/73.

regrtest: round final timing towards +inf

sqlite3 documentation: Connection.iterdump() is a method

sqlite3 documentation: Connection.iterdump() is a method

Issue #26644: Merge SSL negative read fix from 3.5

Moved misplaced functions to the section for C API functions.

Issue #26644: Raise ValueError for negative SSLSocket.recv() and read()

Issue #25940: Use internal local server more in test_ssl

Move many tests from NetworkedTests and NetworkedBIOTests to a new Simple-
BackgroundTests class, using the existing ThreadedEchoServer and SIGNED_
CERTFILE infrastructure.

For tests that cause the server to crash by rejecting its certificate,
separate them into independent test methods.

Added custom root certificate to capath with the following commands:

cp Lib/test/{pycacert.pem,capath/}
# Edit copy to remove part before certificate
c_rehash -v Lib/test/capath/
c_rehash -v -old Lib/test/capath/
# Note the generated file names
cp Lib/test/capath/{pycacert.pem,b1930218.0}
mv Lib/test/capath/{pycacert.pem,ceff1710.0}

Change to pure PEM version of SIGNING_CA because PEM_cert_to_DER_cert() does
not like the extra text at the start.

Moved test_connect_ex_error() into BasicSocketTests and rewrote it to connect
to a reserved localhost port.

NetworkedTests.test_get_server_certificate_ipv6() split out because it needs
to connect to an IPv6 DNS address.

The only reference left to self-signed.pythontest.net is test_timeout_
connect_ex(), which needs a remote server to reliably time out the
connection, but does not rely on the server running SSL.

Made ThreadedEchoServer call unwrap() by default when it sees the client has
shut the connection down, so that the client can cleanly call unwrap().

Responsibility for argument checking belongs in set.__init__() rather than set.__new__().

See dict.__new__() and list.__new__() for comparison.  Neither of those examine or touch
args or kwds.  That work is done in the __init__() methods.

Minor code cleanup for PyArg_UnpackTuple.

Issue #25911: more info on test_os failure

makeopcodetargets.py: we need to import Lib/opcode.py

Issue #20021: use importlib.machinery to import Lib/opcode.py and not an opcode
module coming from somewhere else. makeopcodetargets.py is part of the Python
build process and it is run by an external Python program, not the built Python
program.

Patch written by Serhiy Storchaka.

Null merge 3.5

Fix test_os.test_symlink(): remove create symlink

merge