Issue #10740: sqlite3 no longer implicitly commit an open transaction before DDL statements

This commit contains the following commits from ghaering/pysqlite:

* https://github.com/ghaering/pysqlite/commit/f254c534948c41c0ceb8cbabf0d4a2f547754739
* https://github.com/ghaering/pysqlite/commit/796b3afe38cfdac5d7d5ec260826b0a596554631
* https://github.com/ghaering/pysqlite/commit/cae87ee68613697a5f4947b4a0941f59a28da1b6
* https://github.com/ghaering/pysqlite/commit/3567b31bb5e5b226ba006213a9c69dde3f155faf

With the following additions:

* Fixed a refcount error
* Fixed a compiler warning
* Made the string comparison a little more robust
* Added a whatsnew entry

Issue #22493: Inline flags now should be used only at the start of the
regular expression.  Deprecation warning is emitted if uses them in the
middle of the regular expression.

Issue #26885: xmlrpc now supports unmarshalling additional data types used
by Apache XML-RPC implementation for numerics and None.

Issue #26900: Excluded underscored names and other private API from limited API.

issue23591: add auto() for auto-generating Enum member values

Issue #23722: Initialize __class__ from type.__new__()

The __class__ cell used by zero-argument super() is now initialized
from type.__new__ rather than __build_class__, so class methods
relying on that will now work correctly when called from metaclass
methods during class creation.

Patch by Martin Teichmann.

Remove the debug print that i accidentally left in.

Remove the debug print that i accidentally left in.

Issue #26141: Update docs for typing.py. Ivan Levkivskyi. (null merge 3.5->3.6)

Issue #26141: Update docs for typing.py. Ivan Levkivskyi. (Backport from the 3.6 version)

Issue #26141: Update docs for typing.py. Ivan Levkivskyi.

Issue #28073: Improve wording around None. Michael Lee. (3.5->3.6)

Issue #28073: Improve wording around None. Michael Lee.

Backed out changeset 8460a729e1de

force gcc to use c99 inline semantics

fix link to instrumentation

add the usual extern C silliness to pydtrace.h

reST is not markdown

Backed out changeset 3934e070c9db

Null merge

Backported tests for issue #28070.

Issue #28070: Fixed parsing inline verbose flag in regular expressions.

Issue #19500: Add client-side SSL session resumption to the ssl module.

Issue #28022: Deprecate ssl-related arguments in favor of SSLContext.

The deprecation include manual creation of SSLSocket and certfile/keyfile
(or similar) in ftplib, httplib, imaplib, smtplib, poplib and urllib.

ssl.wrap_socket() is not marked as deprecated yet.

#28067: Fixed another typo.

Issue 28043: SSLContext has improved default settings

The options OP_NO_COMPRESSION, OP_CIPHER_SERVER_PREFERENCE, OP_SINGLE_DH_USE, OP_SINGLE_ECDH_USE, OP_NO_SSLv2 (except for PROTOCOL_SSLv2), and OP_NO_SSLv3 (except for PROTOCOL_SSLv3) are set by default. The initial cipher suite list contains only HIGH ciphers, no NULL ciphers and MD5 ciphers (except for PROTOCOL_SSLv2).

IDLE newx items. merge from 3.5

IDLE newx items.

#28067: Fixed a typo.

Closes #28067: Do not call localtime (gmtime) in datetime module.

Closes #28059: Fixes test_platform to set PYTHONPATH for .pyd files

Issue #25221: merge from 3.5.

Closes #28059: Fixes test_platform to set PYTHONPATH for .pyd files

Issue #25221: Fix corrupted result from PyLong_FromLong(0) when Python is compiled with NSMALLPOSINTS = 0.

Merge from 3.5

Issue #27932: Backs out change

Fixed compiler warnings in compact dict implementation on 32-bit platforms.

Issue #24693: Changed some RuntimeError's in the zipfile module to more
appropriate types. Improved some error messages and debugging output.

Issue #28046: Fix get_sysconfigdata_name().

Backed out changeset 491bbba73bca

This change didn't have the intended effect.

One more spelling fix

Merge spelling fixes from 3.5

Correct spelling in documentation and code comment

test_platform: Save/restore os.environ on Windows

Issue #17909: Accept binary input in json.loads

json.loads (and hence json.load) now support binary input
encoded as UTF-8, UTF-16 or UTF-32.

Patch by Serhiy Storchaka.

Issue #27137: align Python & C implementations of functools.partial

The pure Python fallback implementation of functools.partial
now matches the behaviour of its accelerated C counterpart for
subclassing, pickling and text representation purposes.

Patch by Emanuel Barry and Serhiy Storchaka.

Merge 3.5 (regrtest)

regrtest: accept options after test names

test_eintr: Fix ResourceWarning warnings

Show regrtest env changed warn on Windows buildbot

Issue #27829: don't pass --quiet option to regrtest to see
"Warning -- xxx was modified by ..." warnings.

Issue #28019: itertools.count() no longer rounds non-integer step in range
between 1.0 and 2.0 to 1.

Issue #28019: itertools.count() no longer rounds non-integer step in range
between 1.0 and 2.0 to 1.

Fix Python version in pdb.rst

Issue #18401: Fix test_pdb on Windows

* Use "with Popen" to cleanup properly the process
* Use support.temp_cwd() to properly change the working directory
* Use environ.pop() to cleanup the code

Fix check_force_ascii()

Issue #27938: Normalize aliases of the ASCII encoding, because
_Py_normalize_encoding() now correctly normalize encoding names.

Issue #18401: Fix test_pdb if $HOME is not set

HOME is not set on Windows for example.

Use also textwrap.dedent() for the script.

Issue #18401: pdb tests don't read ~/.pdbrc anymore

Patch by Martin Matusiak and Sam Kimbrel.

Try to fix sizeof unit tests on dict

Issue #28056 and issue #26058.

Don't run garbage collection on interpreter exit if it was explicitly disabled
by the user.

Use raw string for regexp (3.5->3.6)

Use raw string for regexp

#20476: Deal with the message_factory circular import differently.

It turns out we can't depend on email.message getting imported every place
message_factory is needed, so to avoid a circular import we need to special
case Policy.message_factory=None in the parser instead of using monkey
patching.  I had a feeling that was a bad idea when I did it.

Issue #27810: Fix getargs.c compilation on Windows

fix export of size_t parse stack function

dictobject.c: explain why stringlib is used

Issue #27810: Rerun Argument Clinic on all modules

Issue #27566: Fix clean target in freeze makefile (patch by Lisa Roach)

Issue #27705: Update message in validate_ucrtbase.py

Issue #25969: Update the lib2to3 grammar to handle the unpacking
generalizations added in 3.5.

remove fix_callable - callable() was readded many releases ago.

Issue #27932: Fixes memory leak in platform.win32_ver()

Emit METH_FASTCALL code in Argument Clinic

Issue #27810:

* Modify vgetargskeywordsfast() to work on a C array of PyObject* rather than
  working on a tuple directly.
* Add _PyArg_ParseStack()
* Argument Clinic now emits code using the new METH_FASTCALL calling convention

Add METH_FASTCALL calling convention

Issue #27810: Add a new calling convention for C functions:

    PyObject* func(PyObject *self, PyObject **args,
                   Py_ssize_t nargs, PyObject *kwnames);

Where args is a C array of positional arguments followed by values of keyword
arguments. nargs is the number of positional arguments, kwnames are keys of
keyword arguments. kwnames can be NULL.

Fix SystemError in compact dict

Issue #28040: Fix _PyDict_DelItem_KnownHash() and _PyDict_Pop(): convert
splitted table to combined table to be able to delete the item.

Write an unit test for the issue.

Patch by INADA Naoki.

make invalid_comma_and_underscore a real prototype

Further improved ',' and '_' specification in format mini-language.

Improved ',' and '_' specification in format mini-language.

Issue 27080: PEP 515: add '_' formatting option.

compile dtrace stubs

Issue #27199: TarFile expose copyfileobj bufsize to improve throughput

Patch by Jason Fried.

add dtrace inline stubs

just start with an int rather than casting

Issue 27948: Allow backslashes in the literal string portion of f-strings, but not in the expressions. Also, require expressions to begin and end with literal curly braces.

Issue #27566: Fix clean target in freeze makefile (patch by Lisa Roach)

Issue #28046: Fix distutils

Why do we have two sysconfig modules again?

Issue #27705: Update message in validate_ucrtbase.py

Issue #25969: Update the lib2to3 grammar to handle the unpacking
generalizations added in 3.5.

merge (3.6 already has this)

dummy dtrace probes are a good place to use inline functions

Merge from Zach

Issue #27932: Fixes memory leak in platform.win32_ver()

Issue #28046: Remove platform-specific directories from sys.path

Actually fix suspicious markup, I ignored it too readily

fix dummy macro

DTrace support: function calls, GC activity, line execution

Tested on macOS 10.11 dtrace, Ubuntu 16.04 SystemTap, and libbcc.

Largely based by an initial patch by Jesús Cea Avión, with some
influence from Dave Malcolm's SystemTap patch and Nikhil Benesch's
unification patch.

Things deliberately left out for simplicity:
- ustack helpers, I have no way of testing them at this point since
they are Solaris-specific
- PyFrameObject * in function__entry/function__return, this is
SystemTap-specific
- SPARC support
- dynamic tracing
- sys module dtrace facility introspection

All of those might be added later.

Remove line numbers from suspicious rules

Issue #25758: Prevents zipimport from unnecessarily encoding a filename (patch by Eryk Sun)

Issue #25758: Prevents zipimport from unnecessarily encoding a filename (patch by Eryk Sun)

Merge: #14977: Make mailcap respect the order of the lines in the mailcap file.

#14977: Make mailcap respect the order of the lines in the mailcap file.

This is required by RFC 1542, so despite the subtle behavior change we
are treating it as a bug.  Patch by Michael Lazar.