bpo-28626: rearrange discussion of output formatting to encourage f-strings (#6036)

The 'output formatting' section of the tutorial talks a lot about manual formatting with things like .rjust() and .zfill(), with only a passing reference to 3.6's new f-strings.

This doesn't drop all of the old material, but it does rearrange the topics into a more modern order: f-strings first, discussing formatting specifiers a bit; then calling .format(); finally manual formatting with .ljust().

bpo-33702: Add some missing links in production lists and do a little polish (GH-7259)

bpo-33804: Document that the argument for io.TextIOBase.read() is optional (GH-7510)

Fix moduleauthor/sectionauthor directives in Enum (GH-8117)

Add missing closing parentheses (GH-8144)

Make various internal _testbuffer symbols static. (GH-8160)

Fix typo in TypeVar docstring (#8142)

"can be used do declare" → "can be used to declare"

bpo-34065: Improve the markup of logging.basicConfig() arguments (GH-8153)

Hide some symbols from _xxsubinterpreters. (GH-8151)

Make two PyModuleDef_Slot symbols static in _testmultiphase. (GH-8147)

closes bpo-34056: Always return bytes from _HackedGetData.get_data(). (GH-8130)

* Always return bytes from _HackedGetData.get_data().

Ensure the imp.load_source shim always returns bytes by reopening the file in
binary mode if needed. Hash-based pycs have to receive the source code in bytes.

It's tempting to change imp.get_suffixes() to always return 'rb' as a mode, but
that breaks some stdlib tests and likely 3rdparty code, too.

bpo-23493: json: Change sort_keys in Python encoder same to C (GH-8131)

Stop using key=lambda.  This behavior is same to C version encoder.

bpo-34042: Fix dict.copy() to maintain correct total refcount (GH-8119)

Clarify that example in comment is about fromkeys() (GH-8141)

bpo-34054: multiprocessing uses time.monotonic() (GH-8118)

The multiprocessing module now uses the monotonic clock
time.monotonic() instead of the system clock time.time() to implement
timeouts.

fix two typos in Objects/odictobject.c comments (GH-8040)

bpo-20180: complete AC conversion of Objects/stringlib/transmogrify.h (GH-8039)

* converted bytes methods: expandtabs, ljust, rjust, center, zfill
* updated char_convertor to properly set the C default value

Doc: Remove superfluous markup. (GH-8112)

The line is speaking of a list of commands, not the list command.

Fix GCC warning in Python/hamt.c (GH-7618)

bpo-33899: Make tokenize module mirror end-of-file is end-of-line behavior (GH-7891)

Most of the change involves fixing up the test suite, which previously made
the assumption that there wouldn't be a new line if the input didn't end in
one.

Contributed by Ammar Askar.

Make TaskStepMethWrapper_Type and TaskWakeupMethWrapper_Type static. (GH-8127)

bpo-34043: Optimize tarfile uncompress performance (GH-8089)

tarfile._Stream has two buffer for compressed and uncompressed data.
Those buffers are not aligned so unnecessary bytes slicing happens
for every reading chunks.

This commit bypass compressed buffering.

In this benchmark [1], user time become 250ms from 300ms.

[1]: https://bugs.python.org/msg320763

versionadded -> versionchanged for all 'X parameter was added' for uniformity. (GH8114)

Per the recommendation in our Developer's Guide:
  https://devguide.python.org/documenting/#paragraph-level-markup

Add more detail to the Counter.fromkeys() comment block (GH-8124)

classify abs() argument type (GH-8103)

Fix typo in dataclasses documentation (GH-8102)

bpo-34044: subprocess.Popen copies startupinfo (GH-8090)

subprocess.Popen now copies the startupinfo argument to leave it
unchanged: it will modify the copy, so that the same STARTUPINFO
object can be used multiple times.

Add subprocess.STARTUPINFO.copy() method.

Fix fuzz testing for marshal.loads(). (GH-8106)

bpo-33720: Improve tests for the stack overflow in marshal.loads(). (GH-7336)

Removed unused import from tzinfo_examples.py. (GH-7994)

Update Stackless Python wiki URL (GH-8072)

It was moved from bitbucket to GitHub.

Minor code refactoring.  Compute len() one fewer times on one code path. (GH-8094)

DOC: In `reduce`, refer to `accumulate` (GH-7930)

bpo-30516: Fix documentation issue with -timedelta in datetime (GH-7348)

This commit fixes the -timedelta overfllow issue not documented properly.

Signed-off-by: Farhaan Bukhsh <farhaan.bukhsh@gmail.com>

bpo-32942: Fix environment dependent test_script_helper (GH-8034)

Result of function interpreter_requires_environment() depends on os.environ.
This was not covered by the tests, leading to fail when PYTHONHOME was set.

bpo-34040, multiprocessing: Fix test_forkserver_sigkill() (GH-8081)

Fix test_forkserver_sigkill() of test_multiprocessing_forkserver:
give more time to the first child process to complete, double the
sleep in the parent process.

Reduce also the child process sleep from 1000 ms to 500 ms, to not change
the total duration of the test.

bpo-34010: Fix tarfile read performance regression (GH-8020)

During buffered read, use a list followed by join instead of extending a bytes object.
This is how it was done before but changed in commit b506dc32c1a.

Make GenericAlias_Type and Generic_Type static. (GH-8076)

Don't export pending_threadfunc from _testcapi. (GH-8075)

bpo-33418: Add tp_clear for function object (GH-8058)

Without tp_clear, GC can't break cyclic reference.
It will cause memory leak when cyclic reference is
created intentionally.

bpo-24596: Decref module in PyRun_SimpleFileExFlags() on SystemExit (GH-7918)

PyErr_Print() will not return when the exception is a SystemExit, so
decref the __main__ module object in that case.

bpo-34018: Doc'd that type names of SQLite converters are case-insensitive. (GH-8042)

 bpo-34019: Fix wrong arguments for Opera Browser (#8047)

The Opera Browser was using a outdated command line invocation that resulted in an incorrect URL being opened in the browser when requested using the webbrowser module.

* Correct the arguments passed to the Opera Browser when opening a new URL.

bpo-33735: Fix test_multiprocessing random failure (GH-8059)

When hunting memory leaks using -R 3:3, test_imap_unordered() of
test_multiprocessing leaks randomly a few memory blocks. It is a
false alarm: when testing using -R 3:20 for example, no leak is
detected.

Modify test_imap_unordered() to be closer to test_imap():

* Only test 10 numbers instead of 1000: it's a pool of 4 processes, so
  10 is enough to test at least one number per process
* Use chunksize=100 instead of chunksize=53 to mimick test_imap()

bpo-34006: Revert line length limit for Windows help docs (GH-8051)

 The line-length limit is not needed because the pages appear in a separate app rather
 than on a browser tab.  It can also interact badly with the DPI setting.

bpo-33978: Close existing handlers before logging (re-)configuration. (GH-8008)

bpo-30660: Doc: Optimize PNG files by optipng (GH-8032)

Using OptiPNG 0.7.7.
Used command is: `find . -name '*.png' | xargs optipng -o7`

bpo-31938: Convert selectmodule.c to Argument Clinic (GH-4265)

Doc: Remove unused image file (GH-8027)

bpo-25862: Fix several bugs in the _io module. (GH-8026)

They can be exposed when some C API calls fail due to lack of
memory.

* Failed Py_BuildValue() could cause an assertion error in the
  following TextIOWrapper.tell().
* input_chunk could be decrefed twice in TextIOWrapper.seek()
  after failed Py_BuildValue().
* initvalue could leak in StringIO.__getstate__() after failed
  PyDict_Copy().

bpo-32568: make select.epoll() and its docs consistent (#7840)

* `flags` is indeed deprecated, but there is a validation on its value for
  backwards compatibility reasons.  This adds mention of this in the docs.
* The docs say that `sizehint` is deprecated and ignored, but it is still
  used when `epoll_create1()` is unavailable. This adds mention of this in
  the docs.
* `sizehint=-1` is acceptable again, and is replaced with `FD_SETSIZE-1`.
  This is needed to have a default value available at the Python level,
  since `FD_SETSIZE` is not exposed to Python. (see: bpo-31938)
* Reject `sizehint=0` since it is invalid to pass on to `epoll_create()`.

The relevant tests have also been updated.

bpo-33974: Fix passing special characters to ttk widgets. (GH-7986)

Fix passing lists and tuples of strings containing special characters
'"', '\\', '{', '}' and '\n' as options to tkinter.ttk widgets.

Fix redundant declaration of _PyImport_AddModuleObject (GH-7992)

Add zulipchat badge to readme (GH-7929)

bpo-25862: Fix assertion failures in io.TextIOWrapper.tell(). (GH-3918)

Fix the indentation in the documentation of bin() and hash() (GH-7998)

bpo-14117: Make minor tweaks to turtledemo (GH-8002)

The 'wikipedia' example is now 'rosette', describing what it draws.
The 'penrose' print output is reduced.  The 'tree' '1024'
output is eliminated.

bpo-27500: Fix static version of getaddrinfo to resolve IPv6 (GH-7993)

bpo-33985: Implement ContextVar.name attribute. (GH-7980)

bpo-31546: Fix input hook integration (GH-7978)

bpo-32996: Enhancements to What's New based on feedback (GH-7988)

Forward port rest of NEWS changes as of 3.7.0

bpo-33842: Remove tarfile.filemode (GH-7661)

bpo-33958: Doc: Remove unused variable in example (GH-7927)

Forward port 3.7.0 final changes

bpo-33715: Fix multiprocessing test_wait_result() (GH-7971)

Increase timeouts from 10 seconds to 1 minute.

bpo-33913: Fix test_multiprocessing_main_handling (GH-7972)

bpo-30339, bpo-33913:

* Increase timeout from 10 seconds to 1 minute in
  test_source_main_skipped_in_children source of
  test_multiprocessing_main_handling.
* Replace time.time() with time.monotonic().
* On timeout, include the duration in the error message.

bpo-25007: Add copy protocol support to zlib compressors and decompressors (GH-7940)

bpo-30356: Fix test_mymanager_context() of multiprocessing (GH-7968)

test_mymanager_context() now also accepts -SIGTERM as an expected
exitcode for the manager process. The process is killed with SIGTERM
if it takes longer than 1 second to stop.

Prevent upload script uploading from the wrong directory (GH-7953)

bpo-31647: Fix bpo typo in NEWS entry. (GH-7964)

bpo-33929: Fix regression in spawn_main() (#7962)

OpenProcess() creates a new handle that must be closed later.

bpo-33929: multiprocessing: fix handle leak on race condition (GH-7921)

Fix a race condition in Popen of
multiprocessing.popen_spawn_win32. The child process now duplicates
the read end of pipe instead of "stealing" it.

Previously, the read end of pipe was "stolen" by the child process,
but it leaked a handle if the child process had been terminated
before it could steal the handle from the parent process.

bpo-30317, test_multiprocessing: fix test_timeout() (GH-7957)

Tolerate a different of 50 ms, instead of just 30 ms, in
test_timeout() of multiprocessing tests. This change should fix such
test failure on Windows:

FAIL: test_timeout (test.test_multiprocessing_spawn.WithProcessesTestQueue)
Traceback (most recent call last):
  File "lib\test\_test_multiprocessing.py", line 753, in test_timeout
    self.assertGreaterEqual(delta, 0.170)
AssertionError: 0.16138982772827148 not greater than or equal to 0.17

bpo-24567: Random subnormal.diff (#7954)

Handle subnormal weights for choices()

bpo-33975: Avoid small type when running IDLE's htests. (GH-7944)

Import pyshell first in htest to call SetProcessDpiAwareness on Windows
before tkinter.Tk() is called for the htest. Apparently, 'root.destroy()'
undoes a previous 'root = Tk()'. Since IDLE unittests always destroy roots,
a unittest before an htest does not require anything more to work right.
Since part of the purpose of human-viewed tests is to determine that
widgets look right, it is important that they look the same for testing
as when running IDLE.

use rich markup for PEP reference (GH-7939)

it's better to refer to PEP with `pep` role in reStructuredText. It also links to the PEP page.

bpo-29514: Make magic number test work for candidates

bpo-33956: update vendored expat to 2.2.5 (GH-7925)

bpo-33873: Fix bug in `runtest.py` and add checks for invalid `-R` parameters (GH-7735)

Fix bug in `Lib/test/libregrtest/runtest.py` that makes running tests an extra time than the specified number of runs.

Add check for invalid --huntrleaks/-R parameters.

bpo-33957: Doc: Use better wording (GH-7912)

bpo-33924: Add missed mac-specific 'windows' to 'window' changes (GH-7920)

These should have been included in PR 7836.

Revert "bpo-33671: Add support.MS_WINDOWS and support.MACOS (GH-7800)" (GH-7919)

This reverts commit 8fbbdf0c3107c3052659e166f73990b466eacbb0.

bpo-33573: docs to suggest median() alternatives for non-numeric data (GH-7587)

bpo-33952: Fix typo in str.upper() documentation (GH-7898)

bpo-33943: Add references in the docs for logging.basicConfig (GH-7858)

Adds references to info about file modes, `time.strftime()`, string formatting
syntaxes, and logging levels.

bpo-33897: Add a 'force' keyword argument to logging.basicConfig(). (GH-7873)

bpo-33951: IDLE test_configdialog: call page.update in setUpClass (GH-7892)

This avoids a failure in at least one case when running only a single
test method rather than all tests in the module.

The issue came up when testing the following on Windows 10 Pro 64-bit:
HighPageTest.test_highlight_target_text_mouse

Enable GUI tests in VSTS Linux builds via xvfb-run (GH-7890)

bpo-33451: Close pyc files before calling PyEval_EvalCode() (GH-7884)

Directly executed pyc files were being kept open longer than necessary.

[master] bpo-33885: Replace "hook function" with "callable" (GH-7765) (#7886)

(cherry picked from commit c45cb479074b5d25f0d382d3109f527520a9f03c)

Co-authored-by: Andrés Delfino <adelfino@gmail.com>

bpo-33950: Remove IDLE htest spec for a deleted file. (GH-7881)

In configdialog, the custom tabbedpages widget was replaced
by ttk.notebook several months ago.

bpo-33887: Add TOC to Design and History FAQ(GH-7766)

bpo-33805: Improve error message of dataclasses.replace() (GH-7580)

Remove tp_print implementation (GH-7857)

bpo-33916: Fix bz2 and lzma init when called twice (GH-7843)

bz2, lzma: When Decompressor.__init__() is called twice, free the old
lock to not leak memory.

suppress compiler warnings in _cursesmodule.c (#7860)

bpo-33877: Remove UNIX qualification for running complete programs (GH-7744)

The statement is true for Windows (and macOS) also.

Add test coverage reporting for C files (GH-7773)

bpo-33671: Add support.MS_WINDOWS and support.MACOS (GH-7800)

* Add support.MS_WINDOWS: True if Python is running on Microsoft Windows.
* Add support.MACOS: True if Python is running on Apple macOS.
* Replace support.is_android with support.ANDROID
* Replace support.is_jython with support.JYTHON
* Cleanup code to initialize unix_shell