Partial revert of changeset 9744b2df134c

PyUnicode_Append() cannot call directly resize_compact(): I forgot that a
string can be ready *and* not compact (a legacy string can also be ready).

Split PyUnicode_DecodeCharmap() into subfunction for readability

#17135: mark imp as deprecated as of 3.4.

Fix bug in Unicode decoders related to _PyUnicodeWriter

Bug introduced by changesets 7ed9993d53b4 and edf029fc9591.

Fix typo in unicode_decode_call_errorhandler_writer()

Bug introduced by changeset 7ed9993d53b4.

Close #17694: Add minimum length to _PyUnicodeWriter

 * Add also min_char attribute to _PyUnicodeWriter structure (currently unused)
 * _PyUnicodeWriter_Init() has no more argument (except the writer itself):
   min_length and overallocate must be set explicitly
 * In error handlers, only enable overallocation if the replacement string
   is longer than 1 character
 * CJK decoders don't use overallocation anymore
 * Set min_length, instead of preallocating memory using
   _PyUnicodeWriter_Prepare(), in many decoders
 * _PyUnicode_DecodeUnicodeInternal() checks for integer overflow

Merge.

Merge.

Merge.

Issue #17555: Fix ForkAwareThreadLock so that size of after fork
registry does not grow exponentially with generation of process.

Issue #17782: Fix undefined behaviour on platforms where ``struct timespec``'s "tv_nsec" member is not a C long.

- Issue #17782: Fix undefined behaviour on platforms where ``struct timespec``'s "tv_nsec" member is not a C long.

Issue #17555: Fix ForkAwareThreadLock so that size of after fork
registry does not grow exponentially with generation of process.

merge 3.3

Fix issue #17707: multiprocessing.Queue's get() method does not block for short timeouts.

Fix issue #17707: multiprocessing.Queue's get() method does not block for short timeouts.

#14735: merge with 3.3.

#14735: Update IDLE docs to omit "Control-z on Windows".

#17771: merge with 3.3.

#17771: fix typo.  Patch by Andriy Mysyk.

#17766: merge with 3.3.

#17766: test_iterlen now works with unittest test discovery.  Patch by Zachary Ware.

#17740: merge with 3.3.

#17740: fix links to the socket function.  Initial patch by Zachary Ware.

Issue #17739: fix the description of SSLSocket.getpeercert(binary_form=True) for server sockets.
Thanks to David D Lowe for reporting.

Issue #17739: fix the description of SSLSocket.getpeercert(binary_form=True) for server sockets.
Thanks to David D Lowe for reporting.

Remove unused import

Remove unused import.

- Issue #17012: shutil.which() no longer fallbacks to the PATH environment
  variable if empty path argument is specified.  Patch by Serhiy Storchaka.

- Issue #17012: shutil.which() no longer fallbacks to the PATH environment
  variable if empty path argument is specified.  Patch by Serhiy Storchaka.

Make C and Python implementations of pickle load STRING opcodes the same way.

The C version tried to remove trailing whitespace between the last quote and
the newline character. I am not sure why it had this because pickle never
generated such pickles---for this to happen repr(some_string) would need to
return trailing whitespace. It was maybe there to make it easier for people
to write pickles in text editors. Anyhow, the Python version doesn't do this
so there is no point keeping this around anymore.

Also, I've changed the exception raised when a bad pickle is encountered.
Again this unlikely to make much difference to anyone though it does make
testing slightly nicer for us.

merge 3.3

remove pointless code (closes #17738)

Issue #17710: Fix pickle raising a SystemError on bogus input.

Issue #17710: Fix pickle raising a SystemError on bogus input.

#13510: merge with 3.3.

#13510: clarify that f.readlines() is note necessary to iterate over a file.  Patch by Dan Riti.

Issue #17728: Merge with 3.3.

Issue #17728: Specify default precision for float.format for presentation types e, f, and g.

Merge fix for #17731 from 3.3

Close #17731: Clean up properly in test_import

Issue #17713: Added failure diagnostics to test.

Cleanup PyUnicode_Contains()

 * No need to double-check that strings are ready: test already done by
   PyUnicode_FromObject()
 * Remove useless kind variable (use kind1 instead)

Minor change: fix character in do_strip() for the ASCII case

Cleanup PyUnicode_Append()

 * Check also that right is a Unicode object
 * call directly resize_compact() instead of unicode_resize() for a more
   explicit error handling, and to avoid testing some properties twice
   (ex: unicode_modifiable())

#17341: Include name in re error message about invalid group name.

Patch by Jason Michalski.

PyUnicode_Join(): move use_memcpy test out of the loop to cleanup and optimize the code

Optimize repr(str): use _PyUnicode_FastCopyCharacters() when no character is escaped

Optimize ascii(str): don't encode/decode repr if repr is already ASCII

Issue #17693: Fix memory/reference leaks

Merge #17341: Include name in re error message about invalid group name.

Patch by Jason Michalski.

add a newline

merge

Issue #17244: Don't mask exceptions raised during the creation of
bytecode files in py_compile.

Thanks to Arfrever Frehtes Taifersar Arahesis for the bug report.

Issue #17221: Resort Misc/NEWS.

Issue #17221: Resort Misc/NEWS.

(Merge 3.3) Issue #17702: use assertRaises() for the unit test

Issue #17702: use assertRaises() for the unit test

(Merge 3.3) Close #17702: os.environ now raises KeyError with the original
environment variable name (str on UNIX), instead of using the encoded name
(bytes on UNIX).

Close #17702: os.environ now raises KeyError with the original environment
variable name (str on UNIX), instead of using the encoded name (bytes on UNIX).

stringlib: remove unused STRINGLIB_RESIZE macro

Merge fix for #16163 from 3.3

Close issue #16163: handle submodules in pkgutil.iter_importers

Issue #17713: additional tweak to test.

Closes #17713: Fixed bug in test_compute_rollover_weekly_attime.

#2118: IOError is deprecated, use OSError.

Merge 3.3

Closes #16551. Cleanup pickle.py.

Merge heads.

Issue #16550: Update the opcode descriptions of pickletools to use unsigned
integers where appropriate.  Initial patch by Serhiy Storchaka.

merge with 3.3

Fix example ignoring ".svn" directories in compileall.

merge with 3.3

The Integral class does not contain implementations for the bit-shifting operations. (See #3056.)

merge with 3.3

Clarify that the function *definition* creates the function and the binding in the module globals.

merge with 3.3

Closes #14462: allow any valid Python identifier in sre group names, as documented.

Style cleanups for pickle.py and _pickle.

merge with 3.3

Closes #13638: document PyErr_SetFromErrnoWithFilenameObject,
PyErr_SetFromWindowsErrWithFilenameObject, and
PyErr_SetExcFromWindowsErrWithFilenameObject.

Note that PyErr_SetExcFromWindowsErrWithFilenameObjectAndSomeOtherParametersSoThatTheNameGetsSoLongThatNobodyIsEverGonnaUseThisStrangeFunctionForAnything is still undocumented.

Merge 3.3

Merge heads.

merge with 3.3

bind('') does not do the same as bind('localhost')

merge with 3.3

Update code examples using collections.abc classes.

merge with 3.3

Closes #17726: small clarification in design FAQ.

Clean up error messages raised by save_reduce in _pickle.

merge with 3.3

Update using/mac documentation which was still on 2.5.

merge with 3.3

Clarify point in name mangling doc.

Merge 3.3

Fix pickling test in test_memoryio.

The test was closing the orginal object instead the copy. This didn't result
in visible failures because the loop range was incorrect as well.

Merge heads.

Issue #16804: Fix 'python -S -m site' failure.

This commit fixes a bug in the 'site' module that was causing an exception
to incorrectly be thrown when running 'python -S -m site'.  The problem was
that 'USER_BASE' and 'USER_SITE' were being accessed before they were properly
initialized.  The code has been changed to use 'getuserbase' and
'getusersitepackages' instead so that the initialization always happens.

Issue #16804: Fix 'python -S -m site' failure.

This commit fixes a bug in the 'site' module that was causing an exception
to incorrectly be thrown when running 'python -S -m site'.  The problem was
that 'USER_BASE' and 'USER_SITE' were being accessed before they were properly
initialized.  The code has been changed to use 'getuserbase' and
'getusersitepackages' instead so that the initialization always happens.

Add _PyUnicodeWriter_WriteCharInline()