]> granicus.if.org Git - python/commitdiff
Backport issue #12973 list_repeat fix from 3.x.
authorMark Dickinson <mdickinson@enthought.com>
Mon, 19 Sep 2011 18:23:55 +0000 (19:23 +0100)
committerMark Dickinson <mdickinson@enthought.com>
Mon, 19 Sep 2011 18:23:55 +0000 (19:23 +0100)
Misc/NEWS
Objects/listobject.c

index 72d7a0957557f17f614255d37e3f5e5f849404a0..30cde1dba516731f88593e77226c13661b9a91fc 100644 (file)
--- a/Misc/NEWS
+++ b/Misc/NEWS
@@ -12,7 +12,9 @@ Core and Builtins
 - Issue #12973: Fix overflow checks that invoked undefined behaviour in
   int.__pow__.  These overflow checks were causing int.__pow__ to produce
   incorrect results with recent versions of Clang, as a result of the
-  compiler optimizing the check away.
+  compiler optimizing the check away.  Also fix similar overflow check
+  in list_repeat (which caused test_list to fail with recent versions
+  of Clang).
 
 - Issue #12266: Fix str.capitalize() to correctly uppercase/lowercase
   titlecased and cased non-letter characters.
index 08f7880286563600ed4216efed6e83ca02e51c45..f753643bd39a94987be327c791dea4eed6183cae 100644 (file)
@@ -58,7 +58,7 @@ list_resize(PyListObject *self, Py_ssize_t newsize)
     if (newsize == 0)
         new_allocated = 0;
     items = self->ob_item;
-    if (new_allocated <= ((~(size_t)0) / sizeof(PyObject *)))
+    if (new_allocated <= (PY_SIZE_MAX / sizeof(PyObject *)))
         PyMem_RESIZE(items, PyObject *, new_allocated);
     else
         items = NULL;
@@ -551,9 +551,9 @@ list_repeat(PyListObject *a, Py_ssize_t n)
     PyObject *elem;
     if (n < 0)
         n = 0;
-    size = Py_SIZE(a) * n;
-    if (n && size/n != Py_SIZE(a))
+    if (n > 0 && Py_SIZE(a) > PY_SSIZE_T_MAX / n)
         return PyErr_NoMemory();
+    size = Py_SIZE(a) * n;
     if (size == 0)
         return PyList_New(0);
     np = (PyListObject *) PyList_New(size);