]> granicus.if.org Git - postgresql/commitdiff
Fix the int8 and int2 cases of (minimum possible integer) % (-1).
authorTom Lane <tgl@sss.pgh.pa.us>
Wed, 14 Nov 2012 22:30:14 +0000 (17:30 -0500)
committerTom Lane <tgl@sss.pgh.pa.us>
Wed, 14 Nov 2012 22:30:14 +0000 (17:30 -0500)
The correct answer for this (or any other case with arg2 = -1) is zero,
but some machines throw a floating-point exception instead of behaving
sanely.  Commit f9ac414c35ea084ff70c564ab2c32adb06d5296f dealt with this
in int4mod, but overlooked the fact that it also happens in int8mod
(at least on my Linux x86_64 machine).  Protect int2mod as well; it's
not clear whether any machines fail there (mine does not) but since the
test is so cheap it seems better safe than sorry.  While at it, simplify
the original guard in int4mod: we need only check for arg2 == -1, we
don't need to check arg1 explicitly.

Xi Wang, with some editing by me.

src/backend/utils/adt/int.c
src/backend/utils/adt/int8.c

index a6e853b47d363337d525d98bf74c1c7f5a9abd66..6496d1367f5dea8e8c1485644eb0586c1a8741f5 100644 (file)
@@ -1085,8 +1085,12 @@ int4mod(PG_FUNCTION_ARGS)
                PG_RETURN_NULL();
        }
 
-       /* SELECT ((-2147483648)::int4) % (-1); causes a floating point exception */
-       if (arg1 == INT_MIN && arg2 == -1)
+       /*
+        * Some machines throw a floating-point exception for INT_MIN % -1, which
+        * is a bit silly since the correct answer is perfectly well-defined,
+        * namely zero.
+        */
+       if (arg2 == -1)
                PG_RETURN_INT32(0);
 
        /* No overflow is possible */
@@ -1109,6 +1113,15 @@ int2mod(PG_FUNCTION_ARGS)
                PG_RETURN_NULL();
        }
 
+       /*
+        * Some machines throw a floating-point exception for INT_MIN % -1, which
+        * is a bit silly since the correct answer is perfectly well-defined,
+        * namely zero.  (It's not clear this ever happens when dealing with
+        * int16, but we might as well have the test for safety.)
+        */
+       if (arg2 == -1)
+               PG_RETURN_INT16(0);
+
        /* No overflow is possible */
 
        PG_RETURN_INT16(arg1 % arg2);
index 9ffc5f11d697e9d2f3307220ae7e22b0645341c8..5eed95d298ab7b24618b96a8c38223d7404dfea3 100644 (file)
@@ -658,6 +658,14 @@ int8mod(PG_FUNCTION_ARGS)
                PG_RETURN_NULL();
        }
 
+       /*
+        * Some machines throw a floating-point exception for INT64_MIN % -1,
+        * which is a bit silly since the correct answer is perfectly
+        * well-defined, namely zero.
+        */
+       if (arg2 == -1)
+               PG_RETURN_INT64(0);
+
        /* No overflow is possible */
 
        PG_RETURN_INT64(arg1 % arg2);