Fix the int8 and int2 cases of (minimum possible integer) % (-1).
authorTom Lane <[email protected]>
Wed, 14 Nov 2012 22:30:18 +0000 (17:30 -0500)
committerTom Lane <[email protected]>
Wed, 14 Nov 2012 22:30:18 +0000 (17:30 -0500)
The correct answer for this (or any other case with arg2 = -1) is zero,
but some machines throw a floating-point exception instead of behaving
sanely.  Commit f9ac414c35ea084ff70c564ab2c32adb06d5296f dealt with this
in int4mod, but overlooked the fact that it also happens in int8mod
(at least on my Linux x86_64 machine).  Protect int2mod as well; it's
not clear whether any machines fail there (mine does not) but since the
test is so cheap it seems better safe than sorry.  While at it, simplify
the original guard in int4mod: we need only check for arg2 == -1, we
don't need to check arg1 explicitly.

Xi Wang, with some editing by me.

src/backend/utils/adt/int.c
src/backend/utils/adt/int8.c

index 7496cd835477257f9a90586df0243a27c3269b9d..134bdf5b35c9c2a3e52afb0b4ed7cec6a4861495 100644 (file)
@@ -1083,8 +1083,12 @@ int4mod(PG_FUNCTION_ARGS)
        PG_RETURN_NULL();
    }
 
-   /* SELECT ((-2147483648)::int4) % (-1); causes a floating point exception */
-   if (arg1 == INT_MIN && arg2 == -1)
+   /*
+    * Some machines throw a floating-point exception for INT_MIN % -1, which
+    * is a bit silly since the correct answer is perfectly well-defined,
+    * namely zero.
+    */
+   if (arg2 == -1)
        PG_RETURN_INT32(0);
 
    /* No overflow is possible */
@@ -1107,6 +1111,15 @@ int2mod(PG_FUNCTION_ARGS)
        PG_RETURN_NULL();
    }
 
+   /*
+    * Some machines throw a floating-point exception for INT_MIN % -1, which
+    * is a bit silly since the correct answer is perfectly well-defined,
+    * namely zero.  (It's not clear this ever happens when dealing with
+    * int16, but we might as well have the test for safety.)
+    */
+   if (arg2 == -1)
+       PG_RETURN_INT16(0);
+
    /* No overflow is possible */
 
    PG_RETURN_INT16(arg1 % arg2);
index e288c1dff65cdf7bed64a7f607bd928d469caaef..5657b89f5f6eb4d229819db52cbe9a07988d5793 100644 (file)
@@ -657,6 +657,14 @@ int8mod(PG_FUNCTION_ARGS)
        PG_RETURN_NULL();
    }
 
+   /*
+    * Some machines throw a floating-point exception for INT64_MIN % -1,
+    * which is a bit silly since the correct answer is perfectly
+    * well-defined, namely zero.
+    */
+   if (arg2 == -1)
+       PG_RETURN_INT64(0);
+
    /* No overflow is possible */
 
    PG_RETURN_INT64(arg1 % arg2);