]> granicus.if.org Git - postgresql/blob - src/test/regress/sql/collate.linux.utf8.sql
Fix handling of collation in SQL-language functions.
[postgresql] / src / test / regress / sql / collate.linux.utf8.sql
1 /*
2  * This test is for Linux/glibc systems and assumes that a full set of
3  * locales is installed.  It must be run in a UTF-8 locale.
4  */
5
6 SET client_encoding TO UTF8;
7
8
9 CREATE TABLE collate_test1 (
10     a int,
11     b text COLLATE "en_US.utf8" NOT NULL
12 );
13
14 \d collate_test1
15
16 CREATE TABLE collate_test_fail (
17     a int,
18     b text COLLATE "ja_JP.eucjp"
19 );
20
21 CREATE TABLE collate_test_fail (
22     a int,
23     b text COLLATE "foo"
24 );
25
26 CREATE TABLE collate_test_fail (
27     a int COLLATE "en_US.utf8",
28     b text
29 );
30
31 CREATE TABLE collate_test_like (
32     LIKE collate_test1
33 );
34
35 \d collate_test_like
36
37 CREATE TABLE collate_test2 (
38     a int,
39     b text COLLATE "sv_SE.utf8"
40 );
41
42 CREATE TABLE collate_test3 (
43     a int,
44     b text COLLATE "C"
45 );
46
47 INSERT INTO collate_test1 VALUES (1, 'abc'), (2, 'äbc'), (3, 'bbc'), (4, 'ABC');
48 INSERT INTO collate_test2 SELECT * FROM collate_test1;
49 INSERT INTO collate_test3 SELECT * FROM collate_test1;
50
51 SELECT * FROM collate_test1 WHERE b >= 'bbc';
52 SELECT * FROM collate_test2 WHERE b >= 'bbc';
53 SELECT * FROM collate_test3 WHERE b >= 'bbc';
54 SELECT * FROM collate_test3 WHERE b >= 'BBC';
55
56 SELECT * FROM collate_test1 WHERE b COLLATE "C" >= 'bbc';
57 SELECT * FROM collate_test1 WHERE b >= 'bbc' COLLATE "C";
58 SELECT * FROM collate_test1 WHERE b COLLATE "C" >= 'bbc' COLLATE "C";
59 SELECT * FROM collate_test1 WHERE b COLLATE "C" >= 'bbc' COLLATE "en_US.utf8";
60 SELECT * FROM collate_test1 WHERE b COLLATE "C" >= 'bbc' COLLATE "en_US";
61
62
63 CREATE DOMAIN testdomain_sv AS text COLLATE "sv_SE.utf8";
64 CREATE DOMAIN testdomain_i AS int COLLATE "sv_SE.utf8"; -- fails
65 CREATE TABLE collate_test4 (
66     a int,
67     b testdomain_sv
68 );
69 INSERT INTO collate_test4 SELECT * FROM collate_test1;
70 SELECT a, b FROM collate_test4 ORDER BY b;
71
72 CREATE TABLE collate_test5 (
73     a int,
74     b testdomain_sv COLLATE "en_US.utf8"
75 );
76 INSERT INTO collate_test5 SELECT * FROM collate_test1;
77 SELECT a, b FROM collate_test5 ORDER BY b;
78
79
80 SELECT a, b FROM collate_test1 ORDER BY b;
81 SELECT a, b FROM collate_test2 ORDER BY b;
82 SELECT a, b FROM collate_test3 ORDER BY b;
83
84 SELECT a, b FROM collate_test1 ORDER BY b COLLATE "C";
85
86 -- star expansion
87 SELECT * FROM collate_test1 ORDER BY b;
88 SELECT * FROM collate_test2 ORDER BY b;
89 SELECT * FROM collate_test3 ORDER BY b;
90
91 -- constant expression folding
92 SELECT 'bbc' COLLATE "en_US.utf8" > 'äbc' COLLATE "en_US.utf8" AS "true";
93 SELECT 'bbc' COLLATE "sv_SE.utf8" > 'äbc' COLLATE "sv_SE.utf8" AS "false";
94
95 -- upper/lower
96
97 CREATE TABLE collate_test10 (
98     a int,
99     x text COLLATE "en_US.utf8",
100     y text COLLATE "tr_TR.utf8"
101 );
102
103 INSERT INTO collate_test10 VALUES (1, 'hij', 'hij'), (2, 'HIJ', 'HIJ');
104
105 SELECT a, lower(x), lower(y), upper(x), upper(y), initcap(x), initcap(y) FROM collate_test10;
106 SELECT a, lower(x COLLATE "C"), lower(y COLLATE "C") FROM collate_test10;
107
108 SELECT a, x, y FROM collate_test10 ORDER BY lower(y), a;
109
110 -- LIKE/ILIKE
111
112 SELECT * FROM collate_test1 WHERE b LIKE 'abc';
113 SELECT * FROM collate_test1 WHERE b LIKE 'abc%';
114 SELECT * FROM collate_test1 WHERE b LIKE '%bc%';
115 SELECT * FROM collate_test1 WHERE b ILIKE 'abc';
116 SELECT * FROM collate_test1 WHERE b ILIKE 'abc%';
117 SELECT * FROM collate_test1 WHERE b ILIKE '%bc%';
118
119 SELECT 'Türkiye' COLLATE "en_US.utf8" ILIKE '%KI%' AS "true";
120 SELECT 'Türkiye' COLLATE "tr_TR.utf8" ILIKE '%KI%' AS "false";
121
122 -- The following actually exercises the selectivity estimation for ILIKE.
123 SELECT relname FROM pg_class WHERE relname ILIKE 'abc%';
124
125
126 -- to_char
127
128 SET lc_time TO 'tr_TR.utf8';
129 SELECT to_char(date '2010-04-01', 'DD TMMON YYYY');
130 SELECT to_char(date '2010-04-01', 'DD TMMON YYYY' COLLATE "tr_TR.utf8");
131
132
133 -- backwards parsing
134
135 CREATE VIEW collview1 AS SELECT * FROM collate_test1 WHERE b COLLATE "C" >= 'bbc';
136 CREATE VIEW collview2 AS SELECT a, b FROM collate_test1 ORDER BY b COLLATE "C";
137 CREATE VIEW collview3 AS SELECT a, lower((x || x) COLLATE "C") FROM collate_test10;
138
139 SELECT table_name, view_definition FROM information_schema.views
140   WHERE table_name LIKE 'collview%' ORDER BY 1;
141
142
143 -- collation propagation in various expression type
144
145 SELECT a, coalesce(b, 'foo') FROM collate_test1 ORDER BY 2;
146 SELECT a, coalesce(b, 'foo') FROM collate_test2 ORDER BY 2;
147 SELECT a, coalesce(b, 'foo') FROM collate_test3 ORDER BY 2;
148 SELECT a, lower(coalesce(x, 'foo')), lower(coalesce(y, 'foo')) FROM collate_test10;
149
150 SELECT a, b, greatest(b, 'CCC') FROM collate_test1 ORDER BY 3;
151 SELECT a, b, greatest(b, 'CCC') FROM collate_test2 ORDER BY 3;
152 SELECT a, b, greatest(b, 'CCC') FROM collate_test3 ORDER BY 3;
153 SELECT a, x, y, lower(greatest(x, 'foo')), lower(greatest(y, 'foo')) FROM collate_test10;
154
155 SELECT a, nullif(b, 'abc') FROM collate_test1 ORDER BY 2;
156 SELECT a, nullif(b, 'abc') FROM collate_test2 ORDER BY 2;
157 SELECT a, nullif(b, 'abc') FROM collate_test3 ORDER BY 2;
158 SELECT a, lower(nullif(x, 'foo')), lower(nullif(y, 'foo')) FROM collate_test10;
159
160 SELECT a, CASE b WHEN 'abc' THEN 'abcd' ELSE b END FROM collate_test1 ORDER BY 2;
161 SELECT a, CASE b WHEN 'abc' THEN 'abcd' ELSE b END FROM collate_test2 ORDER BY 2;
162 SELECT a, CASE b WHEN 'abc' THEN 'abcd' ELSE b END FROM collate_test3 ORDER BY 2;
163
164 CREATE DOMAIN testdomain AS text;
165 SELECT a, b::testdomain FROM collate_test1 ORDER BY 2;
166 SELECT a, b::testdomain FROM collate_test2 ORDER BY 2;
167 SELECT a, b::testdomain FROM collate_test3 ORDER BY 2;
168 SELECT a, b::testdomain_sv FROM collate_test3 ORDER BY 2;
169 SELECT a, lower(x::testdomain), lower(y::testdomain) FROM collate_test10;
170
171 SELECT min(b), max(b) FROM collate_test1;
172 SELECT min(b), max(b) FROM collate_test2;
173 SELECT min(b), max(b) FROM collate_test3;
174
175 SELECT array_agg(b ORDER BY b) FROM collate_test1;
176 SELECT array_agg(b ORDER BY b) FROM collate_test2;
177 SELECT array_agg(b ORDER BY b) FROM collate_test3;
178
179 SELECT a, b FROM collate_test1 UNION ALL SELECT a, b FROM collate_test1 ORDER BY 2;
180 SELECT a, b FROM collate_test2 UNION SELECT a, b FROM collate_test2 ORDER BY 2;
181 SELECT a, b FROM collate_test3 WHERE a < 4 INTERSECT SELECT a, b FROM collate_test3 WHERE a > 1 ORDER BY 2;
182 SELECT a, b FROM collate_test3 EXCEPT SELECT a, b FROM collate_test3 WHERE a < 2 ORDER BY 2;
183
184 SELECT a, b FROM collate_test1 UNION ALL SELECT a, b FROM collate_test3 ORDER BY 2; -- fail
185 SELECT a, b FROM collate_test1 UNION ALL SELECT a, b FROM collate_test3; -- ok
186 SELECT a, b FROM collate_test1 UNION SELECT a, b FROM collate_test3 ORDER BY 2; -- fail
187 SELECT a, b COLLATE "C" FROM collate_test1 UNION SELECT a, b FROM collate_test3 ORDER BY 2; -- ok
188 SELECT a, b FROM collate_test1 INTERSECT SELECT a, b FROM collate_test3 ORDER BY 2; -- fail
189 SELECT a, b FROM collate_test1 EXCEPT SELECT a, b FROM collate_test3 ORDER BY 2; -- fail
190
191 CREATE TABLE test_u AS SELECT a, b FROM collate_test1 UNION ALL SELECT a, b FROM collate_test3; -- fail
192
193 -- ideally this would be a parse-time error, but for now it must be run-time:
194 select x < y from collate_test10; -- fail
195 select x || y from collate_test10; -- ok, because || is not collation aware
196 select x, y from collate_test10 order by x || y; -- not so ok
197
198 -- collation mismatch between recursive and non-recursive term
199 WITH RECURSIVE foo(x) AS
200    (SELECT x FROM (VALUES('a' COLLATE "en_US"),('b')) t(x)
201    UNION ALL
202    SELECT (x || 'c') COLLATE "de_DE" FROM foo WHERE length(x) < 10)
203 SELECT * FROM foo;
204
205
206 -- casting
207
208 SELECT CAST('42' AS text COLLATE "C");
209
210 SELECT a, CAST(b AS varchar) FROM collate_test1 ORDER BY 2;
211 SELECT a, CAST(b AS varchar) FROM collate_test2 ORDER BY 2;
212 SELECT a, CAST(b AS varchar) FROM collate_test3 ORDER BY 2;
213
214
215 -- propagation of collation in inlined and non-inlined cases
216
217 CREATE FUNCTION mylt (text, text) RETURNS boolean LANGUAGE sql
218     AS $$ select $1 < $2 $$;
219
220 CREATE FUNCTION mylt_noninline (text, text) RETURNS boolean LANGUAGE sql
221     AS $$ select $1 < $2 limit 1 $$;
222
223 SELECT a.b AS a, b.b AS b, a.b < b.b AS lt,
224        mylt(a.b, b.b), mylt_noninline(a.b, b.b)
225 FROM collate_test1 a, collate_test1 b
226 ORDER BY a.b, b.b;
227
228 SELECT a.b AS a, b.b AS b, a.b < b.b COLLATE "C" AS lt,
229        mylt(a.b, b.b COLLATE "C"), mylt_noninline(a.b, b.b COLLATE "C")
230 FROM collate_test1 a, collate_test1 b
231 ORDER BY a.b, b.b;
232
233
234 -- polymorphism
235
236 SELECT * FROM unnest((SELECT array_agg(b ORDER BY b) FROM collate_test1)) ORDER BY 1;
237 SELECT * FROM unnest((SELECT array_agg(b ORDER BY b) FROM collate_test2)) ORDER BY 1;
238 SELECT * FROM unnest((SELECT array_agg(b ORDER BY b) FROM collate_test3)) ORDER BY 1;
239
240 CREATE FUNCTION dup (f1 anyelement, f2 out anyelement, f3 out anyarray)
241     AS 'select $1, array[$1,$1]' LANGUAGE sql;
242
243 SELECT a, (dup(b)).* FROM collate_test1 ORDER BY 2;
244 SELECT a, (dup(b)).* FROM collate_test2 ORDER BY 2;
245 SELECT a, (dup(b)).* FROM collate_test3 ORDER BY 2;
246
247
248 -- indexes
249
250 CREATE INDEX collate_test1_idx1 ON collate_test1 (b);
251 CREATE INDEX collate_test1_idx2 ON collate_test1 (b COLLATE "C");
252 CREATE INDEX collate_test1_idx3 ON collate_test1 ((b COLLATE "C")); -- this is different grammatically
253 CREATE INDEX collate_test1_idx4 ON collate_test1 (((b||'foo') COLLATE "POSIX"));
254
255 CREATE INDEX collate_test1_idx5 ON collate_test1 (a COLLATE "C"); -- fail
256 CREATE INDEX collate_test1_idx6 ON collate_test1 ((a COLLATE "C")); -- fail
257
258 SELECT relname, pg_get_indexdef(oid) FROM pg_class WHERE relname LIKE 'collate_test%_idx%' ORDER BY 1;
259
260
261 -- schema manipulation commands
262
263 CREATE ROLE regress_test_role;
264 CREATE SCHEMA test_schema;
265
266 CREATE COLLATION test0 (locale = 'en_US.utf8');
267 CREATE COLLATION test0 (locale = 'en_US.utf8'); -- fail
268 CREATE COLLATION test1 (lc_collate = 'en_US.utf8', lc_ctype = 'de_DE.utf8');
269 CREATE COLLATION test2 (locale = 'en_US'); -- fail
270 CREATE COLLATION test3 (lc_collate = 'en_US.utf8'); -- fail
271 CREATE COLLATION testx (locale = 'nonsense'); -- fail
272
273 CREATE COLLATION test4 FROM nonsense;
274 CREATE COLLATION test5 FROM test0;
275
276 SELECT collname, collencoding, collcollate, collctype FROM pg_collation WHERE collname LIKE 'test%' ORDER BY 1;
277
278 ALTER COLLATION test1 RENAME TO test11;
279 ALTER COLLATION test0 RENAME TO test11; -- fail
280 ALTER COLLATION test1 RENAME TO test22; -- fail
281
282 ALTER COLLATION test11 OWNER TO regress_test_role;
283 ALTER COLLATION test11 OWNER TO nonsense;
284 ALTER COLLATION test11 SET SCHEMA test_schema;
285
286 COMMENT ON COLLATION test0 IS 'US English';
287
288 SELECT collname, nspname, obj_description(pg_collation.oid, 'pg_collation')
289     FROM pg_collation JOIN pg_namespace ON (collnamespace = pg_namespace.oid)
290     WHERE collname LIKE 'test%'
291     ORDER BY 1;
292
293 DROP COLLATION test0, test_schema.test11, test5;
294 DROP COLLATION test0; -- fail
295 DROP COLLATION IF EXISTS test0;
296
297 SELECT collname FROM pg_collation WHERE collname LIKE 'test%';
298
299 DROP SCHEMA test_schema;
300 DROP ROLE regress_test_role;
301
302
303 -- dependencies
304
305 CREATE COLLATION test0 (locale = 'en_US.utf8');
306
307 CREATE TABLE collate_dep_test1 (a int, b text COLLATE test0);
308 CREATE DOMAIN collate_dep_dom1 AS text COLLATE test0;
309 CREATE TYPE collate_dep_test2 AS (x int, y text COLLATE test0);
310 CREATE VIEW collate_dep_test3 AS SELECT text 'foo' COLLATE test0 AS foo;
311 CREATE TABLE collate_dep_test4t (a int, b text);
312 CREATE INDEX collate_dep_test4i ON collate_dep_test4t (b COLLATE test0);
313
314 DROP COLLATION test0 RESTRICT; -- fail
315 DROP COLLATION test0 CASCADE;
316
317 \d collate_dep_test1
318 \d collate_dep_test2
319
320 DROP TABLE collate_dep_test1, collate_dep_test4t;
321 DROP TYPE collate_dep_test2;