]> granicus.if.org Git - postgresql/blob - doc/TODO
492e48e5f625605a6d5baba658e5d31ad1101eab
[postgresql] / doc / TODO
1 PostgreSQL TODO List
2 ====================
3 Current maintainer:     Bruce Momjian (bruce@momjian.us)
4 Last updated:           Mon Mar  3 21:48:18 EST 2008
5
6 The most recent version of this document can be viewed at
7 http://www.postgresql.org/docs/faqs.TODO.html.
8
9 #A hyphen, "-", marks changes that will appear in the upcoming 8.3 release.#
10 #A percent sign, "%", marks items that are easier to implement.#
11
12 Bracketed items, "[]", have more detail.
13
14 This list contains all known PostgreSQL bugs and feature requests. If
15 you would like to work on an item, please read the Developer's FAQ
16 first.  There is also a developer's wiki at
17 http://developer.postgresql.org.
18
19
20 Administration
21 ==============
22
23 * Allow administrators to safely terminate individual sessions either
24   via an SQL function or SIGTERM
25
26   Lock table corruption following SIGTERM of an individual backend
27   has been reported in 8.0.  A possible cause was fixed in 8.1, but
28   it is unknown whether other problems exist.  This item mostly
29   requires additional testing rather than of writing any new code.
30
31   http://archives.postgresql.org/pgsql-hackers/2006-08/msg00174.php
32
33 * Check for unreferenced table files created by transactions that were
34   in-progress when the server terminated abruptly
35
36   http://archives.postgresql.org/pgsql-patches/2006-06/msg00096.php
37
38 * Set proper permissions on non-system schemas during db creation
39
40   Currently all schemas are owned by the super-user because they are copied
41   from the template1 database.  However, since all objects are inherited
42   from the template database, it is not clear that setting schemas to the db
43   owner is correct.
44
45 * Add function to report the time of the most recent server reload
46 * Allow statistics collector information to be pulled from the collector
47   process directly, rather than requiring the collector to write a
48   filesystem file twice a second?
49 * Allow log_min_messages to be specified on a per-module basis
50
51   This would allow administrators to see more detailed information from
52   specific sections of the backend, e.g. checkpoints, autovacuum, etc.
53   Another idea is to allow separate configuration files for each module,
54   or allow arbitrary SET commands to be passed to them.
55
56 * Simplify ability to create partitioned tables
57
58   This would allow creation of partitioned tables without requiring
59   creation of triggers or rules for INSERT/UPDATE/DELETE, and constraints
60   for rapid partition selection.  Options could include range and hash
61   partition selection.
62
63   http://archives.postgresql.org/pgsql-hackers/2007-03/msg00375.php
64   http://archives.postgresql.org/pgsql-hackers/2007-04/msg00151.php
65
66 * Allow auto-selection of partitioned tables for min/max() operations
67 * Allow more complex user/database default GUC settings
68
69   Currently ALTER USER and ALTER DATABASE support per-user and
70   per-database defaults.  Consider adding per-user-and-database
71   defaults so things like search_path can be defaulted for a
72   specific user connecting to a specific database.
73
74 * Allow custom variable classes that can restrict who can set the values
75
76   http://archives.postgresql.org/pgsql-hackers/2006-11/msg00911.php
77
78 * Implement the SQL standard mechanism whereby REVOKE ROLE revokes only
79   the privilege granted by the invoking role, and not those granted
80   by other roles
81
82   http://archives.postgresql.org/pgsql-bugs/2007-05/msg00010.php
83
84 * Allow SSL authentication/encryption over unix domain sockets
85
86   http://archives.postgresql.org/pgsql-hackers/2007-12/msg00924.php
87
88 * Configuration files
89
90         o Allow pg_hba.conf to specify host names along with IP addresses
91
92           Host name lookup could occur when the postmaster reads the
93           pg_hba.conf file, or when the backend starts.  Another
94           solution would be to reverse lookup the connection IP and
95           check that hostname against the host names in pg_hba.conf.
96           We could also then check that the host name maps to the IP
97           address.
98
99         o %Allow postgresql.conf file values to be changed via an SQL
100           API, perhaps using SET GLOBAL
101         o Allow the server to be stopped/restarted via an SQL API
102         o Issue a warning if a change-on-restart-only postgresql.conf value
103           is modified  and the server config files are reloaded
104
105
106 * Tablespaces
107
108         o Allow a database in tablespace t1 with tables created in
109           tablespace t2 to be used as a template for a new database created
110           with default tablespace t2
111
112           Currently all objects in the default database tablespace must
113           have default tablespace specifications. This is because new
114           databases are created by copying directories. If you mix default
115           tablespace tables and tablespace-specified tables in the same
116           directory, creating a new database from such a mixed directory
117           would create a new database with tables that had incorrect
118           explicit tablespaces.  To fix this would require modifying
119           pg_class in the newly copied database, which we don't currently
120           do.
121
122         o Allow reporting of which objects are in which tablespaces
123
124           This item is difficult because a tablespace can contain objects
125           from multiple databases. There is a server-side function that
126           returns the databases which use a specific tablespace, so this
127           requires a tool that will call that function and connect to each
128           database to find the objects in each database for that tablespace.
129
130         o Allow WAL replay of CREATE TABLESPACE to work when the directory
131           structure on the recovery computer is different from the original
132
133         o Allow per-tablespace quotas
134
135
136 * Point-In-Time Recovery (PITR)
137
138           o Allow a warm standby system to also allow read-only statements
139             [pitr]
140
141             http://archives.postgresql.org/pgsql-hackers/2007-03/msg00050.php
142
143           o %Create dump tool for write-ahead logs for use in determining
144             transaction id for point-in-time recovery
145
146             This is useful for checking PITR recovery.
147
148           o Allow recovery.conf to support the same syntax as
149             postgresql.conf, including quoting
150
151             http://archives.postgresql.org/pgsql-hackers/2006-12/msg00497.php
152
153
154
155
156 Data Types
157 ==========
158
159 * Change NUMERIC to enforce the maximum precision
160 * Reduce storage space for small NUMERICs
161
162   http://archives.postgresql.org/pgsql-hackers/2007-02/msg01331.php
163   http://archives.postgresql.org/pgsql-patches/2007-02/msg00505.php
164
165 * Fix data types where equality comparison isn't intuitive, e.g. box
166 * Add support for public SYNONYMs
167
168   http://archives.postgresql.org/pgsql-hackers/2006-03/msg00519.php
169
170 * Fix CREATE CAST on DOMAINs
171
172   http://archives.postgresql.org/pgsql-hackers/2006-05/msg00072.php
173   http://archives.postgresql.org/pgsql-hackers/2006-09/msg01681.php
174
175 * Add support for SQL-standard GENERATED/IDENTITY columns
176
177   http://archives.postgresql.org/pgsql-hackers/2006-07/msg00543.php
178   http://archives.postgresql.org/pgsql-hackers/2006-08/msg00038.php
179   http://archives.postgresql.org/pgsql-hackers/2007-05/msg00344.php
180   http://archives.postgresql.org/pgsql-patches/2007-05/msg00076.php
181
182 * Improve XML support
183
184   http://developer.postgresql.org/index.php/XML_Support
185
186 * Consider placing all sequences in a single table, or create a system
187   view
188
189   http://archives.postgresql.org/pgsql-hackers/2008-03/msg00008.php
190
191 * Allow the UUID type to accept non-standard formats
192
193   http://archives.postgresql.org/pgsql-hackers/2008-02/msg01214.php
194
195 * Dates and Times
196
197         o Allow infinite dates and intervals just like infinite timestamps
198         o Merge hardwired timezone names with the TZ database; allow either
199           kind everywhere a TZ name is currently taken
200         o Allow TIMESTAMP WITH TIME ZONE to store the original timezone
201           information, either zone name or offset from UTC [timezone]
202
203           If the TIMESTAMP value is stored with a time zone name, interval
204           computations should adjust based on the time zone rules.
205
206         o Fix SELECT '0.01 years'::interval, '0.01 months'::interval
207         o Add a GUC variable to allow output of interval values in ISO8601
208           format
209         o Have timestamp subtraction not call justify_hours()?
210
211           http://archives.postgresql.org/pgsql-sql/2006-10/msg00059.php
212
213         o Improve timestamptz subtraction to be DST-aware
214
215           Currently subtracting one date from another that crosses a
216           daylight savings time adjustment can return '1 day 1 hour', but
217           adding that back to the first date returns a time one hour in
218           the future.  This is caused by the adjustment of '25 hours' to
219           '1 day 1 hour', and '1 day' is the same time the next day, even
220           if daylight savings adjustments are involved.
221
222         o Fix interval display to support values exceeding 2^31 hours
223         o Add overflow checking to timestamp and interval arithmetic
224         o Extend timezone code to allow 64-bit values so we can
225           represent years beyond 2038
226
227           http://archives.postgresql.org/pgsql-hackers/2006-09/msg01363.php
228
229         o Use LC_TIME for localized weekday/month names, rather than
230           LC_MESSAGES
231
232           http://archives.postgresql.org/pgsql-hackers/2006-11/msg00390.php
233
234         o Add ISO INTERVAL handling
235
236                   http://archives.postgresql.org/pgsql-hackers/2006-01/msg00250.php
237                   http://archives.postgresql.org/pgsql-bugs/2006-04/msg00248.php
238
239                 o Support ISO INTERVAL syntax if units cannot be determined from
240                   the string, and are supplied after the string
241
242                   The SQL standard states that the units after the string
243                   specify the units of the string, e.g. INTERVAL '2' MINUTE
244                   should return '00:02:00'. The current behavior has the units
245                   restrict the interval value to the specified unit or unit
246                   range, INTERVAL '70' SECOND returns '00:00:10'.
247
248                   For syntax that isn't uniquely ISO or PG syntax, like '1' or
249                   '1:30', treat as ISO if there is a range specification clause,
250                   and as PG if there no clause is present, e.g. interpret '1:30'
251                   MINUTE TO SECOND as '1 minute 30 seconds', and interpret
252                   '1:30' as '1 hour, 30 minutes'.
253
254                   This makes common cases like SELECT INTERVAL '1' MONTH
255                   SQL-standard results. The SQL standard supports a limited
256                   number of unit combinations and doesn't support unit names in
257                   the string. The PostgreSQL syntax is more flexible in the
258                   range of units supported, e.g. PostgreSQL supports '1 year 1
259                   hour', while the SQL standard does not.
260
261                 o Add support for year-month syntax, INTERVAL '50-6' YEAR
262                   TO MONTH
263                 o Interpret INTERVAL '1 year' MONTH as CAST (INTERVAL '1
264                   year' AS INTERVAL MONTH), and this should return '12 months'
265                 o Round or truncate values to the requested precision, e.g.
266                   INTERVAL '11 months' AS YEAR should return one or zero
267                 o Support precision, CREATE TABLE foo (a INTERVAL MONTH(3))
268
269
270 * Arrays
271
272         o Delay resolution of array expression's data type so assignment
273           coercion can be performed on empty array expressions
274         o Add support for arrays of domains
275
276           http://archives.postgresql.org/pgsql-patches/2007-05/msg00114.php
277
278         o Allow single-byte header storage for array elements
279
280
281 * Binary Data
282
283         o Improve vacuum of large objects, like contrib/vacuumlo?
284         o Add security checking for large objects
285         o Auto-delete large objects when referencing row is deleted
286
287           contrib/lo offers this functionality.
288
289         o Allow read/write into TOAST values like large objects
290
291           This requires the TOAST column to be stored EXTERNAL.
292
293         o Add API for 64-bit large object access
294
295           http://archives.postgresql.org/pgsql-hackers/2005-09/msg00781.php
296
297 * MONEY data type
298
299         * Add locale-aware MONEY type, and support multiple currencies
300
301           http://archives.postgresql.org/pgsql-general/2005-08/msg01432.php
302           http://archives.postgresql.org/pgsql-hackers/2007-03/msg01181.php
303
304         * MONEY dumps in a locale-specific format making it difficult to
305           restore to a system with a different locale
306         * Allow MONEY to be easily cast to/from other numeric data types
307
308
309
310 Functions
311 =========
312
313 * Allow INET subnet tests using non-constants to be indexed
314 * Allow to_date() and to_timestamp() accept localized month names
315 * Fix to_date()-related functions to consistently issue errors
316
317   http://archives.postgresql.org/pgsql-hackers/2007-02/msg00915.php
318
319 * Add missing parameter handling in to_char()
320
321   http://archives.postgresql.org/pgsql-hackers/2005-12/msg00948.php
322
323 * Allow substring/replace() to get/set bit values
324 * Allow to_char() on interval values to accumulate the highest unit
325   requested
326
327   Some special format flag would be required to request such
328   accumulation.  Such functionality could also be added to EXTRACT.
329   Prevent accumulation that crosses the month/day boundary because of
330   the uneven number of days in a month.
331
332         o to_char(INTERVAL '1 hour 5 minutes', 'MI') => 65
333         o to_char(INTERVAL '43 hours 20 minutes', 'MI' ) => 2600
334         o to_char(INTERVAL '43 hours 20 minutes', 'WK:DD:HR:MI') => 0:1:19:20
335         o to_char(INTERVAL '3 years 5 months','MM') => 41
336
337 * Implement inlining of set-returning functions defined in SQL
338 * Allow SQL-language functions to return results from RETURNING queries
339
340   http://archives.postgresql.org/pgsql-hackers/2006-10/msg00665.php
341
342 * Allow SQL-language functions to reference parameters by parameter name
343
344   Currently SQL-language functions can only refer to dollar parameters,
345   e.g. $1
346
347 * Add SPI_gettypmod() to return the typemod for a TupleDesc
348 * Enforce typmod for function inputs, function results and parameters for
349   spi_prepare'd statements called from PLs
350
351   http://archives.postgresql.org/pgsql-hackers/2007-01/msg01403.php
352
353 * Allow holdable cursors in SPI
354 * Tighten function permission checks
355
356   http://archives.postgresql.org/pgsql-hackers/2006-12/msg00568.php
357
358 * Fix IS OF so it matches the ISO specification, and add documentation
359
360   http://archives.postgresql.org/pgsql-patches/2003-08/msg00060.php
361   http://archives.postgresql.org/pgsql-hackers/2007-02/msg00060.php
362
363 * Add missing operators for geometric data types
364
365   Some geometric types do not have the full suite of geometric operators,
366   e.g. box @> point
367
368 * Implement Boyer-Moore searching in strpos()
369
370   http://archives.postgresql.org/pgsql-patches/2007-08/msg00012.php
371
372
373
374 Multi-Language Support
375 ======================
376
377 * Add NCHAR (as distinguished from ordinary varchar),
378 * Allow locale to be set at database creation
379
380   Currently locale can only be set during initdb.  No global tables have
381   locale-aware columns.  However, the database template used during
382   database creation might have locale-aware indexes.  The indexes would
383   need to be reindexed to match the new locale.
384
385 * Allow encoding on a per-column basis optionally using the ICU library:
386
387   Right now only one encoding is allowed per database.  [locale]
388
389   http://archives.postgresql.org/pgsql-hackers/2005-03/msg00932.php
390   http://archives.postgresql.org/pgsql-patches/2005-08/msg00309.php
391   http://archives.postgresql.org/pgsql-patches/2006-03/msg00233.php
392   http://archives.postgresql.org/pgsql-hackers/2006-09/msg00662.php
393
394 * Add CREATE COLLATE?  [locale]
395 * Support multiple simultaneous character sets, per SQL92
396 * Improve UTF8 combined character handling?
397 * Add octet_length_server() and octet_length_client()
398 * Make octet_length_client() the same as octet_length()?
399 * Fix problems with wrong runtime encoding conversion for NLS message files
400 * Add URL to more complete multi-byte regression tests
401
402   http://archives.postgresql.org/pgsql-hackers/2005-07/msg00272.php
403
404 * Fix ILIKE and regular expressions to handle case insensitivity
405   properly in multibyte encodings
406
407   http://archives.postgresql.org/pgsql-bugs/2005-10/msg00001.php
408   http://archives.postgresql.org/pgsql-patches/2005-11/msg00173.php
409
410 * Set client encoding based on the client operating system encoding
411
412   Currently client_encoding is set in postgresql.conf, which
413   defaults to the server encoding.
414
415   http://archives.postgresql.org/pgsql-hackers/2006-08/msg01696.php
416
417
418
419 Views / Rules
420 =============
421
422 * Automatically create rules on views so they are updateable, per SQL99
423
424   We can only auto-create rules for simple views.  For more complex
425   cases users will still have to write rules manually.
426
427   http://archives.postgresql.org/pgsql-hackers/2006-03/msg00586.php
428   http://archives.postgresql.org/pgsql-patches/2006-08/msg00255.php
429
430 * Add the functionality for WITH CHECK OPTION clause of CREATE VIEW
431 * Allow NOTIFY in rules involving conditionals
432 * Allow VIEW/RULE recompilation when the underlying tables change
433
434   Another issue is whether underlying table changes should be reflected
435   in the view, e.g. should SELECT * show additional columns if they
436   are added after the view is created.
437
438 * Make it possible to use RETURNING together with conditional DO INSTEAD
439   rules, such as for partitioning setups
440
441   http://archives.postgresql.org/pgsql-hackers/2007-09/msg00577.php
442
443 * Add the ability to automatically create materialized views
444
445   Right now materialized views require the user to create triggers on the
446   main table to keep the summary table current.  SQL syntax should be able
447   to manager the triggers and summary table automatically.  A more
448   sophisticated implementation would automatically retrieve from the
449   summary table when the main table is referenced, if possible.
450
451
452
453 SQL Commands
454 ============
455
456 * Add CORRESPONDING BY to UNION/INTERSECT/EXCEPT
457 * Add ROLLUP, CUBE, GROUPING SETS options to GROUP BY
458 * %Allow SET CONSTRAINTS to be qualified by schema/table name
459 * %Add a separate TRUNCATE permission
460
461   Currently only the owner can TRUNCATE a table because triggers are not
462   called, and the table is locked in exclusive mode.
463
464 * Allow PREPARE of cursors
465 * Allow finer control over the caching of prepared query plans
466
467   Currently queries prepared via the libpq API are planned on first
468   execute using the supplied parameters --- allow SQL PREPARE to do the
469   same.  Also, allow control over replanning prepared queries either
470   manually or automatically when statistics for execute parameters
471   differ dramatically from those used during planning.
472
473 * Improve logging of prepared transactions recovered during startup
474
475   http://archives.postgresql.org/pgsql-hackers/2006-11/msg00092.php
476
477 * Allow LISTEN/NOTIFY to store info in memory rather than tables?
478
479   Currently LISTEN/NOTIFY information is stored in pg_listener. Storing
480   such information in memory would improve performance.
481
482 * Add optional textual message to NOTIFY
483
484   This would allow an informational message to be added to the notify
485   message, perhaps indicating the row modified or other custom
486   information.
487
488 * Allow multiple identical NOTIFY events to always be communicated to the
489   client, rather than sent as a single notification to the listener
490 * Add a GUC variable to warn about non-standard SQL usage in queries
491 * Add SQL-standard MERGE command, typically used to merge two tables
492   [merge]
493
494   This is similar to UPDATE, then for unmatched rows, INSERT.
495   Whether concurrent access allows modifications which could cause
496   row loss is implementation independent.
497
498 * Add REPLACE or UPSERT command that does UPDATE, or on failure, INSERT
499   [merge]
500
501   To implement this cleanly requires that the table have a unique index
502   so duplicate checking can be easily performed.  It is possible to
503   do it without a unique index if we require the user to LOCK the table
504   before the MERGE.
505
506   http://archives.postgresql.org/pgsql-hackers/2005-11/msg00501.php
507   http://archives.postgresql.org/pgsql-hackers/2005-11/msg00536.php
508
509 * Add NOVICE output level for helpful messages like automatic sequence/index
510   creation
511 * Add GUC to issue notice about statements that use unjoined tables
512 * Allow EXPLAIN to identify tables that were skipped because of
513   constraint_exclusion
514 * Allow EXPLAIN output to be more easily processed by scripts, perhaps XML
515 * Enable standard_conforming_strings
516 * Make standard_conforming_strings the default in 8.5?
517
518   When this is done, backslash-quote should be prohibited in non-E''
519   strings because of possible confusion over how such strings treat
520   backslashes.  Basically, '' is always safe for a literal single
521   quote, while \' might or might not be based on the backslash
522   handling rules.
523
524 * Simplify dropping roles that have objects in several databases
525 * Allow COMMENT ON to accept an expression rather than just a string
526 * Allow the count returned by SELECT, etc to be represented as an int64
527   to allow a higher range of values
528 * Add SQL99 WITH clause to SELECT
529 * Add SQL:2003 WITH RECURSIVE (hierarchical) queries to SELECT
530 * Add DEFAULT .. AS OWNER so permission checks are done as the table
531   owner
532
533   This would be useful for SERIAL nextval() calls and CHECK constraints.
534
535 * Allow DISTINCT to work in multiple-argument aggregate calls
536 * Add column to pg_stat_activity that shows the progress of long-running
537   commands like CREATE INDEX and VACUUM
538 * Implement SQL:2003 window functions
539 * Improve failure message when DROP DATABASE is used on a database that
540   has prepared transactions
541 * Allow INSERT/UPDATE ... RETURNING inside a SELECT 'FROM' clause
542
543   http://archives.postgresql.org/pgsql-general/2006-09/msg00803.php
544   http://archives.postgresql.org/pgsql-hackers/2006-10/msg00693.php
545
546 * Increase locking when DROPing objects so dependent objects cannot
547   get dropped while the DROP operation is happening
548
549   http://archives.postgresql.org/pgsql-hackers/2007-01/msg00937.php
550
551 * -Allow AS in "SELECT col AS label" to be optional in certain cases
552
553 * Allow INSERT ... DELETE ... RETURNING, namely allow the DELETE ...
554   RETURNING to supply values to the INSERT
555   http://archives.postgresql.org/pgsql-hackers/2008-02/thrd2.php#00979
556
557 * CREATE
558
559         o Allow CREATE TABLE AS to determine column lengths for complex
560           expressions like SELECT col1 || col2
561
562         o Have WITH CONSTRAINTS also create constraint indexes
563
564           http://archives.postgresql.org/pgsql-patches/2007-04/msg00149.php
565
566 * UPDATE
567         o Allow UPDATE tab SET ROW (col, ...) = (SELECT...)
568
569           http://archives.postgresql.org/pgsql-hackers/2006-07/msg01306.php
570           http://archives.postgresql.org/pgsql-hackers/2007-03/msg00865.php
571
572         o Research self-referential UPDATEs that see inconsistent row versions
573           in read-committed mode
574
575           http://archives.postgresql.org/pgsql-hackers/2007-05/msg00507.php
576           http://archives.postgresql.org/pgsql-hackers/2007-06/msg00016.php
577
578         o Allow GLOBAL temporary tables to exist as empty by default in
579           all sessions
580
581           http://archives.postgresql.org/pgsql-hackers/2007-07/msg00006.php
582
583
584 * ALTER
585
586         o Have ALTER TABLE RENAME rename SERIAL sequence names
587
588           http://archives.postgresql.org/pgsql-hackers/2008-03/msg00008.php
589
590         o Have ALTER SEQUENCE RENAME rename the sequence name stored
591           in the sequence table
592
593           http://archives.postgresql.org/pgsql-bugs/2007-09/msg00092.php
594           http://archives.postgresql.org/pgsql-bugs/2007-10/msg00007.php
595           http://archives.postgresql.org/pgsql-hackers/2008-03/msg00008.php
596
597         o Add ALTER DOMAIN to modify the underlying data type
598         o %Allow ALTER TABLE ... ALTER CONSTRAINT ... RENAME
599
600           http://archives.postgresql.org/pgsql-patches/2006-02/msg00168.php
601
602         o %Allow ALTER TABLE to change constraint deferrability and actions
603         o Add missing object types for ALTER ... SET SCHEMA
604         o Allow ALTER TABLESPACE to move to different directories
605         o Allow databases to be moved to different tablespaces
606         o Allow moving system tables to other tablespaces, where possible
607
608           Currently non-global system tables must be in the default database
609           tablespace. Global system tables can never be moved.
610
611         o Prevent parent tables from altering or dropping constraints
612           like CHECK that are inherited by child tables unless CASCADE
613           is used
614         o %Prevent child tables from altering or dropping constraints
615           like CHECK that were inherited from the parent table
616         o Have ALTER INDEX update the name of a constraint using that index
617         o Add ALTER TABLE RENAME CONSTRAINT, update index name also
618         o Allow column display reordering by recording a display,
619           storage, and permanent id for every column?
620
621           http://archives.postgresql.org/pgsql-hackers/2006-12/msg00782.php
622
623
624
625 * CLUSTER
626
627         o Automatically maintain clustering on a table
628
629           This might require some background daemon to maintain clustering
630           during periods of low usage. It might also require tables to be only
631           partially filled for easier reorganization.  Another idea would
632           be to create a merged heap/index data file so an index lookup would
633           automatically access the heap data too.  A third idea would be to
634           store heap rows in hashed groups, perhaps using a user-supplied
635           hash function.
636           http://archives.postgresql.org/pgsql-performance/2004-08/msg00349.php
637
638         o %Add default clustering to system tables
639
640           To do this, determine the ideal cluster index for each system
641           table and set the cluster setting during initdb.
642
643         o %Add VERBOSE option to report tables as they are processed,
644           like VACUUM VERBOSE
645
646
647 * COPY
648
649         o Allow COPY to report error lines and continue
650
651           This requires the use of a savepoint before each COPY line is
652           processed, with ROLLBACK on COPY failure.
653
654         o Allow COPY on a newly-created table to skip WAL logging
655
656           On crash recovery, the table involved in the COPY would
657           be removed or have its heap and index files truncated.  One
658           issue is that no other backend should be able to add to
659           the table at the same time, which is something that is
660           currently allowed.  This currently is done if the table is
661           created inside the same transaction block as the COPY because
662           no other backends can see the table.
663
664         o Consider using a ring buffer for COPY FROM
665
666           http://archives.postgresql.org/pgsql-patches/2008-02/msg00140.php
667           http://archives.postgresql.org/pgsql-hackers/2008-02/msg01080.php
668
669
670 * GRANT/REVOKE
671
672         o Allow column-level privileges
673         o %Allow GRANT/REVOKE permissions to be applied to all schema objects
674           with one command
675
676           The proposed syntax is:
677                 GRANT SELECT ON ALL TABLES IN public TO phpuser;
678                 GRANT SELECT ON NEW TABLES IN public TO phpuser;
679
680         o Allow GRANT/REVOKE permissions to be inherited by objects based on
681           schema permissions
682
683         o Allow SERIAL sequences to inherit permissions from the base table?
684
685
686 * CURSOR
687
688         o Prevent DROP TABLE from dropping a row referenced by its own open
689           cursor?
690
691
692 * INSERT
693
694         o Allow INSERT/UPDATE of the system-generated oid value for a row
695         o In rules, allow VALUES() to contain a mixture of 'old' and 'new'
696           references
697
698
699 * SHOW/SET
700
701         o Add SET PERFORMANCE_TIPS option to suggest INDEX, VACUUM, VACUUM
702           ANALYZE, and CLUSTER
703
704
705 * Referential Integrity
706
707         o Add MATCH PARTIAL referential integrity
708         o Change foreign key constraint for array -> element to mean element
709           in array?
710         o Fix problem when cascading referential triggers make changes on
711           cascaded tables, seeing the tables in an intermediate state
712
713           http://archives.postgresql.org/pgsql-hackers/2005-09/msg00174.php
714           http://archives.postgresql.org/pgsql-hackers/2005-09/msg00174.php
715
716         o Allow DEFERRABLE and end-of-statement UNIQUE constraints?
717
718           This would allow UPDATE tab SET col = col + 1 to work if col has
719           a unique index.  Currently, uniqueness checks are done while the
720           command is being executed, rather than at the end of the statement
721           or transaction.
722
723           http://people.planetpostgresql.org/greg/index.php?/archives/2006/06/10.html
724           http://archives.postgresql.org/pgsql-hackers/2006-09/msg01458.php
725
726
727 * Server-Side Languages
728
729         o PL/pgSQL
730                 o Fix RENAME to work on variables other than OLD/NEW
731
732                   http://archives.postgresql.org/pgsql-hackers/2002-03/msg00591.php
733                   http://archives.postgresql.org/pgsql-hackers/2007-01/msg01615.php
734                   http://archives.postgresql.org/pgsql-hackers/2007-01/msg01587.php
735
736                 o Allow function parameters to be passed by name,
737                   get_employee_salary(12345 AS emp_id, 2001 AS tax_year)
738                 o Allow handling of %TYPE arrays, e.g. tab.col%TYPE[]
739                 o Allow listing of record column names, and access to
740                   record columns via variables, e.g. columns := r.(*),
741                   tval2 := r.(colname)
742
743                   http://archives.postgresql.org/pgsql-patches/2005-07/msg00458.php
744                   http://archives.postgresql.org/pgsql-patches/2006-05/msg00302.php
745                   http://archives.postgresql.org/pgsql-patches/2006-06/msg00031.php
746
747                 o Add support for SCROLL cursors
748                 o Add support for WITH HOLD cursors
749                 o Allow row and record variables to be set to NULL constants,
750                   and allow NULL tests on such variables
751
752                   Because a row is not scalar, do not allow assignment
753                   from NULL-valued scalars.
754
755                   http://archives.postgresql.org/pgsql-hackers/2006-10/msg00070.php
756
757         o Other
758                 o Add table function support to pltcl, plpythonu
759                 o Add support for polymorphic arguments and return types to
760                   languages other than PL/PgSQL
761                 o Add capability to create and call PROCEDURES
762                 o Add support for OUT and INOUT parameters to languages other
763                   than PL/PgSQL
764                 o Add PL/PythonU tracebacks
765
766                   http://archives.postgresql.org/pgsql-patches/2006-02/msg00288.php
767
768                 o Allow data to be passed in native language formats, rather
769                   than only text
770
771                   http://archives.postgresql.org/pgsql-hackers/2007-05/msg00289.php
772
773
774 Clients
775 =======
776
777 * Have pg_ctl look at PGHOST in case it is a socket directory?
778 * Allow pg_ctl to work properly with configuration files located outside
779   the PGDATA directory
780
781   pg_ctl can not read the pid file because it isn't located in the
782   config directory but in the PGDATA directory.  The solution is to
783   allow pg_ctl to read and understand postgresql.conf to find the
784   data_directory value.
785
786 * psql
787         o Have psql show current values for a sequence
788         o Move psql backslash database information into the backend, use
789           mnemonic commands? [psql]
790
791           This would allow non-psql clients to pull the same information out
792           of the database as psql.
793
794         o Fix psql's \d commands more consistent
795
796           http://archives.postgresql.org/pgsql-hackers/2004-11/msg00014.php
797           http://archives.postgresql.org/pgsql-hackers/2004-11/msg00014.php
798
799         o Consistently display privilege information for all objects in psql
800         o Add auto-expanded mode so expanded output is used if the row
801           length is wider than the screen width.
802
803           Consider using auto-expanded mode for backslash commands like \df+.
804
805         o Prevent tab completion of SET TRANSACTION from querying the
806           database and therefore preventing the transaction isolation
807           level from being set.
808
809           Currently SET <tab> causes a database lookup to check all
810           supported session variables.  This query causes problems
811           because setting the transaction isolation level must be the
812           first statement of a transaction.
813
814         o Add a \set variable to control whether \s displays line numbers
815
816           Another option is to add \# which lists line numbers, and
817           allows command execution.
818
819           http://archives.postgresql.org/pgsql-hackers/2006-12/msg00255.php
820
821
822 * pg_dump / pg_restore
823         o %Add dumping of comments on index columns and composite type columns
824         o %Add full object name to the tag field.  eg. for operators we need
825           '=(integer, integer)', instead of just '='.
826         o Add pg_dumpall custom format dumps?
827         o Allow selection of individual object(s) of all types, not just
828           tables
829         o In a selective dump, allow dumping of an object and all its
830           dependencies
831         o Add options like pg_restore -l and -L to pg_dump
832         o Stop dumping CASCADE on DROP TYPE commands in clean mode
833         o Allow pg_dump --clean to drop roles that own objects or have
834           privileges
835         o Change pg_dump so that a comment on the dumped database is
836           applied to the loaded database, even if the database has a
837           different name.  This will require new backend syntax, perhaps
838           COMMENT ON CURRENT DATABASE.
839         o Remove unnecessary function pointer abstractions in pg_dump source
840           code
841         o Allow pg_dump to utilize multiple CPUs and I/O channels by dumping
842           multiple objects simultaneously
843
844           The difficulty with this is getting multiple dump processes to
845           produce a single dump output file.
846           http://archives.postgresql.org/pgsql-hackers/2008-02/msg00205.php
847
848         o Allow pg_restore to utilize multiple CPUs and I/O channels by
849           restoring multiple objects simultaneously
850
851           This might require a pg_restore flag to indicate how many
852           simultaneous operations should be performed.  Only pg_dump's
853           -Fc format has the necessary dependency information.
854           http://archives.postgresql.org/pgsql-hackers/2008-02/msg00963.php
855
856         o To better utilize resources, allow pg_restore to check foreign
857           keys simultaneously, where possible
858         o Allow pg_restore to create all indexes of a table
859           concurrently, via a single heap scan
860
861           This requires a pg_dump -Fc file because that format contains
862           the required dependency information.
863           http://archives.postgresql.org/pgsql-general/2007-05/msg01274.php
864
865         o Allow pg_restore to load different parts of the COPY data
866           simultaneously
867
868
869 * ecpg
870         o Docs
871
872           Document differences between ecpg and the SQL standard and
873           information about the Informix-compatibility module.
874
875         o Solve cardinality > 1 for input descriptors / variables?
876         o Add a semantic check level, e.g. check if a table really exists
877         o fix handling of DB attributes that are arrays
878         o Use backend PREPARE/EXECUTE facility for ecpg where possible
879         o Implement SQLDA
880         o Fix nested C comments
881         o %sqlwarn[6] should be 'W' if the PRECISION or SCALE value specified
882         o Make SET CONNECTION thread-aware, non-standard?
883         o Allow multidimensional arrays
884         o Add internationalized message strings
885         o Implement COPY FROM STDIN
886
887
888 * libpq
889         o Add PQescapeIdentifierConn()
890         o Prevent PQfnumber() from lowercasing unquoted the column name
891
892           PQfnumber() should never have been doing lowercasing, but
893           historically it has so we need a way to prevent it
894
895         o Allow statement results to be automatically batched to the client
896
897           Currently all statement results are transferred to the libpq
898           client before libpq makes the results available to the
899           application.  This feature would allow the application to make
900           use of the first result rows while the rest are transferred, or
901           held on the server waiting for them to be requested by libpq.
902           One complexity is that a statement like SELECT 1/col could error
903           out mid-way through the result set.
904
905         o Consider disallowing multiple queries in PQexec() as an
906           additional barrier to SQL injection attacks
907
908           http://archives.postgresql.org/pgsql-hackers/2007-01/msg00184.php
909
910         o Add PQexecf() that allows complex parameter substitution
911
912           http://archives.postgresql.org/pgsql-hackers/2007-03/msg01803.php
913
914 Triggers
915 ========
916
917 * Add deferred trigger queue file
918
919   Right now all deferred trigger information is stored in backend
920   memory.  This could exhaust memory for very large trigger queues.
921   This item involves dumping large queues into files.
922
923 * Allow triggers to be disabled in only the current session.
924
925   This is currently possible by starting a multi-statement transaction,
926   modifying the system tables, performing the desired SQL, restoring the
927   system tables, and committing the transaction.  ALTER TABLE ...
928   TRIGGER requires a table lock so it is not ideal for this usage.
929
930 * With disabled triggers, allow pg_dump to use ALTER TABLE ADD FOREIGN KEY
931
932   If the dump is known to be valid, allow foreign keys to be added
933   without revalidating the data.
934
935 * Allow statement-level triggers to access modified rows
936 * Support triggers on columns
937
938   http://archives.postgresql.org/pgsql-patches/2005-07/msg00107.php
939
940 * Allow AFTER triggers on system tables
941
942   System tables are modified in many places in the backend without going
943   through the executor and therefore not causing triggers to fire. To
944   complete this item, the functions that modify system tables will have
945   to fire triggers.
946
947 * Tighten trigger permission checks
948
949   http://archives.postgresql.org/pgsql-hackers/2006-12/msg00564.php
950
951 * Allow BEFORE INSERT triggers on views
952
953   http://archives.postgresql.org/pgsql-general/2007-02/msg01466.php
954
955 * Add ability to trigger on TRUNCATE
956
957   http://archives.postgresql.org/pgsql-sql/2008-01/msg00050.php
958
959
960
961 Indexes
962 =======
963
964 * Add UNIQUE capability to non-btree indexes
965 * Prevent index uniqueness checks when UPDATE does not modify the column
966
967   Uniqueness (index) checks are done when updating a column even if the
968   column is not modified by the UPDATE.
969
970 * Allow the creation of on-disk bitmap indexes which can be quickly
971   combined with other bitmap indexes
972
973   Such indexes could be more compact if there are only a few distinct values.
974   Such indexes can also be compressed.  Keeping such indexes updated can be
975   costly.
976
977   http://archives.postgresql.org/pgsql-patches/2005-07/msg00512.php
978   http://archives.postgresql.org/pgsql-hackers/2006-12/msg01107.php
979
980 * Allow accurate statistics to be collected on indexes with more than
981   one column or expression indexes, perhaps using per-index statistics
982
983   http://archives.postgresql.org/pgsql-performance/2006-10/msg00222.php
984   http://archives.postgresql.org/pgsql-hackers/2007-03/msg01131.php
985
986 * Consider compressing indexes by storing key values duplicated in
987   several rows as a single index entry
988 * Add REINDEX CONCURRENTLY, like CREATE INDEX CONCURRENTLY
989
990   This is difficult because you must upgrade to an exclusive table lock
991   to replace the existing index file.  CREATE INDEX CONCURRENTLY does not
992   have this complication.  This would allow index compaction without
993   downtime.
994
995 * Allow multiple indexes to be created concurrently, ideally via a
996   single heap scan, and have pg_restore use it
997
998
999
1000 * Inheritance
1001
1002         o Allow inherited tables to inherit indexes, UNIQUE constraints,
1003           and primary/foreign keys
1004         o Honor UNIQUE INDEX on base column in INSERTs/UPDATEs
1005           on inherited table, e.g.  INSERT INTO inherit_table
1006           (unique_index_col) VALUES (dup) should fail
1007
1008           The main difficulty with this item is the problem of
1009           creating an index that can span multiple tables.
1010
1011         o Allow SELECT ... FOR UPDATE on inherited tables
1012
1013
1014 * GIST
1015
1016         o Add more GIST index support for geometric data types
1017         o Allow GIST indexes to create certain complex index types, like
1018           digital trees (see Aoki)
1019
1020
1021 * Hash
1022
1023           http://archives.postgresql.org/pgsql-hackers/2007-09/msg00051.php
1024
1025         o Pack hash index buckets onto disk pages more efficiently
1026
1027           Currently only one hash bucket can be stored on a page. Ideally
1028           several hash buckets could be stored on a single page and greater
1029           granularity used for the hash algorithm.
1030
1031           http://archives.postgresql.org/pgsql-hackers/2004-06/msg00168.php
1032
1033         o Consider sorting hash buckets so entries can be found using a
1034           binary search, rather than a linear scan
1035         o In hash indexes, consider storing the hash value with or instead
1036           of the key itself
1037         o Add WAL logging for crash recovery
1038         o Allow multi-column hash indexes
1039         o During index creation, pre-sort the tuples to improve build speed
1040
1041           http://archives.postgresql.org/pgsql-hackers/2007-03/msg01199.php
1042
1043
1044
1045 Fsync
1046 =====
1047
1048 * Determine optimal fdatasync/fsync, O_SYNC/O_DSYNC options
1049
1050   Ideally this requires a separate test program that can be run
1051   at initdb time or optionally later.  Consider O_SYNC when
1052   O_DIRECT exists.
1053
1054 * Add program to test if fsync has a delay compared to non-fsync
1055
1056
1057 Cache Usage
1058 ===========
1059
1060 * Speed up COUNT(*)
1061
1062   We could use a fixed row count and a +/- count to follow MVCC
1063   visibility rules, or a single cached value could be used and
1064   invalidated if anyone modifies the table.  Another idea is to
1065   get a count directly from a unique index, but for this to be
1066   faster than a sequential scan it must avoid access to the heap
1067   to obtain tuple visibility information.
1068
1069 * Provide a way to calculate an "estimated COUNT(*)"
1070
1071   Perhaps by using the optimizer's cardinality estimates or random
1072   sampling.
1073
1074   http://archives.postgresql.org/pgsql-hackers/2005-11/msg00943.php
1075
1076 * Allow data to be pulled directly from indexes
1077
1078   Currently indexes do not have enough tuple visibility information
1079   to allow data to be pulled from the index without also accessing
1080   the heap.  One way to allow this is to set a bit on index tuples
1081   to indicate if a tuple is currently visible to all transactions
1082   when the first valid heap lookup happens.  This bit would have to
1083   be cleared when a heap tuple is expired.
1084
1085   Another idea is to maintain a bitmap of heap pages where all rows
1086   are visible to all backends, and allow index lookups to reference
1087   that bitmap to avoid heap lookups, perhaps the same bitmap we might
1088   add someday to determine which heap pages need vacuuming.  Frequently
1089   accessed bitmaps would have to be stored in shared memory.  One 8k
1090   page of bitmaps could track 512MB of heap pages.
1091
1092   A third idea would be for a heap scan to check if all rows are visible
1093   and if so set a per-table flag which can be checked by index scans. 
1094   Any change to the table would have to clear the flag.  To detect
1095   changes during the heap scan a counter could be set at the start and
1096   checked at the end --- if it is the same, the table has not been
1097   modified --- any table change would increment the counter.
1098
1099 * Consider automatic caching of statements at various levels:
1100
1101         o Parsed query tree
1102         o Query execute plan
1103         o Query results
1104
1105 * Consider increasing internal areas when shared buffers is increased
1106
1107   http://archives.postgresql.org/pgsql-hackers/2005-10/msg01419.php
1108
1109 * Consider decreasing the amount of memory used by PrivateRefCount
1110
1111   http://archives.postgresql.org/pgsql-hackers/2006-11/msg00797.php
1112   http://archives.postgresql.org/pgsql-hackers/2007-01/msg00752.php
1113
1114
1115
1116
1117 Vacuum
1118 ======
1119
1120 * Improve speed with indexes
1121
1122   For large table adjustments during VACUUM FULL, it is faster to cluster
1123   or reindex rather than update the index.  Also, index updates can bloat
1124   the index.
1125
1126   http://archives.postgresql.org/pgsql-hackers/2007-03/msg00024.php
1127   http://archives.postgresql.org/pgsql-performance/2007-05/msg00296.php
1128
1129 * Auto-fill the free space map by scanning the buffer cache or by
1130   checking pages written by the background writer
1131
1132   http://archives.postgresql.org/pgsql-hackers/2006-02/msg01125.php
1133   http://archives.postgresql.org/pgsql-hackers/2006-03/msg00011.php
1134
1135 * Create a bitmap of pages that need vacuuming
1136
1137   Instead of sequentially scanning the entire table, have the background
1138   writer or some other process record pages that have expired rows, then
1139   VACUUM can look at just those pages rather than the entire table.  In
1140   the event of a system crash, the bitmap would probably be invalidated.
1141   One complexity is that index entries still have to be vacuumed, and
1142   doing this without an index scan (by using the heap values to find the
1143   index entry) might be slow and unreliable, especially for user-defined
1144   index functions.
1145
1146   http://archives.postgresql.org/pgsql-hackers/2006-12/msg01188.php
1147   http://archives.postgresql.org/pgsql-hackers/2007-01/msg00121.php
1148
1149 * Allow FSM to return free space toward the beginning of the heap file,
1150   in hopes that empty pages at the end can be truncated by VACUUM
1151 * Allow FSM page return free space based on table clustering, to assist
1152   in maintaining clustering?
1153 * Improve dead row detection during multi-statement transactions usage
1154
1155   http://archives.postgresql.org/pgsql-patches/2007-03/msg00358.php
1156
1157 * Auto-vacuum
1158
1159         o %Issue log message to suggest VACUUM FULL if a table is nearly
1160           empty?
1161         o Improve control of auto-vacuum
1162
1163           http://archives.postgresql.org/pgsql-hackers/2006-12/msg00876.php
1164
1165         o Prevent long-lived temporary tables from causing frozen-xid
1166           advancement starvation
1167
1168           The problem is that autovacuum cannot vacuum them to set frozen xids;
1169           only the session that created them can do that.
1170           http://archives.postgresql.org/pgsql-general/2007-06/msg01645.php
1171
1172
1173 Locking
1174 =======
1175
1176 * Fix priority ordering of read and write light-weight locks (Neil)
1177
1178   http://archives.postgresql.org/pgsql-hackers/2004-11/msg00893.php
1179   http://archives.postgresql.org/pgsql-hackers/2004-11/msg00905.php
1180
1181 * Fix problem when multiple subtransactions of the same outer transaction
1182   hold different types of locks, and one subtransaction aborts
1183
1184   http://archives.postgresql.org/pgsql-hackers/2006-11/msg01011.php
1185   http://archives.postgresql.org/pgsql-hackers/2006-12/msg00001.php
1186   http://archives.postgresql.org/pgsql-hackers/2007-02/msg00435.php
1187
1188 * Allow UPDATEs on only non-referential integrity columns not to conflict
1189   with referential integrity locks
1190
1191   http://archives.postgresql.org/pgsql-hackers/2007-02/msg00073.php
1192
1193 * Add idle_in_transaction_timeout GUC so locks are not held for long
1194   periods of time
1195
1196 * Improve deadlock detection when a page cleaning lock conflicts
1197   with a shared buffer that is pinned
1198
1199   http://archives.postgresql.org/pgsql-bugs/2008-01/msg00138.php
1200   http://archives.postgresql.org/pgsql-hackers/2008-01/msg00873.php
1201   http://archives.postgresql.org/pgsql-committers/2008-01/msg00365.php
1202
1203
1204
1205 Startup Time Improvements
1206 =========================
1207
1208 * Experiment with multi-threaded backend for backend creation [thread]
1209
1210   This would prevent the overhead associated with process creation. Most
1211   operating systems have trivial process creation time compared to
1212   database startup overhead, but a few operating systems (Win32,
1213   Solaris) might benefit from threading.  Also explore the idea of
1214   a single session using multiple threads to execute a statement faster.
1215
1216
1217 Write-Ahead Log
1218 ===============
1219
1220 * Eliminate need to write full pages to WAL before page modification [wal]
1221
1222   Currently, to protect against partial disk page writes, we write
1223   full page images to WAL before they are modified so we can correct any
1224   partial page writes during recovery.  These pages can also be
1225   eliminated from point-in-time archive files.
1226
1227         o  When off, write CRC to WAL and check file system blocks
1228            on recovery
1229
1230            If CRC check fails during recovery, remember the page in case
1231            a later CRC for that page properly matches.
1232
1233         o  Write full pages during file system write and not when
1234            the page is modified in the buffer cache
1235
1236            This allows most full page writes to happen in the background
1237            writer.  It might cause problems for applying WAL on recovery
1238            into a partially-written page, but later the full page will be
1239            replaced from WAL.
1240
1241 * Allow WAL traffic to be streamed to another server for stand-by
1242   replication
1243 * Reduce WAL traffic so only modified values are written rather than
1244   entire rows
1245
1246   http://archives.postgresql.org/pgsql-hackers/2007-03/msg01589.php
1247
1248 * Allow WAL information to recover corrupted pg_controldata
1249
1250   http://archives.postgresql.org/pgsql-patches/2006-06/msg00025.php
1251
1252 * Find a way to reduce rotational delay when repeatedly writing
1253   last WAL page
1254
1255   Currently fsync of WAL requires the disk platter to perform a full
1256   rotation to fsync again. One idea is to write the WAL to different
1257   offsets that might reduce the rotational delay.
1258
1259 * Allow WAL logging to be turned off for a table, but the table
1260   might be dropped or truncated during crash recovery [walcontrol]
1261
1262   Allow tables to bypass WAL writes and just fsync() dirty pages on
1263   commit.  This should be implemented using ALTER TABLE, e.g. ALTER
1264   TABLE PERSISTENCE [ DROP | TRUNCATE | DEFAULT ].  Tables using
1265   non-default logging should not use referential integrity with
1266   default-logging tables.  A table without dirty buffers during a
1267   crash could perhaps avoid the drop/truncate.
1268
1269 * Allow WAL logging to be turned off for a table, but the table would
1270   avoid being truncated/dropped [walcontrol]
1271
1272   To do this, only a single writer can modify the table, and writes
1273   must happen only on new pages so the new pages can be removed during
1274   crash recovery.  Readers can continue accessing the table.  Such
1275   tables probably cannot have indexes.  One complexity is the handling
1276   of indexes on TOAST tables.
1277
1278 * Speed WAL recovery by allowing more than one page to be prefetched
1279
1280   This involves having a separate process that can be told which pages
1281   the recovery process will need in the near future.
1282   http://archives.postgresql.org/pgsql-hackers/2008-02/msg01279.php
1283
1284
1285
1286 Optimizer / Executor
1287 ====================
1288
1289 * Improve selectivity functions for geometric operators
1290 * Precompile SQL functions to avoid overhead
1291 * Create utility to compute accurate random_page_cost value
1292 * Improve ability to display optimizer analysis using OPTIMIZER_DEBUG
1293 * Have EXPLAIN ANALYZE issue NOTICE messages when the estimated and
1294   actual row counts differ by a specified percentage
1295 * Consider using hash buckets to do DISTINCT, rather than sorting
1296
1297   This would be beneficial when there are few distinct values.  This is
1298   already used by GROUP BY.
1299
1300 * Log statements where the optimizer row estimates were dramatically
1301   different from the number of rows actually found?
1302 * Consider compressed annealing to search for query plans
1303
1304   This might replace GEQO, http://sixdemonbag.org/Djinni.
1305
1306 * Improve merge join performance by allowing mark/restore of
1307   tuple sources
1308
1309   http://archives.postgresql.org/pgsql-hackers/2007-01/msg00096.php
1310
1311
1312
1313 Miscellaneous Performance
1314 =========================
1315
1316 * Do async I/O for faster random read-ahead of data
1317
1318   Async I/O allows multiple I/O requests to be sent to the disk with
1319   results coming back asynchronously.
1320
1321   http://archives.postgresql.org/pgsql-hackers/2006-10/msg00820.php
1322   http://archives.postgresql.org/pgsql-hackers/2007-12/msg00027.php
1323
1324 * Use mmap() rather than SYSV shared memory or to write WAL files?
1325
1326   This would remove the requirement for SYSV SHM but would introduce
1327   portability issues. Anonymous mmap (or mmap to /dev/zero) is required
1328   to prevent I/O overhead.
1329
1330 * Consider mmap()'ing files into a backend?
1331
1332   Doing I/O to large tables would consume a lot of address space or
1333   require frequent mapping/unmapping.  Extending the file also causes
1334   mapping problems that might require mapping only individual pages,
1335   leading to thousands of mappings.  Another problem is that there is no
1336   way to _prevent_ I/O to disk from the dirty shared buffers so changes
1337   could hit disk before WAL is written.
1338
1339 * Add a script to ask system configuration questions and tune postgresql.conf
1340 * Consider ways of storing rows more compactly on disk
1341
1342         o Reduce the row header size?
1343         o Consider reducing on-disk varlena length from four bytes to
1344           two because a heap row cannot be more than 64k in length
1345
1346 * Consider increasing NUM_CLOG_BUFFERS
1347 * Consider having the background writer update the transaction status
1348   hint bits before writing out the page
1349
1350   Implementing this requires the background writer to have access to system
1351   catalogs and the transaction status log.
1352
1353 * Allow user configuration of TOAST thresholds
1354
1355   http://archives.postgresql.org/pgsql-hackers/2007-02/msg00213.php
1356
1357 * Allow configuration of backend priorities via the operating system
1358
1359   Though backend priorities make priority inversion during lock
1360   waits possible, research shows that this is not a huge problem.
1361
1362   http://archives.postgresql.org/pgsql-general/2007-02/msg00493.php
1363
1364 * Experiment with multi-threaded backend better resource utilization
1365
1366   This would allow a single query to make use of multiple CPU's or
1367   multiple I/O channels simultaneously.  One idea is to create a
1368   background reader that can pre-fetch sequential and index scan
1369   pages needed by other backends.  This could be expanded to allow
1370   concurrent reads from multiple devices in a partitioned table.
1371
1372
1373 Source Code
1374 ===========
1375
1376 * Add use of 'const' for variables in source tree
1377 * Move some things from contrib into main tree
1378 * %Remove warnings created by -Wcast-align
1379 * Move platform-specific ps status display info from ps_status.c to ports
1380 * Add optional CRC checksum to heap and index pages
1381 * Improve documentation to build only interfaces (Marc)
1382 * Remove or relicense modules that are not under the BSD license, if possible
1383 * Acquire lock on a relation before building a relcache entry for it
1384 * Allow cross-compiling by generating the zic database on the target system
1385 * Improve NLS maintenance of libpgport messages linked onto applications
1386 * Clean up casting in contrib/isn
1387
1388   http://archives.postgresql.org/pgsql-hackers/2006-11/msg00245.php
1389
1390 * Use UTF8 encoding for NLS messages so all server encodings can
1391   read them properly
1392 * Update Bonjour to work with newer cross-platform SDK
1393
1394   http://archives.postgresql.org/pgsql-hackers/2006-09/msg02238.php
1395   http://archives.postgresql.org/pgsql-patches/2006-10/msg00048.php
1396
1397 * Consider detoasting keys before sorting
1398 * Consider GnuTLS if OpenSSL license becomes a problem
1399
1400   http://archives.postgresql.org/pgsql-patches/2006-05/msg00040.php
1401   http://archives.postgresql.org/pgsql-hackers/2006-12/msg01213.php
1402
1403 * Consider changing documentation format from SGML to XML
1404
1405   http://archives.postgresql.org/pgsql-docs/2006-12/msg00152.php
1406
1407 * Consider making NAMEDATALEN more configurable in future releases
1408 * Update our code to handle 64-bit timezone files to match the zic
1409   source code, which now uses them
1410 * Have configure choose integer datetimes by default
1411
1412   http://archives.postgresql.org/pgsql-patches/2007-05/msg00046.php
1413
1414 * Support scoped IPv6 addresses
1415
1416   http://archives.postgresql.org/pgsql-bugs/2007-05/msg00111.php
1417
1418 * Consider allowing 64-bit integers and floats to be passed by value on
1419   64-bit platforms
1420
1421   Also change 32-bit floats (float4) to be passed by value at the same
1422   time.
1423
1424
1425
1426 * Win32
1427
1428         o Remove configure.in check for link failure when cause is found
1429         o Remove readdir() errno patch when runtime/mingwex/dirent.c rev
1430           1.4 is released
1431         o Remove psql newline patch when we find out why mingw outputs an
1432           extra newline
1433         o Allow psql to use readline once non-US code pages work with
1434           backslashes
1435         o Fix problem with shared memory on the Win32 Terminal Server
1436         o Improve signal handling
1437
1438           http://archives.postgresql.org/pgsql-patches/2005-06/msg00027.php
1439
1440
1441
1442 * Wire Protocol Changes
1443
1444         o Allow dynamic character set handling
1445         o Add decoded type, length, precision
1446         o Use compression?
1447         o Update clients to use data types, typmod, schema.table.column names
1448           of result sets using new statement protocol
1449
1450
1451 Exotic Features
1452 ===============
1453
1454 * Add pre-parsing phase that converts non-ISO syntax to supported
1455   syntax
1456
1457   This could allow SQL written for other databases to run without
1458   modification.
1459
1460 * Allow plug-in modules to emulate features from other databases
1461 * Add features of Oracle-style packages  (Pavel)
1462
1463   A package would be a schema with session-local variables,
1464   public/private functions, and initialization functions.  It
1465   is also possible to implement these capabilities
1466   in any schema and not use a separate "packages"
1467   syntax at all.
1468
1469   http://archives.postgresql.org/pgsql-hackers/2006-08/msg00384.php
1470
1471 * Consider allowing control of upper/lower case folding of unquoted
1472   identifiers
1473
1474   http://archives.postgresql.org/pgsql-hackers/2004-04/msg00818.php
1475   http://archives.postgresql.org/pgsql-hackers/2006-10/msg01527.php
1476
1477 * Add autonomous transactions
1478
1479   http://archives.postgresql.org/pgsql-hackers/2008-01/msg00893.php
1480
1481
1482
1483 Features We Do _Not_ Want
1484 =========================
1485
1486 * All backends running as threads in a single process (not wanted)
1487
1488   This eliminates the process protection we get from the current setup.
1489   Thread creation is usually the same overhead as process creation on
1490   modern systems, so it seems unwise to use a pure threaded model.
1491
1492 * Optimizer hints (not wanted)
1493
1494   Optimizer hints are used to work around problems in the optimizer.  We
1495   would rather have the problems reported and fixed.
1496
1497   http://archives.postgresql.org/pgsql-hackers/2006-08/msg00506.php
1498   http://archives.postgresql.org/pgsql-hackers/2006-10/msg00517.php
1499   http://archives.postgresql.org/pgsql-hackers/2006-10/msg00663.php
1500
1501
1502   Because we support postfix operators, it isn't possible to make AS
1503   optional and continue to use bison.
1504   http://archives.postgresql.org/pgsql-hackers/2003-04/msg00436.php
1505
1506   http://archives.postgresql.org/pgsql-sql/2006-08/msg00164.php
1507
1508 * Embedded server (not wanted)
1509
1510   While PostgreSQL clients runs fine in limited-resource environments, the
1511   server requires multiple processes and a stable pool of resources to
1512   run reliabily and efficiently.  Stripping down the PostgreSQL server
1513   to run in the same process address space as the client application
1514   would add too much complexity and failure cases.