]> granicus.if.org Git - postgresql/blob - doc/src/FAQ/FAQ.html
Update URL's.
[postgresql] / doc / src / FAQ / FAQ.html
1 <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
2 <HTML>
3   <HEAD>
4     <META name="generator" content="HTML Tidy, see www.w3.org">
5     <META http-equiv="Content-Type" content="text/html; charset=US-ASCII">
6     <TITLE>PostgreSQL FAQ</TITLE>
7   </HEAD>
8
9   <BODY bgcolor="#ffffff" text="#000000" link="#ff0000" vlink="#a00000"
10   alink="#0000ff">
11     <H1>Frequently Asked Questions (FAQ) for PostgreSQL</H1>
12
13     <P>Last updated: Sun Jul 20 17:52:41 EDT 2003</P>
14
15     <P>Current maintainer: Bruce Momjian (<A href=
16     "mailto:pgman@candle.pha.pa.us">pgman@candle.pha.pa.us</A>)<BR>
17     </P>
18
19     <P>The most recent version of this document can be viewed at <A
20     href=
21     "http://www.PostgreSQL.org/docs/faqs/FAQ.html">http://www.PostgreSQL.org/docs/faqs/FAQ.html</A>.</P>
22
23     <P>Platform-specific questions are answered at <A href=
24     "http://www.PostgreSQL.org/docs/index.html">http://www.PostgreSQL.org/docs/index.html</A>.</P>
25     <HR>
26
27     <H2 align="center">General Questions</H2>
28     <A href="#1.1">1.1</A>) What is PostgreSQL? How is it pronounced?<BR>
29      <A href="#1.2">1.2</A>) What is the copyright on PostgreSQL?<BR>
30      <A href="#1.3">1.3</A>) What Unix platforms does PostgreSQL run
31     on?<BR>
32      <A href="#1.4">1.4</A>) What non-Unix ports are available?<BR>
33      <A href="#1.5">1.5</A>) Where can I get PostgreSQL?<BR>
34      <A href="#1.6">1.6</A>) Where can I get support?<BR>
35      <A href="#1.7">1.7</A>) What is the latest release?<BR>
36      <A href="#1.8">1.8</A>) What documentation is available?<BR>
37      <A href="#1.9">1.9</A>) How do I find out about known bugs or
38     missing features?<BR>
39      <A href="#1.10">1.10</A>) How can I learn <SMALL>SQL</SMALL>?<BR>
40      <A href="#1.11">1.11</A>) Is PostgreSQL Y2K compliant?<BR>
41      <A href="#1.12">1.12</A>) How do I join the development team?<BR>
42      <A href="#1.13">1.13</A>) How do I submit a bug report?<BR>
43      <A href="#1.14">1.14</A>) How does PostgreSQL compare to other
44     <SMALL>DBMS</SMALL>s?<BR>
45      <A href="#1.15">1.15</A>) How can I financially assist
46     PostgreSQL?<BR>
47      
48
49     <H2 align="center">User Client Questions</H2>
50     <A href="#2.1">2.1</A>) Are there <SMALL>ODBC</SMALL> drivers for
51     PostgreSQL?<BR>
52      <A href="#2.2">2.2</A>) What tools are available for using
53     PostgreSQL with Web pages?<BR>
54      <A href="#2.3">2.3</A>) Does PostgreSQL have a graphical user
55     interface?<BR>
56      <A href="#2.4">2.4</A>) What languages are available to
57     communicate with PostgreSQL?<BR>
58      
59
60     <H2 align="center">Administrative Questions</H2>
61     <A href="#3.1">3.1</A>) How do I install PostgreSQL somewhere other
62     than <I>/usr/local/pgsql</I>?<BR>
63      <A href="#3.2">3.2</A>) When I start <I>postmaster</I>, I get a
64     <I>Bad System Call</I> or core dumped message. Why?<BR>
65      <A href="#3.3">3.3</A>) When I try to start <I>postmaster</I>, I
66     get <I>IpcMemoryCreate</I> errors. Why?<BR>
67      <A href="#3.4">3.4</A>) When I try to start <I>postmaster</I>, I
68     get <I>IpcSemaphoreCreate</I> errors. Why?<BR>
69      <A href="#3.5">3.5</A>) How do I control connections from other
70     hosts?<BR>
71      <A href="#3.6">3.6</A>) How do I tune the database engine for
72     better performance?<BR>
73      <A href="#3.7">3.7</A>) What debugging features are available?<BR>
74      <A href="#3.8">3.8</A>) Why do I get <I>"Sorry, too many
75     clients"</I> when trying to connect?<BR>
76      <A href="#3.9">3.9</A>) What is in the  <I>pgsql_tmp</I>
77     directory?<BR>
78      <A href="#3.10">3.10</A>) Why do I need to do a dump and restore
79     to upgrade PostgreSQL releases?<BR>
80
81
82     <H2 align="center">Operational Questions</H2>
83     <A href="#4.1">4.1</A>) What is the difference between binary
84     cursors and normal cursors?<BR>
85      <A href="#4.2">4.2</A>) How do I <SMALL>SELECT</SMALL> only the
86     first few rows of a query?  A random row?<BR>
87      <A href="#4.3">4.3</A>) How do I get a list of tables or other
88     things I can see in <I>psql</I>?<BR>
89      <A href="#4.4">4.4</A>) How do you remove a column from a
90     table, or change it's data type?<BR>
91      <A href="#4.5">4.5</A>) What is the maximum size for a row, a
92     table, and a database?<BR>
93      <A href="#4.6">4.6</A>) How much database disk space is required
94     to store data from a typical text file?<BR>
95      <A href="#4.7">4.7</A>) How do I find out what tables, indexes,
96     databases, and users are defined?<BR>
97      <A href="#4.8">4.8</A>) My queries are slow or don't make use of
98     the indexes. Why?<BR>
99      <A href="#4.9">4.9</A>) How do I see how the query optimizer is
100     evaluating my query?<BR>
101      <A href="#4.10">4.10</A>) What is an R-tree index?<BR>
102      <A href="#4.11">4.11</A>) What is the Genetic Query Optimizer?<BR>
103      <A href="#4.12">4.12</A>) How do I perform regular expression
104     searches and case-insensitive regular expression searches? How do I
105     use an index for case-insensitive searches?<BR>
106      <A href="#4.13">4.13</A>) In a query, how do I detect if a field
107     is <SMALL>NULL</SMALL>?<BR>
108      <A href="#4.14">4.14</A>) What is the difference between the
109     various character types?<BR>
110      <A href="#4.15.1">4.15.1</A>) How do I create a
111     serial/auto-incrementing field?<BR>
112      <A href="#4.15.2">4.15.2</A>) How do I get the value of a
113     <SMALL>SERIAL</SMALL> insert?<BR>
114      <A href="#4.15.3">4.15.3</A>) Don't <I>currval()</I> and
115     <I>nextval()</I> lead to a race condition with other users?<BR>
116      <A href="#4.15.4">4.15.4</A>) Why aren't my sequence numbers
117     reused on transaction abort? Why are there gaps in the numbering of
118     my sequence/SERIAL column?<BR>
119      <A href="#4.16">4.16</A>) What is an <SMALL>OID</SMALL>? What is a
120     <SMALL>TID</SMALL>?<BR>
121      <A href="#4.17">4.17</A>) What is the meaning of some of the terms
122     used in PostgreSQL?<BR>
123      <A href="#4.18">4.18</A>) Why do I get the error <I>"ERROR: Memory
124     exhausted in AllocSetAlloc()"</I>?<BR>
125      <A href="#4.19">4.19</A>) How do I tell what PostgreSQL version I
126     am running?<BR>
127      <A href="#4.20">4.20</A>) Why does my large-object operations get
128     <I>"invalid large obj descriptor"</I>?<BR>
129      <A href="#4.21">4.21</A>) How do I create a column that will
130     default to the current time?<BR>
131      <A href="#4.22">4.22</A>) Why are my subqueries using
132     <CODE><SMALL>IN</SMALL></CODE> so slow?<BR>
133      <A href="#4.23">4.23</A>) How do I perform an outer join?<BR>
134      <A href="#4.24">4.24</A>) How do I perform queries using multiple
135     databases?<BR>
136      <A href="#4.25">4.25</A>) How do I return multiple rows or columns
137     from a function?<BR>
138      <A href="#4.26">4.26</A>) Why can't I reliably create/drop
139     temporary tables in PL/PgSQL functions?<BR>
140      <A href="#4.27">4.27</A>) What replication options are available?<BR>
141      <A href="#4.28">4.28</A>) What encryption options are available?<BR>
142      
143
144     <H2 align="center">Extending PostgreSQL</H2>
145     <A href="#5.1">5.1</A>) I wrote a user-defined function. When I run
146     it in <I>psql</I>, why does it dump core?<BR>
147      <A href="#5.2">5.2</A>) How can I contribute some nifty new types
148     and functions to PostgreSQL?<BR>
149      <A href="#5.3">5.3</A>) How do I write a C function to return a
150     tuple?<BR>
151      <A href="#5.4">5.4</A>) I have changed a source file. Why does the
152     recompile not see the change?<BR>
153      
154     <HR>
155
156     <H2 align="center">General Questions</H2>
157
158     <H4><A name="1.1">1.1</A>) What is PostgreSQL? How is it pronounced?</H4>
159
160     <P>PostgreSQL is pronounced <I>Post-Gres-Q-L</I>.</P>
161
162     <P>PostgreSQL is an enhancement of the POSTGRES database management
163     system, a next-generation <SMALL>DBMS</SMALL> research prototype.
164     While PostgreSQL retains the powerful data model and rich data
165     types of POSTGRES, it replaces the PostQuel query language with an
166     extended subset of <SMALL>SQL</SMALL>. PostgreSQL is free and the
167     complete source is available.</P>
168
169     <P>PostgreSQL development is performed by a team of
170     developers who all subscribe to the PostgreSQL development mailing
171     list. The current coordinator is Marc G. Fournier (<A href=
172     "mailto:scrappy@PostgreSQL.org">scrappy@PostgreSQL.org</A>). (See
173     section <a href="#1.6">1.6</a> on how to join). This team is now 
174     responsible for all development of PostgreSQL.</P>
175
176     <P>The authors of PostgreSQL 1.01 were Andrew Yu and Jolly Chen.
177     Many others have contributed to the porting, testing, debugging,
178     and enhancement of the code. The original Postgres code, from which
179     PostgreSQL is derived, was the effort of many graduate students,
180     undergraduate students, and staff programmers working under the
181     direction of Professor Michael Stonebraker at the University of
182     California, Berkeley.</P>
183
184     <P>The original name of the software at Berkeley was Postgres. When
185     <SMALL>SQL</SMALL> functionality was added in 1995, its name was
186     changed to Postgres95. The name was changed at the end of 1996 to
187     PostgreSQL.</P>
188
189     <H4><A name="1.2">1.2</A>) What is the copyright on
190     PostgreSQL?</H4>
191
192     <P>PostgreSQL is subject to the following COPYRIGHT:</P>
193
194     <P>PostgreSQL Data Base Management System</P>
195
196     <P>Portions copyright (c) 1996-2002, PostgreSQL Global Development
197     Group Portions Copyright (c) 1994-6 Regents of the University of
198     California</P>
199
200     <P>Permission to use, copy, modify, and distribute this software
201     and its documentation for any purpose, without fee, and without a
202     written agreement is hereby granted, provided that the above
203     copyright notice and this paragraph and the following two
204     paragraphs appear in all copies.</P>
205
206     <P>IN NO EVENT SHALL THE UNIVERSITY OF CALIFORNIA BE LIABLE TO ANY
207     PARTY FOR DIRECT, INDIRECT, SPECIAL, INCIDENTAL, OR CONSEQUENTIAL
208     DAMAGES, INCLUDING LOST PROFITS, ARISING OUT OF THE USE OF THIS
209     SOFTWARE AND ITS DOCUMENTATION, EVEN IF THE UNIVERSITY OF
210     CALIFORNIA HAS BEEN ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.</P>
211
212     <P>THE UNIVERSITY OF CALIFORNIA SPECIFICALLY DISCLAIMS ANY
213     WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED WARRANTIES
214     OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE. THE
215     SOFTWARE PROVIDED HEREUNDER IS ON AN "AS IS" BASIS, AND THE
216     UNIVERSITY OF CALIFORNIA HAS NO OBLIGATIONS TO PROVIDE MAINTENANCE,
217     SUPPORT, UPDATES, ENHANCEMENTS, OR MODIFICATIONS.</P>
218
219     <P>The above is the BSD license, the classic open-source license.
220     It has no restrictions on how the source code may be used. We like
221     it and have no intention of changing it.</P>
222
223     <H4><A name="1.3">1.3</A>) What Unix platforms does PostgreSQL run
224     on?</H4>
225
226     <P>In general, a modern Unix-compatible platform should be able to
227     run PostgreSQL. The platforms that had received explicit testing at
228     the time of release are listed in the installation
229     instructions.</P>
230
231     <H4><A name="1.4">1.4</A>) What non-Unix ports are available?</H4>
232
233     <P><STRONG>Client</STRONG></P>
234
235     <P>It is possible to compile the <I>libpq</I> C library, psql, and
236     other interfaces and client applications to run on MS Windows platforms.
237     In this case, the client is running on MS Windows, and communicates
238     via TCP/IP to a server running on one of our supported Unix
239     platforms. A file <I>win32.mak</I> is included in the distribution
240     for making a Win32 <I>libpq</I> library and <I>psql</I>. PostgreSQL
241     also communicates with <SMALL>ODBC</SMALL> clients.</P>
242
243     <P><STRONG>Server</STRONG></P>
244
245     <P>The database server can run on Windows NT and Win2k using
246     Cygwin, the Cygnus Unix/NT porting library. See
247     <I>pgsql/doc/FAQ_MSWIN</I> in the distribution or the MS Windows FAQ
248     at <A href="http://www.PostgreSQL.org/docs/faqs/text/FAQ_MSWIN">
249     http://www.PostgreSQL.org/docs/faqs/text/FAQ_MSWIN</A>.</P>
250
251     <p>A native port to MS Win NT/2000/XP is currently being worked
252     on. For more details on the current status of PostgreSQL on Windows see
253     <a href="http://techdocs.postgresql.org/guides/Windows">
254     http://techdocs.postgresql.org/guides/Windows</a>.</p>
255
256     <p>There is also a Novell Netware 6 port at
257     <a href="http://forge.novell.com">http://forge.novell.com</a>.</p>
258
259     <H4><A name="1.5">1.5</A>) Where can I get PostgreSQL?</H4>
260
261     <P>The primary anonymous ftp site for PostgreSQL is <A href=
262     "ftp://ftp.PostgreSQL.org/pub">ftp://ftp.PostgreSQL.org/pub</A>.
263     For mirror sites, see our main web site.</P>
264
265     <H4><A name="1.6">1.6</A>) Where can I get support?</H4>
266
267     <P>The main mailing list is: <A href=
268     "mailto:pgsql-general@PostgreSQL.org">pgsql-general@PostgreSQL.org</A>.
269     It is available for discussion of matters pertaining to PostgreSQL.
270     To subscribe, send mail with the following lines in the body (not
271     the subject line):</P>
272 <PRE>
273     subscribe
274     end
275 </PRE>
276
277     <P>to <A href=
278     "mailto:pgsql-general-request@PostgreSQL.org">pgsql-general-request@PostgreSQL.org</A>.</P>
279
280     <P>There is also a digest list available. To subscribe to this
281     list, send email to: <A href=
282     "mailto:pgsql-general-digest-request@PostgreSQL.org">pgsql-general-digest-request@PostgreSQL.org</A>
283     with a body of:</P>
284 <PRE>
285     subscribe
286     end
287 </PRE>
288
289     Digests are sent out to members of this list whenever the main list
290     has received around 30k of messages. 
291
292     <P>The bugs mailing list is available. To subscribe to this list,
293     send email to <A href=
294     "mailto:pgsql-bugs-request@PostgreSQL.org">pgsql-bugs-request@PostgreSQL.org</A>
295     with a body of:</P>
296 <PRE>
297     subscribe
298     end
299 </PRE>
300
301     There is also a developers discussion mailing list available. To
302     subscribe to this list, send email to <A href=
303     "mailto:pgsql-hackers-request@PostgreSQL.org">pgsql-hackers-request@PostgreSQL.org</A>
304     with a body of: 
305 <PRE>
306     subscribe
307     end
308 </PRE>
309
310     <P>Additional mailing lists and information about PostgreSQL can be
311     found via the PostgreSQL WWW home page at:</P>
312
313     <BLOCKQUOTE>
314       <A href="http://www.PostgreSQL.org">http://www.PostgreSQL.org</A>
315     </BLOCKQUOTE>
316
317     <P>There is also an IRC channel on EFNet and OpenProjects,
318     channel <I>#PostgreSQL</I>. I use the Unix command <CODE>irc -c
319     '#PostgreSQL' "$USER" irc.phoenix.net.</CODE></P>
320
321     <P>A list of commercial support companies is available at <A href=
322     "http://techdocs.postgresql.org/companies.php">http://techdocs.postgresql.org/companies.php</A>.</P>
323
324     <H4><A name="1.7">1.7</A>) What is the latest release?</H4>
325
326     <P>The latest release of PostgreSQL is version 7.3.3.</P>
327
328     <P>We plan to have major releases every four months.</P>
329
330     <H4><A name="1.8">1.8</A>) What documentation is available?</H4>
331
332     <P>Several manuals, manual pages, and some small test examples are
333     included in the distribution. See the <I>/doc</I> directory. You
334     can also browse the manuals online at <A href=
335     "http://www.PostgreSQL.org/docs">http://www.PostgreSQL.org/docs</A>.</P>
336
337     <P>There are two PostgreSQL books available online at <A href=
338     "http://www.PostgreSQL.org/docs/awbook.html">http://www.PostgreSQL.org/docs/awbook.html</A>
339     and <A href=
340     "http://www.commandprompt.com/ppbook/">http://www.commandprompt.com/ppbook/</A>.
341     There is a list of PostgreSQL books available for purchase at <A
342     href=
343     "http://techdocs.postgresql.org/techdocs/bookreviews.php">http://techdocs.PostgreSQL.org/techdocs/bookreviews.php</A>.
344     There is also a collection of PostgreSQL technical articles at <A
345     href=
346     "http://techdocs.PostgreSQL.org/">http://techdocs.PostgreSQL.org/</A>.</P>
347
348     <P><I>psql</I> has some nice \d commands to show information about
349     types, operators, functions, aggregates, etc.</P>
350
351     <P>Our web site contains even more documentation.</P>
352
353     <H4><A name="1.9">1.9</A>) How do I find out about known bugs or
354     missing features?</H4>
355
356     <P>PostgreSQL supports an extended subset of <SMALL>SQL</SMALL>-92.
357     See our <A href="http://developer.PostgreSQL.org/todo.php">TODO</A>
358     list for known bugs, missing features, and future plans.</P>
359
360     <H4><A name="1.10">1.10</A>) How can I learn
361     <SMALL>SQL</SMALL>?</H4>
362
363     <P>The PostgreSQL book at <A href=
364     "http://www.PostgreSQL.org/docs/awbook.html">http://www.PostgreSQL.org/docs/awbook.html</A>
365     teaches <SMALL>SQL</SMALL>. There is another PostgreSQL book at <A
366     href=
367     "http://www.commandprompt.com/ppbook/">http://www.commandprompt.com/ppbook.</A>
368     There is a nice tutorial at <A href=
369     "http://www.intermedia.net/support/sql/sqltut.shtm">http://www.intermedia.net/support/sql/sqltut.shtm,</A>
370     at <A href=
371     "http://ourworld.compuserve.com/homepages/graeme_birchall/HTM_COOK.HTM">
372     http://ourworld.compuserve.com/homepages/graeme_birchall/HTM_COOK.HTM,</A>
373     and at <A href=
374     "http://sqlcourse.com/">http://sqlcourse.com.</A></P>
375
376     <P>Another one is "Teach Yourself SQL in 21 Days, Second Edition"
377     at <A href=
378     "http://members.tripod.com/er4ebus/sql/index.htm">http://members.tripod.com/er4ebus/sql/index.htm</A></P>
379
380     <P>Many of our users like <I>The Practical SQL Handbook</I>,
381     Bowman, Judith S., et al., Addison-Wesley. Others like <I>The
382     Complete Reference SQL</I>, Groff et al., McGraw-Hill.</P>
383
384     <H4><A name="1.11">1.11</A>) Is PostgreSQL Y2K compliant?</H4>
385
386     <P>Yes, we easily handle dates past the year 2000 AD, and before
387     2000 BC.</P>
388
389     <H4><A name="1.12">1.12</A>) How do I join the development
390     team?</H4>
391
392     <P>First, download the latest source and read the PostgreSQL
393     Developers documentation on our web site, or in the distribution.
394     Second, subscribe to the <I>pgsql-hackers</I> and
395     <I>pgsql-patches</I> mailing lists. Third, submit high quality
396     patches to pgsql-patches.</P>
397
398     <P>There are about a dozen people who have commit privileges to the
399     PostgreSQL <SMALL>CVS</SMALL> archive. They each have submitted so
400     many high-quality patches that it was impossible for the existing
401     committers to keep up, and we had confidence that patches they
402     committed were of high quality.</P>
403
404     <H4><A name="1.13">1.13</A>) How do I submit a bug report?</H4>
405
406     <P>Please visit the PostgreSQL BugTool page at <A href=
407     "http://www.PostgreSQL.org/bugs/bugs.php">http://www.PostgreSQL.org/bugs/bugs.php</A>,
408     which gives guidelines and directions on how to submit a
409     bug report.</P>
410
411     <P>Also check out our ftp site <A href=
412     "ftp://ftp.PostgreSQL.org/pub">ftp://ftp.PostgreSQL.org/pub</A> to
413     see if there is a more recent PostgreSQL version or patches.</P>
414
415     <H4><A name="1.14">1.14</A>) How does PostgreSQL compare to other
416     <SMALL>DBMS</SMALL>s?</H4>
417
418     <P>There are several ways of measuring software: features,
419     performance, reliability, support, and price.</P>
420
421     <DL>
422       <DT><B>Features</B></DT>
423
424       <DD>PostgreSQL has most features present in large commercial
425       <SMALL>DBMS</SMALL>s, like transactions, subselects, triggers,
426       views, foreign key referential integrity, and sophisticated
427       locking. We have some features they do not have, like
428       user-defined types, inheritance, rules, and multi-version
429       concurrency control to reduce lock contention.<BR>
430       <BR>
431       </DD>
432
433       <DT><B>Performance</B></DT>
434
435       <DD>PostgreSQL has performance similar to other commercial and
436       open source databases. it is faster for some things, slower for
437       others. In comparison to MySQL or leaner database systems, we are
438       slower on inserts/updates because of transaction overhead. Of
439       course, MySQL does not have any of the features mentioned in the
440       <I>Features</I> section above. We are built for reliability and
441       features, though we continue to improve performance in every
442       release. There is an interesting Web page comparing PostgreSQL to
443       MySQL at <A href="http://openacs.org/philosophy/why-not-mysql.html">
444       http://openacs.org/philosophy/why-not-mysql.html</A><BR>
445
446       <BR>
447       </DD>
448
449       <DT><B>Reliability</B></DT>
450
451       <DD>We realize that a <SMALL>DBMS</SMALL> must be reliable, or it
452       is worthless. We strive to release well-tested, stable code that
453       has a minimum of bugs. Each release has at least one month of
454       beta testing, and our release history shows that we can provide
455       stable, solid releases that are ready for production use. We
456       believe we compare favorably to other database software in this
457       area.<BR>
458       <BR>
459       </DD>
460
461       <DT><B>Support</B></DT>
462
463       <DD>Our mailing lists provide contact with a large group of developers
464       and users to help resolve any problems encountered. While we cannot
465       guarantee a fix, commercial <SMALL>DBMS</SMALL>s do not always
466       supply a fix either. Direct access to developers, the user
467       community, manuals, and the source code often make PostgreSQL
468       support superior to other <SMALL>DBMS</SMALL>s. There is
469       commercial per-incident support available for those who need it.
470       (See <A href="#1.6">FAQ section 1.6</A>.)<BR>
471       <BR>
472       </DD>
473
474       <DT><B>Price</B></DT>
475
476       <DD>We are free for all use, both commercial and non-commercial.
477       You can add our code to your product with no limitations, except
478       those outlined in our BSD-style license stated above.<BR>
479       <BR>
480       </DD>
481     </DL>
482
483     <H4><A name="1.15">1.15</A>) How can I financially assist
484     PostgreSQL?</H4>
485
486     <P>PostgreSQL has had a first-class infrastructure since we started
487     in 1996. This is all thanks to Marc Fournier, who has created
488     and managed this infrastructure over the years.</P>
489
490     <P>Quality infrastructure is very important to an open-source
491     project. It prevents disruptions that can greatly delay forward
492     movement of the project.</P>
493
494     <P>Of course, this infrastructure is not cheap. There are a variety
495     of monthly and one-time expenses that are required to keep it
496     going. If you or your company has money it can donate to help fund
497     this effort, please go to <A href="http://store.pgsql.com/shopping/">http://store.pgsql.com/shopping/</A>
498     and make a donation.</P>
499
500     <P>Although the web page mentions PostgreSQL, Inc, the
501     "contributions" item is solely to support the PostgreSQL project
502     and does not fund any specific company. If you prefer, you can also
503     send a check to the contact address.</P>
504     <HR>
505
506     <P>Also, if you have a success story about PostgreSQL, please submit
507     it to our advocacy site at <a href="http://advocacy.postgresql.org">
508     http://advocacy.postgresql.org</a>.</P>
509
510
511     <H2 align="center">User Client Questions</H2>
512
513     <H4><A name="2.1">2.1</A>) Are there <SMALL>ODBC</SMALL> drivers
514     for PostgreSQL?</H4>
515
516     <P>There are two <SMALL>ODBC</SMALL> drivers available, PsqlODBC
517     and OpenLink <SMALL>ODBC</SMALL>.</P>
518
519     <P>You can download PsqlODBC from <A href=
520     "http://gborg.postgresql.org/project/psqlodbc/projdisplay.php">
521     http://gborg.postgresql.org/project/psqlodbc/projdisplay.php</A>.</P>
522
523     <P>OpenLink <SMALL>ODBC</SMALL> can be gotten from <A href=
524     "http://www.openlinksw.com/">http://www.openlinksw.com</A>. It
525     works with their standard <SMALL>ODBC</SMALL> client software so
526     you'll have PostgreSQL <SMALL>ODBC</SMALL> available on every
527     client platform they support (Win, Mac, Unix, VMS).</P>
528
529     <P>They will probably be selling this product to people who need
530     commercial-quality support, but a freeware version will always be
531     available. Please send questions to <A href=
532     "mailto:postgres95@openlink.co.uk">postgres95@openlink.co.uk</A>.</P>
533
534     <H4><A name="2.2">2.2</A>) What tools are available for using
535     PostgreSQL with Web pages?</H4>
536
537     <P>A nice introduction to Database-backed Web pages can be seen at:
538     <A href="http://www.webreview.com">http://www.webreview.com</A></P>
539
540     <P>For Web integration, PHP is an excellent interface. It is at <A
541     href="http://www.php.net">http://www.php.net</A>.</P>
542
543     <P>For complex cases, many use the Perl interface and CGI.pm or mod_perl.</P>
544
545     <H4><A name="2.3">2.3</A>) Does PostgreSQL have a graphical user
546     interface?</H4>
547
548     <P>Yes, there are several graphical interfaces to PostgreSQL available.
549     These include PgAccess <a href="http://www.pgaccess.org">
550     http://www.pgaccess.org</a>), PgAdmin II (<a
551     href="http://www.pgadmin.org">http://www.pgadmin.org</a>,
552     Win32-only), RHDB Admin (<a
553     href="http://sources.redhat.com/rhdb/">http://sources.redhat.com/rhdb/
554     </a>) and Rekall (<a href="http://www.thekompany.com/products/rekall/">
555     http://www.thekompany.com/products/rekall/</a>, proprietary). There is 
556     also PHPPgAdmin (<a href="http://phppgadmin.sourceforge.net/">
557     http://phppgadmin.sourceforge.net/ </a>), a web-based interface to 
558     PostgreSQL.</P>
559
560     <P>See <a href="http://techdocs.postgresql.org/guides/GUITools">http://techdocs.postgresql.org/guides/GUITools</a> for a more detailed list.</P>
561
562     <H4><A name="2.4">2.4</A>) What languages are able to communicate with 
563     PostgreSQL?</H4>
564
565     <P>Most popular programming languages contain an interface to
566     PostgreSQL. Check your programming language's list of extension
567     modules.</P>
568
569     <P>The following interfaces are included in the PostgreSQL
570     distribution:</P>
571
572     <UL>
573       <LI>C (libpq)</LI>
574
575       <LI>Embedded C (ecpg)</LI>
576
577       <LI>Java (jdbc)</LI>
578
579       <LI>Python (PyGreSQL)</LI>
580
581       <LI>TCL (libpgtcl)</LI>
582
583     </UL>
584     <P>Additional interfaces are available at 
585     <a href="http://gborg.postgresql.org">http://gborg.postgresql.org</A>
586     in the <I>Drivers/Interfaces</I> section.
587     </P>
588     <HR>
589
590     <H2 align="center">Administrative Questions</H2>
591
592     <H4><A name="3.1">3.1</A>) How do I install PostgreSQL somewhere
593     other than <I>/usr/local/pgsql</I>?</H4>
594
595     <P>Specify the <I>--prefix</I> option when running
596     <I>configure</I>.</P>
597
598     <H4><A name="3.2">3.2</A>) When I start <I>postmaster</I>, I get a
599     <I>Bad System Call</I> or core dumped message. Why?</H4>
600
601     <P>It could be a variety of problems, but first check to see that
602     you have System V extensions installed in your kernel. PostgreSQL
603     requires kernel support for shared memory and semaphores.</P>
604
605     <H4><A name="3.3">3.3</A>) When I try to start <I>postmaster</I>, I
606     get <I>IpcMemoryCreate</I> errors. Why?</H4>
607
608     <P>You either do not have shared memory configured properly in your
609     kernel or you need to enlarge the shared memory available in the
610     kernel. The exact amount you need depends on your architecture and
611     how many buffers and backend processes you configure for
612     <I>postmaster</I>. For most systems, with default numbers of
613     buffers and processes, you need a minimum of ~1 MB. See the <A
614     href=
615     "http://www.PostgreSQL.org/docs/view.php?version=current&amp;idoc=1&amp;file=kernel-resources.html">PostgreSQL
616     Administrator's Guide</A> for more detailed information about
617     shared memory and semaphores.</P>
618
619     <H4><A name="3.4">3.4</A>) When I try to start <I>postmaster</I>, I
620     get <I>IpcSemaphoreCreate</I> errors. Why?</H4>
621
622     <P>If the error message is <I>IpcSemaphoreCreate: semget failed (No
623     space left on device)</I> then your kernel is not configured with
624     enough semaphores. Postgres needs one semaphore per potential
625     backend process. A temporary solution is to start <I>postmaster</I>
626     with a smaller limit on the number of backend processes. Use
627     <I>-N</I> with a parameter less than the default of 32. A more
628     permanent solution is to increase your kernel's
629     <SMALL>SEMMNS</SMALL> and <SMALL>SEMMNI</SMALL> parameters.</P>
630
631     <P>Inoperative semaphores can also cause crashes during heavy
632     database access.</P>
633
634     <P>If the error message is something else, you might not have
635     semaphore support configured in your kernel at all. See the
636     PostgreSQL Administrator's Guide for more detailed information
637     about shared memory and semaphores.</P>
638
639     <H4><A name="3.5">3.5</A>) How do I control connections from other
640     hosts?</H4>
641
642     <P>By default, PostgreSQL only allows connections from the local
643     machine using Unix domain sockets. Other machines will not be able
644     to connect unless you add the <I>-i</I> flag to <I>postmaster</I>,
645     <B>and</B> enable host-based authentication by modifying the file
646     <I>$PGDATA/pg_hba.conf</I> accordingly. This will allow TCP/IP
647     connections.</P>
648
649     <H4><A name="3.6">3.6</A>) How do I tune the database engine for
650     better performance?</H4>
651
652     <P>Certainly, indexes can speed up queries. The
653     <SMALL>EXPLAIN</SMALL> command allows you to see how PostgreSQL is
654     interpreting your query, and which indexes are being used.</P>
655
656     <P>If you are doing many <SMALL>INSERTs</SMALL>, consider doing
657     them in a large batch using the <SMALL>COPY</SMALL> command. This
658     is much faster than individual <SMALL>INSERTS</SMALL>. Second,
659     statements not in a <SMALL>BEGIN WORK/COMMIT</SMALL> transaction
660     block are considered to be in their own transaction. Consider
661     performing several statements in a single transaction block. This
662     reduces the transaction overhead. Also, consider dropping and
663     recreating indexes when making large data changes.</P>
664
665     <P>There are several tuning options. You can disable <I>fsync()</I>
666     by starting <I>postmaster</I> with a <I>-o -F</I> option. This will
667     prevent <I>fsync()</I>s from flushing to disk after every
668     transaction.</P>
669
670     <P>You can also use the <I>postmaster</I> <I>-B</I> option to
671     increase the number of shared memory buffers used by the backend
672     processes. If you make this parameter too high, the
673     <I>postmaster</I> may not start because you have exceeded your
674     kernel's limit on shared memory space. Each buffer is 8K and the
675     default is 64 buffers.</P>
676
677     <P>You can also use the backend <I>-S</I> option to increase the
678     maximum amount of memory used by the backend process for temporary
679     sorts. The <I>-S</I> value is measured in kilobytes, and the
680     default is 512 (i.e. 512K).</P>
681
682     <P>You can also use the <SMALL>CLUSTER</SMALL> command to group
683     data in tables to match an index. See the <SMALL>CLUSTER</SMALL>
684     manual page for more details.</P>
685
686     <H4><A name="3.7">3.7</A>) What debugging features are
687     available?</H4>
688
689     <P>PostgreSQL has several features that report status information
690     that can be valuable for debugging purposes.</P>
691
692     <P>First, by running <I>configure</I> with the --enable-cassert
693     option, many <I>assert()</I>s monitor the progress of the backend
694     and halt the program when something unexpected occurs.</P>
695
696     <P>Both <I>postmaster</I> and <I>postgres</I> have several debug
697     options available. First, whenever you start <I>postmaster</I>,
698     make sure you send the standard output and error to a log file,
699     like:</P>
700 <PRE>
701     cd /usr/local/pgsql
702     ./bin/postmaster &gt;server.log 2&gt;&amp;1 &amp;
703 </PRE>
704
705     <P>This will put a server.log file in the top-level PostgreSQL
706     directory. This file contains useful information about problems or
707     errors encountered by the server. <I>Postmaster</I> has a <I>-d</I>
708     option that allows even more detailed information to be reported.
709     The <I>-d</I> option takes a number that specifies the debug level.
710     Be warned that high debug level values generate large log
711     files.</P>
712
713     <P>If <I>postmaster</I> is not running, you can actually run the
714     <I>postgres</I> backend from the command line, and type your
715     <SMALL>SQL</SMALL> statement directly. This is recommended
716     <B>only</B> for debugging purposes. Note that a newline terminates
717     the query, not a semicolon. If you have compiled with debugging
718     symbols, you can use a debugger to see what is happening. Because
719     the backend was not started from <I>postmaster</I>, it is not
720     running in an identical environment and locking/backend interaction
721     problems may not be duplicated.</P>
722
723     <P>If <I>postmaster</I> is running, start <I>psql</I> in one
724     window, then find the <SMALL>PID</SMALL> of the <I>postgres</I>
725     process used by <I>psql</I>. Use a debugger to attach to the
726     <I>postgres</I> <SMALL>PID</SMALL>. You can set breakpoints in the
727     debugger and issue queries from <I>psql</I>. If you are debugging
728     <I>postgres</I> startup, you can set PGOPTIONS="-W n", then start
729     <I>psql</I>. This will cause startup to delay for <I>n</I> seconds
730     so you can attach to the process with the debugger, set any
731     breakpoints, and continue through the startup sequence.</P>
732
733     <P>The <I>postgres</I> program has <I>-s, -A</I>, and <I>-t</I>
734     options that can be very useful for debugging and performance
735     measurements.</P>
736
737     <P>You can also compile with profiling to see what functions are
738     taking execution time. The backend profile files will be deposited
739     in the <I>pgsql/data/base/dbname</I> directory. The client profile
740     file will be put in the client's current directory. Linux requires
741     a compile with <I>-DLINUX_PROFILE</I> for proper profiling.</P>
742
743     <H4><A name="3.8">3.8</A>) Why do I get <I>"Sorry, too many
744     clients"</I> when trying to connect?</H4>
745
746     <P>You need to increase <I>postmaster</I>'s limit on how many
747     concurrent backend processes it can start.</P>
748
749     <P>The default limit is 32 processes. You can increase it by
750     restarting <I>postmaster</I> with a suitable <I>-N</I> value or
751     modifying <I>postgresql.conf</I>.</P>
752
753     <P>Note that if you make <I>-N</I> larger than 32, you must also
754     increase <I>-B</I> beyond its default of 64; <I>-B</I> must be at
755     least twice <I>-N</I>, and probably should be more than that for
756     best performance. For large numbers of backend processes, you are
757     also likely to find that you need to increase various Unix kernel
758     configuration parameters. Things to check include the maximum size
759     of shared memory blocks, <SMALL>SHMMAX;</SMALL> the maximum number
760     of semaphores, <SMALL>SEMMNS</SMALL> and <SMALL>SEMMNI;</SMALL> the
761     maximum number of processes, <SMALL>NPROC;</SMALL> the maximum
762     number of processes per user, <SMALL>MAXUPRC;</SMALL> and the
763     maximum number of open files, <SMALL>NFILE</SMALL> and
764     <SMALL>NINODE</SMALL>. The reason that PostgreSQL has a limit on
765     the number of allowed backend processes is so your system won't run
766     out of resources.</P>
767
768     <H4><A name="3.9">3.9</A>) What is in the <I>pgsql_tmp</I> directory?</H4>
769
770     <P>This directory contains temporary files generated by the query 
771     executor. For example, if a sort needs to be done to satisfy an 
772     <SMALL>ORDER BY</SMALL> and the sort requires more space than the
773     backend's <I>-S</I> parameter allows, then temporary files are created
774     here to hold the extra data.</P>
775
776     <P>The temporary files are usually deleted automatically, but might
777     remain if a backend crashes during a sort. A stop and restart of the
778     <I>postmaster</I> will remove files from those directories.</P>
779
780     <H4><A name="3.10">3.10</A>) Why do I need to do a dump and restore
781     to upgrade between major PostgreSQL releases?</H4>
782
783     <P>The PostgreSQL team makes only small changes between minor releases,
784     so upgrading from 7.2 to 7.2.1 does not require a dump and restore.
785     However, major releases (e.g. from 7.2 to 7.3) often change the internal
786     format of system tables and data files. These changes are often complex,
787     so we don't maintain backward compatability for data files. A dump outputs
788     data in a generic format that can then be loaded in using the new internal
789     format.</P>
790
791     <P>In releases where the on-disk format does not change, the
792     <I>pg_upgrade</I> script can be used to upgrade without a dump/restore.
793     The release notes mention whether <I>pg_upgrade</I> is available for the
794     release.</P>
795
796     <HR>
797
798     <H2 align="center">Operational Questions</H2>
799
800     <H4><A name="4.1">4.1</A>) What is the difference between binary
801     cursors and normal cursors?</H4>
802
803     <P>See the <SMALL>DECLARE</SMALL> manual page for a
804     description.</P>
805
806     <H4><A name="4.2">4.2</A>) How do I <SMALL>SELECT</SMALL> only the
807     first few rows of a query?  A random row?</H4>
808
809     <P>See the <SMALL>FETCH</SMALL> manual page, or use
810     <SMALL>SELECT</SMALL> ... <SMALL>LIMIT</SMALL>....</P>
811
812     <P>The entire query may have to be evaluated, even if you only want
813     the first few rows. Consider using a query that has an <SMALL>ORDER
814     BY</SMALL>. If there is an index that matches the <SMALL>ORDER
815     BY</SMALL>, PostgreSQL may be able to evaluate only the first few
816     records requested, or the entire query may have to be evaluated
817     until the desired rows have been generated.</P>
818
819     <P>To <SMALL>SELECT</SMALL> a random row, use:
820 <PRE>
821     SELECT col
822     FROM tab
823     ORDER BY random()
824     LIMIT 1;
825 </PRE>
826
827     <H4><A name="4.3">4.3</A>) How do I get a list of tables or other
828     things I can see in <I>psql</I>?</H4>
829
830     <P>You can read the source code for <I>psql</I> in file
831     <I>pgsql/src/bin/psql/describe.c</I>. It contains
832     <SMALL>SQL</SMALL> commands that generate the output for psql's
833     backslash commands. You can also start <I>psql</I> with the
834     <I>-E</I> option so it will print out the queries it uses to
835     execute the commands you give.</P>
836
837     <H4><A name="4.4">4.4</A>) How do you remove a column from a
838     table, or change its data type?</H4>
839
840     <P><SMALL>DROP COLUMN</SMALL> functionality was added in release 7.3 with
841     <SMALL>ALTER TABLE DROP COLUMN</SMALL>.  In earlier versions,
842     you can do this:</P>
843 <PRE>
844     BEGIN;
845     LOCK TABLE old_table;
846     SELECT ...  -- select all columns but the one you want to remove
847     INTO TABLE new_table
848     FROM old_table;
849     DROP TABLE old_table;
850     ALTER TABLE new_table RENAME TO old_table;
851     COMMIT;
852 </PRE>
853
854     <P>To change the data type of a column, do this:</P>
855 <PRE>
856     BEGIN;
857     ALTER TABLE tab ADD COLUMN new_col <i>new_data_type</i>;
858     UPDATE tab SET new_col = CAST(old_col AS <i>new_data_type</i>);
859     ALTER TABLE tab DROP COLUMN old_col;
860     COMMIT;
861 </PRE>
862     <P>You might then want to do <I>VACUUM FULL tab</I> to reclaim the
863     disk space used by the expired rows.</P>
864     
865     <H4><A name="4.5">4.5</A>) What is the maximum size for a row, a
866     table, and a database?</H4>
867
868     <P>These are the limits:</P>
869 <PRE>
870     Maximum size for a database?             unlimited (4 TB databases exist)
871     Maximum size for a table?                16 TB
872     Maximum size for a row?                  1.6TB
873     Maximum size for a field?                1 GB
874     Maximum number of rows in a table?       unlimited
875     Maximum number of columns in a table?    250-1600 depending on column types
876     Maximum number of indexes on a table?    unlimited
877 </PRE>
878
879     Of course, these are not actually unlimited, but limited to
880     available disk space and memory/swap space. Performance may suffer
881     when these values get unusually large. 
882
883     <P>The maximum table size of 16 TB does not require large file
884     support from the operating system. Large tables are stored as
885     multiple 1 GB files so file system size limits are not
886     important.</P>
887
888     <P>The maximum table size and maximum number of columns can be
889     increased if the default block size is increased to 32k.</P>
890
891     <H4><A name="4.6">4.6</A>) How much database disk space is required
892     to store data from a typical text file?</H4>
893
894     <P>A PostgreSQL database may require up to five times the disk
895     space to store data from a text file.</P>
896
897     <P>As an example, consider a file of 100,000 lines with an integer
898     and text description on each line. Suppose the text string
899     avergages twenty bytes in length. The flat file would be 2.8 MB.
900     The size of the PostgreSQL database file containing this data can
901     be estimated as 6.4 MB:</P>
902 <PRE>
903     36 bytes: each row header (approximate)
904     24 bytes: one int field and one text field
905    + 4 bytes: pointer on page to tuple
906    ----------------------------------------
907     64 bytes per row
908
909    The data page size in PostgreSQL is 8192 bytes (8 KB), so:
910
911    8192 bytes per page
912    -------------------   =  128 rows per database page (rounded down)
913      64 bytes per row
914
915    100000 data rows
916    --------------------  =  782 database pages (rounded up)
917       128 rows per page
918
919 782 database pages * 8192 bytes per page  =  6,406,144 bytes (6.4 MB)
920 </PRE>
921
922     <P>Indexes do not require as much overhead, but do contain the data
923     that is being indexed, so they can be large also.</P>
924
925     <P><SMALL>NULL</SMALL>s are stored in bitmaps, so they
926     use very little space.</P>
927     
928     <H4><A name="4.7">4.7</A>) How do I find out what tables, indexes,
929     databases, and users are defined?</H4>
930
931     <P><I>psql</I> has a variety of backslash commands to show such
932     information. Use \? to see them. There are also system tables
933     beginning with <I>pg_</I> that describe these too. Also, <I>psql
934     -l</I> will list all databases.</P>
935
936     <P>Also try the file <I>pgsql/src/tutorial/syscat.source</I>. It
937     illustrates many of the <SMALL>SELECT</SMALL>s needed to get
938     information from the database system tables.</P>
939
940     <H4><A name="4.8">4.8</A>) My queries are slow or don't make use of
941     the indexes. Why?</H4>
942     Indexes are not automatically used by every query. Indexes are only
943     used if the table is larger than a minimum size, and the query
944     selects only a small percentage of the rows in the table. This is
945     because the random disk access caused by an index scan can be
946     slower than a straight read through the table, or sequential scan. 
947
948     <P>To determine if an index should be used, PostgreSQL must have
949     statistics about the table. These statistics are collected using
950     <SMALL>VACUUM ANALYZE</SMALL>, or simply <SMALL>ANALYZE</SMALL>.
951     Using statistics, the optimizer knows how many rows are in the
952     table, and can better determine if indexes should be used.
953     Statistics are also valuable in determining optimal join order and
954     join methods. Statistics collection should be performed
955     periodically as the contents of the table change.</P>
956
957     <P>Indexes are normally not used for <SMALL>ORDER BY</SMALL> or to
958     perform joins. A sequential scan followed by an explicit sort is
959     usually faster than an index scan of a large table.</P>
960     However, <SMALL>LIMIT</SMALL> combined with <SMALL>ORDER BY</SMALL>
961     often will use an index because only a small portion of the table
962     is returned.  In fact, though MAX() and MIN() don't use indexes,
963     it is possible to retrieve such values using an index with ORDER BY
964     and LIMIT:
965 <PRE>
966     SELECT col
967     FROM tab
968     ORDER BY col [ DESC ]
969     LIMIT 1;
970 </PRE>
971
972     <P>If you believe the optimizer is incorrect in choosing a
973     sequential scan, use <CODE>SET enable_seqscan TO 'off'</CODE> and
974     run tests to see if an index scan is indeed faster.</P>
975
976     <P>When using wild-card operators such as <SMALL>LIKE</SMALL> or
977     <I>~</I>, indexes can only be used in certain circumstances:</P>
978     <UL>
979     <LI>The beginning of the search string must be anchored to the start
980     of the string, i.e.
981     <UL>
982     <LI><SMALL>LIKE</SMALL> patterns must not start with <I>%</I>.</LI>
983     <LI><I>~</I> (regular expression) patterns must start with
984     <I>^</I>.</LI>
985     </UL></LI>
986     <LI>The search string can not start with a character class,
987     e.g. [a-e].</LI>
988     <LI>Case-insensitive searches such as <SMALL>ILIKE</SMALL> and
989     <I>~*</I> do not utilise indexes. Instead, use functional
990     indexes, which are described in section <a href="#4.12">4.12</a>.</LI>
991     <LI>The default <I>C</I> locale must be used during
992     <i>initdb</i>.</LI>
993     </UL>
994     <P>
995
996     <H4><A name="4.9">4.9</A>) How do I see how the query optimizer is
997     evaluating my query?</H4>
998
999     <P>See the <SMALL>EXPLAIN</SMALL> manual page.</P>
1000
1001     <H4><A name="4.10">4.10</A>) What is an R-tree index?</H4>
1002
1003     <P>An R-tree index is used for indexing spatial data. A hash index
1004     can't handle range searches. A B-tree index only handles range
1005     searches in a single dimension. R-trees can handle
1006     multi-dimensional data. For example, if an R-tree index can be
1007     built on an attribute of type <I>point</I>, the system can more
1008     efficiently answer queries such as "select all points within a
1009     bounding rectangle."</P>
1010
1011     <P>The canonical paper that describes the original R-tree design
1012     is:</P>
1013
1014     <P>Guttman, A. "R-trees: A Dynamic Index Structure for Spatial
1015     Searching." Proceedings of the 1984 ACM SIGMOD Int'l Conf on Mgmt
1016     of Data, 45-57.</P>
1017
1018     <P>You can also find this paper in Stonebraker's "Readings in
1019     Database Systems".</P>
1020
1021     <P>Built-in R-trees can handle polygons and boxes. In theory,
1022     R-trees can be extended to handle higher number of dimensions. In
1023     practice, extending R-trees requires a bit of work and we don't
1024     currently have any documentation on how to do it.</P>
1025
1026     <H4><A name="4.11">4.11</A>) What is the Genetic Query
1027     Optimizer?</H4>
1028
1029     <P>The <SMALL>GEQO</SMALL> module speeds query optimization when
1030     joining many tables by means of a Genetic Algorithm (GA). It allows
1031     the handling of large join queries through nonexhaustive
1032     search.</P>
1033
1034     <H4><A name="4.12">4.12</A>) How do I perform regular expression
1035     searches and case-insensitive regular expression searches? How do I
1036     use an index for case-insensitive searches?</H4>
1037
1038     <P>The <I>~</I> operator does regular expression matching, and
1039     <I>~*</I> does case-insensitive regular expression matching. The
1040     case-insensitive variant of <SMALL>LIKE</SMALL> is called
1041     <SMALL>ILIKE</SMALL>.</P>
1042
1043     <P>Case-insensitive equality comparisons are normally expressed
1044     as:</P>
1045 <PRE>
1046     SELECT *
1047     FROM tab
1048     WHERE lower(col) = 'abc';
1049 </PRE>
1050
1051     This will not use an standard index. However, if you create a
1052     functional index, it will be used: 
1053 <PRE>
1054     CREATE INDEX tabindex ON tab (lower(col));
1055 </PRE>
1056
1057     <H4><A name="4.13">4.13</A>) In a query, how do I detect if a field
1058     is <SMALL>NULL</SMALL>?</H4>
1059
1060     <P>You test the column with <SMALL>IS NULL</SMALL> and <SMALL>IS
1061     NOT NULL</SMALL>.</P>
1062
1063     <H4><A name="4.14">4.14</A>) What is the difference between the
1064     various character types?</H4>
1065 <PRE>
1066 Type            Internal Name   Notes
1067 --------------------------------------------------
1068 VARCHAR(n)      varchar         size specifies maximum length, no padding
1069 CHAR(n)         bpchar          blank padded to the specified fixed length
1070 TEXT            text            no specific upper limit on length
1071 BYTEA           bytea           variable-length byte array (null-byte safe)
1072 "char"          char            one character
1073 </PRE>
1074
1075     <P>You will see the internal name when examining system catalogs
1076     and in some error messages.</P>
1077
1078     <P>The first four types above are "varlena" types (i.e., the first
1079     four bytes on disk are the length, followed by the data). Thus the
1080     actual space used is slightly greater than the declared size.
1081     However, these data types are also subject to compression or being
1082     stored out-of-line by <SMALL>TOAST</SMALL>, so the space on disk
1083     might also be less than expected.</P>
1084
1085     <SMALL>VARCHAR(n)</SMALL> is best when storing variable-length
1086     strings and it limits how long a string can be. <SMALL>TEXT</SMALL>
1087     is for strings of unlimited length, with a maximum of one gigabyte.
1088     <P><SMALL>CHAR(n)</SMALL> is for storing strings that are all the
1089     same length. <SMALL>CHAR(n)</SMALL> pads with blanks to the specified
1090     length, while <SMALL>VARCHAR(n)</SMALL> only stores the characters
1091     supplied.  <SMALL>BYTEA</SMALL> is for storing binary data,
1092     particularly values that include <SMALL>NULL</SMALL> bytes. All the
1093     types described here have similar performance characteristics.</P>
1094
1095     <H4><A name="4.15.1">4.15.1</A>) How do I create a
1096     serial/auto-incrementing field?</H4>
1097
1098     <P>PostgreSQL supports a <SMALL>SERIAL</SMALL> data type. It
1099     auto-creates a sequence and index on the column. For example,
1100     this:</P>
1101 <PRE>
1102     CREATE TABLE person ( 
1103         id   SERIAL, 
1104         name TEXT 
1105     );
1106 </PRE>
1107
1108     is automatically translated into this: 
1109 <PRE>
1110     CREATE SEQUENCE person_id_seq;
1111     CREATE TABLE person ( 
1112         id   INT4 NOT NULL DEFAULT nextval('person_id_seq'),
1113         name TEXT 
1114     );
1115     CREATE UNIQUE INDEX person_id_key ON person ( id );
1116 </PRE>
1117
1118     See the <I>create_sequence</I> manual page for more information
1119     about sequences. You can also use each row's <I>OID</I> field as a
1120     unique value. However, if you need to dump and reload the database,
1121     you need to use <I>pg_dump</I>'s <I>-o</I> option or <SMALL>COPY
1122     WITH OIDS</SMALL> option to preserve the <SMALL>OID</SMALL>s. 
1123
1124     <H4><A name="4.15.2">4.15.2</A>) How do I get the value of a
1125     <SMALL>SERIAL</SMALL> insert?</H4>
1126
1127     <P>One approach is to retrieve the next <SMALL>SERIAL</SMALL> value
1128     from the sequence object with the <I>nextval()</I> function
1129     <I>before</I> inserting and then insert it explicitly. Using the
1130     example table in <A href="#4.15.1">4.15.1</A>, an example in a
1131     pseudo-language would look like this:</P>
1132 <PRE>
1133     new_id = execute("SELECT nextval('person_id_seq')");
1134     execute("INSERT INTO person (id, name) VALUES (new_id, 'Blaise Pascal')");
1135 </PRE>
1136
1137     You would then also have the new value stored in
1138     <CODE>new_id</CODE> for use in other queries (e.g., as a foreign
1139     key to the <CODE>person</CODE> table). Note that the name of the
1140     automatically created <SMALL>SEQUENCE</SMALL> object will be named
1141     &lt;<I>table</I>&gt;_&lt;<I>serialcolumn</I>&gt;_<I>seq</I>, where
1142     <I>table</I> and <I>serialcolumn</I> are the names of your table
1143     and your <SMALL>SERIAL</SMALL> column, respectively.
1144
1145     <P>Alternatively, you could retrieve the assigned
1146     <SMALL>SERIAL</SMALL> value with the <I>currval()</I> function
1147     <I>after</I> it was inserted by default, e.g.,</P>
1148 <PRE>
1149     execute("INSERT INTO person (name) VALUES ('Blaise Pascal')");
1150     new_id = execute("SELECT currval('person_id_seq')");
1151 </PRE>
1152
1153     Finally, you could use the <A href="#4.16"><SMALL>OID</SMALL></A>
1154     returned from the <SMALL>INSERT</SMALL> statement to look up the
1155     default value, though this is probably the least portable approach.
1156     In Perl, using DBI with Edmund Mergl's DBD::Pg module, the oid
1157     value is made available via <I>$sth-&gt;{pg_oid_status}</I> after
1158     <I>$sth-&gt;execute()</I>.
1159
1160     <H4><A name="4.15.3">4.15.3</A>) Don't <I>currval()</I> and
1161     <I>nextval()</I> lead to a race condition with other users?</H4>
1162
1163     <P>No. <I>currval()</I> returns the current value assigned by your
1164     backend, not by all users.</P>
1165
1166     <H4><A name="4.15.4">4.15.4</A>) Why aren't my sequence numbers
1167     reused on transaction abort? Why are there gaps in the numbering of
1168     my sequence/SERIAL column?</H4>
1169
1170     <P>To improve concurrency, sequence values are given out to running
1171     transactions as needed and are not locked until the transaction
1172     completes. This causes gaps in numbering from aborted
1173     transactions.</P>
1174
1175     <H4><A name="4.16">4.16</A>) What is an <SMALL>OID</SMALL>? What is
1176     a <SMALL>TID</SMALL>?</H4>
1177
1178     <P><SMALL>OID</SMALL>s are PostgreSQL's answer to unique row ids.
1179     Every row that is created in PostgreSQL gets a unique
1180     <SMALL>OID</SMALL>. All <SMALL>OID</SMALL>s generated during
1181     <I>initdb</I> are less than 16384 (from
1182     <I>include/access/transam.h</I>). All user-created
1183     <SMALL>OID</SMALL>s are equal to or greater than this. By default,
1184     all these <SMALL>OID</SMALL>s are unique not only within a table or
1185     database, but unique within the entire PostgreSQL installation.</P>
1186
1187     <P>PostgreSQL uses <SMALL>OID</SMALL>s in its internal system
1188     tables to link rows between tables. These <SMALL>OID</SMALL>s can
1189     be used to identify specific user rows and used in joins. It is
1190     recommended you use column type <SMALL>OID</SMALL> to store
1191     <SMALL>OID</SMALL> values. You can create an index on the
1192     <SMALL>OID</SMALL> field for faster access.</P>
1193
1194     <P>O<SMALL>ID</SMALL>s are assigned to all new rows from a central
1195     area that is used by all databases. If you want to change the
1196     <SMALL>OID</SMALL> to something else, or if you want to make a copy
1197     of the table, with the original <SMALL>OID</SMALL>s, there is no
1198     reason you can't do it:</P>
1199 <PRE>
1200         CREATE TABLE new_table(old_oid oid, mycol int);
1201         SELECT old_oid, mycol INTO new FROM old;
1202         COPY new TO '/tmp/pgtable';
1203         DELETE FROM new;
1204         COPY new WITH OIDS FROM '/tmp/pgtable';
1205 </PRE>
1206 <!--
1207     CREATE TABLE new_table (mycol int);
1208     INSERT INTO new_table (oid, mycol) SELECT oid, mycol FROM old_table;
1209 -->
1210     <P>O<SMALL>ID</SMALL>s are stored as 4-byte integers, and will
1211     overflow at 4 billion. No one has reported this ever happening, and
1212     we plan to have the limit removed before anyone does.</P>
1213
1214     <P>T<SMALL>ID</SMALL>s are used to identify specific physical rows
1215     with block and offset values. T<SMALL>ID</SMALL>s change after rows
1216     are modified or reloaded. They are used by index entries to point
1217     to physical rows.</P>
1218
1219     <H4><A name="4.17">4.17</A>) What is the meaning of some of the
1220     terms used in PostgreSQL?</H4>
1221
1222     <P>Some of the source code and older documentation use terms that
1223     have more common usage. Here are some:</P>
1224
1225     <UL>
1226       <LI>table, relation, class</LI>
1227
1228       <LI>row, record, tuple</LI>
1229
1230       <LI>column, field, attribute</LI>
1231
1232       <LI>retrieve, select</LI>
1233
1234       <LI>replace, update</LI>
1235
1236       <LI>append, insert</LI>
1237
1238       <LI><SMALL>OID</SMALL>, serial value</LI>
1239
1240       <LI>portal, cursor</LI>
1241
1242       <LI>range variable, table name, table alias</LI>
1243     </UL>
1244
1245     <P>A list of general database terms can be found at: <A href=
1246     "http://hea-www.harvard.edu/MST/simul/software/docs/pkgs/pgsql/glossary/glossary.html">http://hea-www.harvard.edu/MST/simul/software/docs/pkgs/pgsql/glossary/glossary.html</A></P>
1247
1248     <H4><A name="4.18">4.18</A>) Why do I get the error <I>"ERROR:
1249     Memory exhausted in AllocSetAlloc()"</I>?</H4>
1250
1251     <P>You probably have run out of virtual memory on your system,
1252     or your kernel has a low limit for certain resources. Try this
1253     before starting <I>postmaster</I>:</P>
1254 <PRE>
1255     ulimit -d 262144
1256     limit datasize 256m
1257 </PRE>
1258
1259     Depending on your shell, only one of these may succeed, but it will
1260     set your process data segment limit much higher and perhaps allow
1261     the query to complete. This command applies to the current process,
1262     and all subprocesses created after the command is run. If you are
1263     having a problem with the <SMALL>SQL</SMALL> client because the
1264     backend is returning too much data, try it before starting the
1265     client.
1266
1267     <H4><A name="4.19">4.19</A>) How do I tell what PostgreSQL version
1268     I am running?</H4>
1269
1270     <P>From <I>psql</I>, type <CODE>SELECT version();</CODE></P>
1271
1272     <H4><A name="4.20">4.20</A>) Why does my large-object operations
1273     get <I>"invalid large obj descriptor"</I>?</H4>
1274
1275     <P>You need to put <CODE>BEGIN WORK</CODE> and <CODE>COMMIT</CODE>
1276     around any use of a large object handle, that is, surrounding
1277     <CODE>lo_open</CODE> ... <CODE>lo_close.</CODE></P>
1278
1279     <P>Currently PostgreSQL enforces the rule by closing large object
1280     handles at transaction commit. So the first attempt to do anything
1281     with the handle will draw <I>invalid large obj descriptor</I>. So
1282     code that used to work (at least most of the time) will now
1283     generate that error message if you fail to use a transaction.</P>
1284
1285     <P>If you are using a client interface like <SMALL>ODBC</SMALL> you
1286     may need to set <CODE>auto-commit off.</CODE></P>
1287
1288     <H4><A name="4.21">4.21</A>) How do I create a column that will
1289     default to the current time?</H4>
1290
1291     <P>Use <I>CURRENT_TIMESTAMP</I>:</P>
1292 <PRE>
1293 <CODE>CREATE TABLE test (x int, modtime timestamp DEFAULT CURRENT_TIMESTAMP );
1294 </CODE>
1295 </PRE>
1296
1297     <H4><A name="4.22">4.22</A>) Why are my subqueries using
1298     <CODE><SMALL>IN</SMALL></CODE> so slow?</H4>
1299
1300     <P>Currently, we join subqueries to outer queries by sequentially
1301     scanning the result of the subquery for each row of the outer
1302     query. If the subquery returns only a few rows and the outer query
1303     returns many rows, <CODE><SMALL>IN</SMALL></CODE> is fastest.  To
1304     speed up other queries, replace <CODE>IN</CODE> with
1305     <CODE>EXISTS</CODE>:</P>
1306 <PRE>    SELECT *
1307     FROM tab
1308     WHERE col IN (SELECT subcol FROM subtab);
1309 </PRE>
1310     to:
1311 <PRE>    SELECT *
1312     FROM tab
1313     WHERE EXISTS (SELECT subcol FROM subtab WHERE subcol = col);
1314 </PRE>
1315
1316     For this to be fast, <CODE>subcol</CODE> should be an indexed column.
1317     This preformance problem will be fixed in 7.4.
1318
1319     <H4><A name="4.23">4.23</A>) How do I perform an outer join?</H4>
1320
1321     <P>PostgreSQL supports outer joins using the SQL standard syntax.
1322     Here are two examples:</P>
1323 <PRE>
1324     SELECT *
1325     FROM t1 LEFT OUTER JOIN t2 ON (t1.col = t2.col);
1326 </PRE>
1327     or 
1328 <PRE>
1329     SELECT *
1330     FROM t1 LEFT OUTER JOIN t2 USING (col);
1331 </PRE>
1332
1333     <P>These identical queries join t1.col to t2.col, and also return
1334     any unjoined rows in t1 (those with no match in t2). A
1335     <SMALL>RIGHT</SMALL> join would add unjoined rows of t2. A
1336     <SMALL>FULL</SMALL> join would return the matched rows plus all
1337     unjoined rows from t1 and t2. The word <SMALL>OUTER</SMALL> is
1338     optional and is assumed in <SMALL>LEFT</SMALL>,
1339     <SMALL>RIGHT</SMALL>, and <SMALL>FULL</SMALL> joins. Ordinary joins
1340     are called <SMALL>INNER</SMALL> joins.</P>
1341
1342     <P>In previous releases, outer joins can be simulated using
1343     <SMALL>UNION</SMALL> and <SMALL>NOT IN</SMALL>. For example, when
1344     joining <I>tab1</I> and <I>tab2</I>, the following query does an
1345     <I>outer</I> join of the two tables:<BR>
1346     <BR>
1347     </P>
1348 <PRE>
1349     SELECT tab1.col1, tab2.col2
1350     FROM tab1, tab2
1351     WHERE tab1.col1 = tab2.col1
1352     UNION ALL
1353     SELECT tab1.col1, NULL
1354     FROM tab1
1355     WHERE tab1.col1 NOT IN (SELECT tab2.col1 FROM tab2)
1356     ORDER BY col1
1357 </PRE>
1358
1359     <H4><A name="4.24">4.24</A>) How do I perform queries using
1360     multiple databases?</H4>
1361
1362     <P>There is no way to query a database other than the current one.
1363     Because PostgreSQL loads database-specific system catalogs, it is
1364     uncertain how a cross-database query should even behave.</P>
1365
1366     <P><I>contrib/dblink</I> allows cross-database queries using
1367     function calls. Of course, a client can make simultaneous
1368     connections to different databases and merge the results on the
1369     client side.</P>
1370
1371     <H4><A name="4.25">4.25</A>) How do I return multiple rows or
1372     columns from a function?</H4>
1373
1374     <P>In 7.3, you can easily return multiple rows or columns from a
1375     function,
1376     <a href="http://techdocs.postgresql.org/guides/SetReturningFunctions">
1377     http://techdocs.postgresql.org/guides/SetReturningFunctions</a>.
1378
1379     <H4><A name="4.26">4.26</A>) Why can't I reliably create/drop
1380     temporary tables in PL/PgSQL functions?</H4>
1381     <P>PL/PgSQL caches function contents, and an unfortunate side effect
1382     is that if a PL/PgSQL function accesses a temporary table, and that
1383     table is later dropped and recreated, and the function called
1384     again, the function will fail because the cached function contents
1385     still point to the old temporary table. The solution is to use
1386     <SMALL>EXECUTE</SMALL> for temporary table access in PL/PgSQL. This
1387     will cause the query to be reparsed every time.</P>
1388
1389     <H4><A name="4.27">4.27</A>) What replication options are available?
1390     </H4>
1391     <P>There are several master/slave replication options available.
1392     These allow only the master to make database changes and the slave
1393     can only do database reads. The bottom of <a
1394     href="http://gborg.PostgreSQL.org/genpage?replication_research">
1395     http://gborg.PostgreSQL.org/genpage?replication_research</a> lists
1396     them. A multi-master replication solution is being worked on at <a
1397     href="http://gborg.PostgreSQL.org/project/pgreplication/projdisplay.php">http://gborg.PostgreSQL.org/project/pgreplication/projdisplay.php</a>.</P>
1398
1399     <H4><A name="4.28">4.28</A>) What encryption options are available?
1400     </H4>
1401     <UL>
1402     <LI><I>contrib/pgcrypto</I> contains many encryption functions for
1403     use in <SMALL>SQL</SMALL> queries.</LI>
1404     <LI>The only way to encrypt transmission from the client to the
1405     server is by using <I>hostssl</I> in <I>pg_hba.conf</I>.</LI>
1406     <LI>Database user passwords are automatically encrypted when stored
1407     in version 7.3. In previous versions, you must enable the option
1408     <I>PASSWORD_ENCRYPTION</I> in <I>postgresql.conf</I>.</LI>
1409     <LI>The server can run using an encrypted file system.</LI>
1410     </UL>
1411
1412     <HR>
1413
1414     <H2 align="center">Extending PostgreSQL</H2>
1415
1416     <H4><A name="5.1">5.1</A>) I wrote a user-defined function. When I
1417     run it in <I>psql</I>, why does it dump core?</H4>
1418
1419     <P>The problem could be a number of things. Try testing your
1420     user-defined function in a stand-alone test program first.</P>
1421
1422     <H4><A name="5.2">5.2</A>) How can I contribute some nifty new
1423     types and functions to PostgreSQL?</H4>
1424
1425     <P>Send your extensions to the <I>pgsql-hackers</I> mailing list,
1426     and they will eventually end up in the <I>contrib/</I>
1427     subdirectory.</P>
1428
1429     <H4><A name="5.3">5.3</A>) How do I write a C function to return a
1430     tuple?</H4>
1431
1432     <P>In versions of PostgreSQL beginning with 7.3, table-returning
1433     functions are fully supported in C, PL/PgSQL, and SQL. See the
1434     Programmer's Guide for more information. An example of a
1435     table-returning function defined in C can be found in
1436     <I>contrib/tablefunc</I>.</P>
1437
1438     <H4><A name="5.4">5.4</A>) I have changed a source file. Why does
1439     the recompile not see the change?</H4>
1440
1441     <P>The <I>Makefiles</I> do not have the proper dependencies for
1442     include files. You have to do a <I>make clean</I> and then another
1443     <I>make</I>. If you are using <SMALL>GCC</SMALL> you can use the
1444     <I>--enable-depend</I> option of <I>configure</I> to have the
1445     compiler compute the dependencies automatically.</P>
1446   </BODY>
1447 </HTML>
1448