]> granicus.if.org Git - postgresql/log
postgresql
14 years agoFix two new-in-9.0 bugs in hstore.
Tom Lane [Thu, 16 Sep 2010 02:54:01 +0000 (02:54 +0000)]
Fix two new-in-9.0 bugs in hstore.

There was an incorrect Assert in hstoreValidOldFormat(), which would cause
immediate core dumps when attempting to work with pre-9.0 hstore data,
but of course only in an assert-enabled build.

Also, ghstore_decompress() incorrectly applied DatumGetHStoreP() to a datum
that wasn't actually an hstore, but rather a ghstore (ie, a gist signature
bitstring).  That used to be harmless, but could now result in misbehavior
if the hstore format conversion code happened to trigger.  In reality,
since ghstore is not marked toastable (and doesn't need to be), this
function is useless anyway; we can lobotomize it down to returning the
passed-in pointer.

Both bugs found by Andrew Gierth, though this isn't exactly his proposed
patch.

14 years agoAdd a compatibility note about plpgsql's treatment of SELECT INTO rec.fld
Tom Lane [Wed, 15 Sep 2010 17:45:57 +0000 (17:45 +0000)]
Add a compatibility note about plpgsql's treatment of SELECT INTO rec.fld
when fld is of composite type.  Per discussion of bug #5644 from Valentine
Gogichashvili.

14 years agoFix two typos in comments, spotted by Fujii Masao and Thom Brown
Heikki Linnakangas [Wed, 15 Sep 2010 13:58:22 +0000 (13:58 +0000)]
Fix two typos in comments, spotted by Fujii Masao and Thom Brown

14 years agoUse a latch to make startup process wake up and replay immediately when
Heikki Linnakangas [Wed, 15 Sep 2010 10:35:05 +0000 (10:35 +0000)]
Use a latch to make startup process wake up and replay immediately when
new WAL arrives via streaming replication. This reduces the latency, and
also allows us to use a longer polling interval, which is good for energy
efficiency.

We still need to poll to check for the appearance of a trigger file, but
the interval is now 5 seconds (instead of 100ms), like when waiting for
a new WAL segment to appear in WAL archive.

14 years agoSimplify Windows implementation of latches. There's no need to keep a
Heikki Linnakangas [Wed, 15 Sep 2010 10:06:21 +0000 (10:06 +0000)]
Simplify Windows implementation of latches. There's no need to keep a
dynamic pool of event handles, we can permanently assign one for each
shared latch. Thanks to that, we no longer need a separate shared memory
block for latches, and we don't need to know in advance how many shared
latches there is, so you no longer need to remember to update
NumSharedLatches when you introduce a new latch to the system.

14 years agoDon't call OwnLatch while holding a spinlock. OwnLatch can elog() under
Heikki Linnakangas [Wed, 15 Sep 2010 06:51:19 +0000 (06:51 +0000)]
Don't call OwnLatch while holding a spinlock. OwnLatch can elog() under
some "can't happen" scenarios, and spinlocks should only be held for
a few instructions anyway. As pointed out by Fujii Masao.

14 years agoFix join-removal logic for pseudoconstant and outerjoin-delayed quals.
Tom Lane [Tue, 14 Sep 2010 23:15:29 +0000 (23:15 +0000)]
Fix join-removal logic for pseudoconstant and outerjoin-delayed quals.

In these cases a qual can get marked with the removable rel in its
required_relids, but this is just to schedule its evaluation correctly, not
because it really depends on the rel.  We were assuming that, in effect,
we could throw away *all* quals so marked, which is nonsense.  Tighten up
the logic to be a little more paranoid about which quals belong to the
outer join being considered for removal, and arrange for all quals that
don't belong to be updated so they will still get evaluated correctly.

Also fix another problem that happened to be exposed by this test case,
which was that make_join_rel() was failing to notice some cases where
a constant-false qual could be used to prove a join relation empty.  If it's
a pushed-down constant false, then the relation is empty even if it's an
outer join, because the qual applies after the outer join expansion.

Per report from Nathan Grange.  Back-patch into 9.0.

14 years agoOops, the timeout argument to WaitLatchOrSocket is in microseconds, not
Heikki Linnakangas [Tue, 14 Sep 2010 13:35:14 +0000 (13:35 +0000)]
Oops, the timeout argument to WaitLatchOrSocket is in microseconds, not
milliseconds.

14 years agoDon't warn about an in-progress online backup, when we're recovering from
Heikki Linnakangas [Tue, 14 Sep 2010 08:05:33 +0000 (08:05 +0000)]
Don't warn about an in-progress online backup, when we're recovering from
an online backup instead of performing one. pg_ctl can detect that by
checking if recovery.conf exists.

Backup label file is renamed away early in recovery, so the window where
backup label exists during recovery is normally very small, but you can run
into it e.g if restore_command is set incorrectly and the startup process
never finds even the first WAL segment containing the checkpoint record to
start recovery from.

Fujii Masao with comments by me.

14 years agoAdd a comment noting that the owner_pid test in OwnLatch is just a sanity
Heikki Linnakangas [Mon, 13 Sep 2010 18:01:20 +0000 (18:01 +0000)]
Add a comment noting that the owner_pid test in OwnLatch is just a sanity
check, per request by Jeff Davis.

14 years agoElaborate on what gets stored in pg_authid.rolpasswd.
Robert Haas [Mon, 13 Sep 2010 17:02:34 +0000 (17:02 +0000)]
Elaborate on what gets stored in pg_authid.rolpasswd.

Also, add cross-reference from pg_shadow.passwd to pg_authid.rolpasswd and
fix a bit of markup I muffed in my previous commit.

Per discussion with Josh Kupershmidt.

14 years agoRemove prototype for non-existent function from walreceiver.h. Tidy up by
Heikki Linnakangas [Mon, 13 Sep 2010 10:14:25 +0000 (10:14 +0000)]
Remove prototype for non-existent function from walreceiver.h. Tidy up by
separating prototypes for functions in walreceiver.c and walreceiverfuncs.c
with comments.

14 years agoProcess options from the startup packed in walsender. Only few options
Heikki Linnakangas [Mon, 13 Sep 2010 09:00:30 +0000 (09:00 +0000)]
Process options from the startup packed in walsender. Only few options
make sense for walsender, but for example application_name and client_encoding
do. We still don't apply per-role settings from pg_db_role_setting, because
that would require connecting to a database to read the table.

Fujii Masao

14 years agoDon't try aligning comments for new archive_command Win32 doc example;
Bruce Momjian [Mon, 13 Sep 2010 01:35:46 +0000 (01:35 +0000)]
Don't try aligning comments for new archive_command Win32 doc example;
it doesn't work.

Backpatch to 9.0.X.

14 years agoLink from pg_shadow docs to pg_authid docs.
Robert Haas [Mon, 13 Sep 2010 01:23:35 +0000 (01:23 +0000)]
Link from pg_shadow docs to pg_authid docs.

Per discussion with Josh Kupershmidt.

14 years agoRe-add documentation for Win32 copy syntax for archive_command.
Bruce Momjian [Sun, 12 Sep 2010 13:47:12 +0000 (13:47 +0000)]
Re-add documentation for Win32 copy syntax for archive_command.

Backpatch to 9.0.X.

14 years agoSERIALIZABLE transactions are actually implemented beneath the covers with
Joe Conway [Sat, 11 Sep 2010 18:38:58 +0000 (18:38 +0000)]
SERIALIZABLE transactions are actually implemented beneath the covers with
transaction snapshots, i.e. a snapshot registered at the beginning of
a transaction. Change variable naming and comments to reflect this reality
in preparation for a future, truly serializable mode, e.g.
Serializable Snapshot Isolation (SSI).

For the moment transaction snapshots are still used to implement
SERIALIZABLE, but hopefully not for too much longer. Patch by Kevin
Grittner and Dan Ports with review and some minor wording changes by me.

14 years agoAdd missing #includes, needed on some platforms. This should make
Heikki Linnakangas [Sat, 11 Sep 2010 16:26:04 +0000 (16:26 +0000)]
Add missing #includes, needed on some platforms. This should make
the unixware buildfarm animals happy again.

14 years agoIntroduce latches. A latch is a boolean variable, with the capability to
Heikki Linnakangas [Sat, 11 Sep 2010 15:48:04 +0000 (15:48 +0000)]
Introduce latches. A latch is a boolean variable, with the capability to
wait until it is set. Latches can be used to reliably wait until a signal
arrives, which is hard otherwise because signals don't interrupt select()
on some platforms, and even when they do, there's race conditions.

On Unix, latches use the so called self-pipe trick under the covers to
implement the sleep until the latch is set, without race conditions. On
Windows, Windows events are used.

Use the new latch abstraction to sleep in walsender, so that as soon as
a transaction finishes, walsender is woken up to immediately send the WAL
to the standby. This reduces the latency between master and standby, which
is good.

Preliminary work by Fujii Masao. The latch implementation is by me, with
helpful comments from many people.

14 years agoCursor names in the backend are not case-sensitve. This change makes sure that
Michael Meskes [Fri, 10 Sep 2010 10:13:20 +0000 (10:13 +0000)]
Cursor names in the backend are not case-sensitve. This change makes sure that
ecpg also does not regard cursor names as case-sensitive.

Thanks to Zoltan Boszormenyi for the patch.

14 years agoRemove obsolete claim that gzip is needed while installing PG's documentation.
Tom Lane [Thu, 9 Sep 2010 17:19:40 +0000 (17:19 +0000)]
Remove obsolete claim that gzip is needed while installing PG's documentation.
It isn't, now that we ship the docs as loose files rather than a sub-tarball.

Also adjust the wording in a couple of places to make the lists of required
software read more consistently.

14 years agoDoc fixes:
Bruce Momjian [Thu, 9 Sep 2010 00:48:22 +0000 (00:48 +0000)]
Doc fixes:

- remove excessive table cells
- moving function parameters into function tags rather than having
  them being considered separate
- add return type column on XML2 contrib module functions list and
  removing return types from function
- add table header to XML2 contrib parameter table

Thom Brown

Backpatch to 9.0.X.

14 years agoAdd tip about building plpython 2 and 3. Fix link to Python docs.
Peter Eisentraut [Wed, 8 Sep 2010 20:35:51 +0000 (20:35 +0000)]
Add tip about building plpython 2 and 3.  Fix link to Python docs.

14 years agoClarify that surrogate pairs are not encoded in UTF-8 directly
Peter Eisentraut [Tue, 7 Sep 2010 18:54:09 +0000 (18:54 +0000)]
Clarify that surrogate pairs are not encoded in UTF-8 directly

14 years agoModify pg_upgrade to set/restore all environment variables related to
Bruce Momjian [Tue, 7 Sep 2010 14:10:30 +0000 (14:10 +0000)]
Modify pg_upgrade to set/restore all environment variables related to
collation/encoding to match English when reading controldata.  This now
matches the English variable setting used by pg_regress.c.

Backpatch to 9.0.X.

14 years agoGROUP BY can only infer functional dependency from non-deferrable primary keys.
Tom Lane [Sun, 5 Sep 2010 15:45:42 +0000 (15:45 +0000)]
GROUP BY can only infer functional dependency from non-deferrable primary keys.

Peter's original patch had this right, but I dropped the check while revising
the code to search pg_constraint instead of pg_index.  Spotted by Dean Rasheed.

14 years agoPad the ps_status display with nulls, not blanks, on Darwin.
Tom Lane [Sat, 4 Sep 2010 17:45:56 +0000 (17:45 +0000)]
Pad the ps_status display with nulls, not blanks, on Darwin.

A long time ago, this didn't work nicely, but it seems to work on all recent
versions of OS X.  The blank-pad method is less desirable since it results
in lots of extra space in ps' output.  Per Alexey Klyukin.

14 years agoInstall a data-type-based solution for protecting pg_get_expr(). REL9_1_ALPHA1
Tom Lane [Fri, 3 Sep 2010 01:34:55 +0000 (01:34 +0000)]
Install a data-type-based solution for protecting pg_get_expr().

Since the code underlying pg_get_expr() is not secure against malformed
input, and can't practically be made so, we need to prevent miscreants
from feeding arbitrary data to it.  We can do this securely by declaring
pg_get_expr() to take a new datatype "pg_node_tree" and declaring the
system catalog columns that hold nodeToString output to be of that type.
There is no way at SQL level to create a non-null value of type pg_node_tree.
Since the backend-internal operations that fill those catalog columns
operate below the SQL level, they are oblivious to the datatype relabeling
and don't need any changes.

14 years agoIn HEAD only, revert kluge solution for preventing misuse of pg_get_expr().
Tom Lane [Fri, 3 Sep 2010 01:26:52 +0000 (01:26 +0000)]
In HEAD only, revert kluge solution for preventing misuse of pg_get_expr().

A data-type-based solution, which is much cleaner and more bulletproof,
will follow shortly.  It seemed best to make this a separate commit though.

14 years ago9.1alpha1 release notes.
Tom Lane [Thu, 2 Sep 2010 17:30:06 +0000 (17:30 +0000)]
9.1alpha1 release notes.

14 years agoClean up description of ecpg's dtcvfmtasc function.
Tom Lane [Thu, 2 Sep 2010 14:57:04 +0000 (14:57 +0000)]
Clean up description of ecpg's dtcvfmtasc function.
Per KOIZUMI Satoru.

14 years agoClean up some bad grammar and punctuation in description of ecpg's decimal
Tom Lane [Thu, 2 Sep 2010 14:46:44 +0000 (14:46 +0000)]
Clean up some bad grammar and punctuation in description of ecpg's decimal
type.  Per KOIZUMI Satoru.

14 years agoFix up flushing of composite-type typcache entries to be driven directly by
Tom Lane [Thu, 2 Sep 2010 03:16:46 +0000 (03:16 +0000)]
Fix up flushing of composite-type typcache entries to be driven directly by
SI invalidation events, rather than indirectly through the relcache.

In the previous coding, we had to flush a composite-type typcache entry
whenever we discarded the corresponding relcache entry.  This caused problems
at least when testing with RELCACHE_FORCE_RELEASE, as shown in recent report
from Jeff Davis, and might result in real-world problems given the kind of
unexpected relcache flush that that test mechanism is intended to model.

The new coding decouples relcache and typcache management, which is a good
thing anyway from a structural perspective.  The cost is that we have to
search the typcache linearly to find entries that need to be flushed.  There
are a couple of ways we could avoid that, but at the moment it's not clear
it's worth any extra trouble, because the typcache contains very few entries
in typical operation.

Back-patch to 8.2, the same as some other recent fixes in this general area.
The patch could be carried back to 8.0 with some additional work, but given
that it's only hypothetical whether we're fixing any problem observable in
the field, it doesn't seem worth the work now.

14 years agoFix typo. Pointed out by Kevin Grittner.
Robert Haas [Thu, 2 Sep 2010 02:52:14 +0000 (02:52 +0000)]
Fix typo.  Pointed out by Kevin Grittner.

14 years agoClarify documentation of handling of null arguments for aggregates.
Tom Lane [Wed, 1 Sep 2010 18:22:29 +0000 (18:22 +0000)]
Clarify documentation of handling of null arguments for aggregates.
Per discussion.

14 years agoImprove release notes' description of Teodor's fixes for polygon overlaps
Tom Lane [Wed, 1 Sep 2010 15:14:42 +0000 (15:14 +0000)]
Improve release notes' description of Teodor's fixes for polygon overlaps
and contains operators.

14 years agoAdd missing markup for translatability
Alvaro Herrera [Tue, 31 Aug 2010 05:57:54 +0000 (05:57 +0000)]
Add missing markup for translatability

14 years agoCosmetic fixes for KnownAssignedXidsGetOldestXmin, per Fujii Masao.
Tom Lane [Mon, 30 Aug 2010 17:30:44 +0000 (17:30 +0000)]
Cosmetic fixes for KnownAssignedXidsGetOldestXmin, per Fujii Masao.

14 years agoFix oversight in RelFileNodeBackend patch: CreateFakeRelcacheEntry needs to
Tom Lane [Mon, 30 Aug 2010 16:46:23 +0000 (16:46 +0000)]
Fix oversight in RelFileNodeBackend patch: CreateFakeRelcacheEntry needs to
initialize the rd_backend field of a fake Relation entry correctly.
Fortunately, that is easy, since only non-temp relations should ever be
mentioned in the WAL stream.

14 years agoFix misleading DEBUG2 issued during RemoveOldXlogFiles()
Simon Riggs [Mon, 30 Aug 2010 15:37:41 +0000 (15:37 +0000)]
Fix misleading DEBUG2 issued during RemoveOldXlogFiles()

14 years agoTruncate subtrans after each restartpoint.
Simon Riggs [Mon, 30 Aug 2010 14:22:05 +0000 (14:22 +0000)]
Truncate subtrans after each restartpoint.
Issue reported by Harald Kolb, patch by Fujii Masao, review by me.

14 years agoTeach GetOldestXmin() about KnownAssignedXids during recovery.
Simon Riggs [Mon, 30 Aug 2010 14:16:48 +0000 (14:16 +0000)]
Teach GetOldestXmin() about KnownAssignedXids during recovery.
Very minor issue, though this is required for a later patch.
Reported by Heikki Linnakangas.

14 years agoFix typo in comment.
Heikki Linnakangas [Mon, 30 Aug 2010 06:33:22 +0000 (06:33 +0000)]
Fix typo in comment.

14 years agoReduce PANIC to ERROR in some occasionally-reported btree failure cases.
Tom Lane [Sun, 29 Aug 2010 19:33:14 +0000 (19:33 +0000)]
Reduce PANIC to ERROR in some occasionally-reported btree failure cases.

This patch changes _bt_split() and _bt_pagedel() to throw a plain ERROR,
rather than PANIC, for several cases that are reported from the field
from time to time:
* right sibling's left-link doesn't match;
* PageAddItem failure during _bt_split();
* parent page's next child isn't right sibling during _bt_pagedel().
In addition the error messages for these cases have been made a bit
more verbose, with additional values included.

The original motivation for PANIC here was to capture core dumps for
subsequent analysis.  But with so many users whose platforms don't capture
core dumps by default, or who are unprepared to analyze them anyway, it's hard
to justify a forced database restart when we can fairly easily detect the
problems before we've reached the critical sections where PANIC would be
necessary.  It is not currently known whether the reports of these messages
indicate well-hidden bugs in Postgres, or are a result of storage-level
malfeasance; the latter possibility suggests that we ought to try to be more
robust even if there is a bug here that's ultimately found.

Backpatch to 8.2.  The code before that is sufficiently different that
it doesn't seem worth the trouble to back-port further.

14 years agoRemove obsolete remark that PQprepare() is more flexible than PREPARE.
Tom Lane [Sun, 29 Aug 2010 15:19:05 +0000 (15:19 +0000)]
Remove obsolete remark that PQprepare() is more flexible than PREPARE.

Spotted by Dmitriy Igrishin.  Back-patch to 8.2, which is when the PREPARE
statement was improved to allow parameter types to be omitted.

14 years agoInsert additional compiler placation into objectaddress.c.
Robert Haas [Fri, 27 Aug 2010 21:31:19 +0000 (21:31 +0000)]
Insert additional compiler placation into objectaddress.c.

Peter Eisentraut reports that some bits of the "address" variable
in get_object_address() give "may be used uninitialized" warnings;
this likes the only excuse his compiler could have for thinking
that's possible.

14 years agoSmall refactoring of makeVar() from a TargetEntry
Peter Eisentraut [Fri, 27 Aug 2010 20:30:08 +0000 (20:30 +0000)]
Small refactoring of makeVar() from a TargetEntry

14 years agoRewrite comment code for better modularity, and add necessary locking.
Robert Haas [Fri, 27 Aug 2010 11:47:41 +0000 (11:47 +0000)]
Rewrite comment code for better modularity, and add necessary locking.

Review by Alvaro Herrera, KaiGai Kohei, and Tom Lane.

14 years agoDocument the existence of the socket lock file under unix_socket_directory,
Tom Lane [Thu, 26 Aug 2010 22:00:19 +0000 (22:00 +0000)]
Document the existence of the socket lock file under unix_socket_directory,
which is perhaps not a terribly good spot for it but there doesn't seem to be
a better place.  Also add a source-code comment pointing out a couple reasons
for having a separate lock file.  Per suggestion from Greg Smith.

14 years agoExplain automatic creation (or lack of it) of indexes for the various types
Tom Lane [Thu, 26 Aug 2010 21:08:35 +0000 (21:08 +0000)]
Explain automatic creation (or lack of it) of indexes for the various types
of constraints.

Kevin Grittner

14 years agoUpdate time zone data files to tzdata release 2010l: DST law changes in
Tom Lane [Thu, 26 Aug 2010 19:58:36 +0000 (19:58 +0000)]
Update time zone data files to tzdata release 2010l: DST law changes in
Egypt and Palestine.  Added new names for two Micronesian timezones:
Pacific/Chuuk is now preferred over Pacific/Truk (and the preferred
abbreviation is CHUT not TRUT) and Pacific/Pohnpei is preferred over
Pacific/Ponape.  Historical corrections for Finland.

14 years agoImprove wording for privilege description on certain failure messages; the
Alvaro Herrera [Thu, 26 Aug 2010 19:49:08 +0000 (19:49 +0000)]
Improve wording for privilege description on certain failure messages; the
original misleadingly suggests that only access is meant, causing confusion.
Per recent trouble report by Robert McGehee on pgsql-admin.

14 years agoRemove duplicate translatable phrase
Alvaro Herrera [Thu, 26 Aug 2010 19:23:41 +0000 (19:23 +0000)]
Remove duplicate translatable phrase

14 years agoFix ExecMakeTableFunctionResult to verify that all rows returned by a SRF
Tom Lane [Thu, 26 Aug 2010 18:54:37 +0000 (18:54 +0000)]
Fix ExecMakeTableFunctionResult to verify that all rows returned by a SRF
returning "record" actually do have the same rowtype.  This is needed because
the parser can't realistically enforce that they will all have the same typmod,
as seen in a recent example from David Wheeler.

Back-patch to 8.0, which is as far back as we have the notion of RECORD
subtypes being distinguished by typmod.  Wheeler's example depends on
8.4-and-up features, but I suspect there may be ways to provoke similar
failures before 8.4.

14 years agoDon't auto-create the subdirectories holding built documentation in a VPATH
Tom Lane [Thu, 26 Aug 2010 18:34:37 +0000 (18:34 +0000)]
Don't auto-create the subdirectories holding built documentation in a VPATH
build tree.  If we actually build the docs in the VPATH tree, those dirs
will get created then; but if they're present and empty, they capture the
vpathsearch searches in "make install", preventing installation of prebuilt
docs that might exist in the source tree.  Per bug #5595 from Dmtiriy Igrishin.
Fix based on idea from Peter Eisentraut.

14 years agoRemove docs for "Incrementally Updated Backups" because it was of
Bruce Momjian [Wed, 25 Aug 2010 23:55:54 +0000 (23:55 +0000)]
Remove docs for "Incrementally Updated Backups" because it was of
questionable reliability;  information moved to a wiki:

http://wiki.postgresql.org/wiki/Incrementally_Updated_Backups

Backpatch to 9.0.

14 years agoDocument filtering dictionaries in textsearch.sgml.
Tom Lane [Wed, 25 Aug 2010 21:42:55 +0000 (21:42 +0000)]
Document filtering dictionaries in textsearch.sgml.

While at it, copy-edit the description of prefix-match marker support in
synonym dictionaries, and clarify the description of the default unaccent
dictionary a bit more.

14 years agoImprove hint message for ENOMEM failure from shmget().
Tom Lane [Wed, 25 Aug 2010 20:10:55 +0000 (20:10 +0000)]
Improve hint message for ENOMEM failure from shmget().

It turns out that some platforms return ENOMEM for a request that violates
SHMALL, whereas we were assuming that ENOSPC would always be used for that.
Apparently the latter is a Linuxism while ENOMEM is the BSD tradition.
Extend the ENOMEM hint to suggest that raising SHMALL might be needed.
Per gripe from A.M.

Backpatch to 9.0, but not further, because this doesn't seem important
enough to warrant creating extra translation work in the stable branches.
(If it were, we'd have figured this out years ago.)

14 years agoUpdate release notes, per comments from Simon Riggs.
Bruce Momjian [Wed, 25 Aug 2010 19:41:38 +0000 (19:41 +0000)]
Update release notes, per comments from Simon Riggs.

14 years agoCatch null pointer returns from PyCObject_AsVoidPtr and PyCObject_FromVoidPtr
Peter Eisentraut [Wed, 25 Aug 2010 19:37:56 +0000 (19:37 +0000)]
Catch null pointer returns from PyCObject_AsVoidPtr and PyCObject_FromVoidPtr

This is reproducibly possible in Python 2.7 if the user turned
PendingDeprecationWarning into an error, but it's theoretically also possible
in earlier versions in case of exceptional conditions.

backpatched to 8.0

14 years agoAdd missing description of reloftype field
Peter Eisentraut [Wed, 25 Aug 2010 18:18:41 +0000 (18:18 +0000)]
Add missing description of reloftype field

14 years agoDocs review for unaccent: fix grammar, markup, etc.
Tom Lane [Wed, 25 Aug 2010 02:12:00 +0000 (02:12 +0000)]
Docs review for unaccent: fix grammar, markup, etc.

14 years agoAvoid passing signed chars to <ctype.h> functions ... same old
Tom Lane [Wed, 25 Aug 2010 00:53:37 +0000 (00:53 +0000)]
Avoid passing signed chars to <ctype.h> functions ... same old
portability mistake as always.  Per buildfarm member pika.

14 years agoUpdate 9.0 release notes for changes since beta4.
Tom Lane [Wed, 25 Aug 2010 00:47:57 +0000 (00:47 +0000)]
Update 9.0 release notes for changes since beta4.

Note: as usual, bug fixes that were also applied in back branches are not
considered material to include in a new major release's notes.

14 years agoFurther editing of release notes.
Tom Lane [Tue, 24 Aug 2010 23:45:32 +0000 (23:45 +0000)]
Further editing of release notes.

14 years agoMake EXPLAIN show the function call expression of a FunctionScan plan node,
Tom Lane [Tue, 24 Aug 2010 21:20:36 +0000 (21:20 +0000)]
Make EXPLAIN show the function call expression of a FunctionScan plan node,
but only in VERBOSE mode.  Per discussion.

14 years agoWhen in automatic dependency mode, never delete any intermediate
Peter Eisentraut [Tue, 24 Aug 2010 18:06:12 +0000 (18:06 +0000)]
When in automatic dependency mode, never delete any intermediate
files automatically.  Otherwise, the following could happen: When
starting from a clean source tree, the first build would delete the
intermediate file, but also create the dependency file, which
mentions the intermediate file, thus making it non-intermediate.
The second build will then need to rebuild the now non-intermediate
missing file.  So the second build will do work even though nothing
had changed.  One place where this happens is the .c -> .o -> .so
chain for some contrib modules.

14 years agoFix awkward wording in Incrementally Updated Backups docs.
Bruce Momjian [Tue, 24 Aug 2010 15:22:12 +0000 (15:22 +0000)]
Fix awkward wording in Incrementally Updated Backups docs.

Backpatch to 9.0.X.

14 years agoClarifications for 9.0 release notes
Bruce Momjian [Tue, 24 Aug 2010 14:46:29 +0000 (14:46 +0000)]
Clarifications for 9.0 release notes

Josh Berkus

14 years agoUpdate autovacuum_freeze_max_age documentation to mention that the
Bruce Momjian [Tue, 24 Aug 2010 13:32:25 +0000 (13:32 +0000)]
Update autovacuum_freeze_max_age documentation to mention that the
default is low because of pg_clog file removal.

Backpatch to 9.0.X.

14 years agoAdd string functions: concat(), concat_ws(), left(), right(), and reverse().
Itagaki Takahiro [Tue, 24 Aug 2010 06:30:44 +0000 (06:30 +0000)]
Add string functions: concat(), concat_ws(), left(), right(), and reverse().

Pavel Stehule, reviewed by me.

14 years agoMarginal code cleanup for streaming replication.
Tom Lane [Mon, 23 Aug 2010 17:20:01 +0000 (17:20 +0000)]
Marginal code cleanup for streaming replication.

There is no reason that proc.c should have to get involved in this dirty hack
for letting the postmaster know which children are walsenders.  Revert that
file to the way it was, and confine the kluge to pmsignal.c and postmaster.c.

14 years agoMake pg_archivecleanup log messages more consistent.
Tom Lane [Mon, 23 Aug 2010 02:56:24 +0000 (02:56 +0000)]
Make pg_archivecleanup log messages more consistent.

Erik Rijkers

14 years agoMake an editorial pass over the 9.0 release notes.
Tom Lane [Mon, 23 Aug 2010 02:43:25 +0000 (02:43 +0000)]
Make an editorial pass over the 9.0 release notes.

This is mostly about grammar, style, and presentation, though I did find
a few small factual errors.

14 years agoDocument that autovacuum_freeze_max_age is used for pg_clog recycling.
Bruce Momjian [Sun, 22 Aug 2010 02:37:32 +0000 (02:37 +0000)]
Document that autovacuum_freeze_max_age is used for pg_clog recycling.
We already mentioned xid wraparound.

14 years agoUse a non-locale-dependent definition of isspace() in array_in/array_out.
Tom Lane [Sat, 21 Aug 2010 16:55:51 +0000 (16:55 +0000)]
Use a non-locale-dependent definition of isspace() in array_in/array_out.

array_in discards unquoted leading and trailing whitespace in array values,
while array_out is careful to quote array elements that contain whitespace.
This is problematic when the definition of "whitespace" varies between
locales: array_in could drop characters that were meant to be part of the
value.  To avoid that, lock down "whitespace" to mean only the traditional
six ASCII space characters.

This change also works around a bug in OS X and some older BSD systems, in
which isspace() could return true for character fragments in UTF8 locales.
(There may be other places in PG where that bug could cause problems, but
this is the only one complained of so far; see recent report from Steven
Schlansker.)

Back-patch to 9.0, but not further.  Given the lack of previous reports
of trouble, changing this behavior in stable branches seems to offer
more risk of breaking applications than reward of avoiding problems.

14 years agoImprove parallel restore's ability to cope with selective restore (-L option).
Tom Lane [Sat, 21 Aug 2010 13:59:44 +0000 (13:59 +0000)]
Improve parallel restore's ability to cope with selective restore (-L option).

The original coding tended to break down in the face of modified restore
orders, as shown in bug #5626 from Albert Ullrich, because it would flip over
into parallel-restore operation too soon.  That causes problems because we
don't have sufficient dependency information in dump archives to allow safe
parallel processing of SECTION_PRE_DATA items.  Even if we did, it's probably
undesirable to allow that to override the commanded restore order.

To fix the problem of omitted items causing unexpected changes in restore
order, tweak SortTocFromFile so that omitted items end up at the head of
the list not the tail.  This ensures that they'll be examined and their
dependencies will be marked satisfied before we get to any interesting
items.

In HEAD and 9.0, we can easily change restore_toc_entries_parallel so that
all SECTION_PRE_DATA items are guaranteed to be processed in the initial
serial-restore loop, and hence in commanded order.  Only DATA and POST_DATA
items are candidates for parallel processing.  For them there might be
variations from the commanded order because of parallelism, but we should
do it in a safe order thanks to dependencies.

In 8.4 it's much harder to make such a guarantee.  I settled for not
letting the initial loop break out into parallel processing mode if
it sees a DATA/POST_DATA item that's not to be restored; this at least
prevents a non-restorable item from causing premature exit from the loop.
This means that 8.4 will be more likely to fail given a badly-ordered -L
list than 9.x, but we don't really promise any such thing will work anyway.

14 years agoAdjust regression tests for previous commit, that I forgot
Magnus Hagander [Sat, 21 Aug 2010 13:18:02 +0000 (13:18 +0000)]
Adjust regression tests for previous commit, that I forgot
to include...

14 years agoAdd vacuum and analyze counters to pg_stat_*_tables views.
Magnus Hagander [Sat, 21 Aug 2010 10:59:17 +0000 (10:59 +0000)]
Add vacuum and analyze counters to pg_stat_*_tables views.

14 years agoAdd missing processing of OptTemp in CREATE IF NOT EXISTS variant
Tom Lane [Fri, 20 Aug 2010 14:55:05 +0000 (14:55 +0000)]
Add missing processing of OptTemp in CREATE IF NOT EXISTS variant
for typed tables.  Noted by Robert Haas.

14 years agoAvoid saying "random" when randomness is not actually meant.
Tom Lane [Fri, 20 Aug 2010 13:59:45 +0000 (13:59 +0000)]
Avoid saying "random" when randomness is not actually meant.
Per Thom Brown.

14 years agoRemove the isLocalBuf argument from ReadBuffer_common.
Robert Haas [Fri, 20 Aug 2010 01:07:50 +0000 (01:07 +0000)]
Remove the isLocalBuf argument from ReadBuffer_common.

Since an SMgrRelation now knows whether or not the underlying relation is
temporary, there's no point in also passing that information via an
additional argument.

14 years agoBring some sanity to the trace_recovery_messages code and docs.
Tom Lane [Thu, 19 Aug 2010 22:55:01 +0000 (22:55 +0000)]
Bring some sanity to the trace_recovery_messages code and docs.
Per gripe from Fujii Masao, though this is not exactly his proposed patch.
Categorize as DEVELOPER_OPTIONS and set context PGC_SIGHUP, as per Fujii,
but set the default to LOG because higher values aren't really sensible
(see the code for trace_recovery()).  Fix the documentation to agree with
the code and to try to explain what the variable actually does.  Get rid
of no-op calls trace_recovery(LOG), which accomplish nothing except to
demonstrate that this option confuses even its author.

14 years agoAllow USING and INTO clauses of plpgsql's EXECUTE to appear in either order.
Tom Lane [Thu, 19 Aug 2010 18:57:57 +0000 (18:57 +0000)]
Allow USING and INTO clauses of plpgsql's EXECUTE to appear in either order.

Aside from being more forgiving, this prevents a rather surprising misbehavior
when the "wrong" order was used: the old code didn't throw a syntax error,
but absorbed the INTO clause into the last USING expression, which then did
strange things downstream.

Intentionally not changing the documentation; we'll continue to advertise
only the "standard" clause order.

Backpatch to 8.4, where the USING clause was added to EXECUTE.

14 years agoKeep exec_simple_check_plan() from thinking "SELECT foo INTO bar" is simple.
Tom Lane [Thu, 19 Aug 2010 18:10:48 +0000 (18:10 +0000)]
Keep exec_simple_check_plan() from thinking "SELECT foo INTO bar" is simple.

It's not clear if this situation can occur in plpgsql other than via the
EXECUTE USING case Heikki illustrated, which I will shortly close off.
However, ignoring the intoClause if it's there is surely wrong, so let's
patch it for safety.

Backpatch to 8.3, which is as far back as this code has a PlannedStmt
to deal with.  There might be another way to make an equivalent test
before that, but since this is just preventing hypothetical bugs,
I'm not going to obsess about it.

14 years agoBe a bit less cavalier with both the code and the comment for UNKNOWN fix.
Tom Lane [Thu, 19 Aug 2010 17:31:43 +0000 (17:31 +0000)]
Be a bit less cavalier with both the code and the comment for UNKNOWN fix.

14 years agoRevert patch to coerce 'unknown' type parameters in the backend. As Tom
Heikki Linnakangas [Thu, 19 Aug 2010 16:54:43 +0000 (16:54 +0000)]
Revert patch to coerce 'unknown' type parameters in the backend. As Tom
pointed out, it would need a 2nd pass after the whole query is processed to
correctly check that an unknown Param is coerced to the same target type
everywhere. Adding the 2nd pass would add a lot more code, which doesn't
seem worth the risk given that there isn't much of a use case for passing
unknown Params in the first place. The code would work without that check,
but it might be confusing and the behavior would be different from the
varparams case.

Instead, just coerce all unknown params in a PL/pgSQL USING clause to text.
That's simple, and is usually what users expect.

Revert the patch in CVS HEAD and master, and backpatch the new solution to
8.4. Unlike the previous solution, this applies easily to 8.4 too.

14 years agoAllocate local buffers in a context of their own, rather than dumping them
Tom Lane [Thu, 19 Aug 2010 16:16:20 +0000 (16:16 +0000)]
Allocate local buffers in a context of their own, rather than dumping them
into TopMemoryContext.  This makes no functional difference, but makes it
easier to see what the space is being used for in MemoryContextStats dumps.
Per a recent example in which I was surprised by the size of TopMemoryContext.

14 years agoFix possible corruption of AfterTriggerEventLists in subtransaction rollback.
Tom Lane [Thu, 19 Aug 2010 15:46:18 +0000 (15:46 +0000)]
Fix possible corruption of AfterTriggerEventLists in subtransaction rollback.

afterTriggerInvokeEvents failed to adjust events->tailfree when truncating
the last chunk of an event list.  This could result in the data being
"de-truncated" by afterTriggerRestoreEventList during a subsequent
subtransaction abort.  Even that wouldn't kill us, because the re-added data
would just be events marked DONE --- unless the data had been partially
overwritten by new events.  Then we might crash, or in any case misbehave
(perhaps fire triggers twice, or fire triggers with the wrong event data).
Per bug #5622 from Thue Janus Kristensen.

Back-patch to 8.4 where the current trigger list representation was introduced.

14 years agoRemove extra newlines at end and beginning of files, add missing newlines
Peter Eisentraut [Thu, 19 Aug 2010 05:57:36 +0000 (05:57 +0000)]
Remove extra newlines at end and beginning of files, add missing newlines
at end of files.

14 years agoTidy up a few calls to smrgextend().
Robert Haas [Thu, 19 Aug 2010 02:58:37 +0000 (02:58 +0000)]
Tidy up a few calls to smrgextend().

In the new API introduced by my patch to include the backend ID in
temprel filenames, the last argument to smrgextend() became skipFsync
rather than isTemp, but these calls didn't get the memo.  It's not
really a problem to pass rel->rd_istemp rather than just plain false,
because smgrextend() now automatically skips the fsync for temprels
anyway, but this seems cleaner and saves some minute number of cycles.

14 years agoReset the per-output-tuple exprcontext each time through the main loop in
Tom Lane [Wed, 18 Aug 2010 21:52:24 +0000 (21:52 +0000)]
Reset the per-output-tuple exprcontext each time through the main loop in
ExecModifyTable().  This avoids memory leakage when trigger functions leave
junk behind in that context (as they more or less must).  Problem and solution
identified by Dean Rasheed.

I'm a bit concerned about the longevity of this solution --- once a plan can
have multiple ModifyTable nodes, we are very possibly going to have to do
something different.  But it should hold up for 9.0.

14 years agoRename utf2ucs() to utf8_to_unicode(), and export it so it can be used
Tom Lane [Wed, 18 Aug 2010 19:54:01 +0000 (19:54 +0000)]
Rename utf2ucs() to utf8_to_unicode(), and export it so it can be used
elsewhere.

Similarly rename the version in mbprint.c, not because this affects anything
but just to keep the two copies in exact sync.  There was some discussion of
having only one copy in src/port/ instead, but this function is so small
and unlikely to change that that seems like overkill.

Slightly editorialized version of a patch by Joseph Adams.  (The bug-fix
aspect of his patch was applied separately, and back-patched.)

14 years agoFix failure of "ALTER TABLE t ADD COLUMN c serial" when done by non-owner.
Tom Lane [Wed, 18 Aug 2010 18:35:21 +0000 (18:35 +0000)]
Fix failure of "ALTER TABLE t ADD COLUMN c serial" when done by non-owner.

The implicitly created sequence was created as owned by the current user,
who could be different from the table owner, eg if current user is a
superuser or some member of the table's owning role.  This caused sanity
checks in the SEQUENCE OWNED BY code to spit up.  Although possibly we
don't need those sanity checks, the safest fix seems to be to make sure
the implicit sequence is assigned the same owner role as the table has.
(We still do all permissions checks as the current user, however.)
Per report from Josh Berkus.

Back-patch to 9.0.  The bug goes back to the invention of SEQUENCE OWNED BY
in 8.2, but the fix requires an API change for DefineRelation(), which seems
to have potential for breaking third-party code if done in a minor release.
Given the lack of prior complaints, it's probably not worth fixing in the
stable branches.

14 years agoAdd missing handling of PlannedStmt.transientPlan in copyfuncs/outfuncs.
Tom Lane [Wed, 18 Aug 2010 15:21:54 +0000 (15:21 +0000)]
Add missing handling of PlannedStmt.transientPlan in copyfuncs/outfuncs.

_outPlannedStmt is only debug support, so the omission there was not very
serious, but the omission in _copyPlannedStmt is a real bug.  The consequence
would be that a copied plan tree would never be marked as a transient plan,
so that we would forget we ought to replan it after some not-yet-ready index
becomes ready for use.  This might explain some past complaints about indexes
created with CREATE INDEX CONCURRENTLY not being used right away.  Problem
spotted by Yeb Havinga.

Back-patch to 8.3, where the field was added.

14 years agoCoerce 'unknown' type parameters to the right type in the fixed-params
Heikki Linnakangas [Wed, 18 Aug 2010 12:20:15 +0000 (12:20 +0000)]
Coerce 'unknown' type parameters to the right type in the fixed-params
parse_analyze() function. That case occurs e.g with PL/pgSQL
EXECUTE ... USING 'stringconstant'.

The coercion with a CoerceViaIO node. The result is similar to the coercion
via input function performed for unknown constants in coerce_type(),
except that this happens at runtime.

Backpatch to 9.0. The issue is present in 8.4 as well, but the coerce param
hook infrastructure this patch relies on was introduced in 9.0. Given the
lack of user reports and harmlessness of the bug, it's not worth attempting
a different fix just for 8.4.

14 years agoApplied Zoltan's patch to fix a few memleaks in ecpg's pgtypeslib.
Michael Meskes [Tue, 17 Aug 2010 09:36:05 +0000 (09:36 +0000)]
Applied Zoltan's patch to fix a few memleaks in ecpg's pgtypeslib.

14 years agoRevert: looks like Binary Large OBject[sic] wasn't a misspelling
Peter Eisentraut [Tue, 17 Aug 2010 04:47:04 +0000 (04:47 +0000)]
Revert: looks like Binary Large OBject[sic] wasn't a misspelling

14 years agoSpell and markup checking
Peter Eisentraut [Tue, 17 Aug 2010 04:37:21 +0000 (04:37 +0000)]
Spell and markup checking

14 years agoArrange to fsync the contents of lockfiles (both postmaster.pid and the
Tom Lane [Mon, 16 Aug 2010 17:32:46 +0000 (17:32 +0000)]
Arrange to fsync the contents of lockfiles (both postmaster.pid and the
socket lockfile) when writing them.  The lack of an fsync here may well
explain two different reports we've seen of corrupted lockfile contents,
which doesn't particularly bother the running server but can prevent a
new server from starting if the old one crashes.  Per suggestion from
Alvaro.

Back-patch to all supported versions.