]> granicus.if.org Git - postgresql/log
postgresql
11 years agoFix two bugs introduced in the xlog.c split.
Heikki Linnakangas [Wed, 3 Oct 2012 06:08:13 +0000 (09:08 +0300)]
Fix two bugs introduced in the xlog.c split.

The comment explaining the naming of timeline history files was wrong, and
the history file was not being arhived.

Pointed out by Fujii Masao.

11 years agoImprove some LDAP authentication error messages
Peter Eisentraut [Wed, 3 Oct 2012 03:25:05 +0000 (23:25 -0400)]
Improve some LDAP authentication error messages

11 years agoIn pg_upgrade, use full path name for analyze_new_cluster.sh script.
Bruce Momjian [Wed, 3 Oct 2012 01:18:43 +0000 (21:18 -0400)]
In pg_upgrade, use full path name for analyze_new_cluster.sh script.

Backpatch to 9.2.

11 years agoWork around unportable behavior of malloc(0) and realloc(NULL, 0).
Tom Lane [Tue, 2 Oct 2012 21:31:40 +0000 (17:31 -0400)]
Work around unportable behavior of malloc(0) and realloc(NULL, 0).

On some platforms these functions return NULL, rather than the more common
practice of returning a pointer to a zero-sized block of memory.  Hack our
various wrapper functions to hide the difference by substituting a size
request of 1.  This is probably not so important for the callers, who
should never touch the block anyway if they asked for size 0 --- but it's
important for the wrapper functions themselves, which mistakenly treated
the NULL result as an out-of-memory failure.  This broke at least pg_dump
for the case of no user-defined aggregates, as per report from
Matthew Carrington.

Back-patch to 9.2 to fix the pg_dump issue.  Given the lack of previous
complaints, it seems likely that there is no live bug in previous releases,
even though some of these functions were in place before that.

11 years agoRefactor "ALTER some-obj SET SCHEMA" implementation
Alvaro Herrera [Thu, 27 Sep 2012 21:13:09 +0000 (18:13 -0300)]
Refactor "ALTER some-obj SET SCHEMA" implementation

Instead of having each object type implement the catalog munging
independently, centralize knowledge about how to do it and expand the
existing table in objectaddress.c with enough data about each object
type to support this operation.

Author: KaiGai Kohei
Tweaks by me
Reviewed by Robert Haas

11 years agoStandardize naming of malloc/realloc/strdup wrapper functions.
Tom Lane [Tue, 2 Oct 2012 19:35:10 +0000 (15:35 -0400)]
Standardize naming of malloc/realloc/strdup wrapper functions.

We had a number of variants on the theme of "malloc or die", with the
majority named like "pg_malloc", but by no means all.  Standardize on the
names pg_malloc, pg_malloc0, pg_realloc, pg_strdup.  Get rid of pg_calloc
entirely in favor of using pg_malloc0.

This is an essentially cosmetic change, so no back-patch.  (I did find
a couple of places where psql and pg_dump were using plain malloc or
strdup instead of the pg_ versions, but they don't look significant
enough to bother back-patching.)

11 years agoFix typo in previous warning-silencing patch.
Heikki Linnakangas [Tue, 2 Oct 2012 16:59:00 +0000 (19:59 +0300)]
Fix typo in previous warning-silencing patch.

Fujii Masao

11 years agoIn pg_upgrade, improve error reporting when the number of relation
Bruce Momjian [Tue, 2 Oct 2012 15:53:45 +0000 (11:53 -0400)]
In pg_upgrade, improve error reporting when the number of relation
objects does not match between the old and new clusters.

Backpatch to 9.2.

11 years agoAdjust pg_upgrade query so toast tables related to system catalog schema
Bruce Momjian [Tue, 2 Oct 2012 15:46:08 +0000 (11:46 -0400)]
Adjust pg_upgrade query so toast tables related to system catalog schema
entries are not dumped.   This fixes an error caused by
droping/recreating the information_schema, but other failures were also
possible.

Backpatch to 9.2.

11 years agoIn pg_upgrade, try to convert the locale names to canonical form before
Bruce Momjian [Tue, 2 Oct 2012 15:42:34 +0000 (11:42 -0400)]
In pg_upgrade, try to convert the locale names to canonical form before
comparison;  also report the old/new values if they don't match.

Backpatch to 9.2.

11 years agoSilence compiler warning about pointer type mismatch on some platforms.
Heikki Linnakangas [Tue, 2 Oct 2012 14:37:41 +0000 (17:37 +0300)]
Silence compiler warning about pointer type mismatch on some platforms.

timeval.t_sec is of type time_t, which is not always compatible with long.
I'm not sure if this was just harmless warning or a real bug, but this
fixes it, anyway.

11 years agoAllow a few seconds for Windows to catch up with a directory rename when checking...
Andrew Dunstan [Tue, 2 Oct 2012 14:40:57 +0000 (10:40 -0400)]
Allow a few seconds for Windows to catch up with a directory rename when checking pg_upgrade.

11 years agoAdd #includes needed on some platforms in the new files.
Heikki Linnakangas [Tue, 2 Oct 2012 14:19:52 +0000 (17:19 +0300)]
Add #includes needed on some platforms in the new files.

Hopefully this makes the *BSD buildfarm animals happy.

11 years agoSplit off functions related to timeline history files and XLOG archiving.
Heikki Linnakangas [Tue, 2 Oct 2012 10:37:19 +0000 (13:37 +0300)]
Split off functions related to timeline history files and XLOG archiving.

This is just refactoring, to make the functions accessible outside xlog.c.
A followup patch will make use of that, to allow fetching timeline history
files over streaming replication.

11 years agoFix access past end of string in date parsing.
Heikki Linnakangas [Tue, 2 Oct 2012 07:43:48 +0000 (10:43 +0300)]
Fix access past end of string in date parsing.

This affects date_in(), and a couple of other funcions that use DecodeDate().

Hitoshi Harada

11 years agoAdd C comment that IsBackendPid() is called by external modules, so we
Bruce Momjian [Mon, 1 Oct 2012 14:14:35 +0000 (10:14 -0400)]
Add C comment that IsBackendPid() is called by external modules, so we
don't accidentally remove it.

11 years agoRemove collations from generic ALTER test
Alvaro Herrera [Mon, 1 Oct 2012 13:42:03 +0000 (10:42 -0300)]
Remove collations from generic ALTER test

The error messages they generate are not portable enough.

Also, since the only point of the alter_generic_1 expected file was to
cover platforms with no collation support, it's now useless, so remove
it.

11 years agoThe max shared_buffers value that initdb will choose was raised, update docs.
Heikki Linnakangas [Mon, 1 Oct 2012 06:23:06 +0000 (09:23 +0300)]
The max shared_buffers value that initdb will choose was raised, update docs.

Jeff Janes

11 years agoProvide some static-assertion functionality on all compilers.
Tom Lane [Mon, 1 Oct 2012 02:46:29 +0000 (22:46 -0400)]
Provide some static-assertion functionality on all compilers.

On reflection (especially after noticing how many buildfarm critters have
__builtin_types_compatible_p but not _Static_assert), it seems like we
ought to try a bit harder to make these macros do something everywhere.
The initial cut at it would have been no help to code that is compiled only
on platforms without _Static_assert, for instance; and in any case not all
our contributors do their initial coding on the latest gcc version.

Some googling about static assertions turns up quite a bit of prior art
for making it work in compilers that lack _Static_assert.  The method
that seems closest to our needs involves defining a struct with a bit-field
that has negative width if the assertion condition fails.  There seems no
reliable way to get the error message string to be output, but throwing a
compile error with a confusing message is better than missing the problem
altogether.

In the same spirit, if we don't have __builtin_types_compatible_p we can at
least insist that the variable have the same width as the type.  This won't
catch errors such as "wrong pointer type", but it's far better than
nothing.

In addition to changing the macro definitions, adjust a
compile-time-constant Assert in contrib/hstore to use StaticAssertStmt,
so we can get some buildfarm coverage on whether that macro behaves sanely
or not.  There's surely more places that could be converted, but this is
the first one I came across.

11 years agoAdd infrastructure for compile-time assertions about variable types.
Tom Lane [Sun, 30 Sep 2012 18:38:31 +0000 (14:38 -0400)]
Add infrastructure for compile-time assertions about variable types.

Currently, the macros only work with fairly recent gcc versions, but there
is room to expand them to other compilers that have comparable features.

Heavily revised and autoconfiscated version of a patch by Andres Freund.

11 years agopsql: Mark table headers in \drds output for translation
Peter Eisentraut [Sun, 30 Sep 2012 00:47:05 +0000 (20:47 -0400)]
psql: Mark table headers in \drds output for translation

11 years agoDisable _FORTIFY_SOURCE with ICC
Peter Eisentraut [Sun, 30 Sep 2012 00:06:37 +0000 (20:06 -0400)]
Disable _FORTIFY_SOURCE with ICC

There are apparently some incompatibilities, per buildfarm.

11 years agoFix bugs in "restore.sql" script emitted in pg_dump tar output.
Tom Lane [Sat, 29 Sep 2012 21:56:37 +0000 (17:56 -0400)]
Fix bugs in "restore.sql" script emitted in pg_dump tar output.

The tar output module did some very ugly and ultimately incorrect hacking
on COPY commands to try to get them to work in the context of restoring a
deconstructed tar archive.  In particular, it would fail altogether for
table names containing any upper-case characters, since it smashed the
command string to lower-case before modifying it (and, just to add insult
to injury, did that in a way that would fail in multibyte encodings).
I don't see any particular value in being flexible about the case of the
command keywords, since the string will just have been created by
dumpTableData, so let's get rid of the whole case-folding thing.

Also, it doesn't seem to meet the POLA for the script to restore data only
in COPY mode, so add \i commands to make it have comparable behavior in
--inserts mode.

Noted while looking at the tar-output code in connection with Brian
Weaver's patch.

11 years agoAdd _FORTIFY_SOURCE to default compiler options for linux template
Peter Eisentraut [Sat, 29 Sep 2012 17:22:59 +0000 (13:22 -0400)]
Add _FORTIFY_SOURCE to default compiler options for linux template

Many distributors use this, so we might as well see the warnings as
well.

11 years agoPL/Python: Remove workaround for returning booleans in Python <2.3
Peter Eisentraut [Sat, 29 Sep 2012 16:55:42 +0000 (12:55 -0400)]
PL/Python: Remove workaround for returning booleans in Python <2.3

Since Python 2.2 is no longer supported, we can now use Py_RETURN_TRUE
and Py_RETURN_FALSE instead of the old workaround.

11 years agoPL/Python: Convert oid to long/int
Peter Eisentraut [Sat, 29 Sep 2012 16:41:00 +0000 (12:41 -0400)]
PL/Python: Convert oid to long/int

oid is a numeric type, so transform it to the appropriate Python
numeric type like the other ones.

11 years agoAdd alternative expected output for alter_generic
Alvaro Herrera [Sat, 29 Sep 2012 03:32:57 +0000 (00:32 -0300)]
Add alternative expected output for alter_generic

The original only expected file failed to consider machines without
non-default collation support.  Per buildfarm.

Also, move the test to another parallel group; the one it was originally
put in is already full according to comments in the schedule file.  Per
note from Tom Lane.

11 years agoRemove checks for now long outdated compilers.
Andrew Dunstan [Fri, 28 Sep 2012 23:43:50 +0000 (19:43 -0400)]
Remove checks for now long outdated compilers.

11 years agoAdd alter_generic regression test
Alvaro Herrera [Thu, 27 Sep 2012 20:21:11 +0000 (17:21 -0300)]
Add alter_generic regression test

This makes refactoring of parts of the ALTER command safe(r) because we
ensure no change in functionality.

Author: KaiGai Kohei

11 years agoFix tar files emitted by pg_dump and pg_basebackup to be POSIX conformant.
Tom Lane [Fri, 28 Sep 2012 19:19:15 +0000 (15:19 -0400)]
Fix tar files emitted by pg_dump and pg_basebackup to be POSIX conformant.

Both programs got the "magic" string wrong, causing standard-conforming tar
implementations to believe the output was just legacy tar format without
any POSIX extensions.  This doesn't actually matter that much, especially
since pg_dump failed to fill the POSIX fields anyway, but still there is
little point in emitting tar format if we can't be compliant with the
standard.  In addition, pg_dump failed to write the EOF marker correctly
(there should be 2 blocks of zeroes not just one), pg_basebackup put the
numeric group ID in the wrong place, and both programs had a pretty
brain-dead idea of how to compute the checksum.  Fix all that and improve
the comments a bit.

pg_restore is modified to accept either the correct POSIX-compliant "magic"
string or the previous value.  This part of the change will need to be
back-patched to avoid an unnecessary compatibility break when a previous
version tries to read tar-format output from 9.3 pg_dump.

Brian Weaver and Tom Lane

11 years agoProduce textual error messages for LDAP issues instead of numeric codes
Peter Eisentraut [Fri, 28 Sep 2012 00:22:50 +0000 (20:22 -0400)]
Produce textual error messages for LDAP issues instead of numeric codes

11 years agoFix btmarkpos/btrestrpos to handle array keys.
Tom Lane [Thu, 27 Sep 2012 20:59:59 +0000 (16:59 -0400)]
Fix btmarkpos/btrestrpos to handle array keys.

This fixes another error in commit 9e8da0f75731aaa7605cf4656c21ea09e84d2eb1.
I neglected to make the mark/restore functionality save and restore the
current set of array key values, which led to strange behavior if an
IndexScan with ScalarArrayOpExpr quals was used as the inner side of a
mergejoin.  Per bug #7570 from Melese Tesfaye.

11 years agoHave pg_terminate/cancel_backend not ERROR on non-existent processes
Alvaro Herrera [Thu, 27 Sep 2012 15:15:03 +0000 (12:15 -0300)]
Have pg_terminate/cancel_backend not ERROR on non-existent processes

This worked fine for superusers, but not for ordinary users trying to
cancel their own processes.  Tweak the order the checks are done in so
that we correctly return SIGNAL_BACKEND_ERROR (which current callers
know to ignore without erroring out) so that an ordinary user can loop
through a resultset without fearing that a process might exit in the
middle of said looping -- causing the remaining processes to go
unsignalled.

Incidentally, the last in-core caller of IsBackendPid() is now gone.
However, the function is exported and must remain in place, because
there are plenty of callers in external modules.

Author: Josh Kupershmidt

Reviewed by Noah Misch

11 years agoRun check_keywords.pl anytime gram.c is rebuilt.
Tom Lane [Thu, 27 Sep 2012 03:10:52 +0000 (23:10 -0400)]
Run check_keywords.pl anytime gram.c is rebuilt.

This script is a bit slow, but still it only takes a fraction of the time
the bison run does, so the overhead doesn't seem intolerable.  And we
definitely need some mechanical aid here, because people keep missing
the need to add new keywords to the appropriate keyword-list production.

While at it, I moved check_keywords.pl from src/tools into
src/backend/parser where it's actually used, and did some very minor
cleanup on the script.

11 years agopg_upgrade test: Disable fsync in initdb and postgres calls
Peter Eisentraut [Thu, 27 Sep 2012 02:38:15 +0000 (22:38 -0400)]
pg_upgrade test: Disable fsync in initdb and postgres calls

This mirrors the behavior of pg_regress and makes the test run much
faster.

11 years agoMake plpgsql's unreserved keywords more unreserved.
Tom Lane [Thu, 27 Sep 2012 02:27:36 +0000 (22:27 -0400)]
Make plpgsql's unreserved keywords more unreserved.

There were assorted places where unreserved keywords were not treated the
same as T_WORD (that is, a random unrecognized identifier).  Fix them.
It might not always be possible to allow this, but it is in all these
places, so I don't see any downside.

Per gripe from Jim Wilson.  Arguably this is a bug fix, but given the lack
of other complaints and the ease of working around it (just quote the
word), I won't risk back-patching.

11 years agoAdd new EVENT keyword to unreserved_keyword production.
Tom Lane [Thu, 27 Sep 2012 00:07:36 +0000 (20:07 -0400)]
Add new EVENT keyword to unreserved_keyword production.

Once again, somebody who ought to know better forgot this.  We really
need some automated cross-check on the keyword-list productions, I think.
Per report from Brian Weaver.

11 years agoFix examples of how to use "su" while starting the server.
Tom Lane [Tue, 25 Sep 2012 17:52:53 +0000 (13:52 -0400)]
Fix examples of how to use "su" while starting the server.

The syntax "su -c 'command' username" is not accepted by all versions of
su, for example not OpenBSD's.  More portable is "su username -c
'command'".  So change runtime.sgml to recommend that syntax.  Also,
add a -D switch to the OpenBSD example script, for consistency with other
examples.  Per Denis Lapshin and Gábor Hidvégi.

11 years agoAdd support for include_dir in config file.
Heikki Linnakangas [Mon, 24 Sep 2012 14:55:53 +0000 (17:55 +0300)]
Add support for include_dir in config file.

This allows easily splitting configuration into many files, deployed in a
directory.

Magnus Hagander, Greg Smith, Selena Deckelmann, reviewed by Noah Misch.

11 years agoPrevent emitting "ALTER VIEW foo SET ()".
Tom Lane [Mon, 24 Sep 2012 04:18:07 +0000 (00:18 -0400)]
Prevent emitting "ALTER VIEW foo SET ()".

Small oversight in commit 0f524ea0cf388a149f362e48a33c01662eeddc04 ...
per report from Grazvydas Valeika.

11 years agoRELEASE_NOTES: Fix typo
Alvaro Herrera [Sun, 23 Sep 2012 19:28:44 +0000 (16:28 -0300)]
RELEASE_NOTES: Fix typo

Jan Urbański

11 years agoUpdate translation updates instructions
Peter Eisentraut [Sun, 23 Sep 2012 02:14:38 +0000 (22:14 -0400)]
Update translation updates instructions

11 years agoMinor corrections for ALTER TYPE ADD VALUE IF NOT EXISTS patch.
Tom Lane [Sat, 22 Sep 2012 22:35:22 +0000 (18:35 -0400)]
Minor corrections for ALTER TYPE ADD VALUE IF NOT EXISTS patch.

Produce a NOTICE when the label already exists, for consistency with other
CREATE IF NOT EXISTS commands.  Also, fix the code so it produces something
more user-friendly than an index violation when the label already exists.
This not incidentally enables making a regression test that the previous
patch didn't make for fear of exposing an unpredictable OID in the results.
Also some wordsmithing on the documentation.

11 years agoFix docs typo
Andrew Dunstan [Sat, 22 Sep 2012 17:57:40 +0000 (13:57 -0400)]
Fix docs typo

11 years agoAllow IF NOT EXISTS when add a new enum label.
Andrew Dunstan [Sat, 22 Sep 2012 16:53:31 +0000 (12:53 -0400)]
Allow IF NOT EXISTS when add a new enum label.

If the label is already in the enum the statement becomes a no-op.
This will reduce the pain that comes from our not allowing this
operation inside a transaction block.

Andrew Dunstan, reviewed by Tom Lane and Magnus Hagander.

11 years agoImprove ruleutils.c's heuristics for dealing with rangetable aliases.
Tom Lane [Fri, 21 Sep 2012 23:03:10 +0000 (19:03 -0400)]
Improve ruleutils.c's heuristics for dealing with rangetable aliases.

The previous scheme had bugs in some corner cases involving tables that had
been renamed since a view was made.  This could result in dumped views that
failed to reload or reloaded incorrectly, as seen in bug #7553 from Lloyd
Albin, as well as in some pgsql-hackers discussion back in January.  Also,
its behavior for printing EXPLAIN plans was sometimes confusing because of
willingness to use the same alias for multiple RTEs (it was Ashutosh
Bapat's complaint about that aspect that started the January thread).

To fix, ensure that each RTE in the query has a unique unqualified alias,
by modifying the alias if necessary (we add "_" and digits as needed to
create a non-conflicting name).  Then we can just print its variables with
that alias, avoiding the confusing and bug-prone scheme of sometimes
schema-qualifying variable names.  In EXPLAIN, it proves to be expedient to
take the further step of only assigning such aliases to RTEs that are
actually referenced in the query, since the planner has a habit of
generating extra RTEs with the same alias in situations such as
inheritance-tree expansion.

Although this fixes a bug of very long standing, I'm hesitant to back-patch
such a noticeable behavioral change.  My experiments while creating a
regression test convinced me that actually incorrect output (as opposed to
confusing output) occurs only in very narrow cases, which is backed up by
the lack of previous complaints from the field.  So we may be better off
living with it in released branches; and in any case it'd be smart to let
this ripen awhile in HEAD before we consider back-patching it.

11 years agoParse pg_ident.conf when it's loaded, keeping it in memory in parsed format.
Heikki Linnakangas [Fri, 21 Sep 2012 14:41:22 +0000 (17:41 +0300)]
Parse pg_ident.conf when it's loaded, keeping it in memory in parsed format.

Similar changes were done to pg_hba.conf earlier already, this commit makes
pg_ident.conf to behave the same as pg_hba.conf.

This has two user-visible effects. First, if pg_ident.conf contains multiple
errors, the whole file is parsed at postmaster startup time and all the
errors are immediately reported. Before this patch, the file was parsed and
the errors were reported only when someone tries to connect using an
authentication method that uses the file, and the parsing stopped on first
error. Second, if you SIGHUP to reload the config files, and the new
pg_ident.conf file contains an error, the error is logged but the old file
stays in effect.

Also, regular expressions in pg_ident.conf are now compiled only once when
the file is loaded, rather than every time the a user is authenticated. That
should speed up authentication if you have a lot of regexps in the file.

Amit Kapila

11 years agoFix obsolete comment.
Heikki Linnakangas [Fri, 21 Sep 2012 12:21:31 +0000 (15:21 +0300)]
Fix obsolete comment.

load_hba and load_ident load stuff in a separate memory context nowadays,
not in the current memory context.

11 years agoRemove execdesc.h inclusion from tcopprot.h
Alvaro Herrera [Thu, 20 Sep 2012 14:03:04 +0000 (11:03 -0300)]
Remove execdesc.h inclusion from tcopprot.h

11 years agoUpdate release notes for 9.2.1, 9.1.6, 9.0.10, 8.4.14, 8.3.21.
Tom Lane [Wed, 19 Sep 2012 21:38:37 +0000 (17:38 -0400)]
Update release notes for 9.2.1, 9.1.6, 9.0.10, 8.4.14, 8.3.21.

11 years agoPut back AcceptInvalidationMessages calls in heap_openrv(_extended).
Tom Lane [Wed, 19 Sep 2012 21:10:37 +0000 (17:10 -0400)]
Put back AcceptInvalidationMessages calls in heap_openrv(_extended).

These calls were removed in commit 4240e429d0c2d889d0cda23c618f94e12c13ade7
as part of a general refactoring and improvement of DDL locking.  However,
there's a problem not solved by the rewrite, which is that GRANT/REVOKE
update pg_class.relacl without taking any particular lock on the target
table as such.  If another backend fails to do AcceptInvalidationMessages,
it won't notice a recently-committed change in ACLs.  Bug #7557 from Piotr
Czachur demonstrates that there's at least one code path in 9.2.0 in which
a command fails to do any AcceptInvalidationMessages calls at all, if the
current transaction already holds all the locks it will need.

Since we're hard up against the release deadline for 9.2.1, fix this by
putting back the AcceptInvalidationMessages calls in heap_openrv and
heap_openrv_extended, thereby restoring the historical behavior in this
area.  We ought to look for a more elegant and perhaps more bulletproof
solution, but there's no time for that right now.

11 years agoUpdate time zone data files to tzdata release 2012f.
Tom Lane [Wed, 19 Sep 2012 14:44:45 +0000 (10:44 -0400)]
Update time zone data files to tzdata release 2012f.

DST law changes in Fiji.

11 years agopg_upgrade: Remove check for pg_config
Peter Eisentraut [Wed, 19 Sep 2012 01:53:34 +0000 (21:53 -0400)]
pg_upgrade: Remove check for pg_config

It is no longer used, but was still being checked for.

bug #7548 from Reinhard Max

11 years agoFix planning of btree index scans using ScalarArrayOpExpr quals.
Tom Lane [Tue, 18 Sep 2012 16:20:34 +0000 (12:20 -0400)]
Fix planning of btree index scans using ScalarArrayOpExpr quals.

In commit 9e8da0f75731aaa7605cf4656c21ea09e84d2eb1, I improved btree
to handle ScalarArrayOpExpr quals natively, so that constructs like
"indexedcol IN (list)" could be supported by index-only scans.  Using
such a qual results in multiple scans of the index, under-the-hood.
I went to some lengths to ensure that this still produces rows in index
order ... but I failed to recognize that if a higher-order index column
is lacking an equality constraint, rescans can produce out-of-order
data from that column.  Tweak the planner to not expect sorted output
in that case.  Per trouble report from Robert McGehee.

11 years agoFix array_typanalyze to work for domains over arrays.
Tom Lane [Tue, 18 Sep 2012 04:31:40 +0000 (00:31 -0400)]
Fix array_typanalyze to work for domains over arrays.

Not sure how we missed this case, but we did.  Per bug #7551 from
Diego de Lima.

11 years agolibpq: Add missing directory to installdirs target
Peter Eisentraut [Tue, 18 Sep 2012 02:33:26 +0000 (22:33 -0400)]
libpq: Add missing directory to installdirs target

It prevented the libpq directory from being installable by itself.

11 years agoProvide adequate documentation of the "table_name *" notation.
Tom Lane [Mon, 17 Sep 2012 18:59:31 +0000 (14:59 -0400)]
Provide adequate documentation of the "table_name *" notation.

Somewhere along the line, somebody decided to remove all trace of this
notation from the documentation text.  It was still in the command syntax
synopses, or at least some of them, but with no indication what it meant.
This will not do, as evidenced by the confusion apparent in bug #7543;
even if the notation is now unnecessary, people will find it in legacy
SQL code and need to know what it does.

11 years agoPL/Python: Improve Python 3 regression test setup
Peter Eisentraut [Mon, 17 Sep 2012 02:26:33 +0000 (22:26 -0400)]
PL/Python: Improve Python 3 regression test setup

Currently, we are making mangled copies of plpython/{expected,sql} to
plpython/python3/{expected,sql}, and run the tests in
plpython/python3.  This has the disadvantage that the regression.diffs
file, if any, ends up in plpython/python3, which is not the normal
location.  If we instead make the mangled copies in
plpython/{expected,sql}/python3/, we can run the tests from the normal
directory, regression.diffs ends up the normal place, and the
pg_regress invocation also becomes a lot simpler.  It's also more
obvious at run time what's going on, because the tests end up being
named "python3/something" in the test output.

11 years agoRethink heuristics for choosing index quals for parameterized paths.
Tom Lane [Sun, 16 Sep 2012 21:57:18 +0000 (17:57 -0400)]
Rethink heuristics for choosing index quals for parameterized paths.

Some experimentation with examples similar to bug #7539 has convinced me
that indxpath.c's original implementation of parameterized-path generation
was several bricks shy of a load.  In general, if we are relying on a
particular outer rel or set of outer rels for a parameterized path, the
path should use every indexable join clause that's available from that rel
or rels.  Any join clauses that get left out of the indexqual will end up
getting applied as plain filter quals (qpquals), and that's generally a
significant loser compared to having the index AM enforce them.  (This is
particularly true with btree, which can skip the index scan entirely if
it can see that the given indexquals are mutually contradictory.)  The
original heuristics failed to ensure this, though, and were overly
complicated anyway.  Rewrite to make the code explicitly identify each
useful set of outer rels and then select all applicable join clauses for
each one.  The one plan that changes in the regression tests is in fact
for the better according to the planner's cost estimates.

(Note: this is not a correctness issue but just a matter of plan quality.
I don't yet know what is going on in bug #7539, but I don't expect this
change to fix that.)

11 years agoFix bufmgr so CHECKPOINT_END_OF_RECOVERY behaves as a shutdown checkpoint.
Simon Riggs [Sun, 16 Sep 2012 18:53:34 +0000 (19:53 +0100)]
Fix bufmgr so CHECKPOINT_END_OF_RECOVERY behaves as a shutdown checkpoint.
Recovery code documents clearly that a shutdown checkpoint is executed at
end of recovery - a shutdown checkpoint WAL record is written but the buffer
manager had been altered to treat end of recovery as a normal checkpoint.
This bug exacerbates the bufmgr relpersistence bug.

Bug spotted by Andres Freund, patch by me.

11 years agoFix documentation reference to maximum allowed for autovacuum_freeze_max_age.
Kevin Grittner [Sun, 16 Sep 2012 16:59:50 +0000 (11:59 -0500)]
Fix documentation reference to maximum allowed for autovacuum_freeze_max_age.

The documentation mentioned setting autovacuum_freeze_max_age to
"its maximum allowed value of a little less than two billion".
This led to a post asking about the exact maximum allowed value,
which is precisely two billion, not "a little less".

Based on question by Radovan Jablonovsky.  Backpatch to 8.3.

11 years agoAdjust largeobject_1.source per buildfarm.
Tom Lane [Sat, 15 Sep 2012 16:17:51 +0000 (12:17 -0400)]
Adjust largeobject_1.source per buildfarm.

Looks like the correct size of DOS-ified tenk.data is 680800 not 680801.
(I got the latter from a version of unix2dos that appends a trailing ^Z,
which evidently is not git's practice.)

11 years agopsql: Add more constraint completion
Peter Eisentraut [Sat, 15 Sep 2012 02:11:17 +0000 (22:11 -0400)]
psql: Add more constraint completion

- ALTER DOMAIN ... DROP/RENAME/VALIDATE CONSTRAINT
- ALTER TABLE ... RENAME/VALIDATE CONSTRAINT
- COMMENT ON CONSTRAINT
- SET CONSTRAINTS

11 years agoImprove largeobject regression test to show size of object read from file.
Tom Lane [Fri, 14 Sep 2012 22:24:53 +0000 (18:24 -0400)]
Improve largeobject regression test to show size of object read from file.

The idea here is to provide a more easily diagnosable failure diff when
the problem is that tenk.data has been DOS-ified, as I believe to be
happening currently on buildfarm member hamerkop.  Per suggestion from
Magnus Hagander.

Also, sync output/largeobject_1.source with current regression test.
Failure to do that in commit 3a0e4d36ebd7f477822d5bae41ba121a40d22ccc
turns out to be the real reason that hamerkop has been complaining.

11 years agoAdd a regression test case based on bug #7516.
Tom Lane [Fri, 14 Sep 2012 15:05:53 +0000 (11:05 -0400)]
Add a regression test case based on bug #7516.

Given what we now know about the cause of this bug, it seems like it'd
be a real good idea to include it in the plperl regression tests, so as
to catch any platform-specific cases where the code gets misoptimized.

11 years agoProperly set relpersistence for fake relcache entries.
Robert Haas [Fri, 14 Sep 2012 13:35:07 +0000 (09:35 -0400)]
Properly set relpersistence for fake relcache entries.

This can result in buffers failing to be properly flushed at
checkpoint time, leading to data loss.

Report, diagnosis, and patch by Jeff Davis.

11 years agoKeep plperl's current_call_data record on the stack, instead of palloc'ing.
Tom Lane [Thu, 13 Sep 2012 17:44:20 +0000 (13:44 -0400)]
Keep plperl's current_call_data record on the stack, instead of palloc'ing.

This at least saves some palloc overhead, and should furthermore reduce
the risk of anything going wrong, eg somebody resetting the context the
current_call_data record was in.

11 years agoFix case of window function + aggregate + GROUP BY expression.
Tom Lane [Thu, 13 Sep 2012 15:31:40 +0000 (11:31 -0400)]
Fix case of window function + aggregate + GROUP BY expression.

In commit 1bc16a946008a7cbb33a9a06a7c6765a807d7f59 I added a minor
optimization to drop the component variables of a GROUP BY expression from
the target list computed at the aggregation level of a query, if those Vars
weren't referenced elsewhere in the tlist.  However, I overlooked that the
window-function planning code would deconstruct such expressions and thus
need to have access to their component variables.  Fix it to not do that.

While at it, I removed the distinction between volatile and nonvolatile
window partition/order expressions: the code now computes all of them
at the aggregation level.  This saves a relatively expensive check for
volatility, and it's unclear that the resulting plan isn't better anyway.

Per bug #7535 from Louis-David Mitterrand.  Back-patch to 9.2.

11 years agoFix typo in comment for pclose_check() function.
Kevin Grittner [Thu, 13 Sep 2012 03:33:10 +0000 (22:33 -0500)]
Fix typo in comment for pclose_check() function.

Backpatch to 9.2.

Etsuro Fujit

11 years agoFix a couple other leftover uses of 'conisonly' terminology.
Tom Lane [Wed, 12 Sep 2012 19:12:24 +0000 (15:12 -0400)]
Fix a couple other leftover uses of 'conisonly' terminology.

11 years agoFix catalog docs to reflect connoinherit change in 09ff76f.
Andrew Dunstan [Wed, 12 Sep 2012 18:23:50 +0000 (14:23 -0400)]
Fix catalog docs to reflect connoinherit change in 09ff76f.

Backpatch to 9.2.

11 years agoFix logical errors in tsquery selectivity estimation for prefix queries.
Tom Lane [Wed, 12 Sep 2012 01:23:20 +0000 (21:23 -0400)]
Fix logical errors in tsquery selectivity estimation for prefix queries.

I made multiple errors in commit 97532f7c29468010b87e40a04f8daa3eb097f654,
stemming mostly from failure to think about the available frequency data
as being element frequencies not value frequencies (so that occurrences of
different elements are not mutually exclusive).  This led to sillinesses
such as estimating that "word" would match more rows than "word:*".

The choice to clamp to a minimum estimate of DEFAULT_TS_MATCH_SEL also
seems pretty ill-considered in hindsight, as it would frequently result in
an estimate much larger than the available data suggests.  We do need some
sort of clamp, since a pattern not matching any of the MCELEMs probably
still needs a selectivity estimate of more than zero.  I chose instead to
clamp to at least what a non-MCELEM word would be estimated as, preserving
the property that "word:*" doesn't get an estimate less than plain "word",
whether or not the word appears in MCELEM.

Per investigation of a gripe from Bill Martin, though I suspect that his
example case actually isn't even reaching the erroneous code.

Back-patch to 9.1 where this code was introduced.

11 years agoFix typo: lexemes misspelled in full text search docs.
Kevin Grittner [Wed, 12 Sep 2012 00:46:17 +0000 (19:46 -0500)]
Fix typo: lexemes misspelled in full text search docs.

Dan Scott

11 years agoAdd vcregress.pl target for checking pg_upgrade.
Andrew Dunstan [Mon, 10 Sep 2012 16:47:50 +0000 (12:47 -0400)]
Add vcregress.pl target for checking pg_upgrade.

This follows recent addition of Windows/Mingw testing.
Backpatch to Release 9.2 so we can get some buildfarm testing
going.

11 years agoMake plperl safe against functions that are redefined while running.
Tom Lane [Mon, 10 Sep 2012 00:32:54 +0000 (20:32 -0400)]
Make plperl safe against functions that are redefined while running.

validate_plperl_function() supposed that it could free an old
plperl_proc_desc struct immediately upon detecting that it was stale.
However, if a plperl function is called recursively, this could result
in deleting the struct out from under an outer invocation, leading to
misbehavior or crashes.  Add a simple reference-count mechanism to
ensure that such structs are freed only when the last reference goes
away.

Per investigation of bug #7516 from Marko Tiikkaja.  I am not certain
that this error explains his report, because he says he didn't have
any recursive calls --- but it's hard to see how else it could have
crashed right there.  In any case, this definitely fixes some problems
in the area.

Back-patch to all active branches.

11 years agoUse .NOTPARALLEL in ecpg/Makefile to avoid a gmake parallelism bug.
Tom Lane [Sun, 9 Sep 2012 19:08:32 +0000 (15:08 -0400)]
Use .NOTPARALLEL in ecpg/Makefile to avoid a gmake parallelism bug.

Investigation shows that some intermittent build failures in ecpg are the
result of a gmake bug that was reported quite some time ago:
http://savannah.gnu.org/bugs/?30653

Preventing parallel builds of the ecpg subdirectories seems to dodge the
bug.  Per yesterday's pgsql-hackers discussion, there are some other things
in the subdirectory makefiles that seem rather unsafe for parallel builds
too, but there's little point in fixing them as long as we have to work
around a make bug.

Back-patch to 9.1; parallel builds weren't very well supported before
that anyway.

11 years agoAdjust PL/Python regression tests some more for Python 3.3.
Tom Lane [Sat, 8 Sep 2012 21:39:02 +0000 (17:39 -0400)]
Adjust PL/Python regression tests some more for Python 3.3.

Commit 2cfb1c6f77734db81b6e74bcae630f93b94f69be fixed some issues caused
by Python 3.3 choosing to iterate through dict entries in a different order
than before.  But here's another one: the test cases adjusted here made two
bad entries in a dict and expected the one complained of would always be
the same.

Possibly this should be back-patched further than 9.2, but there seems
little point unless the earlier fix is too.

11 years agoCentralize libpq's low-level code for dropping a connection.
Tom Lane [Fri, 7 Sep 2012 20:02:23 +0000 (16:02 -0400)]
Centralize libpq's low-level code for dropping a connection.

Create an internal function pqDropConnection that does the physical socket
close and cleans up closely-associated state.  This removes a bunch of ad
hoc, not always consistent closure code.  The ulterior motive is to have a
single place to wait for a spawned child backend to exit, but this seems
like good cleanup even if that never happens.

I went back and forth on whether to include "conn->status = CONNECTION_BAD"
in pqDropConnection's actions, but for the moment decided not to.  Only a
minority of the call sites actually want that, and in any case it's
arguable that conn->status is slightly higher-level state, and thus not
part of this function's purview.

11 years agoUpdate syntax shown for \copy to match new syntax for COPY.
Robert Haas [Thu, 6 Sep 2012 21:00:03 +0000 (17:00 -0400)]
Update syntax shown for \copy to match new syntax for COPY.

Etsuro Fujita

11 years agoFix "too many arguments" messages not to index off the end of argv[].
Robert Haas [Thu, 6 Sep 2012 19:43:46 +0000 (15:43 -0400)]
Fix "too many arguments" messages not to index off the end of argv[].

This affects initdb, clusterdb, reindexdb, and vacuumdb in master
and 9.2; in earlier branches, only initdb is affected.

11 years agoAllow embedded spaces without quoting in unix_socket_directories entries.
Tom Lane [Thu, 6 Sep 2012 15:43:51 +0000 (11:43 -0400)]
Allow embedded spaces without quoting in unix_socket_directories entries.

This fix removes an unnecessary incompatibility with the old behavior of
the unix_socket_directory parameter.  Since pathnames with embedded spaces
are fairly popular on some platforms, the incompatibility could be
significant in practice.  We'll still strip unquoted leading/trailing
spaces, however.

No docs update since the documentation already implied that it worked
like this.

Per bug #7514 from Murray Cumming.

11 years agoFix typo in information_schema documentation.
Tom Lane [Thu, 6 Sep 2012 03:37:42 +0000 (23:37 -0400)]
Fix typo in information_schema documentation.

Shigeru Hanada

11 years agoIn pg_upgrade, try a few times to open a log file.
Andrew Dunstan [Thu, 6 Sep 2012 03:14:49 +0000 (23:14 -0400)]
In pg_upgrade, try a few times to open a log file.

If we call pg_ctl stop, the server might continue and thus
hold a log file for a short time after it has deleted its pid file,
(which is when pg_ctl will exit), and so a subsequent attempt to
open the log file might fail.

We therefore try to open it a few times, sleeping one second between
tries, to give the server time to exit.

This corrects an error that was observed on the buildfarm.

Backpatched to 9.2,

11 years agopgbench: Show better progress when loading tuples
Peter Eisentraut [Thu, 6 Sep 2012 03:07:47 +0000 (23:07 -0400)]
pgbench: Show better progress when loading tuples

Show target number of tuples and percentage in addition to current
number.

11 years agoFix WAL file replacement during cascading replication on Windows.
Heikki Linnakangas [Thu, 6 Sep 2012 01:10:15 +0000 (18:10 -0700)]
Fix WAL file replacement during cascading replication on Windows.

When the startup process restores a WAL file from the archive, it deletes
any old file with the same name and renames the new file in its place. On
Windows, however, when a file is deleted, it still lingers as long as a
process holds a file handle open on it. With cascading replication, a
walsender process can hold the old file open, so the rename() in the startup
process would fail. To fix that, rename the old file to a temporary name, to
make the original file name available for reuse, before deleting the old
file.

11 years agoFix inappropriate error messages for Hot Standby misconfiguration errors.
Tom Lane [Thu, 6 Sep 2012 01:49:08 +0000 (21:49 -0400)]
Fix inappropriate error messages for Hot Standby misconfiguration errors.

Give the correct name of the GUC parameter being complained of.
Also, emit a more suitable SQLSTATE (INVALID_PARAMETER_VALUE,
not the default INTERNAL_ERROR).

Gurjeet Singh, errcode adjustment by me

11 years agoMake one last copy-editing pass over the 9.2 release notes.
Tom Lane [Thu, 6 Sep 2012 01:28:23 +0000 (21:28 -0400)]
Make one last copy-editing pass over the 9.2 release notes.

Also, set the release date to 2012-09-10, since we're pretty well
committed to that now.

11 years agoFix pg_upgrade test script's line end handling on Windows.
Andrew Dunstan [Wed, 5 Sep 2012 22:00:31 +0000 (18:00 -0400)]
Fix pg_upgrade test script's line end handling on Windows.

Call pg_dumpall using -f switch instead of redirection, to avoid
writing the output in text mode and generating spurious carriage
returns. Remove to carriage return ignoring hack introduced by
commit e442b0f0c6fd26738bafdeb5222511b586dfe4b9.

Backpatch to 9.2.

11 years agoFix line end mishandling in pg_upgrade on Windows.
Andrew Dunstan [Wed, 5 Sep 2012 21:41:43 +0000 (17:41 -0400)]
Fix line end mishandling in pg_upgrade on Windows.

pg_upgrade opened the output from pg_dumpall in text mode and
wrote the split files in text mode. This caused unwanted eating
of intended carriage returns on input and production of spurious
carriage returns on output. To avoid this, open all these files
in binary mode. On non-Windows platforms, this change has no
effect.

Backpatch to 9.0. On 9.0 and 9.1, we also switch from redirecting
pg_dumpall's output to using pg_dumpall's -f switch, for the same
reason.

11 years agoRestore SIGFPE handler after initializing PL/Perl.
Tom Lane [Wed, 5 Sep 2012 20:43:37 +0000 (16:43 -0400)]
Restore SIGFPE handler after initializing PL/Perl.

Perl, for some unaccountable reason, believes it's a good idea to reset
SIGFPE handling to SIG_IGN.  Which wouldn't be a good idea even if it
worked; but on some platforms (Linux at least) it doesn't work at all,
instead resulting in forced process termination if the signal occurs.
Given the lack of other complaints, it seems safe to assume that Perl
never actually provokes SIGFPE and so there is no value in the setting
anyway.  Hence, reset it to our normal handler after initializing Perl.

Report, analysis and patch by Andres Freund.

11 years agoSilence -Wunused-result warning in contrib/pg_upgrade.
Tom Lane [Wed, 5 Sep 2012 18:36:47 +0000 (14:36 -0400)]
Silence -Wunused-result warning in contrib/pg_upgrade.

This is just neatnik-ism, but since we do it for comparable code in elog.c,
we may as well do it here.

11 years agosepgsql cleanups.
Robert Haas [Wed, 5 Sep 2012 18:01:15 +0000 (14:01 -0400)]
sepgsql cleanups.

This is needed to match recent changes elsewhere.  Along the way, some
renaming for clarity.

KaiGai Kohei

11 years agoFix PARAM_EXEC assignment mechanism to be safe in the presence of WITH.
Tom Lane [Wed, 5 Sep 2012 16:54:03 +0000 (12:54 -0400)]
Fix PARAM_EXEC assignment mechanism to be safe in the presence of WITH.

The planner previously assumed that parameter Vars having the same absolute
query level, varno, and varattno could safely be assigned the same runtime
PARAM_EXEC slot, even though they might be different Vars appearing in
different subqueries.  This was (probably) safe before the introduction of
CTEs, but the lazy-evalution mechanism used for CTEs means that a CTE can
be executed during execution of some other subquery, causing the lifespan
of Params at the same syntactic nesting level as the CTE to overlap with
use of the same slots inside the CTE.  In 9.1 we created additional hazards
by using the same parameter-assignment technology for nestloop inner scan
parameters, but it was broken before that, as illustrated by the added
regression test.

To fix, restructure the planner's management of PlannerParamItems so that
items having different semantic lifespans are kept rigorously separated.
This will probably result in complex queries using more runtime PARAM_EXEC
slots than before, but the slots are cheap enough that this hardly matters.
Also, stop generating PlannerParamItems containing Params for subquery
outputs: all we really need to do is reserve the PARAM_EXEC slot number,
and that now only takes incrementing a counter.  The planning code is
simpler and probably faster than before, as well as being more correct.

Per report from Vik Reykja.

These changes will mostly also need to be made in the back branches, but
I'm going to hold off on that until after 9.2.0 wraps.

11 years agoTrim spgist_private.h inclusion
Alvaro Herrera [Fri, 31 Aug 2012 21:04:31 +0000 (17:04 -0400)]
Trim spgist_private.h inclusion

It doesn't really need rel.h; relcache.h is enough.

11 years agoFix compiler warnings about unused variables, caused by my previous commit.
Heikki Linnakangas [Wed, 5 Sep 2012 05:07:35 +0000 (22:07 -0700)]
Fix compiler warnings about unused variables, caused by my previous commit.

Reported by Peter Eisentraut.

11 years agoIn pg_upgrade, document why we can't issue \n\n in the command logfile
Bruce Momjian [Wed, 5 Sep 2012 04:01:13 +0000 (00:01 -0400)]
In pg_upgrade, document why we can't issue \n\n in the command logfile
on Windows.  Slightly cleanup log output on Windows given this
restriction.

Backpatch to 9.2.

11 years agoFix bugs in cascading replication with recovery_target_timeline='latest'
Heikki Linnakangas [Wed, 5 Sep 2012 01:47:03 +0000 (18:47 -0700)]
Fix bugs in cascading replication with recovery_target_timeline='latest'

The cascading replication code assumed that the current RecoveryTargetTLI
never changes, but that's not true with recovery_target_timeline='latest'.
The obvious upshot of that is that RecoveryTargetTLI in shared memory needs
to be protected by a lock. A less obvious consequence is that when a
cascading standby is connected, and the standby switches to a new target
timeline after scanning the archive, it will continue to stream WAL to the
cascading standby, but from a wrong file, ie. the file of the previous
timeline. For example, if the standby is currently streaming from the middle
of file 000000010000000000000005, and the timeline changes, the standby
will continue to stream from that file. However, the WAL on the new
timeline is in file 000000020000000000000005, so the standby sends garbage
from 000000010000000000000005 to the cascading standby, instead of the
correct WAL from file 000000020000000000000005.

This also fixes a related bug where a partial WAL segment is restored from
the archive and streamed to a cascading standby. The code assumed that when
a WAL segment is copied from the archive, it can immediately be fully
streamed to a cascading standby. However, if the segment is only partially
filled, ie. has the right size, but only N first bytes contain valid WAL,
that's not safe. That can happen if a partial WAL segment is manually copied
to the archive, or if a partial WAL segment is archived because a server is
started up on a new timeline within that segment. The cascading standby will
get confused if the WAL it received is not valid, and will get stuck until
it's restarted. This patch fixes that problem by not allowing WAL restored
from the archive to be streamed to a cascading standby until it's been
replayed, and thus validated.

11 years agoFix serializable mode with index-only scans.
Kevin Grittner [Wed, 5 Sep 2012 02:13:11 +0000 (21:13 -0500)]
Fix serializable mode with index-only scans.

Serializable Snapshot Isolation used for serializable transactions
depends on acquiring SIRead locks on all heap relation tuples which
are used to generate the query result, so that a later delete or
update of any of the tuples can flag a read-write conflict between
transactions.  This is normally handled in heapam.c, with tuple level
locking.  Since an index-only scan avoids heap access in many cases,
building the result from the index tuple, the necessary predicate
locks were not being acquired for all tuples in an index-only scan.

To prevent problems with tuple IDs which are vacuumed and re-used
while the transaction still matters, the xmin of the tuple is part of
the tag for the tuple lock.  Since xmin is not available to the
index-only scan for result rows generated from the index tuples, it
is not possible to acquire a tuple-level predicate lock in such
cases, in spite of having the tid.  If we went to the heap to get the
xmin value, it would no longer be an index-only scan.  Rather than
prohibit index-only scans under serializable transaction isolation,
we acquire an SIRead lock on the page containing the tuple, when it
was not necessary to visit the heap for other reasons.

Backpatch to 9.2.

Kevin Grittner and Tom Lane

11 years agoAllow isolation tests to specify multiple setup blocks.
Kevin Grittner [Wed, 5 Sep 2012 00:31:06 +0000 (19:31 -0500)]
Allow isolation tests to specify multiple setup blocks.

Each setup block is run as a single PQexec submission, and some
statements such as VACUUM cannot be combined with others in such a
block.

Backpatch to 9.2.

Kevin Grittner and Tom Lane

11 years agoRemove src/tool/backend, now that the content is on the web site and wiki.
Bruce Momjian [Tue, 4 Sep 2012 16:38:33 +0000 (12:38 -0400)]
Remove src/tool/backend, now that the content is on the web site and wiki.