]> granicus.if.org Git - postgresql/log
postgresql
13 years agoFix PL/Python traceback for error in separate file
Peter Eisentraut [Wed, 20 Apr 2011 20:19:04 +0000 (23:19 +0300)]
Fix PL/Python traceback for error in separate file

It assumed that the lineno from the traceback always refers to the
PL/Python function.  If you created a PL/Python function that imports
some code, runs it, and that code raises an exception, PLy_traceback
would get utterly confused.

Now we look at the file name reported with the traceback and only
print the source line if it came from the PL/Python function.

Jan Urbański

13 years agoPg_upgrade C comment addition.
Bruce Momjian [Wed, 20 Apr 2011 09:44:45 +0000 (05:44 -0400)]
Pg_upgrade C comment addition.

Document why we do the missing new database check during the check
phase.

13 years agoQuotes in strings injected into bki file need to escaped. In particular,
Heikki Linnakangas [Wed, 20 Apr 2011 06:49:44 +0000 (09:49 +0300)]
Quotes in strings injected into bki file need to escaped. In particular,
"People's Republic of China" locale on Windows was causing initdb to fail.

This fixes bug #5818 reported by yulei. On master, this makes the mapping
of "People's Republic of China" to just "China" obsolete. In 9.0 and 8.4,
just fix the escaping. Earlier versions didn't have locale names in bki
file.

13 years agoThrow error for mismatched pg_upgrade clusters
Bruce Momjian [Wed, 20 Apr 2011 01:00:29 +0000 (21:00 -0400)]
Throw error for mismatched pg_upgrade clusters

If someone removes the 'postgres' database from the old cluster and the
new cluster has a 'postgres' database, the number of databases will not
match.  We actually could upgrade such a setup, but it would violate the
1-to-1 mapping of database counts, so we throw an error instead.

Previously they got an error during the upgrade, and not at the check
stage; PG 9.0.4 does the same.

13 years agoAdd C comment
Bruce Momjian [Tue, 19 Apr 2011 23:14:39 +0000 (19:14 -0400)]
Add C comment

Add C comment about why we throw an error if the pg_upgrade old/new
database counts don't match.

13 years agoAvoid changing an index's indcheckxmin horizon during REINDEX.
Tom Lane [Tue, 19 Apr 2011 22:50:56 +0000 (18:50 -0400)]
Avoid changing an index's indcheckxmin horizon during REINDEX.

There can never be a need to push the indcheckxmin horizon forward, since
any HOT chains that are actually broken with respect to the index must
pre-date its original creation.  So we can just avoid changing pg_index
altogether during a REINDEX operation.

This offers a cleaner solution than my previous patch for the problem
found a few days ago that we mustn't try to update pg_index while we are
reindexing it.  System catalog indexes will always be created with
indcheckxmin = false during initdb, and with this modified code we should
never try to change their pg_index entries.  This avoids special-casing
system catalogs as the former patch did, and should provide a performance
benefit for many cases where REINDEX formerly caused an index to be
considered unusable for a short time.

Back-patch to 8.3 to cover all versions containing HOT.  Note that this
patch changes the API for index_build(), but I believe it is unlikely that
any add-on code is calling that directly.

13 years agoRevert "Prevent incorrect updates of pg_index while reindexing pg_index itself."
Tom Lane [Tue, 19 Apr 2011 20:55:34 +0000 (16:55 -0400)]
Revert "Prevent incorrect updates of pg_index while reindexing pg_index itself."

This reverts commit 4b6106ccfea21e86943f881edcf3cfc03661a415 of 2011-04-15.
There's a better way to do it, which will follow shortly.

13 years agoRefix the unaccent regression test on MSVC properly
Peter Eisentraut [Tue, 19 Apr 2011 19:52:52 +0000 (22:52 +0300)]
Refix the unaccent regression test on MSVC properly

... for some value of "properly".  Instead of overriding REGRESS_OPTS,
set the variables ENCODING and NO_LOCALE, which is more expressive and
allows overriding by the user.  Fix vcregress.pl to handle that.

13 years agoTreat config.pl as optional in vcregress.pl
Peter Eisentraut [Tue, 19 Apr 2011 19:01:15 +0000 (22:01 +0300)]
Treat config.pl as optional in vcregress.pl

This is how build.pl treats it and how it's documented.

13 years agoFix typo
Peter Eisentraut [Tue, 19 Apr 2011 19:00:35 +0000 (22:00 +0300)]
Fix typo

13 years agoAdd gitignore entries for Windows MSVC builds
Peter Eisentraut [Tue, 19 Apr 2011 17:04:41 +0000 (20:04 +0300)]
Add gitignore entries for Windows MSVC builds

13 years agoAvoid unused variable warnings for certain configurations
Peter Eisentraut [Tue, 19 Apr 2011 17:01:51 +0000 (20:01 +0300)]
Avoid unused variable warnings for certain configurations

13 years agoRefrain from canonicalizing a client_encoding setting of "UNICODE".
Tom Lane [Tue, 19 Apr 2011 16:17:13 +0000 (12:17 -0400)]
Refrain from canonicalizing a client_encoding setting of "UNICODE".

While "UTF8" is the correct name for this encoding, existing JDBC drivers
expect that if they send "UNICODE" it will read back the same way; they
fail with an opaque "Protocol error" complaint if not.  This will be fixed
in the 9.1 drivers, but until older drivers are no longer in use in the
wild, we'd better leave "UNICODE" alone.  Continue to canonicalize all
other inputs.  Per report from Steve Singer and subsequent discussion.

13 years agoSilence compiler warning about casting HANDLE to long on WIN64.
Andrew Dunstan [Tue, 19 Apr 2011 15:21:00 +0000 (11:21 -0400)]
Silence compiler warning about casting HANDLE to long on WIN64.

13 years agoSilence compiler warning about unused variable on Windows.
Heikki Linnakangas [Tue, 19 Apr 2011 11:54:48 +0000 (14:54 +0300)]
Silence compiler warning about unused variable on Windows.

13 years agoFix handling of collations in multi-row VALUES constructs.
Tom Lane [Mon, 18 Apr 2011 19:31:52 +0000 (15:31 -0400)]
Fix handling of collations in multi-row VALUES constructs.

Per spec we ought to apply select_common_collation() across the expressions
in each column of the VALUES table.  The original coding was just taking
the first row and assuming it was representative.

This patch adds a field to struct RangeTblEntry to carry the resolved
collations, so initdb is forced for changes in stored rule representation.

13 years agoOnly allow typed tables to hang off composite types, not e.g. tables.
Robert Haas [Mon, 18 Apr 2011 14:13:34 +0000 (10:13 -0400)]
Only allow typed tables to hang off composite types, not e.g. tables.

This also ensures that we take a relation lock on the composite type when
creating a typed table, which is necessary to prevent the composite type
and the typed table from getting out of step in the face of concurrent
DDL.

Noah Misch, with some changes.

13 years agoAttempt to remedy buildfarm breakage caused by commit f536d4194.
Andrew Dunstan [Mon, 18 Apr 2011 13:27:30 +0000 (09:27 -0400)]
Attempt to remedy buildfarm breakage caused by commit f536d4194.

13 years agorecoveryStopsHere() must check the resource manager ID.
Robert Haas [Mon, 18 Apr 2011 12:27:19 +0000 (08:27 -0400)]
recoveryStopsHere() must check the resource manager ID.

Before commit c016ce728139be95bb0dc7c4e5640507334c2339, this wasn't
needed, but now that multiple resource manager IDs can percolate down
through here, we have to make sure we know which one we've got.
Otherwise, we can confuse (for example) an XLOG_XACT_COMMIT record
with an XLOG_CHECKPOINT_SHUTDOWN record.

Review by Jaime Casanova

13 years agoFix assorted infelicities in collation handling in psql's describe.c.
Tom Lane [Sun, 17 Apr 2011 22:09:22 +0000 (18:09 -0400)]
Fix assorted infelicities in collation handling in psql's describe.c.

In \d, be more careful to print collation only if it's not the default for
the column's data type.  Avoid assuming that the name "default" is magic.

Fix \d on a composite type so that it will print per-column collations.
It's no longer the case that a composite type cannot have modifiers.
(In consequence, the expected outputs for composite-type regression tests
change.)

Fix \dD so that it will print collation for a domain, again only if it's
not the same as the base type's collation.

13 years agoDocument COLLATE option in CREATE TYPE reference page.
Tom Lane [Sun, 17 Apr 2011 21:05:51 +0000 (17:05 -0400)]
Document COLLATE option in CREATE TYPE reference page.

Curiously, it was already documented in ALTER TYPE ADD ATTRIBUTE, but
not here.

13 years agoFix pg_dump to handle collations applied to columns of composite types.
Tom Lane [Sun, 17 Apr 2011 20:55:04 +0000 (16:55 -0400)]
Fix pg_dump to handle collations applied to columns of composite types.

CREATE TYPE and ALTER TYPE ADD ATTRIBUTE handle this, so I suppose it's
an intended feature, but pg_dump didn't know about it.

13 years agoAdd check for matching column collations in ALTER TABLE ... INHERIT.
Tom Lane [Sun, 17 Apr 2011 20:22:13 +0000 (16:22 -0400)]
Add check for matching column collations in ALTER TABLE ... INHERIT.

The other DDL operations that create an inheritance relationship were
checking for collation match already, but this one got missed.

Also fix comments that failed to mention collation checks.

13 years agoSupport a COLLATE clause in plpgsql variable declarations.
Tom Lane [Sun, 17 Apr 2011 18:54:19 +0000 (14:54 -0400)]
Support a COLLATE clause in plpgsql variable declarations.

This allows the usual rules for assigning a collation to a local variable
to be overridden.  Per discussion, it seems appropriate to support this
rather than forcing all local variables to have the argument-derived
collation.

13 years agoforeach() and list_delete() don't mix.
Tom Lane [Sun, 17 Apr 2011 17:36:38 +0000 (13:36 -0400)]
foreach() and list_delete() don't mix.

Fix crash when releasing duplicate entries in the encoding conversion cache
list, caused by releasing the current entry of the list being chased by
foreach().  We have a standard idiom for handling such cases, but this
loop wasn't using it.

This got broken in my recent rewrite of GUC assign hooks.  Not sure how
I missed this when testing the modified code, but I did.  Per report from
Peter.

13 years agoAdd an Assert that indexam.c isn't used on an index awaiting reindexing.
Tom Lane [Sat, 16 Apr 2011 23:29:10 +0000 (19:29 -0400)]
Add an Assert that indexam.c isn't used on an index awaiting reindexing.

This might have caught the recent embarrassment over trying to modify
pg_index while its indexes were being rebuilt.

Noah Misch

13 years agoSimplify reindex_relation's API.
Tom Lane [Sat, 16 Apr 2011 21:26:41 +0000 (17:26 -0400)]
Simplify reindex_relation's API.

For what seem entirely historical reasons, a bitmask "flags" argument was
recently added to reindex_relation without subsuming its existing boolean
argument into that bitmask.  This seems a bit bizarre, so fold them
together.

13 years agoClean up collation processing in prepunion.c.
Tom Lane [Sat, 16 Apr 2011 20:39:50 +0000 (16:39 -0400)]
Clean up collation processing in prepunion.c.

This area was a few bricks shy of a load, and badly under-commented too.
We have to ensure that the generated targetlist entries for a set-operation
node expose the correct collation for each entry, since higher-level
processing expects the tlist to reflect the true ordering of the plan's
output.

This hackery wouldn't be necessary if SortGroupClause carried collation
info ... but making it do so would inject more pain in the parser than
would be saved here.  Still, we might want to rethink that sometime.

13 years agoSet client encoding explicitly in plpython_unicode test
Peter Eisentraut [Sat, 16 Apr 2011 18:52:10 +0000 (21:52 +0300)]
Set client encoding explicitly in plpython_unicode test

This will (hopefully) eliminate the need for the
plpython_unicode_0.out expected file.

13 years agoPrevent incorrect updates of pg_index while reindexing pg_index itself.
Tom Lane [Sat, 16 Apr 2011 00:18:57 +0000 (20:18 -0400)]
Prevent incorrect updates of pg_index while reindexing pg_index itself.

The places that attempt to change pg_index.indcheckxmin during a reindexing
operation cannot be executed safely if pg_index itself is the subject of
the operation.  This is the explanation for a couple of recent reports of
VACUUM FULL failing with
ERROR:  duplicate key value violates unique constraint "pg_index_indexrelid_index"
DETAIL:  Key (indexrelid)=(2678) already exists.

However, there isn't any real need to update indcheckxmin in such a
situation, if we assume that pg_index can never contain a truly broken HOT
chain.  This assumption holds if new indexes are never created on it during
concurrent operations, which is something we don't consider safe for any
system catalog, not just pg_index.  Accordingly, modify the code to not
manipulate indcheckxmin when reindexing any system catalog.

Back-patch to 8.3, where HOT was introduced.  The known failure scenarios
involve 9.0-style VACUUM FULL, so there might not be any real risk before
9.0, but let's not assume that.

13 years agoSuppress unused-function warning on non-WIN32 builds.
Tom Lane [Fri, 15 Apr 2011 23:27:48 +0000 (19:27 -0400)]
Suppress unused-function warning on non-WIN32 builds.

13 years agoGuard against incoming rowcount estimate of NaN in cost_mergejoin().
Tom Lane [Fri, 15 Apr 2011 21:45:41 +0000 (17:45 -0400)]
Guard against incoming rowcount estimate of NaN in cost_mergejoin().

Although rowcount estimates really ought not be NaN, a bug elsewhere
could perhaps result in that, and that would cause Assert failure in
cost_mergejoin, which I believe to be the explanation for bug #5977 from
Anton Kuznetsov.  Seems like a good idea to expend a couple more cycles
to prevent that, even though the real bug is elsewhere.  Not back-patching,
though, because we don't encourage running production systems with
Asserts on.

13 years agosetlocale() on Windows doesn't work correctly if the locale name contains
Heikki Linnakangas [Fri, 15 Apr 2011 17:48:10 +0000 (20:48 +0300)]
setlocale() on Windows doesn't work correctly if the locale name contains
apostrophes or dots. There isn't much hope of Microsoft fixing it any time
soon, it's been like that for ages, so we better work around it. So, map a
few common Windows locale names known to cause problems to aliases that work.

13 years agoOn Windows, if the encoding implied by locale is not allowed as a
Heikki Linnakangas [Fri, 15 Apr 2011 17:44:13 +0000 (20:44 +0300)]
On Windows, if the encoding implied by locale is not allowed as a
server-encoding, fall back to UTF-8. It happens at least with the Chinese
locale, which implies BIG5. This is safe, because on Windows all locales
are compatible with UTF-8.

13 years agoNote that Bison on GnuWin32 has trouble with paths with spaces
Magnus Hagander [Fri, 15 Apr 2011 13:27:02 +0000 (15:27 +0200)]
Note that Bison on GnuWin32 has trouble with paths with spaces

Peter Eisentraut

13 years agoSpecify which versions of the Platform SDK are supported
Magnus Hagander [Fri, 15 Apr 2011 13:00:42 +0000 (15:00 +0200)]
Specify which versions of the Platform SDK are supported

Anything including Visual Studio 2010 compilers is not yet
supported for building on Windows.

13 years agoReduce the initial size of local lock hash to 16 entries.
Heikki Linnakangas [Fri, 15 Apr 2011 11:57:51 +0000 (14:57 +0300)]
Reduce the initial size of local lock hash to 16 entries.

The hash table is seq scanned at transaction end, to release all locks,
and making the hash table larger than necessary makes that slower. With
very simple queries, that overhead can amount to a few percent of the total
CPU time used.

At the moment, backend startup needs 6 locks, and a simple query with one
table and index needs 3 locks. 16 is enough for even quite complicated
transactions, and it will grow automatically if it fills up.

13 years agoRename pg_regress option --multibyte to --encoding
Peter Eisentraut [Fri, 15 Apr 2011 05:42:05 +0000 (08:42 +0300)]
Rename pg_regress option --multibyte to --encoding

Also refactor things a little bit so that the same methods for setting
test locale and encoding can be used everywhere.

13 years agoUpdate release notes for releases 9.0.4, 8.4.8, 8.3.15, and 8.2.21.
Tom Lane [Thu, 14 Apr 2011 19:51:37 +0000 (15:51 -0400)]
Update release notes for releases 9.0.4, 8.4.8, 8.3.15, and 8.2.21.

13 years agoAdvise Debian/Ubuntu users to use openjade1.3.
Robert Haas [Thu, 14 Apr 2011 18:35:41 +0000 (11:35 -0700)]
Advise Debian/Ubuntu users to use openjade1.3.

The latest openjade packages for Ubuntu 10.10 seg fault when building
our documentation.

Josh Berkus

13 years agoRemove obsolete comment.
Robert Haas [Thu, 14 Apr 2011 02:20:39 +0000 (19:20 -0700)]
Remove obsolete comment.

The lock level for adding a parent table is now ShareUpdateExclusiveLock;
see commit fbcf4b92aa64d4577bcf25925b055316b978744a.  This comment didn't
get updated to match, but it doesn't seem important to mention this detail
here, so rather than updating it now, just take it out.

13 years agoFix toast table creation.
Robert Haas [Thu, 14 Apr 2011 01:07:14 +0000 (18:07 -0700)]
Fix toast table creation.

Instead of using slightly-too-clever heuristics to decide when we must
create a TOAST table, just check whether one is needed every time the
table is altered.  Checking whether a toast table is needed is cheap
enough that we needn't worry about doing it on every ALTER TABLE command,
and the previous coding is apparently prone to accidental breakage:
commit 04e17bae50a73af524731fa11210d5c3f7d8e1f9 broken ALTER TABLE ..
SET STORAGE, which moved some actions from AT_PASS_COL_ATTRS to
AT_PASS_MISC, and commit 6c5723998594dffa5d47c3cf8c96ccf89c033aae broke
ALTER TABLE .. ADD COLUMN by changing the way that adding columns
recurses into child tables.

Noah Misch, with one comment change by me

13 years agoEnsure mark_dummy_rel doesn't create dangling pointers in RelOptInfos.
Tom Lane [Wed, 13 Apr 2011 22:56:40 +0000 (18:56 -0400)]
Ensure mark_dummy_rel doesn't create dangling pointers in RelOptInfos.

When we are doing GEQO join planning, the current memory context is a
short-lived context that will be reset at the end of geqo_eval().  However,
the RelOptInfos for base relations are set up before that and then re-used
across many GEQO cycles.  Hence, any code that modifies a baserel during
join planning has to be careful not to put pointers to the short-lived
context into the baserel struct.  mark_dummy_rel got this wrong, leading to
easy-to-reproduce-once-you-know-how crashes in 8.4, as reported off-list by
Leo Carson of SDSC.  Some improvements made in 9.0 make it difficult to
demonstrate the crash in 9.0 or HEAD; but there's no doubt that there's
still a risk factor here, so patch all branches that have the function.
(Note: 8.3 has a similar function, but it's only applied to joinrels and
thus is not a hazard.)

13 years agoUpdate time zone data files to tzdata release 2011f.
Tom Lane [Wed, 13 Apr 2011 22:03:23 +0000 (18:03 -0400)]
Update time zone data files to tzdata release 2011f.

DST law changes in Chile, Cuba, Falkland Islands, Morocco, Samoa, Turkey.
Historical corrections for South Australia, Alaska, Hawaii.

13 years agoAvoid incorrectly granting replication to roles created with NOSUPERUSER.
Robert Haas [Wed, 13 Apr 2011 19:26:51 +0000 (12:26 -0700)]
Avoid incorrectly granting replication to roles created with NOSUPERUSER.

Andres Freund

13 years agoOn HP/UX, the structs used by ioctl(SIOCGLIFCONF) are named differently
Heikki Linnakangas [Wed, 13 Apr 2011 19:20:31 +0000 (22:20 +0300)]
On HP/UX, the structs used by ioctl(SIOCGLIFCONF) are named differently
than on other platforms, and only IPv6 addresses are returned. Because of
those two issues, fall back to ioctl(SIOCGIFCONF) on HP/UX, so that it at
least compiles and finds IPv4 addresses. This function is currently only
used for interpreting samehost/samenet in pg_hba.conf, which isn't that
critical.

13 years agoRevert the patch to check if we've reached end-of-backup also when doing
Heikki Linnakangas [Wed, 13 Apr 2011 18:33:59 +0000 (21:33 +0300)]
Revert the patch to check if we've reached end-of-backup also when doing
crash recovery, and throw an error if not. hubert depesz lubaczewski pointed
out that that situation also happens in the crash recovery following a
system crash that happens during an online backup.

We might want to do something smarter in 9.1, like put the check back for
backups taken with pg_basebackup, but that's for another patch.

13 years agoOn IA64 architecture, we check the depth of the register stack in addition
Heikki Linnakangas [Wed, 13 Apr 2011 08:43:22 +0000 (11:43 +0300)]
On IA64 architecture, we check the depth of the register stack in addition
to the regular stack. The code to do that is platform and compiler specific,
add support for the HP-UX native compiler.

13 years agoAdd some useful cross-references to the CREATE EXTENSION reference page.
Tom Lane [Wed, 13 Apr 2011 06:56:33 +0000 (02:56 -0400)]
Add some useful cross-references to the CREATE EXTENSION reference page.

Per a suggestion from Josh Kupershmidt, though I modified his patch
quite a lot.

13 years agoPass collations to functions in FunctionCallInfoData, not FmgrInfo.
Tom Lane [Tue, 12 Apr 2011 23:19:24 +0000 (19:19 -0400)]
Pass collations to functions in FunctionCallInfoData, not FmgrInfo.

Since collation is effectively an argument, not a property of the function,
FmgrInfo is really the wrong place for it; and this becomes critical in
cases where a cached FmgrInfo is used for varying purposes that might need
different collation settings.  Fix by passing it in FunctionCallInfoData
instead.  In particular this allows a clean fix for bug #5970 (record_cmp
not working).  This requires touching a bit more code than the original
method, but nobody ever thought that collations would not be an invasive
patch...

13 years agoSuppress compiler warnings about "value computed is not used".
Tom Lane [Tue, 12 Apr 2011 06:05:24 +0000 (02:05 -0400)]
Suppress compiler warnings about "value computed is not used".

The recent patch to remove gcc 4.6 warnings created some new ones, at
least on my rather old gcc version.  Try to make everybody happy by
casting to "void" when we just want to discard the result.

13 years agoBe more wary of missing statistics in eqjoinsel_semi().
Tom Lane [Tue, 12 Apr 2011 05:59:34 +0000 (01:59 -0400)]
Be more wary of missing statistics in eqjoinsel_semi().

In particular, if we don't have real ndistinct estimates for both sides,
fall back to assuming that half of the left-hand rows have join partners.
This is what was done in 8.2 and 8.3 (cf nulltestsel() in those versions).
It's pretty stupid but it won't lead us to think that an antijoin produces
no rows out, as seen in recent example from Uwe Schroeder.

13 years agoFix RI_Initial_Check to use a COLLATE clause when needed in its query.
Tom Lane [Tue, 12 Apr 2011 01:32:53 +0000 (21:32 -0400)]
Fix RI_Initial_Check to use a COLLATE clause when needed in its query.

If the referencing and referenced columns have different collations,
the parser will be unable to resolve which collation to use unless it's
helped out in this way.  The effects are sometimes masked, if we end up
using a non-collation-sensitive plan; but if we do use a mergejoin
we'll see a failure, as recently noted by Robert Haas.

The SQL spec states that the referenced column's collation should be used
to resolve RI checks, so that's what we do.  Note however that we currently
don't append a COLLATE clause when writing a query that examines only the
referencing column.  If we ever support collations that have varying
notions of equality, that will have to be changed.  For the moment, though,
it's preferable to leave it off so that we can use a normal index on the
referencing column.

13 years agoClean up most -Wunused-but-set-variable warnings from gcc 4.6
Peter Eisentraut [Mon, 11 Apr 2011 19:28:45 +0000 (22:28 +0300)]
Clean up most -Wunused-but-set-variable warnings from gcc 4.6

This warning is new in gcc 4.6 and part of -Wall.  This patch cleans
up most of the noise, but there are some still warnings that are
trickier to remove.

13 years agoTeach pattern_fixed_prefix() about collations.
Tom Lane [Mon, 11 Apr 2011 16:28:28 +0000 (12:28 -0400)]
Teach pattern_fixed_prefix() about collations.

This is necessary, not optional, now that ILIKE and regexes are collation
aware --- else we might derive a wrong comparison constant for index
optimized pattern matches.

13 years agoTransferPredicateLocksToNewTarget should initialize a new lock
Heikki Linnakangas [Mon, 11 Apr 2011 10:46:37 +0000 (13:46 +0300)]
TransferPredicateLocksToNewTarget should initialize a new lock
entry's commitSeqNo to that of the old one being transferred, or take
the minimum commitSeqNo if it is merging two lock entries.

Also, CreatePredicateLock should initialize commitSeqNo for to
InvalidSerCommitSeqNo instead of to 0. (I don't think using 0 would
actually affect anything, but we should be consistent.)

I also added a couple of assertions I used to track this down: a
lock's commitSeqNo should never be zero, and it should be
InvalidSerCommitSeqNo if and only if the lock is not held by
OldCommittedSxact.

Dan Ports, to fix leak of predicate locks reported by YAMAMOTO Takashi.

13 years agoFix the size of predicate lock manager's shared memory hash tables at creation.
Heikki Linnakangas [Mon, 11 Apr 2011 10:43:31 +0000 (13:43 +0300)]
Fix the size of predicate lock manager's shared memory hash tables at creation.

This way they don't compete with the regular lock manager for the slack shared
memory, making the behavior more predictable.

13 years agoAdd some more mapping macros for Microsoft wide-character API.
Tom Lane [Sun, 10 Apr 2011 23:37:24 +0000 (19:37 -0400)]
Add some more mapping macros for Microsoft wide-character API.

Per buildfarm.

13 years agoInsert dummy "break"s to silence compiler complaints.
Tom Lane [Sun, 10 Apr 2011 22:44:07 +0000 (18:44 -0400)]
Insert dummy "break"s to silence compiler complaints.

Apparently some compilers dislike a case label with nothing after it.
Per buildfarm.

13 years agoRemove CRLF line endings in new cube results file.
Andrew Dunstan [Sun, 10 Apr 2011 22:26:53 +0000 (18:26 -0400)]
Remove CRLF line endings in new cube results file.

13 years agoTeach regular expression operators to honor collations.
Tom Lane [Sun, 10 Apr 2011 22:02:17 +0000 (18:02 -0400)]
Teach regular expression operators to honor collations.

This involves getting the character classification and case-folding
functions in the regex library to use the collations infrastructure.
Most of this work had been done already in connection with the upper/lower
and LIKE logic, so it was a simple matter of transposition.

While at it, split out these functions into a separate source file
regc_pg_locale.c, so that they can be correctly labeled with the Postgres
project's license rather than the Scriptics license.  These functions are
100% Postgres-written code whereas what remains in regc_locale.c is still
mostly not ours, so lumping them both under the same copyright notice was
getting more and more misleading.

13 years agoAdjust regression tests on cube and ECPG for MinGW 64 bit compiler.
Andrew Dunstan [Sun, 10 Apr 2011 20:57:42 +0000 (16:57 -0400)]
Adjust regression tests on cube and ECPG for MinGW 64 bit compiler.

Backport to 9.0, we're not supporting this compiler on earlier releases.

13 years agoDon't make "replication" magical as a user name, only as a database name, in pg_hba...
Andrew Dunstan [Sun, 10 Apr 2011 18:51:26 +0000 (14:51 -0400)]
Don't make "replication" magical as a user name, only as a database name, in pg_hba.conf.

Per gripe from Josh Berkus.

13 years agopgindent run before PG 9.1 beta 1.
Bruce Momjian [Sun, 10 Apr 2011 15:42:00 +0000 (11:42 -0400)]
pgindent run before PG 9.1 beta 1.

13 years agoClean up overly complex code for issuing some related error messages.
Tom Lane [Tue, 29 Mar 2011 21:54:27 +0000 (17:54 -0400)]
Clean up overly complex code for issuing some related error messages.

The original version was unreadable, and not mechanically checkable
either.

13 years agoAdd collation support on Windows (MSVC build)
Peter Eisentraut [Sat, 9 Apr 2011 21:14:20 +0000 (00:14 +0300)]
Add collation support on Windows (MSVC build)

There is not yet support in initdb to populate the pg_collation
catalog, but if that is done manually, the rest should work.

13 years agoFix ILIKE to honor collation when working in single-byte encodings.
Tom Lane [Sat, 9 Apr 2011 21:12:39 +0000 (17:12 -0400)]
Fix ILIKE to honor collation when working in single-byte encodings.

The original collation patch only fixed the multi-byte code path.
This change also ensures that ILIKE's idea of the case-folding rules
is exactly the same as str_tolower's.

13 years agoRemove collate.linux.utf8.sql's assumptions about ".utf8" in locale names.
Tom Lane [Sat, 9 Apr 2011 20:24:36 +0000 (16:24 -0400)]
Remove collate.linux.utf8.sql's assumptions about ".utf8" in locale names.

Tweak the test so that it does not depend on the platform using ".utf8" as
the extension signifying that a locale uses UTF8 encoding.  For the most
part this just requires using the abbreviated collation names "en_US" etc,
though I had to work a bit harder on the collation creation tests.

This opens the door to using the test on platforms that spell locales
differently, for example ".utf-8" or ".UTF-8".  Also, the test is now
somewhat useful with server encodings other than UTF8; though depending on
which encoding is selected, different subsets of it will fail for lack of
character set support.

13 years agoAdjust collation determination rules as per discussion.
Tom Lane [Sat, 9 Apr 2011 18:40:09 +0000 (14:40 -0400)]
Adjust collation determination rules as per discussion.

Remove crude hack that tried to propagate collation through a
function-returning-record, ie, from the function's arguments to individual
fields selected from its result record.  That is just plain inconsistent,
because the function result is composite and cannot have a collation;
and there's no hope of making this kind of action-at-a-distance work
consistently.  Adjust regression test cases that expected this to happen.

Meanwhile, the behavior of casting to a domain with a declared collation
stays the same as it was, since that seemed to be the consensus.

13 years agoDon't show unusable collations in psql's \dO command.
Tom Lane [Sat, 9 Apr 2011 18:08:41 +0000 (14:08 -0400)]
Don't show unusable collations in psql's \dO command.

"Unusable" collations are those not matching the current database's
encoding.  The former behavior inconsistently showed such collations
some of the time, depending on the details of the pattern argument.

13 years agoLatest consolidated typedef list from buildfarm.
Andrew Dunstan [Sat, 9 Apr 2011 03:11:37 +0000 (23:11 -0400)]
Latest consolidated typedef list from buildfarm.

13 years agoClean up minor collation issues in indxpath.c.
Tom Lane [Fri, 8 Apr 2011 23:19:17 +0000 (19:19 -0400)]
Clean up minor collation issues in indxpath.c.

Get rid of bogus collation test in match_special_index_operator (even for
ILIKE, the pattern match operator's collation doesn't matter here, and even
if it did the test was testing the wrong thing).
Fix broken looping logic in expand_indexqual_rowcompare.
Add collation check in match_clause_to_ordering_op.
Make naming and argument ordering more consistent; improve comments.

13 years agoFix make_greater_string to not have an undocumented collation assumption.
Tom Lane [Fri, 8 Apr 2011 21:39:59 +0000 (17:39 -0400)]
Fix make_greater_string to not have an undocumented collation assumption.

The previous coding worked only if ltproc->fn_collation was always either
DEFAULT_COLLATION_OID or a C-compatible locale.  While that's true at the
moment, it wasn't documented (and in fact wasn't true when this code was
committed...).  But it only takes a couple more lines to make its internal
caching behavior locale-aware, so let's do that.

13 years agoTruncate the predicate lock SLRU to empty, instead of almost empty.
Robert Haas [Fri, 8 Apr 2011 20:51:45 +0000 (16:51 -0400)]
Truncate the predicate lock SLRU to empty, instead of almost empty.

Otherwise, the SLRU machinery can get confused and think that the SLRU
has wrapped around.  Along the way, regardless of whether we're
truncating all of the SLRU or just some of it, flush pages after
truncating, rather than before.

Kevin Grittner

13 years agoTweak collation setup for GIN index comparison functions.
Tom Lane [Fri, 8 Apr 2011 20:48:25 +0000 (16:48 -0400)]
Tweak collation setup for GIN index comparison functions.

Honor index column's collation spec if there is one, don't go to the
expense of calling get_typcollation when we can reasonably assume that
all GIN storage types will use default collation, and be sure to set
a collation for the comparePartialFn too.

13 years agoAvoid an unnecessary syscache lookup in parse_coerce.c.
Tom Lane [Fri, 8 Apr 2011 20:11:04 +0000 (16:11 -0400)]
Avoid an unnecessary syscache lookup in parse_coerce.c.

All the other fields of the constant are being extracted from the syscache
entry we already have, so handle collation similarly.  (There don't seem
to be any other uses for the new function at the moment.)

13 years agoMake psql use pg_table_size instead of pg_relation_size on 9.0+ servers.
Robert Haas [Fri, 8 Apr 2011 19:52:49 +0000 (15:52 -0400)]
Make psql use pg_table_size instead of pg_relation_size on 9.0+ servers.

Per discussion, pg_table_size() is a more helpful number than
pg_relation_size().

Bernd Helmle, reviewed by Susanne Ebrecht and me.

13 years agoFix bug in propagating ALTER TABLE actions to typed tables.
Robert Haas [Fri, 8 Apr 2011 19:44:50 +0000 (15:44 -0400)]
Fix bug in propagating ALTER TABLE actions to typed tables.

We need to propagate such actions to all typed table children of a
given type, not just the first one.

Noah Misch

13 years agoModify initdb to complain only when no usable system locales are found.
Tom Lane [Fri, 8 Apr 2011 19:38:57 +0000 (15:38 -0400)]
Modify initdb to complain only when no usable system locales are found.

Per discussion, the original behavior seems too noisy.  But if things
are so broken that none of the locales reported by "locale -a" are usable,
that's probably worth warning about.

13 years agoPartially roll back overenthusiastic SSI optimization.
Robert Haas [Fri, 8 Apr 2011 19:29:02 +0000 (15:29 -0400)]
Partially roll back overenthusiastic SSI optimization.

When a regular lock is held, SSI can use that in lieu of a predicate lock
to detect rw conflicts; but if the regular lock is being taken by a
subtransaction, we can't assume that it'll commit, so releasing the
parent transaction's lock in that case is a no-no.

Kevin Grittner

13 years agoHave pg_upgrade properly preserve relfrozenxid in toast tables.
Bruce Momjian [Fri, 8 Apr 2011 15:46:34 +0000 (11:46 -0400)]
Have pg_upgrade properly preserve relfrozenxid in toast tables.

This fixes a pg_upgrade bug that could lead to query errors when clog
files are improperly removed.

13 years agoAvoid extra whitespace in the arguments of <indexterm>.
Tom Lane [Fri, 8 Apr 2011 15:36:05 +0000 (11:36 -0400)]
Avoid extra whitespace in the arguments of <indexterm>.

As noted by Thom Brown, this confuses the DocBook index processor; it
fails to merge entries that differ only in whitespace, and sorts them
unexpectedly as well.  Seems like a toolchain bug, but I'm not going to
hold my breath waiting for a fix.

Note: easiest way to find these is to look for double spaces in HTML.index.

13 years agoAdd an example of WITH (UPDATE RETURNING) INSERT to the INSERT ref page.
Tom Lane [Fri, 8 Apr 2011 14:54:03 +0000 (10:54 -0400)]
Add an example of WITH (UPDATE RETURNING) INSERT to the INSERT ref page.

Per a discussion with Gavin Flower.  This barely scratches the surface
of potential WITH (something RETURNING) use cases, of course, but it's
one of the simplest compelling examples I can think of.

13 years agoFix some sloppiness in new PL/python get_source_line() function.
Robert Haas [Fri, 8 Apr 2011 04:30:54 +0000 (00:30 -0400)]
Fix some sloppiness in new PL/python get_source_line() function.

Jan Urbański

13 years agoAvoid use of mixed slash style paths in arguments to xcopy in MSVC builds.
Andrew Dunstan [Fri, 8 Apr 2011 02:17:06 +0000 (22:17 -0400)]
Avoid use of mixed slash style paths in arguments to xcopy in MSVC builds.

Some versions of xcopy, notably on Windows 7 don't like it. Backpatch
to 8.3, where we first used xcopy.

13 years agoTweaks for SSI out-of-shared memory behavior.
Robert Haas [Thu, 7 Apr 2011 20:43:39 +0000 (16:43 -0400)]
Tweaks for SSI out-of-shared memory behavior.

If we call hash_search() with HASH_ENTER, it will bail out rather than
return NULL, so it's redundant to check for NULL again in the caller.
Thus, in cases where we believe it's impossible for the hash table to run
out of slots anyway, we can simplify the code slightly.

On the flip side, in cases where it's theoretically possible to run out of
space, we don't want to rely on dynahash.c to throw an error; instead,
we pass HASH_ENTER_NULL and throw the error ourselves if a NULL comes
back, so that we can provide a more descriptive error message.

Kevin Grittner

13 years agoModernize dlopen interface code for FreeBSD and OpenBSD.
Tom Lane [Thu, 7 Apr 2011 19:14:39 +0000 (15:14 -0400)]
Modernize dlopen interface code for FreeBSD and OpenBSD.

Remove the hard-wired assumption that __mips__ (and only __mips__) lacks
dlopen in FreeBSD and OpenBSD.  This assumption is outdated at least for
OpenBSD, as per report from an anonymous 9.1 tester.  We can perfectly well
use HAVE_DLOPEN instead to decide which code to use.

Some other cosmetic adjustments to make freebsd.c, netbsd.c, and openbsd.c
exactly alike.

13 years agoAllow pg_upgrade with PGCLIENTENCODING set
Peter Eisentraut [Thu, 7 Apr 2011 16:22:34 +0000 (19:22 +0300)]
Allow pg_upgrade with PGCLIENTENCODING set

This used to work, but since PGCLIENTENCODING is now a connection
option variable, pg_upgrade would prevent it.

13 years agoFix SortTocFromFile() to cope with lines that are too long for its buffer.
Tom Lane [Thu, 7 Apr 2011 15:40:23 +0000 (11:40 -0400)]
Fix SortTocFromFile() to cope with lines that are too long for its buffer.

The original coding supposed that a dump TOC file could never contain lines
longer than 1K.  The folly of that was exposed by a recent report from
Per-Olov Esgard.  We only really need to see the first dozen or two bytes
of each line, since we're just trying to read off the numeric ID at the
start of the line; so there's no need for a particularly huge buffer.
What there is a need for is logic to not process continuation bufferloads.

Back-patch to all supported branches, since it's always been like this.

13 years agoPreserve pg_largeobject_metadata.relfrozenxid in pg_upgrade.
Bruce Momjian [Thu, 7 Apr 2011 13:57:09 +0000 (09:57 -0400)]
Preserve pg_largeobject_metadata.relfrozenxid in pg_upgrade.

This is needed only in 9.1 because only 9.0 had this and no one is
upgrading from a 9.0 beta to 9.0 anymore.  We basically don't backpatch
9.0 beta fixes at this point.

13 years agoSimplify structure of query used to gather database object information
Bruce Momjian [Thu, 7 Apr 2011 10:22:40 +0000 (06:22 -0400)]
Simplify structure of query used to gather database object information
in pg_upgrade.

13 years agoFix collations when we call transformWhereClause from outside the parser.
Tom Lane [Thu, 7 Apr 2011 06:34:57 +0000 (02:34 -0400)]
Fix collations when we call transformWhereClause from outside the parser.

Previous patches took care of assorted places that call transformExpr from
outside the main parser, but I overlooked the fact that some places use
transformWhereClause as a shortcut for transformExpr + coerce_to_boolean.
In particular this broke collation-sensitive index WHERE clauses, as per
report from Thom Brown.  Trigger WHEN and rule WHERE clauses too.

I'm not forcing initdb for this fix, but any affected indexes, triggers,
or rules will need to be dropped and recreated.

13 years agoRevise the API for GUC variable assign hooks.
Tom Lane [Thu, 7 Apr 2011 04:11:01 +0000 (00:11 -0400)]
Revise the API for GUC variable assign hooks.

The previous functions of assign hooks are now split between check hooks
and assign hooks, where the former can fail but the latter shouldn't.
Aside from being conceptually clearer, this approach exposes the
"canonicalized" form of the variable value to guc.c without having to do
an actual assignment.  And that lets us fix the problem recently noted by
Bernd Helmle that the auto-tune patch for wal_buffers resulted in bogus
log messages about "parameter "wal_buffers" cannot be changed without
restarting the server".  There may be some speed advantage too, because
this design lets hook functions avoid re-parsing variable values when
restoring a previous state after a rollback (they can store a pre-parsed
representation of the value instead).  This patch also resolves a
longstanding annoyance about custom error messages from variable assign
hooks: they should modify, not appear separately from, guc.c's own message
about "invalid parameter value".

13 years agoUpdate regression test files for PL/Python traceback patch
Peter Eisentraut [Wed, 6 Apr 2011 20:19:00 +0000 (23:19 +0300)]
Update regression test files for PL/Python traceback patch

13 years agoReplace the confusing exit_nicely() by an atexit/on_exit hook
Peter Eisentraut [Wed, 6 Apr 2011 20:00:44 +0000 (23:00 +0300)]
Replace the confusing exit_nicely() by an atexit/on_exit hook

13 years agoAdd traceback information to PL/Python errors
Peter Eisentraut [Wed, 6 Apr 2011 19:36:06 +0000 (22:36 +0300)]
Add traceback information to PL/Python errors

This mimics the traceback information the Python interpreter prints
with exceptions.

Jan Urbański

13 years agoUpdate key words table for 9.1
Peter Eisentraut [Tue, 5 Apr 2011 21:16:13 +0000 (00:16 +0300)]
Update key words table for 9.1

13 years agoRepair some flakiness in CheckTargetForConflictsIn.
Robert Haas [Tue, 5 Apr 2011 19:16:59 +0000 (15:16 -0400)]
Repair some flakiness in CheckTargetForConflictsIn.

When we release and reacquire SerializableXactHashLock, we must recheck
whether an R/W conflict still needs to be flagged, because it could have
changed under us in the meantime.  And when we release the partition
lock, we must re-walk the list of predicate locks from the beginning,
because our pointer could get invalidated under us.

Bug report #5952 by Yamamoto Takashi.  Patch by Kevin Grittner.

13 years agoChange "Id" to "id" in some SGML tags
Alvaro Herrera [Tue, 5 Apr 2011 18:06:06 +0000 (15:06 -0300)]
Change "Id" to "id" in some SGML tags

Gabriele Bartolini

13 years agoTypo fixes.
Robert Haas [Tue, 5 Apr 2011 16:40:17 +0000 (12:40 -0400)]
Typo fixes.

Erik Rijkers