bdr_init_copy: clean the sequence amdata cache on new node

Fixes #101

Backport to 0.9.2

Add function to clear sequence's amdata

Function bdr.bdr_internal_sequence_reset_cache(regclass) sets the amdata
of the sequence to NULL and schedules sequencer wakeup.

This is first step for implementing GH #101.

Backport to 0.9.2

Permit DML on pg_catalog tables

Because many pg_catalog tables don't have a PRIMARY KEY we were
rejecting DML on them. Since pg_catalog writes don't get replicated
anyway, it's safe to permit such writes.

Fixes #102

bdr_init_copy: O_CREAT requires 3 param open()

Check for zero exit codes

Also fix program name in logging output

Pre-create bdr_init_copy log before base backup

If bdr_init_copy's CWD isn't writeable then it'll bail out when
it first tries to start PostgreSQL, after it's already done the
base backup.

Fixes #99

Check exit status of pg_resetxlog and pg_basebackup

bdr_init_copy wasn't checking exit status from pg_resetlog,
and was doing so incorrectly - though harmlessly - for
pg_basebackup.

Related to #100

Check return values for pg_ctl invocations in bdr_init_copy

Fixes #100

Spelling in PRIMARY KEY error

doc: add --replication_sets option for bdr_init_copy

bdr_init_copy enhancements

Add --replication-sets command line parameter.
Specifies which replication sets to use for the new node. If not
specified the bdr_init_copy will check if all nodes in the bdr cluster
use same replication sets and use that one for the new node
automatically (instead of default). If the existing nodes don't all use
same replication sets it will throw error unless --replication-sets was
specified.

If the local data directory contains PostgreSQL data folder, check if
the system identifier is same as the system identifier of the remote
node. (GH #91)

When the remote node has multiple BDR activated databases make new
connections to all of them from the new local node. (GH #88)

Correctly set node_local_dsn for the new node.

Document -v option for increasing verbosity in --help output.

bdr_init_copy: only treat dbname as connstr if it's in connstr format.

Add our own function for finding Postgres binaries

We need our own function because the built-in function compares the
binary version including the minor version and since BDR is an extension
it's not realistic to support every possible version combination. The
BDR specific function for finding and validation of Postgres binaries
doesn't do version validation but instead returns major version in the
PG_VERSION_NUM format so it can be easily compared by the caller as
needed.

The pg_dump and pg_restore in bdr_init_replica and pg_ctl and
pg_basebackup check in bdr_init_copy are using the function now.

Don't insert node in bdr_init_copy in UDR mode.

Fix DROP replay of functions with no parameters.

Explain that you can't part a node from its self

Improve error message on insert/insert multi-unique conflict

Add documentation for bdr_get_local_nodeid()

Fix doc references for bdr_get_local_node_name()

Documentation Typo

Several documentation corrections

Document that bdr_initial_load exists but is internal

Closes #76

Correct --help output for bdr_initial_load

Per report in #76

Build instructions changes for UDR

Closes #74

Fix copy pasto in previous commit

Make sequence pernode cache configurable

Reloption cache_chunks added which sets how many chunks should be voted
for and cached on each node.

doc: add missing '=' to bdr_init_copy parameters

Highlight replication sets fix in 0.9.1 relnotes

doc: Fix typo

doc: bdr_get_node_name -> bdr_get_local_node_name

Add missing schema qualification

doc: fix typo

Add missing 'bdr_' prefix

Release notes for 0.9.1

Bump version to 0.9.1

Add bdr.bdr_apply_is_paused() information function

This makes it possible to see whether replay is paused on
a node.

Also adds some tests for pause/resume.

Closes #59

doc that bdr.bdr_replicate_ddl_command takes fully qualified name

Closes #70 by documenting that bdr.bdr_replicate_ddl_command requires
fully qualified objects.

Update bdr_dump to include setval fixes

Update bdr_dump from bdr-pg/REL9_4_STABLE to include:

3ab2f78 Don't dump setval(...) for 'bdr' sequences
1592812 Only dump non-default sequence access methods

Update bdr_dump to 9.4.2 + --snapshot

Update copy of pg_dump with snapshot support for UDR to the
version from bdr-pg/REL9_4_STABLE . We can't use stock pg_dump
because we need support for dumping from a pre-established
snapshot, which is added in the BDR tree.

Fix UDR for bdr_locks after a1b2dfa82 permit_ddl_locking

bdr: Send pgstat upon replayed commit in apply process.

Previously it was only sent at apply worker shutdown.

bdr: Improve sequencer locking and pgstat reporting.

Up to now the sequencer locked its relations exclusively to prevent an
interlock with apply. That was problematic, because it would often
prevent auto vacuum/analyze from running, or interrupt it.

Instead of locking the underlying relations lock the bdr seqam object
and add code to apply to also acquire that lock. That allow autovacuum
to run undisturbed.

Testing brought an additional problem to light, namely that pgstat
records weren't sent in the sequencer until shutdown, which means that
in many situations autovacuum won't be trigger in time. This is a more
widespread problem than just the sequencer, but here only the sequencer
is fixed.

bdr: Adjust database name in debug message.

bdr.table_set_replication_sets should permit unsafe commands

In 4005c1d bdr_replicate_ddl_command was changed not to override the
command filter, but this broke replication sets in UDR, since they have
to use SECURITY LABEL.

SET bdr.permit_unsafe_ddl_commands on bdr.table_set_replication_sets
since it knows what it's doing.

Fixes #67

Note: The ddl/replication_sets tests cannot be run as-is on UDR because
UDR does not replicate changes to replication sets. We really need
separate tests for this that cover UDR (or BDR+subscribe).

Don't specify the sequence am in UDR.

The initial cloning needs more tests, including data, but that requires
larger changes to several tests than I want to do in the fix commit
itself.

Fixes #69

Initial code to actually remove slots when parting a node.

This removes a slot when
a) It is of a remote node that has been parted.
b) We have been parted, and there are remote slots. It is not guaranteed
   that we're notified of that case, but it seems worthwhile to handle
   nonetheless.

Better error message if PG_CONFIG is nonsense

fixup! Add a test for node part

Didn't check in the expected/ data

Add a test for node part

This shows that the slots are currently _not_ correctly dropped.

Fix broken supervisordb test

Prevent users from connecting to bdr_supervisordb

This won't stop bgworkers, but they should hopefully know better.

Use correct replication set and apply delay config in apply.

fix bdr_init_copy for UDR

Prevent attempts to create/drop/rename  bdr_supervisordb

When the BDR extension is loaded, BDR its self can create
bdr_supervisordb, but applications cannot. This gives users
a better error message if they try to drop it, too, e.g.

DROP DATABASE bdr_supervisordb;
ERROR:  The BDR extension reserves the database name bdr_supervisordb
for its own use
HINT:  Use a different database name

Backport bdr.permit_ddl_locking to 0.9 stable branch

See 330dd989d94b53cd8cf70d6a31d0f93b87599812 for the
original commit with full details.

This incorporates the subsequent docs <para> fix and
the change of the default from false to true.

More detail on DDL rep, mention use of replicate_ddl_command

Clarify that you can only monitor lag from an upstream

Per query from the mailing list,
http://www.postgresql.org/message-id/F38D1020-3B2C-41CF-BECD-1F1FB5B19806@visi.com

More docs on DDL locking

The apply worker wasn't checking for postmaster death when paused

Fixes #58

Correct lock level in filter_AlterTableStmt()

Missing separation coma in the bdr.bdr_group_join example

Fixes for UNLOGGED tables in the command filter

The command filter was checking only for temporary tables when deciding
whether to skip DDL locking, and when performing some operations, but
for others was permitting UNLOGGED tables too.

Consistently use UNLOGGED||TEMP throughout.

Fixes #44

Fix typo in previous commit

bdr_init_copy: insert correct bdr_node entry

bdr_init_copy: properly escape single quotes

Typo in bdr_init_copy help information

Typo in the docs

Make PG_CONFIG a declared precious configure variable

It'll show up in help and appear in the config cache.

Fix incorrect AC_ARG_VAR usage, make PATH a precious var with decription

This makes configure consider the PATH important and documents that
it affects where we find pg_config .

Rename 'bdr' reserved db to 'bdr_supervisordb'

Lower log level of 'Found bdr_connections entry ' log lines

These are internal debug/informational messages.

Don't acquire table locks in command filter.

The filter_AlterTableStmt() function was using
AlterTableGetLockLevel(astmt->cmds) to determine lock level which to use
on relation being ALTERed. This can cause deadlock against bdr_apply
when the apply is trying to catch up with changes from another node to
synchronize cluster for a DDL lock - any concurrent DML that is coming
from another node will never get the row lock grant because the table is
already locked by the backend performing the ALTER on it.

We now get the relid with NoLock which should be safe as we don't allow
concurrent DDL anyway so the table can't change under our hands.

Document pg_xlog_wait_remote_recieve and pg_xlog_wait_remote_apply

Swap "node management" and "configuration settings" chapters

Per suggestion from Martín.

Closes #38

doc: Fix typos in function names.

Fix bdr.bdr_replication_identifier table definition

The bdr.bdr_replication_identifier was mistakenly defined in extension
SQL file with two additonal columns, but the C code didn't expect them
this lead to memory corruption. It was identified by make check failures
with clang compiler.

doc: Print BDR version in the title.

doc: Add optinal website-build flag

doc: Make the font bit nices

Fix identifier test so that it works for UDR too.

Revert inadvertent test change done in d8fc209d5

doc: Remove mentions of bdr-plugin/stable branch from docs

doc: Reword installation requirements slightly

doc: fix a couple of xreflabels

doc: misc typo fixes

Document tree structure for github README

Fix PK detection on inherited tables.

We don't allow UPDATEs or DELETEs on tables without primary key but the
code for detecting if table has primary key didn't work correctly when
the UPDATE/DELETE was run on parent table which had primary key but the
command has propagated to an inherited table didn't have primary key.

In passing, fix the primary key detection for a less common use case:
WITH foo AS ( UPDATE table_without_pk ... RETURNING * )
INSERT INTO table_with_pk SELECT * FROM foo;

doc: psql provided by BDR-PG has seqam support in \ds.

doc: Remove incorrect warning about bdr.bdr_replicate_ddl_command().

fix link

doc: Mention 2ndQuadrant prominently in top level, relnotes

doc: Document apt repo key ID

doc: Make it clear that conflicts and repsets docs are in dev

doc: Sort relnotes newest to oldest (desc)

doc: Mention Debian/Ubuntu packages

doc: Flesh out 0.9.0 relnotes

bdr: Flesh out 0.8.0 relnotes

doc: Skeletal documentation on catalogs, conflicts, more on monitoring

doc: Examples of node removal

doc: Remove superceded distributed sequences docs