bdr: conflict handling refactor phase 2

New logging API has one unified function that creates Conflict object
which then can be used to log both into server log and to table.

Logging of all conflict types was unified under this new API.

Added two new conflict resolution types 'apply_change' and 'skip_change'
which are used in places where it's impossible to use conflict handlers
(like delete_delete conflict) and also in UDR instead of last update
wins.

In passing fix the timeframe handling of user defined conflict handlers.

bdr: Add regression test for ALTER TABLE ... RENAME COLUMN TO.

bdr: Out of tree builds work again.

bdr: configure update

bdr: add missing Makefile for bdr_dump.

bdr: Use bdr_resetxlog and bdr_dump instead of Postgres version of those.

bdr: pg_dump: Apply BDR patchset and build as bdr_dump.

bdr: Embed pg_dump from 9.4

bdr: pg_resetxlog: Add -s and -c options and build it as bdr_resetxlog.

bdr: Embed pg_resetxlog from 9.4

bdr: Add test for extension upgrades.

bdr: Allow to replicate insert/update/delete selectively on a per set basis.

Currently the user interface for this is the
bdr.bdr_replication_set_config table. We'll need a layer ontop of
that.

This commit also introduces some other novelty because it starts to
create the initial version specific extension scripts out of
components.

bdr: Output plugin installs bdr extension if missing now.

This is needed for UDR case (there is no perdbworker on master node at the moment).

bdr: Cache information about a relation being replicated in an output plugin.

That's primarily useful because it will make it easier to maintain the
state necessary for replication set wide settings. But the new
infrastructure is also generally more efficient.

The information is added to the bdr relation descriptor - as logical
decoding maintains that cache coherently that's quite convenient.

bdr: Try to make bdr_relcache.c's logic works correctly for recursive flushes.

bdr: Add tests for the effects of replication sets to replicated data.

bdr: Add basic test for replication set manipulation.

The test needs to be expanded with actually testing whether sets
properly control replication.

bdr: Actually andle the implicit 'all' and 'default' replication sets.

bdr: Increase validation around replication sets.

bdr: Automatically remake makefile when Makefile.in changes

bdr: Initial implementation of replication sets.

Tables can be added to replication sets using
SELECT bdr.table_set_replication_sets('do_replicate_tbl', '{do_replicate}');
and viewed
SELECT bdr.table_get_replication_sets('do_replicate_tbl');

Nodes by default replicate all replication sets, but can be configured
to only consume specific ones using the bdr.%s_replication_sets GUC.

Tests are sorely needed.

bdr: Include Makefile.custom if it exists.

That allows to add local, additional, rules. Useful e.g. to add
flymake support.

bdr: Make use of the updated GetReplicationInfoByIdentifier interface.

bdr: Try to make configure (i.e. sed) work on OSX.

Also fix future issue that bdr wouldn't detect 9.4.0+ properly.

bdr: Add autoconf output to make compiling on odd platforms easier.

bdr: Update the installation instructions.

bdr: Fix path to pg_regress in run_tests to work in more environments

bdr: Add minimal installation instructions for bdr plugin.

bdr: Move flush/feedback association logic entirely to bdr_apply.c

bdr: Schedule sequencer wakeup in a couple more situations.

That allows a bit higher sequence throughput.

bdr: bdr_init_replica fixes (correct version check + correct build)

bdr: Extend maintainer-clean target for autoconf/configure output.

Add a autoconf generated configure build infrastructure.

This allows us to check that we're compiling against a sane version of
postgres. And later to switch between building udr/bdr.

bdr: Add omitted break in commandfilter.

Luckily the omission turned out to be harmless.

bdr: Allow CREATE TABLE AS/SELECT INTO when targeting temp tables.

bdr: Adapt gitignore to the new out-of-tree situation

bdr: Rework build/test infrastructure to better work as a out of tree module

We now implicitly build using pgxs and have our own wrapper around
pg_*regress to run make check without a sourcetree around. Also tests
are based on a commonly included config file instead of duplicating
things over and over.

bdr: add a git-dist target to the Makefile

You can now prepare dist tarballs of the BDR extension. They'll contain the BDR
version in the filename and will have the git revision in a .distgitrev file in
the tarball. There's also a .distgittag file that contains the tag if there's
one, or 'undefined' if there isn't.

Document making dist tarballs in the README.developers too.

bdr: WAL log bdr sequences correcly

bdr: fix isolation tests after move

bdr: copy bdr isolation tests from base tree

in preparation for their removal there

bdr: Don't try to forbid T_AlterTableSpaceMoveStmt - doesn't exist anymore

It's replaced by a ALTER TABLE veriant that should be fine.

bdr: Remove version suffix from quickstart script

The --with-extra-version suffix was breaking some tools, so
remove it. We can now check the version using bdr.bdr_version()
anyway.

bdr: Disallow calling setval() on distributed sequences.

We actually allow setval() to be called, as long as it's not changing
values. That's required because the relevant code is called from other
contexts as well.

bdr: fix the possibly broken^Conflict history sequence in upgrade script

See 766e3bcb3c3c37981b12f93d0e4210213fa281c2 for more info.

bdr: decouple conflict logging and remote apply

Previously we always logged even applyed rows (which are not technically
conflicting) with optional check for apply_update. Now we log based on
what is actually happening and if the row was conflicting or not.

This also removes the bdr.log_applyed_conflicts config option as it's
not needed anymore.

bdr: Replay all insert/update/delete messages while in MessageContext

That allows us to decode large transactions more
efficiently. Previously we leaked memory until a commit was being
replayed.

bdr: make sure the conflict history sequence is created as local one

This fixes #RT-37956 and possibly #RT-37944.

Per Andres.

bdr: be more specific in ALTER TABLE rejections

try to reject unsupported/unsafe ALTER TABLE statements with
some info about what exactly is unsupported/unsafe.

RT-#37879

bdr: drop replication identifier correctly on logical replica init failure

bdr: Fiddle with logical replica init message log levels.

bdr: Use find_other_exec() API correctly when searching for bdr_init_replica.

The previous code only somewhat worked because the calling code
incorrectly checked for success.

bdr: Properly accept -V in bdr_initial_load invocations.

Otherwise find_other_exec() can't work correctly.

This requires the file to be generated automatically - lest we
manually change it after every version number increment. Use sed for
that for now, windows already isn't supported by it.

bdr: Echo error messages to stderr in bdr_initial_load.

bdr: Concentrate global guc creation to bdr.c:_PG_init().

Easier to get an overview this way.

bdr: Minor cleanups in bdr_maintain_schema().

bdr: Make bdr_init_copy output the newly created system identifier.

bdr: Add -o option to bdr_init_copy which is passed through to pg_ctl's -o.

bdr: Add trailing \n to all die() invocations in bdr_init_copy.

bdr: don't replicate DDL executed during internal schema maitenance

bdr: Reload configuration files after SIGHUP

bdr: bump version to 0.7.1

Main point of this release is to add pg_replication_identifier_drop() when missing.

bdr: Fix typo in printing of LSNs

bdr: bdr_init_copy use pg_replication_identifier_drop to drop unwanted identifiers

bdr: allow ALTER TABLE ... DISABLE/ENABLE TRIGGER commands

bdr: make ddl/view tests more stable

bdr: Properly free tuple table slots in conflict logging code.

This lead to "TupleDesc reference leak: TupleDesc %p (%u,%d) still
referenced" warnings when bdr.log_conflicts_to_table was enabled.

bdr: tests for functions containing windows newline

This is test for RT-#37936.

bdr: Fixup tests for amdata removal from psql

bdr: Disable function body checks during apply

That's necessary because
a) the creator of the function might have had it disabled
b) the function might be search_path dependant and we don't fix the
   contents of functions.

bdr: Add error context callbacks for ddl replay.

This is useful to be able to much easier diagnose ddl replication
problems/bugs.

The implementation for ddl drops is rather ugly, but better than
nothing.

bdr: Run both isolation and plain regression tests during 'make check'

bdr: Respect bdr.skip_ddl_replication for queued drops.

Previously only CREATE/ALTER respected it.

bdr: Demote some sequence log messages to DEBUG2

bdr: Consider a sequence vote successfull in more scenarios.

If either there's no nays or the number of yays is bigger than the
concensus the vote can be considered successful. We don't want to
always wait for a majority of yays, because that'd possibly delay
voting for a long time, even if enough nodes for a consensus on
another chunk are online.

bdr: Limit the amount of time spent in voting.

Don't endlessly vote if there's votes to be done. As voting happens
inside a single xact that'll just lead to large transactions that the
other nodes can't see yet.

bdr: Vote on several sequences at once to speed up the voting process.

We can only vote on elections started by a single node at a time
without further complications. The problem is that otherwise two votes
could conflict which isn't trivial to detect in a query. Select one
node with open elections and vote on up to 1000 elections started by
that node.

bdr: Add indexes to make sequence voting faster.

bdr: Fix type of bdr_votes.dboid column to oid from bigint

This prevented index usage in at least one query.

bdr: add conflict logging tests

New isolation tests for simple insert_insert, update_update,
update_delete and delete_delete resolving/logging tests.

In passing make the isolation test initialization more sane.

bdr: make conflict logging behave consistently

Conflict logging was mess, some of the conflicts were logged to table,
some to server log, some as DEBUG, some as LOG, the log messages looked
completely differently for each conflict, etc.

This patch introduces single interface for logging into server log which
is always called and has common log line template and handles all
current case.
Other change is that all conflicts can now be logged to the log table
(previously only insert_insert conflicts could be logged there).

This is step1, not the final code, but it brings enough improvement that
it's worth committing as is.

bdr: add delete_delete conflict type to bdr_conflict_type.

Bump BDR extension version accordingly and when at it bump the BDR version too.

bdr: add minimum bdr version to the output plugin options

This enables BDR upgrades without dump/reload in the future.

Note that this change breaks compatibility with any previous version.

bdr: tests for ddl lock conflict

bdr: Improve concurrency and error recovery of ddl locking.

Previously there were three major issues:

* If we failed acquiring the lock on some, but not all nodes we didn't
  always send out a message forcing the lock to be released again on
  the succeeding node.

* There were some scenarios in which a lock was held only
  intermittenly in a way that allowed the lock's state to change in
  unhandled ways.

* Two backends within a single node didn't really protect against each
  other requiring the ddl lock. That's not really problematic in itself
  because locally there's plain relation locking to take care of things,
  but two concurrent lock acquisitions could cause problems.

Now we'll always send lock release messages if we fail during the
acquisition of a lock. That means that nodes need to be prepared to
deal with the fact that a lock is released that's not held.

RT-#37905

bdr: Improve log messages about ddl locking.

A previous commit changed the capitalization wrongly. Also add a bit
more detail about which nodes are holding the lock to some error
messages.

More work is needed, but it's a clear improvement already.

bdr: add GRANT/REVOKE tests

bdr: Emit informative error messages for global sequence failures

Related to bug #37914

bdr: Minimalist error message notes and link to style guide

bdr: Avoid date --iso-8601 , OS X doesn't like it

Report per Ian Barwick

bdr: make ddl/function tests more stable across environments

bdr: Test ALTER SEQUENCE USING support

bdr: Make ddl/function test independent of login username

Create two new users, 'super' and 'nonsuper', during init. These
may be used for any test.

Run ddl/function tests as the 'super' user instead of the user
with the same name as the current unix user that pg_regress
will otherwise pick, so output is stable.

bdr: Don't attempt to use get_database_name unsafely

The prior commit "bdr: Show database name when a DDL lock error is encountered"
added use of get_database_name(..) to clarify an error message. However, it's not
always safe to access the catalogs from this call site.

Remove the unsafe call and document the issue in the code so it won't be added
back later.

bdr: Remove bdr: prefixes from messages

bdr: fix typo in variable name

bdr: disallow UPDATEs and DELETEs on tables without PK

bdr: refactor apply main loop into separate function

The main loop is now in bdr_apply_work, and was moved from bdr.c to
bdr_apply.c where it belongs more naturally.

In passing start updating rollback stats counter properly.

bdr: make bdr stats work for inserts and make updates stats behave consistently

 * insert count is increased every time row was added/updated
 * insert conflict count is increased for every logged conflict
 * update count is increased ever time row was updated
 * update conflict count is increased for every logged conflict
 * delete count is increased for every existing row
 * delete conflict count is increased for every missing row

bdr: change loglevel for DELETE conflicts to LOG for consistency