Merge branch 'mdb.master' of ssh://git-master.openldap.org/~git/git/openldap

Use MDB_RESERVE for id2entry_put

Add MDB_RESERVE mode

When putting a record, just make space for the data, don't copy it.
(Not compatible with MDB_DUPSORT, since the actual data is needed
to determine the insert location.)

Tweak cursor adjustment code

Skip the original cursor that made the change

ITS#6979 avoid bash-ism

ITS#7006 fix MozNSS wildcard cert match

ITS#7034 use mutex for connection handshake when using PEM nss

PEM nss is not thread safe when establishing the initial connection
using SSL_ForceHandshake.  Create a new mutex - tlsm_pem_mutex - to
protect this function call.
The call to SSL_ConfigServerSessionIDCache() is not thread-safe - move it
to the init section and protect it with the init mutex.

ITS#7040 don't complain about other server's CSNs

Only worry if consumer has newer state for our SID. Fixes breakage
caused by ITS#6606.

ITS#7037 restart consumer on Persist errors

Consumer should never get NO_SUCH_OBJECT for an Add to the underlying DB
during Persist phase.

ITS#7037 fix syncrepl_add_glue for empty suffix

ITS#7051 fix GNUtls cert dn parse

ITS#7052 syncrepl deletes need a non-empty CSN

Must not let the underlying DB generate its own.

Make sure mdb_open actually got a sub-db record

Doc for the MDB_NOSUBDIR env option

Add MDB_NOSUBDIR option

Create the data file using exactly the given pathname, and
the lock file using a suffix on the data file name.

Reader table notes

assert cleanup

txn_abort/commit free all their cursors now.

Only free malloc'd cursors

Updated for mdb_txn_begin API change.

Nested txn stuff which we don't use.

Merge remote branch 'origin/mdb.master'

Track changes to all cursors.

For any change to a page or node, update all other cursors pointing
at the same page (or node). Cursors are now stored in a linked list
off their owning transaction. Cursors are all closed when the transaction
ends. Cursors in parent transactions are updated when their child
transaction commits.

Add support for nested transactions.

back-bdb/back-mdb IDL cleanup.

Parenthesize macros.  Microoptimize IDL search.  Use RANGE_<FIRST/LAST>
when IDL is known to be a range.

Cleanup ISO C compatibility for recent commits

More libmdb vs back-mdb C type tweaks.

Do not access a size_t via an unsigned long pointer, an MDB_val via a
berval pointer, or the inverse. Instead copy into the proper data types.

Merge branch 'mdb.master'

libmdb IDL cleanup.

Microoptimize IDL search.
Use RANGE_<FIRST/LAST> when IDL is known to be a range.

Additional fix for prev commit

Merge branch 'mdb.master' of ssh://git-master.openldap.org/~git/git/openldap

Make sure 2 subpages fit in one real page

Merge remote branch 'origin/mdb.master'

Fix last delete from a subpage

Fix 09006ccec7928c9cf53bca6abe741e8d4d466c98

Check for stale DBs was in the wrong place.

Fix prev commit

Don't truncate all indices if specific indices were given.

Support index truncation

Merge branch 'mdb.master' of ssh://git-master.openldap.org/~git/git/openldap

Fix mdb_drop() if not deleting the DB record

Fix typo, minor cleanup

New mdb_close() signature

Merge remote branch 'origin/mdb.master'

Support single parameter substitution in filter

Add mdb_drop() for deleting a DB

Allow MIDLs to grow arbitrarily, to allow unlimited number of
pages to be freed in one txn.

API change, consistency check

mdb_close() takes an env, not a txn.
Also, add check for stale DB records (in case some other process
wrote to the DB last).

Merge branch 'mdb.master' of ssh://git-master.openldap.org/~git/git/openldap

New sorted-dup subpage support

Instead of converting directly to a subDB when the first duplicate
item is seen for a key, convert to a subpage instead. Allow the
subpage to grow up to the overflow limit, then convert to a subDB.
This saves a significant amount of space in a typical slapd index
database.

Currently we don't convert back to the smaller form if items are
later deleted. Probably could do that with some hysteresis, e.g.,
convert back from subDB to subpage when the size drops below
(overflow limit/2). Maybe later.

deltasync test tweaks

Check replication success before stopping consumer.
Set retry/interval to make sure consumer reconnects after provider restart.

Merge branch 'mdb.master' of ssh://git-master.openldap.org/~git/git/openldap

Use FNV-1A hash to generate unique mutex names

For Windows and MacOSX

Merge remote branch 'origin/mdb.master'

Doc tweak - txn flags

MacOSX semaphore names are limited to 31 chars

Including the terminating NUL. Good job documenting that, guys.

Merge remote branch 'origin/mdb.master'

Add MacOSX support

mmap() with FIXEDMAP fails, otherwise things work.

Fix entry_alloc with no attrs

Fix onelevel search from last commit

Minor doc cleanup

More docs

Namespace cleanup

More search optimization

Tighten up entry_alloc/entry_decode
Track parent nodes in idscopes

Tentative speedup - use plain ints for entry_encode/decode

Keep entries word-aligned. Yields ~10% speedup, but also 10% more space used.
May revert this if the space cost is unacceptable.

Merge remote branch 'origin/mdb.master'

Tweak search_node inner loop to avoid LEAF2 checks

cursor_set/search_node tweaks, use intcmp when possible

mdb_db_close() should not force env_sync in quick mode

Resolve MDB/HDB monitor OID clashes

Just use memcpy since we know it's non-overlapping

Tweak back-mdb integer types to match libmdb.

Also do not cast between berval and MDB_val.  That breaks when
sizeof(berval.bv_len) != sizeof(MDB_val.mv_size).

Minor tweaks, update relfunc behavior

Merge remote branch 'origin/mdb.master'

More cursor_init cleanup

One more sub-cursor fix

Merge branch 'mdb.master' of ssh://git-master.openldap.org/~git/git/openldap into mdb.master

Fix 2e3bc39fa94f21d692d8e94183f57aef9122c487

Various mistakes when converting from previous data structures.
Add a few more debug asserts/sanity checks.
Split all "if (foo) return" constructs to separate lines to allow
easier breakpoint setting.

Add mtest6 for checking mdb_split() behavior. This needs to be
expanded to check rebalance/merge cases too.

Fix mdb debug formats

Restore missing LAZY_LOCKS semicolon.

Lost in C90 compat commit c5dad7a6d0eb1b3597beda18b38fe92820df0d30.

mdb integer type cleanup: Use MDB_dbi consistently.

This changes the prototype of mdb_env_set_maxdbs().

Drop ULONG in favor of size_t.

Add mdb.c:txnid_t for readability.

Maybe later we'll test txnid wraparound with it defined to ushort.

mdb type cleanup: Consistent reader count types.

Use unsigned int for reader counts/max limits, that's the smallest
change.  Don't need uint32_t when mdb_env_set_maxreaders() takes less.
Change prototypes of mdb_env_set_maxreaders,mdb_env_get_maxreaders().
Check the mdb_env_set_maxreaders() argument.

explain mdl_midl_sort() istack size

Fix memn(r)cmp of key sizes > INT_MAX.  Simplify.

Check some mdb integer type assumptions

Put MDB_node.<mn_lo,mn_hi> in host byte order.

C90 compatibility cleanup in mdb.

Fix void* pointer arithmetic in cintcmp().
Fix invalid ';'s in declarations after possibly-empty macros.

Fix - slapcat doesn't set op->o_hdr for tmpmemctx

Cleanup mdb macros.

Parenthesize.  Rename GetPageSize -> GET_PAGESIZE since it does not
behave like a function (it has a non-pointer output argument).

libmdb/.gitignore += test[45], Doxygen output

Merge branch 'mdb.master' of ssh://git-master.openldap.org/~git/git/openldap

Fix out-of-order slapadd

If put(NOOVERWRITE) exists, return existing data

Fix bogus error codes

Minor typos, additional clarification

Keep cursor open for id2entry

Add a few NULL checks to defend against dumb API checkers.

Unfortunately automated checkers don't seem to read the documentation
for how APIs are expected to be used, and the C declaration syntax
isn't expressive enough to encode the documented usage.

Use tmpmem-based entries

Drop referral.c

Merge branch 'master' of ssh://git-master.openldap.org/~git/git/openldap

Add Valgrind mempool support.

Compile with -DUSE_VALGRIND. It will attempt to keep Valgrind
informed of our memory allocations. Frees are trickier since they
may be deferred indefinitely.

Partial revert, fix MDB_page definition