Merge remote-tracking branch 'origin/mdb.master'

Rename libmdb to liblmdb

Add install target

Rename mdb.h to lmdb.h

Merge remote-tracking branch 'origin/mdb.master'

Rename libmdb to liblmdb, lmdb.h

Avoid naming conflicts with other mdb* packages. Bump version to 0.9.5

ITS#7455 use freelist for overflow pages

Drop unneeded #include <time.h>

Doc layout tweaks

mdb_env_sync(,force=1): Override MDB_MAPASYNC.

With MDB_MAPASYNC, the API provided no way to ensure full sync.

mdb_cursor_dbi(): Assume valid args.

It returned 0, which is the freelist DBI and is valid for a few uses.

API change: mdb_drop() only accepts del=0 or 1.

This allows for other flag values in the future.

API change: mdb_env_set_maxdbs(, *named* DBs).

Let the user specify the number of databases he will actually
use. Adding 2 for FREE_DBI and MAIN_DBI is an internal matter.

ITS#7453 Fix reset of MDB_NOSYNC/MDB_NOMETASYNC.

mdb_env_open() with these flags did not open a synchronizing
file descriptor.  Thus disabling them later did not work.

Tweak MDB_FIXEDMAP handling.

Drop mmap()'s MAP_FIXED flag, so it returns another address instead
of unmapping existing overlapping pages. Verify the returned address.

Renumber MDB_NOSUBDIR. Check mdb_env_open() flags.

MDB_NOSUBDIR was == MDB_REVERSEKEY. That affected the freelist:
Env flags are stored in mm_flags alias mm_dbs[FREE_DBI].md_flags.

It stays a persistent flag, in case mdb_env_open someday wants
to pick/verify which lockfile to use with the datafile.

Catch bad flags so they will no longer make it into the data file.

ITS#7451 fix back-ldif return on empty dir

Broken by commit 2d1af3f2f7e32eca5ff77e7e018e88d690ba5e79

ITS#7452 fix typo in envflags

ITS#7431 fix constraint_check_restrict segfault

ITS#7450 enforce SLAPD_MAX_DAEMON_THREADS

Also allow the max to be redefined at compile time. Of course, there is no
legitimate reason to do so.

ITS#7449 fix signedness for index_substr_any_*

Of course, no one would ever have any legitimate reason to set these
items to anywhere near such extreme values in the first place.

ITS#7428 Use non-blocking IO during SSL Handshake

If a timeout is set, perform the SSL Handshake using non-blocking IO.  This way
we can timeout if SSL Handshake gets stuck for whatever reason.

This code is currently hidden behind #ifdefs (LDAP_USE_NON_BLOCKING_TLS) and
disabled by default as there seem to be some problems using NON-blocking
I/O during the TLS Handshake when linking against NSS (either a bug in NSS
itself of in tls_m.c, see discussion on -devel)

This patch adds an additional parameter to ldap_int_poll() in order to indicate
if we're waiting in order to perform a read or write operation.

ITS#7445 fix deref control exposure

do not expose control until deref overlay is actually instantiated at least
once (see also ITS#6647)

Fixed insertion of the overlay_remove callback (SLAP_CONFIG_DELETE)

ITS#7436 slapo-deref: call overlay_register_control in db_open

Merge remote-tracking branch 'origin/mdb.master'

ITS#7432 fix typo in mdb_midl_sort

Wasn't pushing the optimal half of the array onto the stack,
thus used more stack than expected -> overrun.

ldapc++: fix builds with gcc-4.7 (ITS#7281,ITS#7304)

ITS#7426 ignore syncrepl ops

ITS#7427 fix for spurious old entries

Merge remote-tracking branch 'origin/mdb.master'

ITS#7423 Update slapo-constraint tests

ITS#7418 Fix slapo-constraint: handle uri and restrict correctly

Better fix for MDB_DEBUG tweak -- from hbf

Revert "MDB_DEBUG tweak for old compilers"

This reverts commit ef2092eac9f35b77eae250801c96dfa515c6d4b2.

MDB_DEBUG tweak for old compilers

More backend info updates: MDB, NDB

ITS#7421 move olcExtraAttrs to Frontend options

Merge remote-tracking branch 'origin/mdb.master'

Fix flag checks in mdb_open

fix Windows mdb_env_copy(), WriteFile overflow

Merge remote-tracking branch 'origin/mdb.master'

Make sure mdb_open flags are committed on main DB

If no data was modified in the txn, mdb_open flag changes were dropped.

Minor cleanup

Fix MDB_PREV

Could return 1 garbage record before actual data, if starting from EOF

ITS#7402 tweak prev commit, use hex for txn IDs

ITS#7402 fix potential txn leak in online indexer

ITS#7402 add txnID to debug output to aid tracing

Tweak output, add free page info

Add mdb_env_info() to retrieve interesting env params

Merge mdb_stata into mdb_stat

Make sure increases of mapsize are persisted

Fix test060-mt-hot debug level

ITS#7377 Errorcheck Windows calls and thread keys.

Explicitly unlock the MDB lockfile on Windows.

mdb_env_open(): Keep mdb_env_set_flags() flags.

More for mdb_env_copy().

Fix #define _GNU_SOURCE = 1 to match any command line -D_GNU_SOURCE.
.gitignore += mdb_copy.

Fix last commit.

Add flag MDB_ENV_ACTIVE instead of using the state of me_lfd.
Require MDB_RDONLY for MDB_ROFS.  Swap reader/writer mutex lock.

Support read access on read-only media

Silence warning in prev commit

ITS#7416 make sure to reopen attr DBs after env reopen

Add mdb_copy for backing up a DB environment

ITS#7411 delete trailing whitespace in ldap_get_option.3

ITS#7414 fix slapo-rwm modrdn cleanup

newSup is NULL if it was specified, but same as old Sup.

Tweak MDB restrictions

ITS#7403, #6296 fix AUTHZ_BACKEND handling

c_authz_cookie should only be set on explicit Bind requests.

Fix mdb_open() off-by-one error in maxdbs check

ITS#7377 Wrap fcntl F_SETLK in EINTR loop too.

This can happen even on local filesystems.

ITS#7377 Catch ftruncate() error

ITS#7377 Document caveats/troubeshooting.

Merge remote-tracking branch 'origin/mdb.master'

Fix prev commit

It only worked if the freelist was already non-empty

Merge remote-tracking branch 'origin/mdb.master'

Fix mdb_drop

if it was the only operation in a txn, it would be ignored.

ITS#7366 Update slapo-constraint tests

Merge remote-tracking branch 'origin/mdb.master'

ITS#7385, check further for bad splits

More for 48ef27b6f5c804eca6a9d27f8dd2b4ded376f8af
Our definition of "large" data item needs to be smaller to
handle more cases where a bad split is possible

ITS#7405 note refint is not replicated

Fix MDB objectClass so that MDB will load

ITS#7403 fix idassert non-override mode

More for envflags

If trying to alter a non-resettable flag, just close/reopen the env.

Add envflags for MDB config

allows setting writemap and some other useful flags

Merge remote-tracking branch 'origin/mdb.master'

Add MDB_GET_CURRENT

return whatever the cursor is currently pointing at

Regenerate for cb1b9e2a3e4acef4695f69494be4389a13800c64

Merge remote-tracking branch 'origin/mdb.master'

ITS#7394 ignore WRITEMAP if RDONLY

Merge remote-tracking branch 'origin/mdb.master'

More for 48ef27b6f5c804eca6a9d27f8dd2b4ded376f8af

page_split with newindex > split_indx

More for ab04c50a32275e216b82edaeeed50208cf49336b

Use explicit MDB_RDONLY flag

ITS#7377 Catch MDB user errors.

ITS#7377 Catch MDB setup errors and clean up.

ITS#7364 Limit mdb lock upgrade before sem_unlink.

Do not try shared lock when closing or after error.  Track file lock
state to decide.  Change meaning of *excl to reflect file lock state.

ITS#7364 Always sem_unlink() in mdb_env_open().

Drop the sem_unlink() error checks, which could prevent the 2nd
unlink.  Instead use O_EXCL in sem_open().

This makes "open+close the database" the API for trying to clean
away the old semaphores, if they were left behind by a previous run.

ITS#7377 Wrap sem_wait & file locks in EINTR loops

Remove mdb data races. Use (txnid_t)-1 as "no ID".

Avoid race between numreaders++ and reading numreaders at cleanup. Make
the un-mutexed reset of reader table entry, atomic: Reset mr_pid only.

Instead check mr_pid != 0 in mdb_page_alloc()'s scan for readers.
(txnid_t)-1 as "no ID"-mark avoids a check for mr_txnid != 0.
The scan can stop when seeing an old reader.

Save pid in MDB_env instead of repeating getpid().

An open MDB environment does not survive or catch fork(),
so repeating getpid() was pointless.

MDB_WRITEMAP needs no DSYNC descriptor (me_mfd)

ITS#7363 Preprocessor namespace cleanup.

Rename USE_POSIX_SEM to MDB_USE_POSIX_SEM.
Separate MDB_FDATASYNC from MDB_USE_POSIX_SEM.

More for ab04c50a32275e216b82edaeeed50208cf49336b

Fix typos, error code ranges