More for cursor reuse

Keep some dn2i/id2e cursors open longer

So they can be reused, and avoid unnecessary page_searches

Turn off tool IDL caching

Well, just like in back-bdb in 2005, it only slowed things down
on larger LDIFs.

Tweak tool IDL cache, use MDB_MULTIPLE

Use MDB_APPEND mode where possible

Use IDL caching in tool/quick mode

Use MDB_RESERVE for id2entry_put

Updated for mdb_txn_begin API change.

Nested txn stuff which we don't use.

back-bdb/back-mdb IDL cleanup.

Parenthesize macros.  Microoptimize IDL search.  Use RANGE_<FIRST/LAST>
when IDL is known to be a range.

Cleanup ISO C compatibility for recent commits

More libmdb vs back-mdb C type tweaks.

Do not access a size_t via an unsigned long pointer, an MDB_val via a
berval pointer, or the inverse. Instead copy into the proper data types.

Fix prev commit

Don't truncate all indices if specific indices were given.

Support index truncation

New mdb_close() signature

Fix entry_alloc with no attrs

Fix onelevel search from last commit

More search optimization

Tighten up entry_alloc/entry_decode
Track parent nodes in idscopes

Tentative speedup - use plain ints for entry_encode/decode

Keep entries word-aligned. Yields ~10% speedup, but also 10% more space used.
May revert this if the space cost is unacceptable.

mdb_db_close() should not force env_sync in quick mode

Resolve MDB/HDB monitor OID clashes

Conflicts:

servers/slapd/bconfig.c

Just use memcpy since we know it's non-overlapping

Tweak back-mdb integer types to match libmdb.

Also do not cast between berval and MDB_val.  That breaks when
sizeof(berval.bv_len) != sizeof(MDB_val.mv_size).

Fix - slapcat doesn't set op->o_hdr for tmpmemctx

Fix out-of-order slapadd

Fix bogus error codes

Keep cursor open for id2entry

Use tmpmem-based entries

Drop referral.c

Fix 6c8e4f2671b6aed41cd5098725048dbe2513612c

More error msgs

Fix 6c8e4f2 for empty suffixes

More search optimizations

Use AD-indexes

Debug helper for index

back-mdb/Makefile.in += variable MDB_SUBDIR.

For compiling against a checkout of the stand-alone libmdb,
which has a branch 'mdb.master' with its own root:
    git clone --branch=mdb.master <openldap_repo_dir> mdb
    set_mdb="MDB_SUBDIR=`pwd`/mdb/libraries/libmdb"
    ... maybe modify mdb repository for testing ...
    cd <openldap_repo_dir>; make $set_mdb

Fix from key_change consolidation

Cursor updates

Fix conversion of IDL to range

Import back-mdb

Merge remote branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_4

ITS#6848

More for #6848 - drop -w option, just make it default behavior

ITS#6848 Add -w option to wait for DB startup before parent exits

ITS#6666

Overlay result is in rs->sr_err

Add overlay config stuff, handle overlay responses

Just use back-sock OID arc for overlay

As an overlay, always return SLAP_CB_CONTINUE

Add response message for overlays

More for overlay use, add connid extension

Add overlay wrapper, use for triggers etc.

ITS#6993

release mutex only *after* backend connection initialization (ITS#6993)

ITS#6826

Add CVS ID

Drop unneeded scheme param

Add APR1 to Makefile/README. Add {BSDMD5} mechanism.

Replace pw_string64 with lutil_passwd_string64

Export pw_string64 as lutil_passwd_string64

Use lutil_passwd_string64 instead of pw_string64

ITS#6826 from Devin J. Pohly

ITS#3272

ITS#3272 link against libslapi.la

LIBSLAPITOOLS is obsolete since tools subdir is long gone
ITS#3272 link to libslapi.la

ITS#7081 fix prev commit

ITS#6981

ITS#6981 pcache: don't reference rs->sr_entry in op_cleanup

Revert "ITS#6981 don't free entries prematurely"

This reverts commit 877ebdf5ef7c40e9d8aeba3894cd07f95bc721d2.

ITS#6981 don't free entries prematurely

Revert "ITS#6981 don't flush entries until after cleanup callbacks"

This reverts commit b68fa5ecd73037ebd436a2663003f544d482f71e.

ITS#6981 don't flush entries until after cleanup callbacks

ITS#7060

ITS#7060 fix str2result return code parsing

ITS#7062

ITS#7062 call response callbacks even if connection was dropped

Define S_IWRITE if needed

Android defines wctomb but doesn't provide it

ITS#7078

Additional tweaks for double-threaded slapadd

Additional change for prev commit

Use a thread for LDIF parsing in slapadd -q

ITS#6737

move ctxcsn and schema check code in helpers; also apply to slapmodify (ITS#6737)

ITS#6437

Add Valgrind mempool support.

Compile with -DUSE_VALGRIND. It will attempt to keep Valgrind
informed of our memory allocations. Frees are trickier since they
may be deferred indefinitely.

Fix NO_THREADS typo

ITS#6437: Fix pool version misalignment: It aligned heads, not returned blocks

ITS#6437, move structs slab_object and slab_heap from slap.h to sl_malloc.c

ITS#6437, save space: Do not allocate the tail, except if size==0.
Store a tail only in freed blocks.  (Alignment ensures there will
be room.)  Put the freed mark in next block's head.

ITS#6437 cleanup (noop patch): Join SLAP_NO_SL_MALLOC code with identical
ctx==NULL code.  Add enum No_sl_malloc to avoid #ifdef SLAP_NO_SL_MALLOC.

ITS#6437, follow up previous fixes:
Ensure Align >= sizeof(ber_len_t), to clarify the code's requirements.
Rearrange a slap_sl_malloc() branch to factor out ch_malloc fallbacks.
Fix range check (ptr+size >= endptr) -> (size >= endptr-ptr).  Fix debug msg.

Add comments

ITS#6437, slap_sl_calloc():
Check count*size overflow. Omit slap_sl_malloc failure check, it cannot fail.

ITS#6437, failure/fallback/debug handling:
slap_sl_malloc could return failure. Exit instead, like the rest of sl_malloc.
Since we increase size, reduce it before Debug() and/or fallback to ch_malloc.
Debug() before exit() on failure.  Tweak debug formats and a comment.

Conflicts:

servers/slapd/sl_malloc.c

ITS#6437 cleanup (noop change):
Move thread/nothread code to macros SET_MEMCTX()/GET_MEMCTX().
Rename some thread/memory contexts 'ctx' to thrctx/memctx to avoid confusion.

ITS#6437, fixes for stack implementation of slap_sl_realloc():
Preserve 2*int alignment on hosts where sizeof(int) == sizeof(ber_len_t).
If realloc of last block falls back to ch_malloc, free last block properly.
Fix range check (ptr + size < endptr) --> (size < endptr - ptr).

ITS#6437: Fix alignment after slap_sl_realloc().
Also use -Align instead of ~pad: Valid also for non-twos complement.

ITS#6437 cleanup (noop change): Simplify slap_sl_free() code reclaiming space

ITS#6437 cleanup (noop change): Compute pad,order_start at compile time

ITS#6437, slap_sl_mem_create():
Bugfix: Switching implementation stack<->pool on an old context could
        crash or leak, it ran the wrong implementation's cleanup code.
Cleanup:  Factor out identical stack/pool code.  Call
          slap_sl_mem_destroy(NULL,) instead of copying its pool code.
API change: slap_sl_mem_destroy(key=NULL,) gets a new meaning.  Does
            not affect current OpenLDAP code, it never passed NULL.