Merge remote-tracking branch 'origin/mdb.RE/0.9' into OPENLDAP_REL_ENG_2_5

ITS#7987 fix excessive space for single write txn

Fix WIN32 -> _WIN32

mdb_strerror: Silence warning @ Windows

Fix comments

Simplify recent changes a bit.

ITS#7961,#7987 Re-fix txn init.

More fallout from 4d02c741b120786df1b87ee9ed49c1d3f9bc7522:
Don't modify another thread's write txn. Reinit me_txn0 fully.

ITS#7959 fix prev commit

fstat returns -1, not an errno. Move code into its own function
for reuse.

ITS#7961 fix txn init

More fallout from 4d02c741b120786df1b87ee9ed49c1d3f9bc7522

ITS#7959 Check fstat return value

Signed-off-by: Jean-Christophe DUBOIS <jcd@tribudubois.net>

ITS#7841 trivial cleanup

TRIVIA - lmdb: clean testdb-dir while "make test".

ITS#7956 fix compact of empty env

ITS#7955, #7671 fix MDB_PREV_DUP

ITS#7953 .gitignore *.lo

ITS#7952 .gitignore mdb_dump/load

Don't use -fPIC for static lib

Must do dlist_free before releasing Wmutex

Free write mutex earlier in txn_reset0

Silence compiler warning by adding explicit return 0 to ppolicy_db_destroy

Android also only has memalign

new date

Fix mdb_txn cleanup

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

ITS#7943 reinit txn flags

When reusing the main write txn

ITS#7942 tweak previous commit

Only free when cleaning up operation controls, not response controls.
(This only makes a difference on search requests, which may have
multiple responses with the same set of controls.)

LDAP_TXN is now RFC 5805

Consolidate LDAP_TXN precheck

This commit was accidentally omitted from previous push

Add updateControls to txn response

Flesh out txn support

Only in back-mdb; back-bdb needs work but it's deprecated;
not worth the effort. In particular txn, retry after deadlocks
makes the whole thing too messy.

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

ITS#7942 plug leak in controls

Plug leak in 4d02c741b120786df1b87ee9ed49c1d3f9bc7522

Free writer txn on env_close

ITS#7941 fix for repeated tags

Make sure ntags isn't incremented if we're skippnig the tag

Silence some clang warnings

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

Release 0.9.14

ITS#7937 flush data to socket

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

Change retry to num times 60.  Testing shows that on a known dataset, this has the same growth behavior as 2.4.39, while num times 20 resulted in significant growth.

ITS#7915 fix memory leaks in previous patch

More for me_pgoldest

Leave it in main env struct, it doesn't need to be rolled back
with nested txns.

Remember oldest reader txnid

Don't walk the readers table unless we really need to.

ITS#7935 partially revert prev patch

Can't allow special chars in RDN, not all OSs/filesystems support it.

ITS#7935 fix schema RDN normalization

ITS#7929 don't log internal searches

ITS#7934 add missing normalization of attrs

ITS#7933 fix frontend config

ITS#7930 additional fix

bypass cleanup handlers for suppressed search result msgs

ITS#7930 partial fix

Only restore op->o_req_dn if no one else changed it on us.

Use a single write txn

ITS#7928 fix syncprov abandon cleanup

ITS#7702 better fix

Check for duplicate scopes in search_aliases, not later.

Revert "ITS#7702 fix results with aliases"

This reverts commit cac00c6a97bbbbcec75f2ebcffaae1dd1769a28e.

ITS#7904 init wwctx earlier

ITS#7702 fix results with aliases

Aliases pointing within the original search scope could cause
the same entry to be returned multiple times. Check for subtree
scope and duplicate scopes.

ITS#7927 fix double-free of searchref

Note 7926

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

ITS#7913 cleanup

we already checked for data == NULL, drop unnecessary if

Cleanup mdb_ad_get

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

More for MIPS

Move CACHEFLUSH, avoid unnecessary if()

ITS#7906,#7923 Don't free configinfo in _db_close

ITS#7904 more tweaks

Must save/restore mcd cursor if we're doing a scope-based search.

ITS#7922 delete dead code

Harmless, but stupid.

Fix typo

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

Partially revert ada26306992babeccad0c5443fbd76e28dd24cd6

Of course, MacOSX only has posix_memalign, and only in recent versions.
(Older versions could use valloc instead. That precludes ever changing
the LMDB pagesize to be different from the OS pagesize.) Not all that
crucial since it only affects mdb_env_copyfd1.

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

Microoptimize loose pages

Fix loose pages in mdb_freelist_save().

Leaving them in dirty_list caused breakage.  Instead merge them
into me_pghead at the end, when no more pages will be allocated.

Split out mdb_midl_xmerge, add MDB_IDL_ALLOCLEN

Note that tools need streamlining in 2.5

ITS#7920 fix for slapacl

This needs to be streamlined in 2.5, current tool API is a mess.

ITS#7838 fix typos in prev commit

ITS#7919 fix cache DB config

Don't accept config directives for cache DB until the cache backend type
has been set.

ITS#7906 more cleanup

db_open/close were not symmetric with init/destroy

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

ITS#7917

ITS#7917 fix mdb_dbi_open

Don't let dummy go out of scope

Just use memalign, not posix_memalign

Everything has it. Solaris doesn't have posix_memalign.

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

ITS#7906 minor cleanup

rename ppolicy_close -> ppolicy_db_close for consistency

ITS#7906 better fix

don't free pwcons unless we're actually destroying this DB

Notes from hyc about things needing doing in 2.5

ITS#7915 fix translucent_modify

Go directly to local backend when fetching local entry

ITS#7915 fix mdb_entry_release

In server mode, make sure the entry was actually ours

ITS#7895 drop toolmode checks in str2entry

They were obsoleted by ITS#6737 and have been redundant ever since.
(commit 15f1e7bdb7ae487424f19934b0d5dbf4bc30bea6)

More for MIPS

Do a cacheflush after writing data pages, separate from meta's cacheflush

ITS#7793 more for branch key update

ITS#7793 doc update, again

ITS#7793 update branch key if needed

More for MIPS

Paranoia for 3630066843b7ca6b2cd12911d3e2fe3314cd4549 do the
cacheflush before setting mti_txnid.

ITS#7912 fix index config

Merge remote-tracking branch 'origin/mdb.master' into OPENLDAP_REL_ENG_2_5

ITS#7913 mdb_cursor_get(*_DUP) cleanup

FIRST_DUP/LAST_DUP should succeed even on non-duplicate values
PREV_DUP should reset cursor's EOF flag.

ITS#7909 fix slap_callback init

ITS#7908
Add olcSssVlvMaxPerConn to the olcSssVlvConfig objectClass

Fix MIPS cache coherency on Linux

MIPS chips require manual control of on-chip caches. The cacheflush
syscall being used here only exists on MIPS Linux, other OSs will
require revisiting.

ITS#7906 fix ppolicy_connection_destroy

It can still run after ppolicy_close has freed the connection table