Merge remote-tracking branch 'origin/mdb.master'

ITS#7913 cleanup

we already checked for data == NULL, drop unnecessary if

Cleanup mdb_ad_get

Merge remote-tracking branch 'origin/mdb.master'

More for MIPS

Move CACHEFLUSH, avoid unnecessary if()

ITS#7906,#7923 Don't free configinfo in _db_close

ITS#7904 more tweaks

Must save/restore mcd cursor if we're doing a scope-based search.

ITS#7922 delete dead code

Harmless, but stupid.

Fix typo

Merge remote-tracking branch 'origin/mdb.master'

Partially revert ada26306992babeccad0c5443fbd76e28dd24cd6

Of course, MacOSX only has posix_memalign, and only in recent versions.
(Older versions could use valloc instead. That precludes ever changing
the LMDB pagesize to be different from the OS pagesize.) Not all that
crucial since it only affects mdb_env_copyfd1.

Merge remote-tracking branch 'origin/mdb.master'

Microoptimize loose pages

Fix loose pages in mdb_freelist_save().

Leaving them in dirty_list caused breakage.  Instead merge them
into me_pghead at the end, when no more pages will be allocated.

Split out mdb_midl_xmerge, add MDB_IDL_ALLOCLEN

ITS#7920 fix for slapacl

This needs to be streamlined in 2.5, current tool API is a mess.

ITS#7838 fix typos in prev commit

ITS#7919 fix cache DB config

Don't accept config directives for cache DB until the cache backend type
has been set.

ITS#7906 more cleanup

db_open/close were not symmetric with init/destroy

Merge remote-tracking branch 'origin/mdb.master'

ITS#7917

ITS#7917 fix mdb_dbi_open

Don't let dummy go out of scope

Just use memalign, not posix_memalign

Everything has it. Solaris doesn't have posix_memalign.

Merge remote-tracking branch 'origin/mdb.master'

ITS#7906 minor cleanup

rename ppolicy_close -> ppolicy_db_close for consistency

ITS#7906 better fix

don't free pwcons unless we're actually destroying this DB

ITS#7915 fix translucent_modify

Go directly to local backend when fetching local entry

ITS#7915 fix mdb_entry_release

In server mode, make sure the entry was actually ours

More for MIPS

Do a cacheflush after writing data pages, separate from meta's cacheflush

ITS#7793 more for branch key update

ITS#7793 doc update, again

ITS#7793 update branch key if needed

ITS#7895 drop toolmode checks in str2entry

They were obsoleted by ITS#6737 and have been redundant ever since.
(commit 15f1e7bdb7ae487424f19934b0d5dbf4bc30bea6)

More for MIPS

Paranoia for 3630066843b7ca6b2cd12911d3e2fe3314cd4549 do the
cacheflush before setting mti_txnid.

ITS#7912 fix index config

Merge remote-tracking branch 'origin/mdb.master'

ITS#7913 mdb_cursor_get(*_DUP) cleanup

FIRST_DUP/LAST_DUP should succeed even on non-duplicate values
PREV_DUP should reset cursor's EOF flag.

ITS#7909 fix slap_callback init

ITS#7908
Add olcSssVlvMaxPerConn to the olcSssVlvConfig objectClass

Fix MIPS cache coherency on Linux

MIPS chips require manual control of on-chip caches. The cacheflush
syscall being used here only exists on MIPS Linux, other OSs will
require revisiting.

ITS#7906 fix ppolicy_connection_destroy

It can still run after ppolicy_close has freed the connection table

Merge remote-tracking branch 'origin/mdb.master'

Update date

more for mdb_cursor_count

return MDB_NOTFOUND if the cursor is empty

Fix mdb_copy & co when MDB pagesize < OS pagesize

ITS#7789 doc updates

ITS#7789 Fix mdb_env_write_meta().

Always write mapsize = max(other metapage:mapsize, env:mapsize).

Revert ITS#7789 commits, let's try this again.

Revert "ITS#7789 Fix resize vs MDB_NOMETASYNC, and a comment."
Revert "ITS#7789 more"
Revert "Revert "ITS#7789 update RESIZED errmsg text""
Revert "ITS#7789 update RESIZED errmsg text"
Revert "ITS#7789 persist mapsize changes"

This reverts commit 02285aca58f5629547263ba09e7dd685dcf6b4b5.
This reverts commit 38e71c68de2ad61fb0fd72fd40214fd9a94479b9.
This reverts commit a5e4eecb1e59e9645113bb4c63d06a23a2c4bdf9.
This reverts commit d8e18551c3f03d5205f4dc8d1711e494d3814b17.
This reverts commit 5926e54bba7c976e0837221efb20cbff384207b8.

ITS#7904 writewait patch

Assigned ITS#, tweaking. This ITS includes
4f05d992f2146921dbc13d3477de9918f20172b9
716b35e191fb587b352922c76d65843449d870cb
be792fae2ccd4f39ee2b975bcc26a6e21dfc3586

Fix prev commit

More for writewait callback

Must also reset search cursors

ITS#7903 preserve Sorted status of attrs

ITS#7902 fix str2entry / sorted vals

Add sc_writewait callback

Invoked before a blocked writer waits for socket to be writable.
Use in back-mdb to release reader txn while waiting.

ITS#7894 Let back-config use backend to release entries

Merge remote-tracking branch 'origin/mdb.master'

ITS#7027 actually implement RFC 2782 shuffle

ITS#7027 fix bugs in prev commit

ITS#7027 Implement priority/weight for DNS SRV records

From RFC 2782:

  A client MUST attempt to contact the target host with the
  lowest-numbered priority it can reach.

This patch sorts the DNS SRV records by their priority, and
additionally gives records with a larger weight a higher probability
of appearing earlier. This way, the DNS SRV records are tried in the
order of their priority.

Fix env_open mode bits

ITS#6970 more error checks in add_group

ITS#6970 all attrset params are required

ITS#6970 fix deadlocks

Merge remote-tracking branch 'origin/mdb.master'

ITS#7249 partial fix for memberof on frontendDB

Fix mdb_cursor_count, reject uninit'd cursor

Silence prototype warnings

ITS#6970 fix autogroup Add Entry processing

Push modifications into response callback; only execute if
main Add actually succeeded.

ITS#7838 add ORDERING rules to ppolicy attrs

ITS#7868 fix slapo-sock db_init

ITS#7860 more for #5366, ldap_ava definition

ITS#7851 contrib pw-sha2 fix int/size_t comparison

ITS#7851 tell lutil_b64_pton the correct target buffer size

Fix EOL/whitespace

ITS#7869 fix do_phk_hash arguments

Typo

ITS#7896 fix for mdb_env_map

Don't pass non-NULL map address unless MDB_FIXEDMAP was used.

ITS#7859 more for revert

ITS#7859 refix

This was actually broken by 65e163d2, ITS#6947. Reverting both
of those changes and fixing #6947 again.

Merge remote-tracking branch 'origin/mdb.master'

More for cursor EOF

Must also set in sub-cursor if deleting entire subDB

ITS#7893 (#6508) fix a_numvals

Zero-init copy2 writebuf

Add missing mdb_strerror calls to debug msgs

MDB_MAXKEYSIZE = 0 (dynamic value) when MDB_DEVEL

MDB_DEVEL doxygen fix

ITS#7789 Fix resize vs MDB_NOMETASYNC, and a comment.

Windows fixes

Always set the filesize when opening for writes. Otherwise
can't use backups from mdb_copy.

Windows compat

We mainly use Win32 functions, so cannot just use C-runtime strerror
to return error messages. We have to use Win32-specific messages.
Unfortunately, we document the API to return C-runtime error codes,
so we can't just switch to all Win32 error codes.

Fix loading of printable dump

Off-by-one in end check, would complain on valid input.

ITS#7789 more

persist size changes from env_open() as well. This was the
original behavior.

Revert "ITS#7789 update RESIZED errmsg text"

This reverts commit d8e18551c3f03d5205f4dc8d1711e494d3814b17.
And partially reverts mapsize check. Only mapsize increases are relevant.

ITS#7825 more

Set read txn's dbiseqs to env's. Set child txn's dbiseqs to parent's.
Simplify DBI_CHANGED test, no need to check md_name. No-op dbi_close
of already closed handle.

Updates #7789, #7825

ITS#7825 more

only update dbiseq in dbi_open on write txns

ITS#7825 tweak prev commit

dbiseqs are only checked in write txns so omit from read txns

ITS#7825 add MDB_BAD_DBI error code

Use DBI sequence numbers to detect DBIs being closed while in use.

ITS#7789 update RESIZED errmsg text

ITS#7789 persist mapsize changes

Write decreases too, not just increases. Check for any size change
that was not requested by this process.

ITS#7256 A few issues discovered during testing slapmodify.

- bdb deallocates cursor after some tool operations but expects it to be
  around every time it is called
- mdb tries to allocate a second transaction while it already holds one,
  deadlocking
- op->o_hdr must exist for most uses of op, but o_tmpmfuncs need not
- what about indexing after a tool modify? Does it happen automatically?