Merge remote-tracking branch 'origin/mdb.master'

Microoptimize loose pages

Fix loose pages in mdb_freelist_save().

Leaving them in dirty_list caused breakage.  Instead merge them
into me_pghead at the end, when no more pages will be allocated.

Split out mdb_midl_xmerge, add MDB_IDL_ALLOCLEN

ITS#7920 fix for slapacl

This needs to be streamlined in 2.5, current tool API is a mess.

ITS#7838 fix typos in prev commit

ITS#7919 fix cache DB config

Don't accept config directives for cache DB until the cache backend type
has been set.

ITS#7906 more cleanup

db_open/close were not symmetric with init/destroy

Merge remote-tracking branch 'origin/mdb.master'

ITS#7917

ITS#7917 fix mdb_dbi_open

Don't let dummy go out of scope

Just use memalign, not posix_memalign

Everything has it. Solaris doesn't have posix_memalign.

Merge remote-tracking branch 'origin/mdb.master'

ITS#7906 minor cleanup

rename ppolicy_close -> ppolicy_db_close for consistency

ITS#7906 better fix

don't free pwcons unless we're actually destroying this DB

ITS#7915 fix translucent_modify

Go directly to local backend when fetching local entry

ITS#7915 fix mdb_entry_release

In server mode, make sure the entry was actually ours

More for MIPS

Do a cacheflush after writing data pages, separate from meta's cacheflush

ITS#7793 more for branch key update

ITS#7793 doc update, again

ITS#7793 update branch key if needed

ITS#7895 drop toolmode checks in str2entry

They were obsoleted by ITS#6737 and have been redundant ever since.
(commit 15f1e7bdb7ae487424f19934b0d5dbf4bc30bea6)

More for MIPS

Paranoia for 3630066843b7ca6b2cd12911d3e2fe3314cd4549 do the
cacheflush before setting mti_txnid.

ITS#7912 fix index config

Merge remote-tracking branch 'origin/mdb.master'

ITS#7913 mdb_cursor_get(*_DUP) cleanup

FIRST_DUP/LAST_DUP should succeed even on non-duplicate values
PREV_DUP should reset cursor's EOF flag.

ITS#7909 fix slap_callback init

ITS#7908
Add olcSssVlvMaxPerConn to the olcSssVlvConfig objectClass

Fix MIPS cache coherency on Linux

MIPS chips require manual control of on-chip caches. The cacheflush
syscall being used here only exists on MIPS Linux, other OSs will
require revisiting.

ITS#7906 fix ppolicy_connection_destroy

It can still run after ppolicy_close has freed the connection table

Merge remote-tracking branch 'origin/mdb.master'

Update date

more for mdb_cursor_count

return MDB_NOTFOUND if the cursor is empty

Fix mdb_copy & co when MDB pagesize < OS pagesize

ITS#7789 doc updates

ITS#7789 Fix mdb_env_write_meta().

Always write mapsize = max(other metapage:mapsize, env:mapsize).

Revert ITS#7789 commits, let's try this again.

Revert "ITS#7789 Fix resize vs MDB_NOMETASYNC, and a comment."
Revert "ITS#7789 more"
Revert "Revert "ITS#7789 update RESIZED errmsg text""
Revert "ITS#7789 update RESIZED errmsg text"
Revert "ITS#7789 persist mapsize changes"

This reverts commit 02285aca58f5629547263ba09e7dd685dcf6b4b5.
This reverts commit 38e71c68de2ad61fb0fd72fd40214fd9a94479b9.
This reverts commit a5e4eecb1e59e9645113bb4c63d06a23a2c4bdf9.
This reverts commit d8e18551c3f03d5205f4dc8d1711e494d3814b17.
This reverts commit 5926e54bba7c976e0837221efb20cbff384207b8.

ITS#7904 writewait patch

Assigned ITS#, tweaking. This ITS includes
4f05d992f2146921dbc13d3477de9918f20172b9
716b35e191fb587b352922c76d65843449d870cb
be792fae2ccd4f39ee2b975bcc26a6e21dfc3586

Fix prev commit

More for writewait callback

Must also reset search cursors

ITS#7903 preserve Sorted status of attrs

ITS#7902 fix str2entry / sorted vals

Add sc_writewait callback

Invoked before a blocked writer waits for socket to be writable.
Use in back-mdb to release reader txn while waiting.

ITS#7894 Let back-config use backend to release entries

Merge remote-tracking branch 'origin/mdb.master'

ITS#7027 actually implement RFC 2782 shuffle

ITS#7027 fix bugs in prev commit

ITS#7027 Implement priority/weight for DNS SRV records

From RFC 2782:

  A client MUST attempt to contact the target host with the
  lowest-numbered priority it can reach.

This patch sorts the DNS SRV records by their priority, and
additionally gives records with a larger weight a higher probability
of appearing earlier. This way, the DNS SRV records are tried in the
order of their priority.

Fix env_open mode bits

ITS#6970 more error checks in add_group

ITS#6970 all attrset params are required

ITS#6970 fix deadlocks

Merge remote-tracking branch 'origin/mdb.master'

ITS#7249 partial fix for memberof on frontendDB

Fix mdb_cursor_count, reject uninit'd cursor

Silence prototype warnings

ITS#6970 fix autogroup Add Entry processing

Push modifications into response callback; only execute if
main Add actually succeeded.

ITS#7838 add ORDERING rules to ppolicy attrs

ITS#7868 fix slapo-sock db_init

ITS#7860 more for #5366, ldap_ava definition

ITS#7851 contrib pw-sha2 fix int/size_t comparison

ITS#7851 tell lutil_b64_pton the correct target buffer size

Fix EOL/whitespace

ITS#7869 fix do_phk_hash arguments

Typo

ITS#7896 fix for mdb_env_map

Don't pass non-NULL map address unless MDB_FIXEDMAP was used.

ITS#7859 more for revert

ITS#7859 refix

This was actually broken by 65e163d2, ITS#6947. Reverting both
of those changes and fixing #6947 again.

Merge remote-tracking branch 'origin/mdb.master'

More for cursor EOF

Must also set in sub-cursor if deleting entire subDB

ITS#7893 (#6508) fix a_numvals

Zero-init copy2 writebuf

Add missing mdb_strerror calls to debug msgs

MDB_MAXKEYSIZE = 0 (dynamic value) when MDB_DEVEL

MDB_DEVEL doxygen fix

ITS#7789 Fix resize vs MDB_NOMETASYNC, and a comment.

Windows fixes

Always set the filesize when opening for writes. Otherwise
can't use backups from mdb_copy.

Windows compat

We mainly use Win32 functions, so cannot just use C-runtime strerror
to return error messages. We have to use Win32-specific messages.
Unfortunately, we document the API to return C-runtime error codes,
so we can't just switch to all Win32 error codes.

Fix loading of printable dump

Off-by-one in end check, would complain on valid input.

ITS#7789 more

persist size changes from env_open() as well. This was the
original behavior.

Revert "ITS#7789 update RESIZED errmsg text"

This reverts commit d8e18551c3f03d5205f4dc8d1711e494d3814b17.
And partially reverts mapsize check. Only mapsize increases are relevant.

ITS#7825 more

Set read txn's dbiseqs to env's. Set child txn's dbiseqs to parent's.
Simplify DBI_CHANGED test, no need to check md_name. No-op dbi_close
of already closed handle.

Updates #7789, #7825

ITS#7825 more

only update dbiseq in dbi_open on write txns

ITS#7825 tweak prev commit

dbiseqs are only checked in write txns so omit from read txns

ITS#7825 add MDB_BAD_DBI error code

Use DBI sequence numbers to detect DBIs being closed while in use.

ITS#7789 update RESIZED errmsg text

ITS#7789 persist mapsize changes

Write decreases too, not just increases. Check for any size change
that was not requested by this process.

ITS#7256 A few issues discovered during testing slapmodify.

- bdb deallocates cursor after some tool operations but expects it to be
  around every time it is called
- mdb tries to allocate a second transaction while it already holds one,
  deadlocking
- op->o_hdr must exist for most uses of op, but o_tmpmfuncs need not
- what about indexing after a tool modify? Does it happen automatically?

ITS#7256 Consolidate cleanup code at one location.

ITS#7256 Rework entry retrieval and cleanup.

When doing deletes, lastmod has no entry to work on.

ITS#7256 Add some necessary checks.

ITS#7256 Set backend for operation.

slap_tool_entry_check does it but it is not called every time.

ITS#7256 Let slapmodify ignore unknown operations

ldapmodify already does the same.

ITS#7256 Allow deletes with slapmodify

ITS#7256 mplement bi_tool_entry_delete for back-ldif

ITS#7256 Introduce bi_tool_entry_delete

ITS#7256 Temporarily disable slapmodify checks

ITS#7212 rudimentary slapmodify support for back-config

ITS#7212 slapmodify support for back-ldif