Merge remote-tracking branch 'origin/mdb.master'

Revert "ITS#7616 defer searches while consumer refreshing"

This reverts commit cf4aa8f9d9ac77d2884a34fa0d2e52951cf06ca6.

There appears to be no safe way for this to work with MMR.

ITS#7875 fix #7681 regression

Due to commit 18a07eb7c2dc33372455a6040984cd6b699b41a5

ITS#7873 check for pauses

ITS#7872 plug memleak of matchedDN

Plug one-time leaks

ITS#7871 fix ldif-wrap length

Doc has been updated to note the default was actually 78.
The off-by-two error is fixed. Note that wrap=1 will still
output 2 columns, otherwise it can't output anything besides
the continuation character.

ITS#7870 ignore index DBs in slapcat

Fix possible crash in DLL_THREAD_DETACH (explodes in .Net Framework)

Comment ~MDB_APPEND, from earlier commit message.

Factor out mdb_cmp_clong()

More for big MDB_MAXKEYSIZE with MDB_DUPSORT.

With mdb_cursor_put(new key, data item big enough to need a sub-DB):
- Track cursors as when adding other nodes.  The "!do_sub" is now
  unneeded.  Before ITS#7861 it distinguished inserting key from data.
- Set MDB_TXN_ERROR if an empty sub-DB was created.  I.e. adding
  key:subDB succeeded, but inserting the data item failed.

Factor out MDB_TXN_ERROR

Simplify MDB_MULTIPLE

ITS#7834 Fix MDB_MULTIPLE writing multiple keys.

Update the state before looping, so the key is not duplicated.
Broke in 4c8f57615c5ca7b014c038e59c1045182e74f5ad (mostly).

ITS#7861 Re-fix MDB_db.md_entries.

mdb_cursor_del(): Fix md_entries with MDB_NODUPDATA.
mdb_cursor_put(): Check in xcursor whether an item got inserted. Count
data instead of keys after 13d6d59c512065db3741c20c65b4d9928b986968.

ITS#7771 mdb_cursor_put doc: Cursor moves on error

Document DBI issues, extend MDB_BAD_VALSIZE.

More ITS#7793 Check key->mv_size with MDB_CURRENT.

Since non-NULL key must be provided now.

Don't do any merging if manageDSAit was used

Just passthru search to local DB

ITS#7859 fix to read 4096-character lines

ITS#7858 fix install path

ITS#7849 make sure to send cookie after fallback

ITS#7616 defer searches while consumer refreshing

Fix mdb_rebalance collapsing root

Shift the rest of the cursor stack as needed

ITS#7705,#7800 fix prev commit

Better check for missing IDs

ITS#7705,#7800 fix back-mdb pagedResults search

mdb_idscopes was remembering the IDs of every entry it checked;
it should only have been saving the IDs of entries that were
actually in the search scope. The extra entries filled the scopes
array, causing a loop searching for a parent entry that was
never inserted.

ITS#7850 catch invalid naming attr

ITS#7847
Add exattr bits to slapd.conf(5)

(L)MDB updates

Convert quickstart guide to cn=config

Relocate the maxsize bit

Sample slapd.ldif is missing the olcDbMaxSize parameter

ITS#7831 fix double-free

caused by c1e937c2622abd4de708c22529a89f8e914887bd (ITS#6684)

ITS#7829 more for mdb_rebalance

Make sure to propagate rebalance results all the
way back to original caller's cursor.

ITS#7829 Simplify last commit

ITS#7742 New: PBKDF2 module

Signed-off-by: HAMANO Tsukasa <hamano@osstech.co.jp>

Regenerate

After discussion, leave old enable options for bdb/hdb unchanged

ITS#7829 more for prev commit

ITS#7829 fix rebalance

Fixup cursor state after node_move/page_merge

ITS#7793/7828

Fix md_entries count, test for insert on md_entries increment

More for ITS#7793/7828

Note MDB_CURRENT/MDB_DUPSORT requirement

ITS#7828, #7793

Clarify MDB_CURRENT key usage, simplify freelist_save

Revert "ITS#7793 mdb_cursor_put(): Fix MDB_CURRENT."

This reverts commit 4e954f8ae83d5b39736bab2da0eaf2bdf5ee3961.
Caused ITS#7828.

ITS#7827 slapacl requires a valid suffix

Revert "Update MDB_PANIC description" (thinko).

This reverts commit 6bd34d0534f1c8bfd73deaf70febd3b58a2f9d5a.

Update MDB_PANIC description

Tweak mdb_mid2l_insert() call from ITS#7775.

It does not return MDB error codes.

Recommend mdb, deprecate BDB

ITS#7587 fix double-free

Related to bb3e14ddba025229816e0bc5bfd0228fbaed6985 (ITS#6254)

Merge remote-tracking branch 'origin/mdb.master'

ITS#7723 fix reference counting

mtest: Accept an MDB_NOTFOUND case

Handle more errors. Invalidate txn if needed.

Don't use non-existent node info in branch/leaf2

Move code out of mdb_cursor_del0() and mdb_del().

Prepares for the next commits.

More checks for closed DBIs and invalidated txns.

Factor txn/DBI-checks out to TXN_DBI_EXIST().
mdb_audit(): Skip closed DBIs.
mdb_cursor_renew(), mdb_stat(): Check DBI and txn.
mdb_cursor_count(): Check txn.
mdb_dbi_flags(): Check DBI.

mdb_page_list(): Support & display all page types

mdb_txn_renew0(): Fix un-mutexed me_flags update.

Replace env flag MDB_LIVE_READER with field me_live_reader.

Doxygen fixes

Rename samples

They're meant to be read and studied, not run.

ITS#7815 more for page_split

This case didn't come up in testing. Needs finer grained test.

ITS#7815 fix mdb_page_split

Was leaving cursor pointed at wrong page if the newindx was
in the right sibling page, and the parent was also split.

ITS#7803 reference slapd-config(5)

Also replace BDB example with LMDB

ITS#7806 fixed memory leak in LDAPAsynConnection.cpp

mtest*.c, sample-*.c: Add/note error checks.

mtest[46]: Use different DBs when different flags.

ITS#7798 fix mdb_entry_decode()

More for ITS#4365 refix CR/LF handling

Was rejecting "-\r\n" in input LDIF

ITS#7793 mdb_cursor_put(): Fix MDB_CURRENT.

Ignore key, broken by 5bda3565a9bfaa6cd54053faeafcc06da15bc00c
and some older code.  Document and clarify MDB_CURRENT usage.

Also affects non-MDB_CURRENT put() with empty data and a key
which matches by the mdb_set_compare function but not by memcmp.

Happy new year (belated)

Merge remote-tracking branch 'origin/mdb.master'

Bump version to 0.9.11

Merge remote-tracking branch 'origin/mdb.master'

Note changes for LMDB 0.9.11

Revert "ITS#7772 Reduce spurious sub-page growth."

This reverts commit 75494c08b49c3ef77dce8a00f2bc44c83658c1a7,
which must await a fix to ITS#7771 (DUPSORT cursor tracking).

ITS#7778 fix regression from #7329

Make sure mapsize changes take effect on Windows.

ITS#7783 workaround stupid NSPR bug

free(NULL) is supposed to be safe. "Portable wrapper libraries"
that fail to preserve this behavior are inherently broken.
But then again, this is Mozilla code, so that's redundant.

Merge remote-tracking branch 'origin/mdb.master'

ITS#7775 Drop <assert.h>, drop/replace assert()s.

db_mid2l_insert(): Move assert to mdb.c.
mdb_cursor_set(): Previous assert cannot fail now.
mdb_cursor_put(): Check mc/key and return EINVAL.
mdb_cursor_dbi(): No error return, so just segfault if cursor==NULL.

ITS#7775 Cleanup mdb_node_del()

ITS#7775 Add mdb_env_set_assert()

Add mdb_env_<set,get>_userctx()

ITS#7377 Invalidate txn on page-allocation errors

This should likely be reverted when all callers handle these errors.

Wrap __func__ in mdb_func_

Invalidate the txn on corruption/internal errors

ITS#7775 cleanup unnecessary assert()s

mdb_page_malloc(): Move VGMEMP_ALLOC before memset

ITS#7771 mdb_cursor_del0(): Fix xcursor tracking.

sprintf format: pid_t need not be an int.

Add mdb_dbg_pgno(): (sub)pagenum for debug output.

ITS#7772 Reduce spurious sub-page growth.

mdb_cursor_put(): Use free sub-page space added by a
previous put(existing DUPSORT item), if any.
Tweak NUMKEYS code to avoid a new signedness warning.

ITS#7665 Drop lmdb.h doc on non-overlapping flags.

It was inaccurate and misplaced. Verify it in mdb.c instead.

ITS#7515 has been fixed.

Drop UNLOCK_MUTEX_R() on mdb_reader_pid() error

handle softadd/softdel (internal modifications; ITS#7773)

fix years old cut'n'paste

Fix commit "Raise safe max MDB_MAXKEYSIZE."

I.e. d69d2ce2307e9d0e2167843935c386b05a869c31, it left out some changes.