Merge remote-tracking branch 'origin/mdb.RE/0.9' into OPENLDAP_REL_ENG_2_4

Update release date

Happy New Year

Release 0.9.22

ITS#8819 can't use fakepage mp_ptrs directly

ITS#8800 -- Ensure there are no differences due to different checkpoints
being logged to the underlying DB's contextCSN.

ITS#8789 revert previous patch

And try another approach. Always write contextCSN updates, but
don't set dont_replicate for updates we want propagated.

ITS#8789 avoid unnecessary writes of context entry

If syncprov is present, only write contextCSN attribute on
actual state changes, not on per-entry modifications.
Continue to update in-memory cookieState. Saves overhead,
syncprov will eventually checkpoint it into the DB anyway.

Add debug msg if adding entry to logDB fails

ITS#8752 accesslog: partially revert 3bb8b737ed8e444c6771c1465574eb6cf5b7f19a

ITS#8800 -- Fix database name

ITS#8800 -- Remove bash requirement

Wait for slapd to stop before proceeding.  Otherwise this test may fail.

Fix variable usage so it doesn't delete data/slapd.conf after running

ITS#4326 - Fix regression test so it operates correctly

ITS#4336 - Fix regression test to be valid

Fix ITS#8100 description

Merge remote-tracking branch 'origin/mdb.RE/0.9' into OPENLDAP_REL_ENG_2_4

ITS#8722

Tweak ITS#8722 fix: Use XCURSOR_REFRESH()

This checks XCURSOR_INITED() and fixes the mn_flags check.

XCURSOR_REFRESH() fixups/cleanup

* Check NUMKEYS(), similar to f34b61f9471d1c03fe0517b9d817c50c920e378a
  "ITS#8722 fix FIRST_DUP/LAST_DUP cursor bounds check".
* Move XCURSOR_INITED() into XCURSOR_REFRESH().  This adds a check in
  mdb_cursor_put, below /* converted, write the original data first */.
* Factor mc_ki[] out to XCURSOR_REFRESH().
* Replace an mc_pg[] with mp which is equal (mdb_cursor_del0).

ITS#8722 fix FIRST_DUP/LAST_DUP cursor bounds check

ITS#8622

ITS#8699 more for cursor_del ITS#8622

Set C_DEL flag on reinit'd subcursor

ITS#8486

ITS#8486 Don't keep sl_mutex locked when playing the sessionlog

Fix ITS location

Merge remote-tracking branch 'origin/mdb.RE/0.9' into OPENLDAP_REL_ENG_2_4

ITS#8760

ITS#8760 fix regression in 0.9.19

ITS#8612

ITS#8612 Fix Solaris builds with liblmdb

This patch fixes liblmdb builds on Solaris and derivatives by defining
_POSIX_PTHREAD_SEMANTICS

0.9.22 engineering

ITS#8800

Regression test for ITS8800

ITS#8800 remove originator check in syncprov_search_response

Let the entryCSN check do all the work. Reloading a server from an old
backup needs this to go thru.

ITS#8801

ITS#8801 Fix CSN queue processing

ITS#8607

ITS#8607 Don't record checkpoints

ITS#8100

ITS#8100 fixes for delta-syncrepl with empty accesslog

Update syncprov contextCSNs when context entry is added.
Fix accesslog to properly tag Add op when adding context entry.

Cleanup warnings

ITS#8791

ITS#8791 fix OpenSSL 1.1.1 BIO_method compat

Use the new methods unconditionally, define helper functions for older versions.

ITS#8796

ITS#8796 Fix SSF reset

Maintain the SSF across SASL binds.

ITS#8484

ITS#8484 - Fix MozNSS initialization

ITS#8782

ITS#8782 plug memleaks in cancel

ITS#8778

ITS#8778 Fix telephoneNumberNormalize("-" or " ")

Build internal avl testing tools correctly

ITS#8650

ITS#8650 retry gnutls_handshake after GNUTLS_E_AGAIN

ITS#8752

ITS#8752 accesslog: cleanup should only be called on failures

ITS#8752 fix syncrepl deadlock from updateCookie

Must release cookieState->cs_mutex before invoking backend.
Add a condvar to serialize calls of updateCookie, so we can
release the mutex and still update sequentially.

Also added tid logging, useful in conjunction with
7ab0e1aff0cc48cdfb299ca7dbd27900a9e3d1a8

ITS#8752 additional debug info, thread ID of rmutex lockers

ITS#8752 fix syncrepl null_callback

Make sure it's last in callback stack

ITS#8752 - Add regression test

ITS#8444 - Add regression test

ITS#8692

ITS#8692 let back-sock generate increment: line in case of LDAP_MOD_INCREMENT (see RFC 4525, section 3)

ITS#7389

ITS#7389 - MozNSS: load certificates from certdb, fallback to PEM

If TLS_CACERT pointed to a PEM file and TLS_CACERTDIR was set to NSS
certificate database, the backend assumed that the certificate is always
located in the certificate database. This assumption might be wrong.

This patch makes the library to try to load the certificate from NSS
database and fallback to PEM file if unsuccessfull.

ITS#8167 Fix non-blocking TLS with referrals

ITS#8687

ITS#8687 - EGD is disabled by default in OpenSSL 1.1. We need to comment out this block if it is not detected. Particularly affects cross compilation.

ITS#8583

ITS#8583 - Fix C++ LDAP Control structure

ITS#8578

ITS#8578 - remove unused-variables in RE24 testing call (2.4.45)

ITS#8404

ITS#8404 Fix an assertion failure during modify of olcDbRewrite in back-meta

ITS#8121

ITS#8121 - Note ldap_sasl_bind and ldap_sasl_bind_s can be used to make simple binds via the LDAP_SASL_SIMPLE mechanism

ITS#7520

ITS#7520 - back-ldap omit-unknown-schema changes

ITS#7374

ITS#7374 - MozNSS: better file name matching for hashed CA certificate directory

CA certificate files in OpenSSL compatible CACERTDIR were loaded if the
file extension was '.0'. However the file name should be 8 letters long
certificate hash of the certificate subject name, followed by a numeric
suffix which is used to differentiate between two certificates with the
same subject name.

Wit this patch, certificate file names are matched correctly (using
regular expressions).

ITS#7373

ITS#7373 - TLS: do not reuse tls_session if hostname check fails

If multiple servers are specified, the connection to the first one
succeeds, and the hostname verification fails, *tls_session is not
dropped, but reused when connecting to the second server.

This is a problem with Mozilla NSS backend because another handshake
cannot be performed on the same file descriptor. From this reason,
hostname checking was moved into ldap_int_tls_connect() before
connection error handling.

ITS#7100

ITS#7100 Update entryTtl behaviour to match RFC 2589

ITS#7100 Test for entryTtl reflecting time to live

ITS#5048

ITS#5048 - index on entryCSN is mandatory

ITS#8717, ITS#8720, ITS#8226

ITS#8717 call connection delete callbacks

When TLS fails to start

ITS#8720 use the configured exop timeout for StartTLS

Also, there's no need for a retry loop here. Just wait for
the specified timeout or give up.

ITS#8226 optimization

Don't release read txn unless there has actually been a new write txn

Fix typo "errror" -> "error"

ITS#8444

ITS#8444 Do not clear the pending operation when checkpointing

When a checkpoint happens, if we remove the CSN from the pending list,
accesslog won't pass it onto the accesslog DB. But in a delta-mmr
scenario, an accesslog entry without a CSN faces a race where it might
be applied twice - that usually fails and causes a full refresh, other
times it can cause a silent desync - both are undesirable.

ITS#8690

ITS#8690 plug memleak on Delete ops

ITS#8715

ITS#8715 Fix typo with olcTLSCiphersuite

ITS#8713