]> git.sur5r.net Git - openldap/blob - servers/slapd/back-bdb/dn2id.c
Subtree rename support for the cache
[openldap] / servers / slapd / back-bdb / dn2id.c
1 /* dn2id.c - routines to deal with the dn2id index */
2 /* $OpenLDAP$ */
3 /*
4  * Copyright 1998-2003 The OpenLDAP Foundation, All Rights Reserved.
5  * COPYING RESTRICTIONS APPLY, see COPYRIGHT file
6  */
7
8 #include "portable.h"
9
10 #include <stdio.h>
11 #include <ac/string.h>
12
13 #include "back-bdb.h"
14 #include "idl.h"
15 #include "lutil.h"
16
17 #ifndef BDB_HIER
18 int
19 bdb_dn2id_add(
20         BackendDB       *be,
21         DB_TXN *txn,
22         EntryInfo *eip,
23         Entry           *e,
24         void *ctx )
25 {
26         struct bdb_info *bdb = (struct bdb_info *) be->be_private;
27         DB *db = bdb->bi_dn2id->bdi_db;
28         int             rc;
29         DBT             key, data;
30         char            *buf;
31         struct berval   ptr, pdn;
32
33 #ifdef NEW_LOGGING
34         LDAP_LOG ( INDEX, ARGS, "bdb_dn2id_add( \"%s\", 0x%08lx )\n",
35                 e->e_ndn, (long) e->e_id, 0 );
36 #else
37         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2id_add( \"%s\", 0x%08lx )\n",
38                 e->e_ndn, (long) e->e_id, 0 );
39 #endif
40         assert( e->e_id != NOID );
41
42         DBTzero( &key );
43         key.size = e->e_nname.bv_len + 2;
44         key.ulen = key.size;
45         key.flags = DB_DBT_USERMEM;
46         buf = sl_malloc( key.size, ctx );
47         key.data = buf;
48         buf[0] = DN_BASE_PREFIX;
49         ptr.bv_val = buf + 1;
50         ptr.bv_len = e->e_nname.bv_len;
51         AC_MEMCPY( ptr.bv_val, e->e_nname.bv_val, e->e_nname.bv_len );
52         ptr.bv_val[ptr.bv_len] = '\0';
53
54         DBTzero( &data );
55         data.data = (char *) &e->e_id;
56         data.size = sizeof( e->e_id );
57
58         /* store it -- don't override */
59         rc = db->put( db, txn, &key, &data, DB_NOOVERWRITE );
60         if( rc != 0 ) {
61 #ifdef NEW_LOGGING
62                 LDAP_LOG ( INDEX, ERR, "bdb_dn2id_add: put failed: %s %d\n",
63                         db_strerror(rc), rc, 0 );
64 #else
65                 Debug( LDAP_DEBUG_ANY, "=> bdb_dn2id_add: put failed: %s %d\n",
66                         db_strerror(rc), rc, 0 );
67 #endif
68                 goto done;
69         }
70
71 #ifndef BDB_MULTIPLE_SUFFIXES
72         if( !be_issuffix( be, &ptr )) {
73 #endif
74                 buf[0] = DN_SUBTREE_PREFIX;
75                 rc = db->put( db, txn, &key, &data, DB_NOOVERWRITE );
76                 if( rc != 0 ) {
77 #ifdef NEW_LOGGING
78                         LDAP_LOG ( INDEX, ERR, 
79                                 "=> bdb_dn2id_add: subtree (%s) put failed: %d\n",
80                                 ptr.bv_val, rc, 0 );
81 #else
82                         Debug( LDAP_DEBUG_ANY,
83                         "=> bdb_dn2id_add: subtree (%s) put failed: %d\n",
84                         ptr.bv_val, rc, 0 );
85 #endif
86                         goto done;
87                 }
88                 
89 #ifdef BDB_MULTIPLE_SUFFIXES
90         if( !be_issuffix( be, &ptr )) {
91 #endif
92                 dnParent( &ptr, &pdn );
93         
94                 key.size = pdn.bv_len + 2;
95                 key.ulen = key.size;
96                 pdn.bv_val[-1] = DN_ONE_PREFIX;
97                 key.data = pdn.bv_val-1;
98                 ptr = pdn;
99
100                 rc = bdb_idl_insert_key( be, db, txn, &key, e->e_id );
101
102                 if( rc != 0 ) {
103 #ifdef NEW_LOGGING
104                         LDAP_LOG ( INDEX, ERR, 
105                                 "=> bdb_dn2id_add: parent (%s) insert failed: %d\n",
106                                 ptr.bv_val, rc, 0 );
107 #else
108                         Debug( LDAP_DEBUG_ANY,
109                                 "=> bdb_dn2id_add: parent (%s) insert failed: %d\n",
110                                         ptr.bv_val, rc, 0 );
111 #endif
112                         goto done;
113                 }
114 #ifndef BDB_MULTIPLE_SUFFIXES
115         }
116
117         while( !be_issuffix( be, &ptr )) {
118 #else
119         for (;;) {
120 #endif
121                 ptr.bv_val[-1] = DN_SUBTREE_PREFIX;
122
123                 rc = bdb_idl_insert_key( be, db, txn, &key, e->e_id );
124
125                 if( rc != 0 ) {
126 #ifdef NEW_LOGGING
127                         LDAP_LOG ( INDEX, ERR, 
128                                 "=> bdb_dn2id_add: subtree (%s) insert failed: %d\n",
129                                 ptr.bv_val, rc, 0 );
130 #else
131                         Debug( LDAP_DEBUG_ANY,
132                                 "=> bdb_dn2id_add: subtree (%s) insert failed: %d\n",
133                                         ptr.bv_val, rc, 0 );
134 #endif
135                         break;
136                 }
137 #ifdef BDB_MULTIPLE_SUFFIXES
138                 if( be_issuffix( be, &ptr )) break;
139 #endif
140                 dnParent( &ptr, &pdn );
141
142                 key.size = pdn.bv_len + 2;
143                 key.ulen = key.size;
144                 key.data = pdn.bv_val - 1;
145                 ptr = pdn;
146         }
147 #ifdef BDB_MULTIPLE_SUFFIXES
148         }
149 #endif
150
151 done:
152         sl_free( buf, ctx );
153 #ifdef NEW_LOGGING
154         LDAP_LOG ( INDEX, RESULTS, "<= bdb_dn2id_add: %d\n", rc, 0, 0 );
155 #else
156         Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id_add: %d\n", rc, 0, 0 );
157 #endif
158         return rc;
159 }
160
161 int
162 bdb_dn2id_delete(
163         BackendDB       *be,
164         DB_TXN *txn,
165         EntryInfo       *eip,
166         Entry           *e,
167         void *ctx )
168 {
169         struct bdb_info *bdb = (struct bdb_info *) be->be_private;
170         DB *db = bdb->bi_dn2id->bdi_db;
171         int             rc;
172         DBT             key;
173         char            *buf;
174         struct berval   pdn, ptr;
175
176 #ifdef NEW_LOGGING
177         LDAP_LOG ( INDEX, ARGS, 
178                 "=> bdb_dn2id_delete ( \"%s\", 0x%08lx )\n", e->e_ndn, e->e_id, 0);
179 #else
180         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2id_delete( \"%s\", 0x%08lx )\n",
181                 e->e_ndn, e->e_id, 0 );
182 #endif
183
184         DBTzero( &key );
185         key.size = e->e_nname.bv_len + 2;
186         buf = sl_malloc( key.size, ctx );
187         key.data = buf;
188         key.flags = DB_DBT_USERMEM;
189         buf[0] = DN_BASE_PREFIX;
190         ptr.bv_val = buf+1;
191         ptr.bv_len = e->e_nname.bv_len;
192         AC_MEMCPY( ptr.bv_val, e->e_nname.bv_val, e->e_nname.bv_len );
193         ptr.bv_val[ptr.bv_len] = '\0';
194
195         /* delete it */
196         rc = db->del( db, txn, &key, 0 );
197         if( rc != 0 ) {
198 #ifdef NEW_LOGGING
199                 LDAP_LOG ( INDEX, ERR, 
200                         "=> bdb_dn2id_delete: delete failed: %s %d\n", 
201                         db_strerror(rc), rc, 0 );
202 #else
203                 Debug( LDAP_DEBUG_ANY, "=> bdb_dn2id_delete: delete failed: %s %d\n",
204                         db_strerror(rc), rc, 0 );
205 #endif
206                 goto done;
207         }
208
209 #ifndef BDB_MULTIPLE_SUFFIXES
210         if( !be_issuffix( be, &ptr )) {
211 #endif
212                 buf[0] = DN_SUBTREE_PREFIX;
213                 rc = db->del( db, txn, &key, 0 );
214                 if( rc != 0 ) {
215 #ifdef NEW_LOGGING
216                         LDAP_LOG ( INDEX, ERR, 
217                                 "=> bdb_dn2id_delete: subtree (%s) delete failed: %d\n", 
218                                 ptr.bv_val, rc, 0 );
219 #else
220                         Debug( LDAP_DEBUG_ANY,
221                         "=> bdb_dn2id_delete: subtree (%s) delete failed: %d\n",
222                         ptr.bv_val, rc, 0 );
223 #endif
224                         goto done;
225                 }
226
227 #ifdef BDB_MULTIPLE_SUFFIXES
228         if( !be_issuffix( be, &ptr )) {
229 #endif
230                 dnParent( &ptr, &pdn );
231
232                 key.size = pdn.bv_len + 2;
233                 key.ulen = key.size;
234                 pdn.bv_val[-1] = DN_ONE_PREFIX;
235                 key.data = pdn.bv_val - 1;
236                 ptr = pdn;
237
238                 rc = bdb_idl_delete_key( be, db, txn, &key, e->e_id );
239
240                 if( rc != 0 ) {
241 #ifdef NEW_LOGGING
242                         LDAP_LOG ( INDEX, ERR, 
243                                 "=> bdb_dn2id_delete: parent (%s) delete failed: %d\n", 
244                                 ptr.bv_val, rc, 0 );
245 #else
246                         Debug( LDAP_DEBUG_ANY,
247                                 "=> bdb_dn2id_delete: parent (%s) delete failed: %d\n",
248                                 ptr.bv_val, rc, 0 );
249 #endif
250                         goto done;
251                 }
252 #ifndef BDB_MULTIPLE_SUFFIXES
253         }
254
255         while( !be_issuffix( be, &ptr )) {
256 #else
257         for (;;) {
258 #endif
259                 ptr.bv_val[-1] = DN_SUBTREE_PREFIX;
260
261                 rc = bdb_idl_delete_key( be, db, txn, &key, e->e_id );
262                 if( rc != 0 ) {
263 #ifdef NEW_LOGGING
264                         LDAP_LOG ( INDEX, ERR, 
265                                 "=> bdb_dn2id_delete: subtree (%s) delete failed: %d\n", 
266                                 ptr.bv_val, rc, 0 );
267 #else
268                         Debug( LDAP_DEBUG_ANY,
269                                 "=> bdb_dn2id_delete: subtree (%s) delete failed: %d\n",
270                                 ptr.bv_val, rc, 0 );
271 #endif
272                         goto done;
273                 }
274 #ifdef BDB_MULTIPLE_SUFFIXES
275                 if( be_issuffix( be, &ptr )) break;
276 #endif
277                 dnParent( &ptr, &pdn );
278
279                 key.size = pdn.bv_len + 2;
280                 key.ulen = key.size;
281                 key.data = pdn.bv_val - 1;
282                 ptr = pdn;
283         }
284 #ifdef BDB_MULTIPLE_SUFFIXES
285         }
286 #endif
287
288 done:
289         sl_free( buf, ctx );
290 #ifdef NEW_LOGGING
291         LDAP_LOG ( INDEX, RESULTS, "<= bdb_dn2id_delete %d\n", rc, 0, 0 );
292 #else
293         Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id_delete %d\n", rc, 0, 0 );
294 #endif
295         return rc;
296 }
297
298 int
299 bdb_dn2id(
300         BackendDB       *be,
301         DB_TXN *txn,
302         struct berval   *dn,
303         EntryInfo *ei,
304         void *ctx )
305 {
306         int             rc;
307         DBT             key, data;
308         struct bdb_info *bdb = (struct bdb_info *) be->be_private;
309         DB *db = bdb->bi_dn2id->bdi_db;
310
311 #ifdef NEW_LOGGING
312         LDAP_LOG ( INDEX, ARGS, "=> bdb_dn2id( \"%s\" )\n", dn->bv_val, 0, 0 );
313 #else
314         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2id( \"%s\" )\n", dn->bv_val, 0, 0 );
315 #endif
316         DBTzero( &key );
317         key.size = dn->bv_len + 2;
318         key.data = sl_malloc( key.size, ctx );
319         ((char *)key.data)[0] = DN_BASE_PREFIX;
320         AC_MEMCPY( &((char *)key.data)[1], dn->bv_val, key.size - 1 );
321
322         /* store the ID */
323         DBTzero( &data );
324         data.data = &ei->bei_id;
325         data.ulen = sizeof(ID);
326         data.flags = DB_DBT_USERMEM;
327
328         /* fetch it */
329         rc = db->get( db, txn, &key, &data, bdb->bi_db_opflags );
330
331         if( rc != 0 ) {
332 #ifdef NEW_LOGGING
333                 LDAP_LOG ( INDEX, ERR, "<= bdb_dn2id: get failed %s (%d)\n", 
334                         db_strerror(rc), rc, 0 );
335 #else
336                 Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id: get failed: %s (%d)\n",
337                         db_strerror( rc ), rc, 0 );
338 #endif
339         } else {
340 #ifdef NEW_LOGGING
341                 LDAP_LOG ( INDEX, RESULTS, 
342                         "<= bdb_dn2id: got id=0x%08lx\n", ei->bei_id, 0, 0 );
343 #else
344                 Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id: got id=0x%08lx\n",
345                         ei->bei_id, 0, 0 );
346 #endif
347         }
348
349         sl_free( key.data, ctx );
350         return rc;
351 }
352
353 int
354 bdb_dn2id_children(
355         Operation *op,
356         DB_TXN *txn,
357         Entry *e )
358 {
359         DBT             key, data;
360         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
361         DB *db = bdb->bi_dn2id->bdi_db;
362         ID              id;
363         int             rc;
364
365 #ifdef NEW_LOGGING
366         LDAP_LOG ( INDEX, ARGS, 
367                 "=> bdb_dn2id_children( %s )\n", e->e_nname.bv_val, 0, 0 );
368 #else
369         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2id_children( %s )\n",
370                 e->e_nname.bv_val, 0, 0 );
371 #endif
372         DBTzero( &key );
373         key.size = e->e_nname.bv_len + 2;
374         key.data = sl_malloc( key.size, op->o_tmpmemctx );
375         ((char *)key.data)[0] = DN_ONE_PREFIX;
376         AC_MEMCPY( &((char *)key.data)[1], e->e_nname.bv_val, key.size - 1 );
377
378 #ifdef SLAP_IDL_CACHE
379         if ( bdb->bi_idl_cache_size ) {
380                 rc = bdb_idl_cache_get( bdb, db, &key, NULL );
381                 if ( rc != LDAP_NO_SUCH_OBJECT ) {
382                         sl_free( key.data, op->o_tmpmemctx );
383                         return rc;
384                 }
385         }
386 #endif
387         /* we actually could do a empty get... */
388         DBTzero( &data );
389         data.data = &id;
390         data.ulen = sizeof(id);
391         data.flags = DB_DBT_USERMEM;
392         data.doff = 0;
393         data.dlen = sizeof(id);
394
395         rc = db->get( db, txn, &key, &data, bdb->bi_db_opflags );
396         sl_free( key.data, op->o_tmpmemctx );
397
398 #ifdef NEW_LOGGING
399         LDAP_LOG ( INDEX, DETAIL1, 
400                 "<= bdb_dn2id_children( %s ): %s (%d)\n", 
401                 e->e_nname.bv_val, rc == 0 ? "" : ( rc == DB_NOTFOUND ? "no " :
402                 db_strerror(rc)), rc );
403 #else
404         Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id_children( %s ): %s (%d)\n",
405                 e->e_nname.bv_val,
406                 rc == 0 ? "" : ( rc == DB_NOTFOUND ? "no " :
407                         db_strerror(rc) ), rc );
408 #endif
409
410         return rc;
411 }
412
413 int
414 bdb_dn2idl(
415         BackendDB       *be,
416         struct berval   *dn,
417         int prefix,
418         ID *ids,
419         ID *stack,
420         void *ctx )
421 {
422         int             rc;
423         DBT             key;
424         struct bdb_info *bdb = (struct bdb_info *) be->be_private;
425         DB *db = bdb->bi_dn2id->bdi_db;
426
427 #ifdef NEW_LOGGING
428         LDAP_LOG ( INDEX, ARGS, 
429                 "=> bdb_dn2ididl( \"%s\" )\n", dn->bv_val, 0, 0 );
430 #else
431         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2idl( \"%s\" )\n", dn->bv_val, 0, 0 );
432 #endif
433
434 #ifndef BDB_MULTIPLE_SUFFIXES
435         if (prefix == DN_SUBTREE_PREFIX && be_issuffix(be, dn))
436         {
437                 BDB_IDL_ALL(bdb, ids);
438                 return 0;
439         }
440 #endif
441
442         DBTzero( &key );
443         key.size = dn->bv_len + 2;
444         key.ulen = key.size;
445         key.flags = DB_DBT_USERMEM;
446         key.data = sl_malloc( key.size, ctx );
447         ((char *)key.data)[0] = prefix;
448         AC_MEMCPY( &((char *)key.data)[1], dn->bv_val, key.size - 1 );
449
450         rc = bdb_idl_fetch_key( be, db, NULL, &key, ids );
451
452         if( rc != 0 ) {
453 #ifdef NEW_LOGGING
454                 LDAP_LOG ( INDEX, ERR, 
455                         "<= bdb_dn2ididl: get failed: %s (%d)\n", db_strerror(rc), rc, 0 );
456 #else
457                 Debug( LDAP_DEBUG_TRACE,
458                         "<= bdb_dn2idl: get failed: %s (%d)\n",
459                         db_strerror( rc ), rc, 0 );
460 #endif
461
462         } else {
463 #ifdef NEW_LOGGING
464                 LDAP_LOG ( INDEX, RESULTS, 
465                         "<= bdb_dn2ididl: id=%ld first=%ld last=%ld\n", 
466                         (long) ids[0], (long) BDB_IDL_FIRST( ids ), 
467                         (long) BDB_IDL_LAST( ids ) );
468 #else
469                 Debug( LDAP_DEBUG_TRACE,
470                         "<= bdb_dn2idl: id=%ld first=%ld last=%ld\n",
471                         (long) ids[0],
472                         (long) BDB_IDL_FIRST( ids ), (long) BDB_IDL_LAST( ids ) );
473 #endif
474         }
475
476         sl_free( key.data, ctx );
477         return rc;
478 }
479 #else   /* BDB_HIER */
480
481 /* Experimental management routines for a hierarchically structured database.
482  *
483  * Unsupported! Use at your own risk!
484  * -- Howard Chu, Symas Corp. 2003.
485  *
486  * Instead of a ldbm-style dn2id database, we use a hierarchical one. Each
487  * entry in this database is a struct diskNode, keyed by entryID and with
488  * the data containing the RDN and entryID of the node's children. We use
489  * a B-Tree with sorted duplicates to store all the children of a node under
490  * the same key. Also, the first item under the key contains the entry's own
491  * rdn and the ID of the node's parent, to allow bottom-up tree traversal as
492  * well as top-down. To keep this info first in the list, the nrdnlen is set
493  * to the negative of its value.
494  *
495  * The diskNode is a variable length structure. This definition is not
496  * directly usable for in-memory manipulation.
497  */
498 typedef struct diskNode {
499         ID entryID;
500         short nrdnlen;
501         char nrdn[1];
502         char rdn[1];
503 } diskNode;
504
505 /* Sort function for the sorted duplicate data items of a dn2id key.
506  * Sorts based on normalized RDN, in lexical order.
507  */
508 int
509 bdb_dup_compare(
510         DB *db, 
511         const DBT *usrkey,
512         const DBT *curkey
513 )
514 {
515         diskNode *usr = usrkey->data;
516         diskNode *cur = curkey->data;
517         short curlen, usrlen;
518         char *ptr;
519         unsigned char *pt2;
520         int rc;
521
522         /* Make sure to detect negative values in the nrdnlen */
523         ptr = (char *)&usr->nrdnlen;
524         pt2 = (unsigned char *)(ptr+1);
525
526         usrlen = ptr[0] << 8 | *pt2;
527
528         ptr = (char *)&cur->nrdnlen;
529         pt2 = (unsigned char *)(ptr+1);
530
531         curlen = ptr[0] << 8 | *pt2;
532
533         if ( usrlen < 0 ) {
534                 if ( curlen < 0 ) return 0;
535                 return -1;
536         }
537
538         if ( curlen < 0 ) return 1;
539
540         rc = strncmp( usr->nrdn, cur->nrdn, usrlen );
541         if ( rc == 0 ) rc = usrlen - curlen;
542         return rc;
543 }
544
545 /* This function constructs a full DN for a given entry.
546  */
547 int bdb_fix_dn(
548         Entry *e,
549         int checkit
550 )
551 {
552         EntryInfo *ei;
553         int rlen = 0, nrlen = 0;
554         char *ptr, *nptr;
555         int max = 0;
556         
557         for ( ei = BEI(e); ei && ei->bei_id; ei=ei->bei_parent ) {
558                 rlen += ei->bei_rdn.bv_len + 1;
559                 nrlen += ei->bei_nrdn.bv_len + 1;
560                 if (ei->bei_modrdns > max) max = ei->bei_modrdns;
561         }
562
563         /* See if the entry DN was invalidated by a subtree rename */
564         if ( checkit ) {
565                 if ( BEI(e)->bei_modrdns >= max ) {
566                         return 0;
567                 }
568                 /* We found a mismatch, tell the caller to lock it */
569                 if ( checkit == 1 ) {
570                         return 1;
571                 }
572                 /* checkit == 2. do the fix. */
573                 free( e->e_name.bv_val );
574         }
575
576         e->e_name.bv_len = rlen - 1;
577         e->e_nname.bv_len = nrlen - 1;
578         e->e_name.bv_val = ch_malloc(rlen + nrlen);
579         e->e_nname.bv_val = e->e_name.bv_val + rlen;
580         ptr = e->e_name.bv_val;
581         nptr = e->e_nname.bv_val;
582         for ( ei = BEI(e); ei && ei->bei_id; ei=ei->bei_parent ) {
583                 ptr = lutil_strcopy(ptr, ei->bei_rdn.bv_val);
584                 nptr = lutil_strcopy(nptr, ei->bei_nrdn.bv_val);
585                 if ( ei->bei_parent ) {
586                         *ptr++ = ',';
587                         *nptr++ = ',';
588                 }
589         }
590         BEI(e)->bei_modrdns = max;
591         ptr[-1] = '\0';
592         nptr[-1] = '\0';
593
594         return 0;
595 }
596
597 /* We add two elements to the DN2ID database - a data item under the parent's
598  * entryID containing the child's RDN and entryID, and an item under the
599  * child's entryID containing the parent's entryID.
600  */
601 int
602 bdb_dn2id_add(
603         BackendDB       *be,
604         DB_TXN *txn,
605         EntryInfo       *eip,
606         Entry           *e,
607         void *ctx )
608 {
609         struct bdb_info *bdb = (struct bdb_info *) be->be_private;
610         DB *db = bdb->bi_dn2id->bdi_db;
611         DBT             key, data;
612         int             rc, rlen, nrlen;
613         diskNode *d;
614         char *ptr;
615
616         nrlen = dn_rdnlen( be, &e->e_nname );
617         if (nrlen) {
618                 rlen = dn_rdnlen( be, &e->e_name );
619         } else {
620                 nrlen = e->e_nname.bv_len;
621                 rlen = e->e_name.bv_len;
622         }
623
624         d = sl_malloc(sizeof(diskNode) + rlen + nrlen, ctx);
625         d->entryID = e->e_id;
626         d->nrdnlen = nrlen;
627         ptr = lutil_strncopy( d->nrdn, e->e_nname.bv_val, nrlen );
628         *ptr++ = '\0';
629         ptr = lutil_strncopy( ptr, e->e_name.bv_val, rlen );
630         *ptr = '\0';
631
632         DBTzero(&key);
633         DBTzero(&data);
634         key.data = &eip->bei_id;
635         key.size = sizeof(ID);
636         key.flags = DB_DBT_USERMEM;
637
638 #ifdef SLAP_IDL_CACHE
639         if ( bdb->bi_idl_cache_size ) {
640                 bdb_idl_cache_del( bdb, db, &key );
641         }
642 #endif
643         data.data = d;
644         data.size = sizeof(diskNode) + rlen + nrlen;
645         data.flags = DB_DBT_USERMEM;
646
647         rc = db->put( db, txn, &key, &data, DB_NODUPDATA );
648
649         if (rc == 0) {
650                 key.data = &e->e_id;
651                 d->entryID = eip->bei_id;
652                 d->nrdnlen = 0 - nrlen;
653
654                 rc = db->put( db, txn, &key, &data, DB_NODUPDATA );
655         }
656
657         sl_free( d, ctx );
658
659         return rc;
660 }
661
662 int
663 bdb_dn2id_delete(
664         BackendDB       *be,
665         DB_TXN *txn,
666         EntryInfo       *eip,
667         Entry   *e,
668         void    *ctx )
669 {
670         struct bdb_info *bdb = (struct bdb_info *) be->be_private;
671         DB *db = bdb->bi_dn2id->bdi_db;
672         DBT             key, data;
673         DBC     *cursor;
674         diskNode *d;
675         int rc, nrlen;
676
677         DBTzero(&key);
678         key.size = sizeof(ID);
679         key.ulen = key.size;
680         key.data = &eip->bei_id;
681         key.flags = DB_DBT_USERMEM;
682
683         DBTzero(&data);
684         data.size = sizeof(diskNode) + BEI(e)->bei_nrdn.bv_len;
685         data.ulen = data.size;
686         data.dlen = data.size;
687         data.flags = DB_DBT_USERMEM | DB_DBT_PARTIAL;
688
689 #ifdef SLAP_IDL_CACHE
690         if ( bdb->bi_idl_cache_size ) {
691                 bdb_idl_cache_del( bdb, db, &key );
692         }
693 #endif
694         rc = db->cursor( db, txn, &cursor, bdb->bi_db_opflags );
695         if ( rc ) return rc;
696
697         d = sl_malloc( data.size, ctx );
698         d->entryID = e->e_id;
699         d->nrdnlen = BEI(e)->bei_nrdn.bv_len;
700         strcpy( d->nrdn, BEI(e)->bei_nrdn.bv_val );
701         data.data = d;
702
703         /* Delete our ID from the parent's list */
704         rc = cursor->c_get( cursor, &key, &data, DB_GET_BOTH | DB_RMW );
705         if ( rc == 0 )
706                 rc = cursor->c_del( cursor, 0 );
707
708         /* Delete our ID from the tree. With sorted duplicates, this
709          * will leave any child nodes still hanging around. This is OK
710          * for modrdn, which will add our info back in later.
711          */
712         if ( rc == 0 ) {
713                 key.data = &e->e_id;
714                 rc = cursor->c_get( cursor, &key, &data, DB_SET );
715                 if ( rc == 0 )
716                         rc = cursor->c_del( cursor, 0 );
717         }
718         cursor->c_close( cursor );
719         sl_free( d, ctx );
720
721         return rc;
722 }
723
724 int
725 bdb_dn2id(
726         BackendDB       *be,
727         DB_TXN *txn,
728         struct berval   *in,
729         EntryInfo       *ei,
730         void *ctx )
731 {
732         struct bdb_info *bdb = (struct bdb_info *) be->be_private;
733         DB *db = bdb->bi_dn2id->bdi_db;
734         DBT             key, data;
735         DBC     *cursor;
736         int             rc = 0, nrlen;
737         diskNode *d;
738         char    *ptr;
739         ID idp = ei->bei_parent->bei_id;
740
741         nrlen = dn_rdnlen( be, in );
742         if (!nrlen) nrlen = in->bv_len;
743
744         DBTzero(&key);
745         key.size = sizeof(ID);
746         key.data = &idp;
747         key.ulen = sizeof(ID);
748         key.flags = DB_DBT_USERMEM;
749
750         DBTzero(&data);
751         data.size = sizeof(diskNode) + nrlen;
752         data.ulen = data.size * 3;
753         data.flags = DB_DBT_USERMEM;
754
755         rc = db->cursor( db, txn, &cursor, bdb->bi_db_opflags );
756         if ( rc ) return rc;
757
758         d = sl_malloc( data.size * 3, ctx );
759         d->nrdnlen = nrlen;
760         ptr = lutil_strncopy( d->nrdn, in->bv_val, nrlen );
761         *ptr = '\0';
762         data.data = d;
763
764         rc = cursor->c_get( cursor, &key, &data, DB_GET_BOTH );
765         cursor->c_close( cursor );
766
767         if ( rc == 0 ) {
768                 AC_MEMCPY( &ei->bei_id, &d->entryID, sizeof(ID) );
769                 ei->bei_rdn.bv_len = data.size - sizeof(diskNode) - nrlen;
770                 ptr = d->nrdn + nrlen + 1;
771                 ei->bei_rdn.bv_val = ch_malloc( ei->bei_rdn.bv_len + 1 );
772                 strcpy( ei->bei_rdn.bv_val, ptr );
773         }
774         sl_free( d, ctx );
775
776         return rc;
777 }
778
779 int
780 bdb_dn2id_parent(
781         Backend *be,
782         DB_TXN *txn,
783         EntryInfo *ei,
784         ID *idp,
785         void *ctx )
786 {
787         struct bdb_info *bdb = (struct bdb_info *) be->be_private;
788         DB *db = bdb->bi_dn2id->bdi_db;
789         DBT             key, data;
790         DBC     *cursor;
791         int             rc = 0;
792         diskNode *d;
793         char    *ptr;
794         unsigned char *pt2;
795
796         DBTzero(&key);
797         key.size = sizeof(ID);
798         key.data = &ei->bei_id;
799         key.ulen = sizeof(ID);
800         key.flags = DB_DBT_USERMEM;
801
802         DBTzero(&data);
803         data.flags = DB_DBT_USERMEM;
804
805         rc = db->cursor( db, txn, &cursor, bdb->bi_db_opflags );
806         if ( rc ) return rc;
807
808         data.ulen = sizeof(diskNode) + (SLAP_LDAPDN_MAXLEN * 2);
809         d = sl_malloc( data.ulen, ctx );
810         data.data = d;
811
812         rc = cursor->c_get( cursor, &key, &data, DB_SET );
813         cursor->c_close( cursor );
814         if ( rc == 0 ) {
815                 if (d->nrdnlen >= 0) {
816                         return LDAP_OTHER;
817                 }
818                 AC_MEMCPY( idp, &d->entryID, sizeof(ID) );
819                 ei->bei_nrdn.bv_len = 0 - d->nrdnlen;
820                 ber_str2bv( d->nrdn, ei->bei_nrdn.bv_len, 1, &ei->bei_nrdn );
821                 ei->bei_rdn.bv_len = data.size - sizeof(diskNode) -
822                         ei->bei_nrdn.bv_len;
823                 ptr = d->nrdn + ei->bei_nrdn.bv_len + 1;
824                 ber_str2bv( ptr, ei->bei_rdn.bv_len, 1, &ei->bei_rdn );
825         }
826         sl_free( d, ctx );
827         return rc;
828 }
829
830 int
831 bdb_dn2id_children(
832         Operation *op,
833         DB_TXN *txn,
834         Entry *e )
835 {
836         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
837         DB *db = bdb->bi_dn2id->bdi_db;
838         DBT             key, data;
839         DBC             *cursor;
840         int             rc;
841         ID              id;
842         diskNode d;
843
844         DBTzero(&key);
845         key.size = sizeof(ID);
846         key.data = &e->e_id;
847         key.flags = DB_DBT_USERMEM;
848
849 #ifdef SLAP_IDL_CACHE
850         if ( bdb->bi_idl_cache_size ) {
851                 rc = bdb_idl_cache_get( bdb, db, &key, NULL );
852                 if ( rc != LDAP_NO_SUCH_OBJECT ) {
853                         return rc;
854                 }
855         }
856 #endif
857         DBTzero(&data);
858         data.data = &d;
859         data.ulen = sizeof(d);
860         data.flags = DB_DBT_USERMEM | DB_DBT_PARTIAL;
861         data.dlen = sizeof(d);
862
863         rc = db->cursor( db, txn, &cursor, bdb->bi_db_opflags );
864         if ( rc ) return rc;
865
866         rc = cursor->c_get( cursor, &key, &data, DB_SET );
867         if ( rc == 0 ) {
868                 rc = cursor->c_get( cursor, &key, &data, DB_NEXT_DUP );
869         }
870         cursor->c_close( cursor );
871         return rc;
872 }
873
874 /* bdb_dn2idl:
875  * We can't just use bdb_idl_fetch_key because
876  * 1 - our data items are longer than just an entry ID
877  * 2 - our data items are sorted alphabetically by nrdn, not by ID.
878  *
879  * We descend the tree recursively, so we define this cookie
880  * to hold our necessary state information. The bdb_dn2idl_internal
881  * function uses this cookie when calling itself.
882  */
883
884 struct dn2id_cookie {
885         struct bdb_info *bdb;
886         DB *db;
887         int prefix;
888         int rc;
889         ID id;
890         ID dbuf;
891         ID *ids;
892         void *ptr;
893         ID tmp[BDB_IDL_DB_SIZE];
894         ID *buf;
895         DBT key;
896         DBT data;
897         DBC *dbc;
898         void *ctx;
899 };
900
901 static int
902 bdb_dn2idl_internal(
903         struct dn2id_cookie *cx
904 )
905 {
906 #ifdef SLAP_IDL_CACHE
907         if ( cx->bdb->bi_idl_cache_size ) {
908                 cx->rc = bdb_idl_cache_get(cx->bdb, cx->db, &cx->key, cx->tmp);
909                 if ( cx->rc == DB_NOTFOUND ) {
910                         return cx->rc;
911                 }
912                 if ( cx->rc == LDAP_SUCCESS ) {
913                         goto saveit;
914                 }
915         }
916 #endif
917
918         cx->rc = cx->db->cursor( cx->db, NULL, &cx->dbc,
919                 cx->bdb->bi_db_opflags );
920         if ( cx->rc ) return cx->rc;
921         BDB_IDL_ZERO( cx->tmp );
922
923         cx->data.data = &cx->dbuf;
924         cx->data.ulen = sizeof(ID);
925         cx->data.dlen = sizeof(ID);
926         cx->data.flags = DB_DBT_USERMEM | DB_DBT_PARTIAL;
927
928         /* The first item holds the parent ID. Ignore it. */
929         cx->rc = cx->dbc->c_get( cx->dbc, &cx->key, &cx->data, DB_SET );
930         if ( cx->rc == DB_NOTFOUND ) goto saveit;
931         if ( cx->rc ) return cx->rc;
932
933         cx->data.data = cx->buf;
934         cx->data.ulen = BDB_IDL_UM_SIZE * sizeof(ID);
935         cx->data.flags = DB_DBT_USERMEM;
936
937         /* Fetch the rest of the IDs in a loop... */
938         while ( (cx->rc = cx->dbc->c_get( cx->dbc, &cx->key, &cx->data,
939                 DB_MULTIPLE | DB_NEXT_DUP )) == 0 ) {
940                 u_int8_t *j;
941                 size_t len;
942                 DB_MULTIPLE_INIT( cx->ptr, &cx->data );
943                 while (cx->ptr) {
944                         DB_MULTIPLE_NEXT( cx->ptr, &cx->data, j, len );
945                         if (j) {
946                                 AC_MEMCPY( &cx->dbuf, j, sizeof(ID) );
947                                 bdb_idl_insert( cx->tmp, cx->dbuf );
948                         }
949                 }
950         }
951         cx->dbc->c_close( cx->dbc );
952
953         /* If we got some records, treat as success */
954         if (!BDB_IDL_IS_ZERO(cx->tmp)) {
955                 cx->rc = 0;
956         }
957
958 saveit:
959 #ifdef SLAP_IDL_CACHE
960         if ( cx->bdb->bi_idl_cache_max_size ) {
961                 bdb_idl_cache_put( cx->bdb, cx->db, &cx->key, cx->tmp, cx->rc );
962         }
963 #endif
964         if ( cx->rc == 0 ) {
965                 if ( cx->prefix == DN_SUBTREE_PREFIX ) {
966                         ID *save, idcurs;
967
968                         save = sl_malloc( BDB_IDL_SIZEOF( cx->tmp ), cx->ctx );
969                         BDB_IDL_CPY( save, cx->tmp );
970                         bdb_idl_union( cx->ids, cx->tmp );
971         
972                         idcurs = 0;
973                         for ( cx->id = bdb_idl_first( save, &idcurs );
974                                 cx->id != NOID;
975                                 cx->id = bdb_idl_next( save, &idcurs )) {
976                                 bdb_dn2idl_internal( cx );
977                         }
978                         sl_free( save, cx->ctx );
979                         cx->rc = 0;
980                 } else {
981                         BDB_IDL_CPY( cx->ids, cx->tmp );
982                 }
983         }
984         return cx->rc;
985 }
986
987 int
988 bdb_dn2idl(
989         BackendDB       *be,
990         struct berval   *dn,
991         int prefix,
992         ID *ids,
993         ID *stack,
994         void *ctx )
995 {
996         struct dn2id_cookie cx;
997         EntryInfo *ei = (EntryInfo *)dn;
998
999 #ifndef BDB_MULTIPLE_SUFFIXES
1000         if ( ei->bei_parent->bei_id == 0 ) {
1001                 struct bdb_info *bdb = (struct bdb_info *)be->be_private;
1002                 BDB_IDL_ALL( bdb, ids );
1003                 return 0;
1004         }
1005 #endif
1006
1007         cx.id = ei->bei_id;
1008         cx.bdb = (struct bdb_info *)be->be_private;
1009         cx.db = cx.bdb->bi_dn2id->bdi_db;
1010         cx.prefix = prefix;
1011         cx.ids = ids;
1012         cx.buf = stack;
1013         cx.ctx = ctx;
1014
1015         BDB_IDL_ZERO( ids );
1016         if ( prefix == DN_SUBTREE_PREFIX ) {
1017                 bdb_idl_insert( ids, cx.id );
1018         }
1019
1020         DBTzero(&cx.key);
1021         cx.key.data = &cx.id;
1022         cx.key.ulen = sizeof(ID);
1023         cx.key.size = sizeof(ID);
1024         cx.key.flags = DB_DBT_USERMEM;
1025
1026         DBTzero(&cx.data);
1027
1028         return bdb_dn2idl_internal(&cx);
1029 }
1030 #endif  /* BDB_HIER */