]> git.sur5r.net Git - openldap/blob - servers/slapd/back-bdb/dn2id.c
Sync with HEAD
[openldap] / servers / slapd / back-bdb / dn2id.c
1 /* dn2id.c - routines to deal with the dn2id index */
2 /* $OpenLDAP$ */
3 /* This work is part of OpenLDAP Software <http://www.openldap.org/>.
4  *
5  * Copyright 2000-2005 The OpenLDAP Foundation.
6  * All rights reserved.
7  *
8  * Redistribution and use in source and binary forms, with or without
9  * modification, are permitted only as authorized by the OpenLDAP
10  * Public License.
11  *
12  * A copy of this license is available in the file LICENSE in the
13  * top-level directory of the distribution or, alternatively, at
14  * <http://www.OpenLDAP.org/license.html>.
15  */
16
17 #include "portable.h"
18
19 #include <stdio.h>
20 #include <ac/string.h>
21
22 #include "back-bdb.h"
23 #include "idl.h"
24 #include "lutil.h"
25
26 #ifndef BDB_HIER
27 int
28 bdb_dn2id_add(
29         Operation *op,
30         DB_TXN *txn,
31         EntryInfo *eip,
32         Entry           *e )
33 {
34         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
35         DB *db = bdb->bi_dn2id->bdi_db;
36         int             rc;
37         DBT             key, data;
38         ID              nid;
39         char            *buf;
40         struct berval   ptr, pdn;
41
42         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2id_add( \"%s\", 0x%08lx )\n",
43                 e->e_ndn, (long) e->e_id, 0 );
44         assert( e->e_id != NOID );
45
46         DBTzero( &key );
47         key.size = e->e_nname.bv_len + 2;
48         key.ulen = key.size;
49         key.flags = DB_DBT_USERMEM;
50         buf = op->o_tmpalloc( key.size, op->o_tmpmemctx );
51         key.data = buf;
52         buf[0] = DN_BASE_PREFIX;
53         ptr.bv_val = buf + 1;
54         ptr.bv_len = e->e_nname.bv_len;
55         AC_MEMCPY( ptr.bv_val, e->e_nname.bv_val, e->e_nname.bv_len );
56         ptr.bv_val[ptr.bv_len] = '\0';
57
58         DBTzero( &data );
59         data.data = &nid;
60         data.size = sizeof( nid );
61         BDB_ID2DISK( e->e_id, &nid );
62
63         /* store it -- don't override */
64         rc = db->put( db, txn, &key, &data, DB_NOOVERWRITE );
65         if( rc != 0 ) {
66                 Debug( LDAP_DEBUG_ANY, "=> bdb_dn2id_add: put failed: %s %d\n",
67                         db_strerror(rc), rc, 0 );
68                 goto done;
69         }
70
71 #ifndef BDB_MULTIPLE_SUFFIXES
72         if( !be_issuffix( op->o_bd, &ptr ))
73 #endif
74         {
75                 buf[0] = DN_SUBTREE_PREFIX;
76                 rc = db->put( db, txn, &key, &data, DB_NOOVERWRITE );
77                 if( rc != 0 ) {
78                         Debug( LDAP_DEBUG_ANY,
79                         "=> bdb_dn2id_add: subtree (%s) put failed: %d\n",
80                         ptr.bv_val, rc, 0 );
81                         goto done;
82                 }
83                 
84 #ifdef BDB_MULTIPLE_SUFFIXES
85         if( !be_issuffix( op->o_bd, &ptr ))
86 #endif
87         {
88                 dnParent( &ptr, &pdn );
89         
90                 key.size = pdn.bv_len + 2;
91                 key.ulen = key.size;
92                 pdn.bv_val[-1] = DN_ONE_PREFIX;
93                 key.data = pdn.bv_val-1;
94                 ptr = pdn;
95
96                 rc = bdb_idl_insert_key( op->o_bd, db, txn, &key, e->e_id );
97
98                 if( rc != 0 ) {
99                         Debug( LDAP_DEBUG_ANY,
100                                 "=> bdb_dn2id_add: parent (%s) insert failed: %d\n",
101                                         ptr.bv_val, rc, 0 );
102                         goto done;
103                 }
104         }
105
106 #ifndef BDB_MULTIPLE_SUFFIXES
107         while( !be_issuffix( op->o_bd, &ptr ))
108 #else
109         for (;;)
110 #endif
111         {
112                 ptr.bv_val[-1] = DN_SUBTREE_PREFIX;
113
114                 rc = bdb_idl_insert_key( op->o_bd, db, txn, &key, e->e_id );
115
116                 if( rc != 0 ) {
117                         Debug( LDAP_DEBUG_ANY,
118                                 "=> bdb_dn2id_add: subtree (%s) insert failed: %d\n",
119                                         ptr.bv_val, rc, 0 );
120                         break;
121                 }
122 #ifdef BDB_MULTIPLE_SUFFIXES
123                 if( be_issuffix( op->o_bd, &ptr )) break;
124 #endif
125                 dnParent( &ptr, &pdn );
126
127                 key.size = pdn.bv_len + 2;
128                 key.ulen = key.size;
129                 key.data = pdn.bv_val - 1;
130                 ptr = pdn;
131         }
132         }
133
134 done:
135         op->o_tmpfree( buf, op->o_tmpmemctx );
136         Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id_add: %d\n", rc, 0, 0 );
137         return rc;
138 }
139
140 int
141 bdb_dn2id_delete(
142         Operation *op,
143         DB_TXN *txn,
144         EntryInfo       *eip,
145         Entry           *e )
146 {
147         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
148         DB *db = bdb->bi_dn2id->bdi_db;
149         int             rc;
150         DBT             key;
151         char            *buf;
152         struct berval   pdn, ptr;
153
154         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2id_delete( \"%s\", 0x%08lx )\n",
155                 e->e_ndn, e->e_id, 0 );
156
157         DBTzero( &key );
158         key.size = e->e_nname.bv_len + 2;
159         buf = op->o_tmpalloc( key.size, op->o_tmpmemctx );
160         key.data = buf;
161         key.flags = DB_DBT_USERMEM;
162         buf[0] = DN_BASE_PREFIX;
163         ptr.bv_val = buf+1;
164         ptr.bv_len = e->e_nname.bv_len;
165         AC_MEMCPY( ptr.bv_val, e->e_nname.bv_val, e->e_nname.bv_len );
166         ptr.bv_val[ptr.bv_len] = '\0';
167
168         /* delete it */
169         rc = db->del( db, txn, &key, 0 );
170         if( rc != 0 ) {
171                 Debug( LDAP_DEBUG_ANY, "=> bdb_dn2id_delete: delete failed: %s %d\n",
172                         db_strerror(rc), rc, 0 );
173                 goto done;
174         }
175
176 #ifndef BDB_MULTIPLE_SUFFIXES
177         if( !be_issuffix( op->o_bd, &ptr ))
178 #endif
179         {
180                 buf[0] = DN_SUBTREE_PREFIX;
181                 rc = db->del( db, txn, &key, 0 );
182                 if( rc != 0 ) {
183                         Debug( LDAP_DEBUG_ANY,
184                         "=> bdb_dn2id_delete: subtree (%s) delete failed: %d\n",
185                         ptr.bv_val, rc, 0 );
186                         goto done;
187                 }
188
189 #ifdef BDB_MULTIPLE_SUFFIXES
190         if( !be_issuffix( op->o_bd, &ptr ))
191 #endif
192         {
193                 dnParent( &ptr, &pdn );
194
195                 key.size = pdn.bv_len + 2;
196                 key.ulen = key.size;
197                 pdn.bv_val[-1] = DN_ONE_PREFIX;
198                 key.data = pdn.bv_val - 1;
199                 ptr = pdn;
200
201                 rc = bdb_idl_delete_key( op->o_bd, db, txn, &key, e->e_id );
202
203                 if( rc != 0 ) {
204                         Debug( LDAP_DEBUG_ANY,
205                                 "=> bdb_dn2id_delete: parent (%s) delete failed: %d\n",
206                                 ptr.bv_val, rc, 0 );
207                         goto done;
208                 }
209         }
210
211 #ifndef BDB_MULTIPLE_SUFFIXES
212         while( !be_issuffix( op->o_bd, &ptr ))
213 #else
214         for (;;)
215 #endif
216         {
217                 ptr.bv_val[-1] = DN_SUBTREE_PREFIX;
218
219                 rc = bdb_idl_delete_key( op->o_bd, db, txn, &key, e->e_id );
220                 if( rc != 0 ) {
221                         Debug( LDAP_DEBUG_ANY,
222                                 "=> bdb_dn2id_delete: subtree (%s) delete failed: %d\n",
223                                 ptr.bv_val, rc, 0 );
224                         goto done;
225                 }
226 #ifdef BDB_MULTIPLE_SUFFIXES
227                 if( be_issuffix( op->o_bd, &ptr )) break;
228 #endif
229                 dnParent( &ptr, &pdn );
230
231                 key.size = pdn.bv_len + 2;
232                 key.ulen = key.size;
233                 key.data = pdn.bv_val - 1;
234                 ptr = pdn;
235         }
236         }
237
238 done:
239         op->o_tmpfree( buf, op->o_tmpmemctx );
240         Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id_delete %d\n", rc, 0, 0 );
241         return rc;
242 }
243
244 int
245 bdb_dn2id(
246         Operation *op,
247         DB_TXN *txn,
248         struct berval   *dn,
249         EntryInfo *ei )
250 {
251         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
252         DB *db = bdb->bi_dn2id->bdi_db;
253         int             rc;
254         DBT             key, data;
255         ID              nid;
256
257         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2id(\"%s\")\n", dn->bv_val, 0, 0 );
258         DBTzero( &key );
259         key.size = dn->bv_len + 2;
260         key.data = op->o_tmpalloc( key.size, op->o_tmpmemctx );
261         ((char *)key.data)[0] = DN_BASE_PREFIX;
262         AC_MEMCPY( &((char *)key.data)[1], dn->bv_val, key.size - 1 );
263
264         /* store the ID */
265         DBTzero( &data );
266         data.data = &nid;
267         data.ulen = sizeof(ID);
268         data.flags = DB_DBT_USERMEM;
269
270         /* fetch it */
271         rc = db->get( db, txn, &key, &data, bdb->bi_db_opflags );
272
273         if( rc != 0 ) {
274                 Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id: get failed: %s (%d)\n",
275                         db_strerror( rc ), rc, 0 );
276         } else {
277                 BDB_DISK2ID( &nid, &ei->bei_id );
278                 Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id: got id=0x%08lx\n",
279                         ei->bei_id, 0, 0 );
280         }
281
282         op->o_tmpfree( key.data, op->o_tmpmemctx );
283         return rc;
284 }
285
286 int
287 bdb_dn2id_children(
288         Operation *op,
289         DB_TXN *txn,
290         Entry *e )
291 {
292         DBT             key, data;
293         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
294         DB *db = bdb->bi_dn2id->bdi_db;
295         ID              id;
296         int             rc;
297
298         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2id_children(\"%s\")\n",
299                 e->e_nname.bv_val, 0, 0 );
300         DBTzero( &key );
301         key.size = e->e_nname.bv_len + 2;
302         key.data = op->o_tmpalloc( key.size, op->o_tmpmemctx );
303         ((char *)key.data)[0] = DN_ONE_PREFIX;
304         AC_MEMCPY( &((char *)key.data)[1], e->e_nname.bv_val, key.size - 1 );
305
306         if ( bdb->bi_idl_cache_size ) {
307                 rc = bdb_idl_cache_get( bdb, db, &key, NULL );
308                 if ( rc != LDAP_NO_SUCH_OBJECT ) {
309                         op->o_tmpfree( key.data, op->o_tmpmemctx );
310                         return rc;
311                 }
312         }
313         /* we actually could do a empty get... */
314         DBTzero( &data );
315         data.data = &id;
316         data.ulen = sizeof(id);
317         data.flags = DB_DBT_USERMEM;
318         data.doff = 0;
319         data.dlen = sizeof(id);
320
321         rc = db->get( db, txn, &key, &data, bdb->bi_db_opflags );
322         op->o_tmpfree( key.data, op->o_tmpmemctx );
323
324         Debug( LDAP_DEBUG_TRACE, "<= bdb_dn2id_children(\"%s\"): %s (%d)\n",
325                 e->e_nname.bv_val,
326                 rc == 0 ? "" : ( rc == DB_NOTFOUND ? "no " :
327                         db_strerror(rc) ), rc );
328
329         return rc;
330 }
331
332 int
333 bdb_dn2idl(
334         Operation *op,
335         Entry *e,
336         ID *ids,
337         ID *stack )
338 {
339         int             rc;
340         DBT             key;
341         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
342         DB *db = bdb->bi_dn2id->bdi_db;
343         int prefix = ( op->ors_scope == LDAP_SCOPE_ONELEVEL )
344                 ? DN_ONE_PREFIX : DN_SUBTREE_PREFIX;
345
346         Debug( LDAP_DEBUG_TRACE, "=> bdb_dn2idl(\"%s\")\n",
347                 e->e_nname.bv_val, 0, 0 );
348
349 #ifndef BDB_MULTIPLE_SUFFIXES
350         if ( prefix == DN_SUBTREE_PREFIX && BEI(e)->bei_parent->bei_id == 0 ) {
351                 BDB_IDL_ALL(bdb, ids);
352                 return 0;
353         }
354 #endif
355
356         DBTzero( &key );
357         key.size = e->e_nname.bv_len + 2;
358         key.ulen = key.size;
359         key.flags = DB_DBT_USERMEM;
360         key.data = op->o_tmpalloc( key.size, op->o_tmpmemctx );
361         ((char *)key.data)[0] = prefix;
362         AC_MEMCPY( &((char *)key.data)[1], e->e_nname.bv_val, key.size - 1 );
363
364         BDB_IDL_ZERO( ids );
365         rc = bdb_idl_fetch_key( op->o_bd, db, NULL, &key, ids, NULL, 0 );
366
367         if( rc != 0 ) {
368                 Debug( LDAP_DEBUG_TRACE,
369                         "<= bdb_dn2idl: get failed: %s (%d)\n",
370                         db_strerror( rc ), rc, 0 );
371
372         } else {
373                 Debug( LDAP_DEBUG_TRACE,
374                         "<= bdb_dn2idl: id=%ld first=%ld last=%ld\n",
375                         (long) ids[0],
376                         (long) BDB_IDL_FIRST( ids ), (long) BDB_IDL_LAST( ids ) );
377         }
378
379         op->o_tmpfree( key.data, op->o_tmpmemctx );
380         return rc;
381 }
382
383 #else   /* BDB_HIER */
384 /* Experimental management routines for a hierarchically structured database.
385  *
386  * Unsupported! Use at your own risk!
387  * -- Howard Chu, Symas Corp. 2003.
388  *
389  * Instead of a ldbm-style dn2id database, we use a hierarchical one. Each
390  * entry in this database is a struct diskNode, keyed by entryID and with
391  * the data containing the RDN and entryID of the node's children. We use
392  * a B-Tree with sorted duplicates to store all the children of a node under
393  * the same key. Also, the first item under the key contains the entry's own
394  * rdn and the ID of the node's parent, to allow bottom-up tree traversal as
395  * well as top-down. To keep this info first in the list, the high bit of all
396  * subsequent nrdnlen's is always set. This means we can only accomodate
397  * RDNs up to length 32767, but that's fine since full DNs are already
398  * restricted to 8192.
399  *
400  * The diskNode is a variable length structure. This definition is not
401  * directly usable for in-memory manipulation.
402  */
403 typedef struct diskNode {
404         unsigned char nrdnlen[2];
405         unsigned char nrdn[1];
406         unsigned char rdn[1];
407         unsigned char entryID[sizeof(ID)];
408 } diskNode;
409
410 /* This function constructs a full DN for a given entry.
411  */
412 int hdb_fix_dn(
413         Entry *e,
414         int checkit )
415 {
416         EntryInfo *ei;
417         int rlen = 0, nrlen = 0;
418         char *ptr, *nptr;
419         int max = 0;
420
421         if ( !e->e_id )
422                 return 0;
423
424         /* count length of all DN components */
425         for ( ei = BEI(e); ei && ei->bei_id; ei=ei->bei_parent ) {
426                 rlen += ei->bei_rdn.bv_len + 1;
427                 nrlen += ei->bei_nrdn.bv_len + 1;
428                 if (ei->bei_modrdns > max) max = ei->bei_modrdns;
429         }
430
431         /* See if the entry DN was invalidated by a subtree rename */
432         if ( checkit ) {
433                 if ( BEI(e)->bei_modrdns >= max ) {
434                         return 0;
435                 }
436                 /* We found a mismatch, tell the caller to lock it */
437                 if ( checkit == 1 ) {
438                         return 1;
439                 }
440                 /* checkit == 2. do the fix. */
441                 free( e->e_name.bv_val );
442                 free( e->e_nname.bv_val );
443         }
444
445         e->e_name.bv_len = rlen - 1;
446         e->e_nname.bv_len = nrlen - 1;
447         e->e_name.bv_val = ch_malloc(rlen);
448         e->e_nname.bv_val = ch_malloc(nrlen);
449         ptr = e->e_name.bv_val;
450         nptr = e->e_nname.bv_val;
451         for ( ei = BEI(e); ei && ei->bei_id; ei=ei->bei_parent ) {
452                 ptr = lutil_strcopy(ptr, ei->bei_rdn.bv_val);
453                 nptr = lutil_strcopy(nptr, ei->bei_nrdn.bv_val);
454                 if ( ei->bei_parent ) {
455                         *ptr++ = ',';
456                         *nptr++ = ',';
457                 }
458         }
459         BEI(e)->bei_modrdns = max;
460         ptr[-1] = '\0';
461         nptr[-1] = '\0';
462
463         return 0;
464 }
465
466 /* We add two elements to the DN2ID database - a data item under the parent's
467  * entryID containing the child's RDN and entryID, and an item under the
468  * child's entryID containing the parent's entryID.
469  */
470 int
471 hdb_dn2id_add(
472         Operation       *op,
473         DB_TXN *txn,
474         EntryInfo       *eip,
475         Entry           *e )
476 {
477         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
478         DB *db = bdb->bi_dn2id->bdi_db;
479         DBT             key, data;
480         ID              nid;
481         int             rc, rlen, nrlen;
482         diskNode *d;
483         char *ptr;
484
485         nrlen = dn_rdnlen( op->o_bd, &e->e_nname );
486         if (nrlen) {
487                 rlen = dn_rdnlen( op->o_bd, &e->e_name );
488         } else {
489                 nrlen = e->e_nname.bv_len;
490                 rlen = e->e_name.bv_len;
491         }
492
493         d = op->o_tmpalloc(sizeof(diskNode) + rlen + nrlen, op->o_tmpmemctx);
494         d->nrdnlen[1] = nrlen & 0xff;
495         d->nrdnlen[0] = (nrlen >> 8) | 0x80;
496         ptr = lutil_strncopy( d->nrdn, e->e_nname.bv_val, nrlen );
497         *ptr++ = '\0';
498         ptr = lutil_strncopy( ptr, e->e_name.bv_val, rlen );
499         *ptr++ = '\0';
500         BDB_ID2DISK( e->e_id, ptr );
501
502         DBTzero(&key);
503         DBTzero(&data);
504         key.size = sizeof(ID);
505         key.flags = DB_DBT_USERMEM;
506         BDB_ID2DISK( eip->bei_id, &nid );
507
508         /* Delete parent's IDL cache entry */
509         if ( bdb->bi_idl_cache_size ) {
510                 key.data = &eip->bei_id;
511                 bdb_idl_cache_del( bdb, db, &key );
512         }
513         key.data = &nid;
514
515         /* Need to make dummy root node once. Subsequent attempts
516          * will fail harmlessly.
517          */
518         if ( eip->bei_id == 0 ) {
519                 diskNode dummy = {0};
520                 data.data = &dummy;
521                 data.size = sizeof(diskNode);
522                 data.flags = DB_DBT_USERMEM;
523
524                 db->put( db, txn, &key, &data, DB_NODUPDATA );
525         }
526
527         data.data = d;
528         data.size = sizeof(diskNode) + rlen + nrlen;
529         data.flags = DB_DBT_USERMEM;
530
531         rc = db->put( db, txn, &key, &data, DB_NODUPDATA );
532
533         if (rc == 0) {
534                 BDB_ID2DISK( e->e_id, &nid );
535                 BDB_ID2DISK( eip->bei_id, ptr );
536                 d->nrdnlen[0] ^= 0x80;
537
538                 rc = db->put( db, txn, &key, &data, DB_NODUPDATA );
539         }
540
541         op->o_tmpfree( d, op->o_tmpmemctx );
542
543         return rc;
544 }
545
546 int
547 hdb_dn2id_delete(
548         Operation       *op,
549         DB_TXN *txn,
550         EntryInfo       *eip,
551         Entry   *e )
552 {
553         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
554         DB *db = bdb->bi_dn2id->bdi_db;
555         DBT             key, data;
556         DBC     *cursor;
557         diskNode *d;
558         int rc, nrlen;
559         ID      nid;
560         unsigned char dlen[2];
561
562         DBTzero(&key);
563         key.size = sizeof(ID);
564         key.ulen = key.size;
565         key.flags = DB_DBT_USERMEM;
566         BDB_ID2DISK( eip->bei_id, &nid );
567
568         DBTzero(&data);
569         data.size = sizeof(diskNode) + BEI(e)->bei_nrdn.bv_len - sizeof(ID) - 1;
570         data.ulen = data.size;
571         data.dlen = data.size;
572         data.flags = DB_DBT_USERMEM | DB_DBT_PARTIAL;
573
574         /* Delete IDL cache entries */
575         if ( bdb->bi_idl_cache_size ) {
576                 /* Ours */
577                 key.data = &e->e_id;
578                 bdb_idl_cache_del( bdb, db, &key );
579                 /* Parent's */
580                 key.data = &eip->bei_id;
581                 bdb_idl_cache_del( bdb, db, &key );
582         }
583         key.data = &nid;
584         rc = db->cursor( db, txn, &cursor, bdb->bi_db_opflags );
585         if ( rc ) return rc;
586
587         d = op->o_tmpalloc( data.size, op->o_tmpmemctx );
588         d->nrdnlen[1] = BEI(e)->bei_nrdn.bv_len & 0xff;
589         d->nrdnlen[0] = (BEI(e)->bei_nrdn.bv_len >> 8) | 0x80;
590         dlen[0] = d->nrdnlen[0];
591         dlen[1] = d->nrdnlen[1];
592         strcpy( d->nrdn, BEI(e)->bei_nrdn.bv_val );
593         data.data = d;
594
595         /* Delete our ID from the parent's list */
596         rc = cursor->c_get( cursor, &key, &data, DB_GET_BOTH_RANGE );
597         if ( rc == 0 ) {
598                 if ( dlen[1] == d->nrdnlen[1] && dlen[0] == d->nrdnlen[0] &&
599                         !strcmp( d->nrdn, BEI(e)->bei_nrdn.bv_val ))
600                         rc = cursor->c_del( cursor, 0 );
601                 else
602                         rc = DB_NOTFOUND;
603         }
604
605         /* Delete our ID from the tree. With sorted duplicates, this
606          * will leave any child nodes still hanging around. This is OK
607          * for modrdn, which will add our info back in later.
608          */
609         if ( rc == 0 ) {
610                 BDB_ID2DISK( e->e_id, &nid );
611                 rc = cursor->c_get( cursor, &key, &data, DB_SET );
612                 if ( rc == 0 )
613                         rc = cursor->c_del( cursor, 0 );
614         }
615         cursor->c_close( cursor );
616         op->o_tmpfree( d, op->o_tmpmemctx );
617
618         return rc;
619 }
620
621
622 int
623 hdb_dn2id(
624         Operation       *op,
625         DB_TXN *txn,
626         struct berval   *in,
627         EntryInfo       *ei )
628 {
629         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
630         DB *db = bdb->bi_dn2id->bdi_db;
631         DBT             key, data;
632         DBC     *cursor;
633         int             rc = 0, nrlen;
634         diskNode *d;
635         char    *ptr;
636         unsigned char dlen[2];
637         ID idp;
638
639         nrlen = dn_rdnlen( op->o_bd, in );
640         if (!nrlen) nrlen = in->bv_len;
641
642         DBTzero(&key);
643         key.size = sizeof(ID);
644         key.data = &idp;
645         key.ulen = sizeof(ID);
646         key.flags = DB_DBT_USERMEM;
647         BDB_ID2DISK( ei->bei_parent->bei_id, &idp );
648
649         DBTzero(&data);
650         data.size = sizeof(diskNode) + nrlen - sizeof(ID) - 1;
651         data.ulen = data.size * 3;
652         data.dlen = data.ulen;
653         data.flags = DB_DBT_USERMEM | DB_DBT_PARTIAL;
654
655         rc = db->cursor( db, txn, &cursor, bdb->bi_db_opflags );
656         if ( rc ) return rc;
657
658         d = op->o_tmpalloc( data.size * 3, op->o_tmpmemctx );
659         d->nrdnlen[1] = nrlen & 0xff;
660         d->nrdnlen[0] = (nrlen >> 8) | 0x80;
661         dlen[0] = d->nrdnlen[0];
662         dlen[1] = d->nrdnlen[1];
663         ptr = lutil_strncopy( d->nrdn, in->bv_val, nrlen );
664         *ptr = '\0';
665         data.data = d;
666
667         rc = cursor->c_get( cursor, &key, &data, DB_GET_BOTH_RANGE );
668         if ( rc == 0 && (dlen[1] != d->nrdnlen[1] || dlen[0] != d->nrdnlen[0] ||
669                 strncmp( d->nrdn, in->bv_val, nrlen ))) {
670                 rc = DB_NOTFOUND;
671         }
672         if ( rc == 0 ) {
673                 ptr = data.data + data.size - sizeof(ID);
674                 BDB_DISK2ID( ptr, &ei->bei_id );
675                 ei->bei_rdn.bv_len = data.size - sizeof(diskNode) - nrlen;
676                 ptr = d->nrdn + nrlen + 1;
677                 ber_str2bv( ptr, ei->bei_rdn.bv_len, 1, &ei->bei_rdn );
678                 if ( !ei->bei_parent->bei_dkids ) {
679                         db_recno_t dkids;
680                         /* How many children does the parent have? */
681                         /* FIXME: do we need to lock the parent
682                          * entryinfo? Seems safe...
683                          */
684                         cursor->c_count( cursor, &dkids, 0 );
685                         ei->bei_parent->bei_dkids = dkids;
686                 }
687         }
688         cursor->c_close( cursor );
689         op->o_tmpfree( d, op->o_tmpmemctx );
690
691         return rc;
692 }
693
694 int
695 hdb_dn2id_parent(
696         Operation *op,
697         DB_TXN *txn,
698         EntryInfo *ei,
699         ID *idp )
700 {
701         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
702         DB *db = bdb->bi_dn2id->bdi_db;
703         DBT             key, data;
704         DBC     *cursor;
705         int             rc = 0;
706         diskNode *d;
707         char    *ptr;
708         unsigned char *pt2;
709         ID      nid;
710
711         DBTzero(&key);
712         key.size = sizeof(ID);
713         key.data = &nid;
714         key.ulen = sizeof(ID);
715         key.flags = DB_DBT_USERMEM;
716         BDB_ID2DISK( ei->bei_id, &nid );
717
718         DBTzero(&data);
719         data.flags = DB_DBT_USERMEM;
720
721         rc = db->cursor( db, txn, &cursor, bdb->bi_db_opflags );
722         if ( rc ) return rc;
723
724         data.ulen = sizeof(diskNode) + (SLAP_LDAPDN_MAXLEN * 2);
725         d = op->o_tmpalloc( data.ulen, op->o_tmpmemctx );
726         data.data = d;
727
728         rc = cursor->c_get( cursor, &key, &data, DB_SET );
729         if ( rc == 0 ) {
730                 if (d->nrdnlen[0] & 0x80) {
731                         rc = LDAP_OTHER;
732                 } else {
733                         db_recno_t dkids;
734                         ptr = data.data + data.size - sizeof(ID);
735                         BDB_DISK2ID( ptr, idp );
736                         ei->bei_nrdn.bv_len = (d->nrdnlen[0] << 8) | d->nrdnlen[1];
737                         ber_str2bv( d->nrdn, ei->bei_nrdn.bv_len, 1, &ei->bei_nrdn );
738                         ei->bei_rdn.bv_len = data.size - sizeof(diskNode) -
739                                 ei->bei_nrdn.bv_len;
740                         ptr = d->nrdn + ei->bei_nrdn.bv_len + 1;
741                         ber_str2bv( ptr, ei->bei_rdn.bv_len, 1, &ei->bei_rdn );
742                         /* How many children does this node have? */
743                         cursor->c_count( cursor, &dkids, 0 );
744                         ei->bei_dkids = dkids;
745                 }
746         }
747         cursor->c_close( cursor );
748         op->o_tmpfree( d, op->o_tmpmemctx );
749         return rc;
750 }
751
752 int
753 hdb_dn2id_children(
754         Operation *op,
755         DB_TXN *txn,
756         Entry *e )
757 {
758         struct bdb_info *bdb = (struct bdb_info *) op->o_bd->be_private;
759         DB *db = bdb->bi_dn2id->bdi_db;
760         DBT             key, data;
761         DBC             *cursor;
762         int             rc;
763         ID              id;
764         diskNode d;
765
766         DBTzero(&key);
767         key.size = sizeof(ID);
768         key.data = &e->e_id;
769         key.flags = DB_DBT_USERMEM;
770         BDB_ID2DISK( e->e_id, &id );
771
772         /* IDL cache is in host byte order */
773         if ( bdb->bi_idl_cache_size ) {
774                 rc = bdb_idl_cache_get( bdb, db, &key, NULL );
775                 if ( rc != LDAP_NO_SUCH_OBJECT ) {
776                         return rc;
777                 }
778         }
779
780         key.data = &id;
781         DBTzero(&data);
782         data.data = &d;
783         data.ulen = sizeof(d);
784         data.flags = DB_DBT_USERMEM | DB_DBT_PARTIAL;
785         data.dlen = sizeof(d);
786
787         rc = db->cursor( db, txn, &cursor, bdb->bi_db_opflags );
788         if ( rc ) return rc;
789
790         rc = cursor->c_get( cursor, &key, &data, DB_SET );
791         if ( rc == 0 ) {
792                 db_recno_t dkids;
793                 rc = cursor->c_count( cursor, &dkids, 0 );
794                 if ( rc == 0 ) {
795                         BEI(e)->bei_dkids = dkids;
796                         if ( dkids < 2 ) rc = DB_NOTFOUND;
797                 }
798         }
799         cursor->c_close( cursor );
800         return rc;
801 }
802
803 /* bdb_dn2idl:
804  * We can't just use bdb_idl_fetch_key because
805  * 1 - our data items are longer than just an entry ID
806  * 2 - our data items are sorted alphabetically by nrdn, not by ID.
807  *
808  * We descend the tree recursively, so we define this cookie
809  * to hold our necessary state information. The bdb_dn2idl_internal
810  * function uses this cookie when calling itself.
811  */
812
813 struct dn2id_cookie {
814         struct bdb_info *bdb;
815         DB *db;
816         int prefix;
817         int rc;
818         EntryInfo *ei;
819         ID id;
820         ID nid;
821         ID dbuf;
822         ID *ids;
823         void *ptr;
824         ID tmp[BDB_IDL_UM_SIZE];
825         ID *buf;
826         DBT key;
827         DBT data;
828         DBC *dbc;
829         Operation *op;
830 };
831
832 static int
833 apply_func(
834         void *data,
835         void *arg )
836 {
837         EntryInfo *ei = data;
838         ID *idl = arg;
839
840         bdb_idl_append_one( idl, ei->bei_id );
841         return 0;
842 }
843
844 static int
845 hdb_dn2idl_internal(
846         struct dn2id_cookie *cx
847 )
848 {
849         BDB_IDL_ZERO( cx->tmp );
850
851         if ( !cx->ei ) {
852                 cx->ei = bdb_cache_find_info( cx->bdb, cx->id );
853                 if ( !cx->ei ) {
854                         cx->rc = DB_NOTFOUND;
855                         goto saveit;
856                 }
857         }
858
859         if ( cx->bdb->bi_idl_cache_size ) {
860                 cx->key.data = &cx->id;
861                 cx->rc = bdb_idl_cache_get(cx->bdb, cx->db, &cx->key, cx->tmp);
862                 if ( cx->rc == DB_NOTFOUND ) {
863                         return cx->rc;
864                 }
865                 if ( cx->rc == LDAP_SUCCESS ) {
866                         goto gotit;
867                 }
868         }
869
870         bdb_cache_entryinfo_lock( cx->ei );
871
872         /* If number of kids in the cache differs from on-disk, load
873          * up all the kids from the database
874          */
875         if ( cx->ei->bei_ckids+1 != cx->ei->bei_dkids ) {
876                 EntryInfo ei;
877                 db_recno_t dkids = cx->ei->bei_dkids;
878                 ei.bei_parent = cx->ei;
879
880                 bdb_cache_entryinfo_unlock( cx->ei );
881
882                 cx->rc = cx->db->cursor( cx->db, NULL, &cx->dbc,
883                         cx->bdb->bi_db_opflags );
884                 if ( cx->rc ) return cx->rc;
885
886                 cx->data.data = &cx->dbuf;
887                 cx->data.ulen = sizeof(ID);
888                 cx->data.dlen = sizeof(ID);
889                 cx->data.flags = DB_DBT_USERMEM | DB_DBT_PARTIAL;
890
891                 /* The first item holds the parent ID. Ignore it. */
892                 cx->key.data = &cx->nid;
893                 cx->rc = cx->dbc->c_get( cx->dbc, &cx->key, &cx->data, DB_SET );
894                 if ( cx->rc ) {
895                         cx->dbc->c_close( cx->dbc );
896                         if ( cx->rc == DB_NOTFOUND ) goto saveit;
897                         return cx->rc;
898                 }
899
900                 /* If the on-disk count is zero we've never checked it.
901                  * Count it now.
902                  */
903                 if ( !dkids ) {
904                         cx->dbc->c_count( cx->dbc, &dkids, 0 );
905                         cx->ei->bei_dkids = dkids;
906                 }
907
908                 cx->data.data = cx->buf;
909                 cx->data.ulen = BDB_IDL_UM_SIZE * sizeof(ID);
910                 cx->data.flags = DB_DBT_USERMEM;
911
912                 /* Fetch the rest of the IDs in a loop... */
913                 while ( (cx->rc = cx->dbc->c_get( cx->dbc, &cx->key, &cx->data,
914                         DB_MULTIPLE | DB_NEXT_DUP )) == 0 ) {
915                         u_int8_t *j;
916                         size_t len;
917                         DB_MULTIPLE_INIT( cx->ptr, &cx->data );
918                         while (cx->ptr) {
919                                 DB_MULTIPLE_NEXT( cx->ptr, &cx->data, j, len );
920                                 if (j) {
921                                         EntryInfo *ei2;
922                                         diskNode *d = (diskNode *)j;
923                                         short nrlen;
924
925                                         BDB_DISK2ID( j + len - sizeof(ID), &ei.bei_id );
926                                         nrlen = ((d->nrdnlen[0] ^ 0x80) << 8) | d->nrdnlen[1];
927                                         ei.bei_nrdn.bv_len = nrlen;
928                                         /* nrdn/rdn are set in-place.
929                                          * hdb_cache_load will copy them as needed
930                                          */
931                                         ei.bei_nrdn.bv_val = d->nrdn;
932                                         ei.bei_rdn.bv_len = len - sizeof(diskNode)
933                                                 - ei.bei_nrdn.bv_len;
934                                         ei.bei_rdn.bv_val = d->nrdn + ei.bei_nrdn.bv_len + 1;
935                                         bdb_idl_append_one( cx->tmp, ei.bei_id );
936                                         hdb_cache_load( cx->bdb, &ei, &ei2 );
937                                 }
938                         }
939                 }
940                 cx->rc = cx->dbc->c_close( cx->dbc );
941         } else {
942                 /* The in-memory cache is in sync with the on-disk data.
943                  * do we have any kids?
944                  */
945                 cx->rc = 0;
946                 if ( cx->ei->bei_ckids > 0 ) {
947                         /* Walk the kids tree; order is irrelevant since bdb_idl_insert
948                          * will insert in sorted order.
949                          */
950                         avl_apply( cx->ei->bei_kids, apply_func,
951                                 cx->tmp, -1, AVL_POSTORDER );
952                 }
953                 bdb_cache_entryinfo_unlock( cx->ei );
954         }
955
956 saveit:
957         if ( cx->bdb->bi_idl_cache_max_size ) {
958                 cx->key.data = &cx->id;
959                 bdb_idl_cache_put( cx->bdb, cx->db, &cx->key, cx->tmp, cx->rc );
960         }
961         ;
962 gotit:
963         if ( !BDB_IDL_IS_ZERO( cx->tmp )) {
964                 if ( cx->prefix == DN_SUBTREE_PREFIX ) {
965                         bdb_idl_append( cx->ids, cx->tmp );
966                         if ( !(cx->ei->bei_state & CACHE_ENTRY_NO_GRANDKIDS)) {
967                                 ID *save, idcurs;
968                                 EntryInfo *ei = cx->ei;
969                                 int nokids = 1;
970                                 save = cx->op->o_tmpalloc( BDB_IDL_SIZEOF( cx->tmp ),
971                                         cx->op->o_tmpmemctx );
972                                 BDB_IDL_CPY( save, cx->tmp );
973
974                                 idcurs = 0;
975                                 for ( cx->id = bdb_idl_first( save, &idcurs );
976                                         cx->id != NOID;
977                                         cx->id = bdb_idl_next( save, &idcurs )) {
978                                         BDB_ID2DISK( cx->id, &cx->nid );
979                                         cx->ei = NULL;
980                                         hdb_dn2idl_internal( cx );
981                                         if ( !BDB_IDL_IS_ZERO( cx->tmp ))
982                                                 nokids = 0;
983                                 }
984                                 cx->op->o_tmpfree( save, cx->op->o_tmpmemctx );
985                                 if ( nokids ) ei->bei_state |= CACHE_ENTRY_NO_GRANDKIDS;
986                         }
987                         /* Make sure caller knows it had kids! */
988                         cx->tmp[0]=1;
989
990                         cx->rc = 0;
991                 } else {
992                         BDB_IDL_CPY( cx->ids, cx->tmp );
993                 }
994         }
995         return cx->rc;
996 }
997
998 int
999 hdb_dn2idl(
1000         Operation       *op,
1001         Entry           *e,
1002         ID *ids,
1003         ID *stack )
1004 {
1005         struct bdb_info *bdb = (struct bdb_info *)op->o_bd->be_private;
1006         struct dn2id_cookie cx;
1007
1008         Debug( LDAP_DEBUG_TRACE, "=> hdb_dn2idl(\"%s\")\n",
1009                 e->e_nname.bv_val, 0, 0 );
1010
1011 #ifndef BDB_MULTIPLE_SUFFIXES
1012         if ( op->ors_scope != LDAP_SCOPE_ONELEVEL && 
1013                 BEI(e)->bei_parent->bei_id == 0 )
1014         {
1015                 BDB_IDL_ALL( bdb, ids );
1016                 return 0;
1017         }
1018 #endif
1019
1020         cx.id = e->e_id;
1021         BDB_ID2DISK( cx.id, &cx.nid );
1022         cx.ei = e->e_id ? BEI(e) : &bdb->bi_cache.c_dntree;
1023         cx.bdb = bdb;
1024         cx.db = cx.bdb->bi_dn2id->bdi_db;
1025         cx.prefix = (op->ors_scope == LDAP_SCOPE_ONELEVEL) ?
1026                 DN_ONE_PREFIX : DN_SUBTREE_PREFIX;
1027         cx.ids = ids;
1028         cx.buf = stack;
1029         cx.op = op;
1030
1031         BDB_IDL_ZERO( ids );
1032         if ( cx.prefix == DN_SUBTREE_PREFIX ) {
1033                 bdb_idl_insert( ids, cx.id );
1034         }
1035
1036         DBTzero(&cx.key);
1037         cx.key.ulen = sizeof(ID);
1038         cx.key.size = sizeof(ID);
1039         cx.key.flags = DB_DBT_USERMEM;
1040
1041         DBTzero(&cx.data);
1042
1043         hdb_dn2idl_internal(&cx);
1044         if ( !BDB_IDL_IS_ZERO( ids ) && !BDB_IDL_IS_RANGE( ids ))
1045                 bdb_idl_sort( ids );
1046
1047         return cx.rc;
1048 }
1049 #endif  /* BDB_HIER */