git.sur5r.net Git - openldap/blob - servers/slapd/back-mdb/monitor.c

   1 /* monitor.c - monitor mdb backend */
   2 /* $OpenLDAP$ */
   3 /* This work is part of OpenLDAP Software <http://www.openldap.org/>.
   4  *
   5  * Copyright 2000-2016 The OpenLDAP Foundation.
   6  * All rights reserved.
   7  *
   8  * Redistribution and use in source and binary forms, with or without
   9  * modification, are permitted only as authorized by the OpenLDAP
  10  * Public License.
  11  *
  12  * A copy of this license is available in the file LICENSE in the
  13  * top-level directory of the distribution or, alternatively, at
  14  * <http://www.OpenLDAP.org/license.html>.
  15  */
  16
  17 #include "portable.h"
  18
  19 #include <stdio.h>
  20 #include <ac/string.h>
  21 #include <ac/unistd.h>
  22 #include <ac/stdlib.h>
  23 #include <ac/errno.h>
  24 #include <sys/stat.h>
  25 #include "lutil.h"
  26 #include "back-mdb.h"
  27
  28 #include "../back-monitor/back-monitor.h"
  29
  30 #include "config.h"
  31
  32 static ObjectClass              *oc_olmMDBDatabase;
  33
  34 static AttributeDescription *ad_olmDbDirectory;
  35
  36 #ifdef MDB_MONITOR_IDX
  37 static int
  38 mdb_monitor_idx_entry_add(
  39         struct mdb_info *mdb,
  40         Entry           *e );
  41
  42 static AttributeDescription     *ad_olmDbNotIndexed;
  43 #endif /* MDB_MONITOR_IDX */
  44
  45 /*
  46  * NOTE: there's some confusion in monitor OID arc;
  47  * by now, let's consider:
  48  *
  49  * Subsystems monitor attributes        1.3.6.1.4.1.4203.666.1.55.0
  50  * Databases monitor attributes         1.3.6.1.4.1.4203.666.1.55.0.1
  51  * MDB database monitor attributes      1.3.6.1.4.1.4203.666.1.55.0.1.3
  52  *
  53  * Subsystems monitor objectclasses     1.3.6.1.4.1.4203.666.3.16.0
  54  * Databases monitor objectclasses      1.3.6.1.4.1.4203.666.3.16.0.1
  55  * MDB database monitor objectclasses   1.3.6.1.4.1.4203.666.3.16.0.1.3
  56  */
  57
  58 static struct {
  59         char                    *name;
  60         char                    *oid;
  61 }               s_oid[] = {
  62         { "olmMDBAttributes",                   "olmDatabaseAttributes:1" },
  63         { "olmMDBObjectClasses",                "olmDatabaseObjectClasses:1" },
  64
  65         { NULL }
  66 };
  67
  68 static struct {
  69         char                    *desc;
  70         AttributeDescription    **ad;
  71 }               s_at[] = {
  72         { "( olmDatabaseAttributes:1 "
  73                 "NAME ( 'olmDbDirectory' ) "
  74                 "DESC 'Path name of the directory "
  75                         "where the database environment resides' "
  76                 "SUP monitoredInfo "
  77                 "NO-USER-MODIFICATION "
  78                 "USAGE dSAOperation )",
  79                 &ad_olmDbDirectory },
  80
  81 #ifdef MDB_MONITOR_IDX
  82         { "( olmDatabaseAttributes:2 "
  83                 "NAME ( 'olmDbNotIndexed' ) "
  84                 "DESC 'Missing indexes resulting from candidate selection' "
  85                 "SUP monitoredInfo "
  86                 "NO-USER-MODIFICATION "
  87                 "USAGE dSAOperation )",
  88                 &ad_olmDbNotIndexed },
  89 #endif /* MDB_MONITOR_IDX */
  90
  91         { NULL }
  92 };
  93
  94 static struct {
  95         char            *desc;
  96         ObjectClass     **oc;
  97 }               s_oc[] = {
  98         /* augments an existing object, so it must be AUXILIARY
  99          * FIXME: derive from some ABSTRACT "monitoredEntity"? */
 100         { "( olmMDBObjectClasses:2 "
 101                 "NAME ( 'olmMDBDatabase' ) "
 102                 "SUP top AUXILIARY "
 103                 "MAY ( "
 104                         "olmDbDirectory "
 105 #ifdef MDB_MONITOR_IDX
 106                         "$ olmDbNotIndexed "
 107 #endif /* MDB_MONITOR_IDX */
 108                         ") )",
 109                 &oc_olmMDBDatabase },
 110
 111         { NULL }
 112 };
 113
 114 static int
 115 mdb_monitor_update(
 116         Operation       *op,
 117         SlapReply       *rs,
 118         Entry           *e,
 119         void            *priv )
 120 {
 121         struct mdb_info         *mdb = (struct mdb_info *) priv;
 122
 123 #ifdef MDB_MONITOR_IDX
 124         mdb_monitor_idx_entry_add( mdb, e );
 125 #endif /* MDB_MONITOR_IDX */
 126
 127         return SLAP_CB_CONTINUE;
 128 }
 129
 130 #if 0   /* uncomment if required */
 131 static int
 132 mdb_monitor_modify(
 133         Operation       *op,
 134         SlapReply       *rs,
 135         Entry           *e,
 136         void            *priv )
 137 {
 138         return SLAP_CB_CONTINUE;
 139 }
 140 #endif
 141
 142 static int
 143 mdb_monitor_free(
 144         Entry           *e,
 145         void            **priv )
 146 {
 147         struct berval   values[ 2 ];
 148         Modification    mod = { 0 };
 149
 150         const char      *text;
 151         char            textbuf[ SLAP_TEXT_BUFLEN ];
 152
 153         int             i, rc;
 154
 155         /* NOTE: if slap_shutdown != 0, priv might have already been freed */
 156         *priv = NULL;
 157
 158         /* Remove objectClass */
 159         mod.sm_op = LDAP_MOD_DELETE;
 160         mod.sm_desc = slap_schema.si_ad_objectClass;
 161         mod.sm_values = values;
 162         mod.sm_numvals = 1;
 163         values[ 0 ] = oc_olmMDBDatabase->soc_cname;
 164         BER_BVZERO( &values[ 1 ] );
 165
 166         rc = modify_delete_values( e, &mod, 1, &text,
 167                 textbuf, sizeof( textbuf ) );
 168         /* don't care too much about return code... */
 169
 170         /* remove attrs */
 171         mod.sm_values = NULL;
 172         mod.sm_numvals = 0;
 173         for ( i = 0; s_at[ i ].desc != NULL; i++ ) {
 174                 mod.sm_desc = *s_at[ i ].ad;
 175                 rc = modify_delete_values( e, &mod, 1, &text,
 176                         textbuf, sizeof( textbuf ) );
 177                 /* don't care too much about return code... */
 178         }
 179
 180         return SLAP_CB_CONTINUE;
 181 }
 182
 183 /*
 184  * call from within mdb_initialize()
 185  */
 186 static int
 187 mdb_monitor_initialize( void )
 188 {
 189         int             i, code;
 190         ConfigArgs c;
 191         char    *argv[ 3 ];
 192
 193         static int      mdb_monitor_initialized = 0;
 194
 195         /* set to 0 when successfully initialized; otherwise, remember failure */
 196         static int      mdb_monitor_initialized_failure = 1;
 197
 198         if ( mdb_monitor_initialized++ ) {
 199                 return mdb_monitor_initialized_failure;
 200         }
 201
 202         if ( backend_info( "monitor" ) == NULL ) {
 203                 return -1;
 204         }
 205
 206         /* register schema here */
 207
 208         argv[ 0 ] = "back-mdb monitor";
 209         c.argv = argv;
 210         c.argc = 3;
 211         c.fname = argv[0];
 212
 213         for ( i = 0; s_oid[ i ].name; i++ ) {
 214                 c.lineno = i;
 215                 argv[ 1 ] = s_oid[ i ].name;
 216                 argv[ 2 ] = s_oid[ i ].oid;
 217
 218                 if ( parse_oidm( &c, 0, NULL ) != 0 ) {
 219                         Debug( LDAP_DEBUG_ANY, LDAP_XSTRING(mdb_monitor_initialize)
 220                                 ": unable to add "
 221                                 "objectIdentifier \"%s=%s\"\n",
 222                                 s_oid[ i ].name, s_oid[ i ].oid, 0 );
 223                         return 2;
 224                 }
 225         }
 226
 227         for ( i = 0; s_at[ i ].desc != NULL; i++ ) {
 228                 code = register_at( s_at[ i ].desc, s_at[ i ].ad, 1 );
 229                 if ( code != LDAP_SUCCESS ) {
 230                         Debug( LDAP_DEBUG_ANY, LDAP_XSTRING(mdb_monitor_initialize)
 231                                 ": register_at failed for attributeType (%s)\n",
 232                                 s_at[ i ].desc, 0, 0 );
 233                         return 3;
 234
 235                 } else {
 236                         (*s_at[ i ].ad)->ad_type->sat_flags |= SLAP_AT_HIDE;
 237                 }
 238         }
 239
 240         for ( i = 0; s_oc[ i ].desc != NULL; i++ ) {
 241                 code = register_oc( s_oc[ i ].desc, s_oc[ i ].oc, 1 );
 242                 if ( code != LDAP_SUCCESS ) {
 243                         Debug( LDAP_DEBUG_ANY, LDAP_XSTRING(mdb_monitor_initialize)
 244                                 ": register_oc failed for objectClass (%s)\n",
 245                                 s_oc[ i ].desc, 0, 0 );
 246                         return 4;
 247
 248                 } else {
 249                         (*s_oc[ i ].oc)->soc_flags |= SLAP_OC_HIDE;
 250                 }
 251         }
 252
 253         return ( mdb_monitor_initialized_failure = LDAP_SUCCESS );
 254 }
 255
 256 /*
 257  * call from within mdb_db_init()
 258  */
 259 int
 260 mdb_monitor_db_init( BackendDB *be )
 261 {
 262         struct mdb_info         *mdb = (struct mdb_info *) be->be_private;
 263
 264         if ( mdb_monitor_initialize() == LDAP_SUCCESS ) {
 265                 /* monitoring in back-mdb is on by default */
 266                 SLAP_DBFLAGS( be ) |= SLAP_DBFLAG_MONITORING;
 267         }
 268
 269 #ifdef MDB_MONITOR_IDX
 270         mdb->mi_idx = NULL;
 271         ldap_pvt_thread_mutex_init( &mdb->mi_idx_mutex );
 272 #endif /* MDB_MONITOR_IDX */
 273
 274         return 0;
 275 }
 276
 277 /*
 278  * call from within mdb_db_open()
 279  */
 280 int
 281 mdb_monitor_db_open( BackendDB *be )
 282 {
 283         struct mdb_info         *mdb = (struct mdb_info *) be->be_private;
 284         Attribute               *a, *next;
 285         monitor_callback_t      *cb = NULL;
 286         int                     rc = 0;
 287         BackendInfo             *mi;
 288         monitor_extra_t         *mbe;
 289
 290         if ( !SLAP_DBMONITORING( be ) ) {
 291                 return 0;
 292         }
 293
 294         mi = backend_info( "monitor" );
 295         if ( !mi || !mi->bi_extra ) {
 296                 SLAP_DBFLAGS( be ) ^= SLAP_DBFLAG_MONITORING;
 297                 return 0;
 298         }
 299         mbe = mi->bi_extra;
 300
 301         /* don't bother if monitor is not configured */
 302         if ( !mbe->is_configured() ) {
 303                 static int warning = 0;
 304
 305                 if ( warning++ == 0 ) {
 306                         Debug( LDAP_DEBUG_ANY, LDAP_XSTRING(mdb_monitor_db_open)
 307                                 ": monitoring disabled; "
 308                                 "configure monitor database to enable\n",
 309                                 0, 0, 0 );
 310                 }
 311
 312                 return 0;
 313         }
 314
 315         /* alloc as many as required (plus 1 for objectClass) */
 316         a = attrs_alloc( 1 + 1 );
 317         if ( a == NULL ) {
 318                 rc = 1;
 319                 goto cleanup;
 320         }
 321
 322         a->a_desc = slap_schema.si_ad_objectClass;
 323         attr_valadd( a, &oc_olmMDBDatabase->soc_cname, NULL, 1 );
 324         next = a->a_next;
 325
 326         {
 327                 struct berval   bv, nbv;
 328                 ber_len_t       pathlen = 0, len = 0;
 329                 char            path[ MAXPATHLEN ] = { '\0' };
 330                 char            *fname = mdb->mi_dbenv_home,
 331                                 *ptr;
 332
 333                 len = strlen( fname );
 334                 if ( fname[ 0 ] != '/' ) {
 335                         /* get full path name */
 336                         getcwd( path, sizeof( path ) );
 337                         pathlen = strlen( path );
 338
 339                         if ( fname[ 0 ] == '.' && fname[ 1 ] == '/' ) {
 340                                 fname += 2;
 341                                 len -= 2;
 342                         }
 343                 }
 344
 345                 bv.bv_len = pathlen + STRLENOF( "/" ) + len;
 346                 ptr = bv.bv_val = ch_malloc( bv.bv_len + STRLENOF( "/" ) + 1 );
 347                 if ( pathlen ) {
 348                         ptr = lutil_strncopy( ptr, path, pathlen );
 349                         ptr[ 0 ] = '/';
 350                         ptr++;
 351                 }
 352                 ptr = lutil_strncopy( ptr, fname, len );
 353                 if ( ptr[ -1 ] != '/' ) {
 354                         ptr[ 0 ] = '/';
 355                         ptr++;
 356                 }
 357                 ptr[ 0 ] = '\0';
 358
 359                 attr_normalize_one( ad_olmDbDirectory, &bv, &nbv, NULL );
 360
 361                 next->a_desc = ad_olmDbDirectory;
 362                 next->a_vals = ch_calloc( sizeof( struct berval ), 2 );
 363                 next->a_vals[ 0 ] = bv;
 364                 next->a_numvals = 1;
 365
 366                 if ( BER_BVISNULL( &nbv ) ) {
 367                         next->a_nvals = next->a_vals;
 368
 369                 } else {
 370                         next->a_nvals = ch_calloc( sizeof( struct berval ), 2 );
 371                         next->a_nvals[ 0 ] = nbv;
 372                 }
 373
 374                 next = next->a_next;
 375         }
 376
 377         cb = ch_calloc( sizeof( monitor_callback_t ), 1 );
 378         cb->mc_update = mdb_monitor_update;
 379 #if 0   /* uncomment if required */
 380         cb->mc_modify = mdb_monitor_modify;
 381 #endif
 382         cb->mc_free = mdb_monitor_free;
 383         cb->mc_private = (void *)mdb;
 384
 385         /* make sure the database is registered; then add monitor attributes */
 386         rc = mbe->register_database( be, &mdb->mi_monitor.mdm_ndn );
 387         if ( rc == 0 ) {
 388                 rc = mbe->register_entry_attrs( &mdb->mi_monitor.mdm_ndn, a, cb,
 389                         NULL, -1, NULL );
 390         }
 391
 392 cleanup:;
 393         if ( rc != 0 ) {
 394                 if ( cb != NULL ) {
 395                         ch_free( cb );
 396                         cb = NULL;
 397                 }
 398
 399                 if ( a != NULL ) {
 400                         attrs_free( a );
 401                         a = NULL;
 402                 }
 403         }
 404
 405         /* store for cleanup */
 406         mdb->mi_monitor.mdm_cb = (void *)cb;
 407
 408         /* we don't need to keep track of the attributes, because
 409          * mdb_monitor_free() takes care of everything */
 410         if ( a != NULL ) {
 411                 attrs_free( a );
 412         }
 413
 414         return rc;
 415 }
 416
 417 /*
 418  * call from within mdb_db_close()
 419  */
 420 int
 421 mdb_monitor_db_close( BackendDB *be )
 422 {
 423         struct mdb_info         *mdb = (struct mdb_info *) be->be_private;
 424
 425         if ( !BER_BVISNULL( &mdb->mi_monitor.mdm_ndn ) ) {
 426                 BackendInfo             *mi = backend_info( "monitor" );
 427                 monitor_extra_t         *mbe;
 428
 429                 if ( mi && &mi->bi_extra ) {
 430                         mbe = mi->bi_extra;
 431                         mbe->unregister_entry_callback( &mdb->mi_monitor.mdm_ndn,
 432                                 (monitor_callback_t *)mdb->mi_monitor.mdm_cb,
 433                                 NULL, 0, NULL );
 434                 }
 435
 436                 memset( &mdb->mi_monitor, 0, sizeof( mdb->mi_monitor ) );
 437         }
 438
 439         return 0;
 440 }
 441
 442 /*
 443  * call from within mdb_db_destroy()
 444  */
 445 int
 446 mdb_monitor_db_destroy( BackendDB *be )
 447 {
 448 #ifdef MDB_MONITOR_IDX
 449         struct mdb_info         *mdb = (struct mdb_info *) be->be_private;
 450
 451         /* TODO: free tree */
 452         ldap_pvt_thread_mutex_destroy( &mdb->mi_idx_mutex );
 453         avl_free( mdb->mi_idx, ch_free );
 454 #endif /* MDB_MONITOR_IDX */
 455
 456         return 0;
 457 }
 458
 459 #ifdef MDB_MONITOR_IDX
 460
 461 #define MDB_MONITOR_IDX_TYPES   (4)
 462
 463 typedef struct monitor_idx_t monitor_idx_t;
 464
 465 struct monitor_idx_t {
 466         AttributeDescription    *idx_ad;
 467         unsigned long           idx_count[MDB_MONITOR_IDX_TYPES];
 468 };
 469
 470 static int
 471 mdb_monitor_bitmask2key( slap_mask_t bitmask )
 472 {
 473         int     key;
 474
 475         for ( key = 0; key < 8 * (int)sizeof(slap_mask_t) && !( bitmask & 0x1U );
 476                         key++ )
 477                 bitmask >>= 1;
 478
 479         return key;
 480 }
 481
 482 static struct berval idxbv[] = {
 483         BER_BVC( "present=" ),
 484         BER_BVC( "equality=" ),
 485         BER_BVC( "approx=" ),
 486         BER_BVC( "substr=" ),
 487         BER_BVNULL
 488 };
 489
 490 static ber_len_t
 491 mdb_monitor_idx2len( monitor_idx_t *idx )
 492 {
 493         int             i;
 494         ber_len_t       len = 0;
 495
 496         for ( i = 0; i < MDB_MONITOR_IDX_TYPES; i++ ) {
 497                 if ( idx->idx_count[ i ] != 0 ) {
 498                         len += idxbv[i].bv_len;
 499                 }
 500         }
 501
 502         return len;
 503 }
 504
 505 static int
 506 monitor_idx_cmp( const void *p1, const void *p2 )
 507 {
 508         const monitor_idx_t     *idx1 = (const monitor_idx_t *)p1;
 509         const monitor_idx_t     *idx2 = (const monitor_idx_t *)p2;
 510
 511         return SLAP_PTRCMP( idx1->idx_ad, idx2->idx_ad );
 512 }
 513
 514 static int
 515 monitor_idx_dup( void *p1, void *p2 )
 516 {
 517         monitor_idx_t   *idx1 = (monitor_idx_t *)p1;
 518         monitor_idx_t   *idx2 = (monitor_idx_t *)p2;
 519
 520         return SLAP_PTRCMP( idx1->idx_ad, idx2->idx_ad ) == 0 ? -1 : 0;
 521 }
 522
 523 int
 524 mdb_monitor_idx_add(
 525         struct mdb_info         *mdb,
 526         AttributeDescription    *desc,
 527         slap_mask_t             type )
 528 {
 529         monitor_idx_t           idx_dummy = { 0 },
 530                                 *idx;
 531         int                     rc = 0, key;
 532
 533         idx_dummy.idx_ad = desc;
 534         key = mdb_monitor_bitmask2key( type ) - 1;
 535         if ( key >= MDB_MONITOR_IDX_TYPES ) {
 536                 /* invalid index type */
 537                 return -1;
 538         }
 539
 540         ldap_pvt_thread_mutex_lock( &mdb->mi_idx_mutex );
 541
 542         idx = (monitor_idx_t *)avl_find( mdb->mi_idx,
 543                 (caddr_t)&idx_dummy, monitor_idx_cmp );
 544         if ( idx == NULL ) {
 545                 idx = (monitor_idx_t *)ch_calloc( sizeof( monitor_idx_t ), 1 );
 546                 idx->idx_ad = desc;
 547                 idx->idx_count[ key ] = 1;
 548
 549                 switch ( avl_insert( &mdb->mi_idx, (caddr_t)idx,
 550                         monitor_idx_cmp, monitor_idx_dup ) )
 551                 {
 552                 case 0:
 553                         break;
 554
 555                 default:
 556                         ch_free( idx );
 557                         rc = -1;
 558                 }
 559
 560         } else {
 561                 idx->idx_count[ key ]++;
 562         }
 563
 564         ldap_pvt_thread_mutex_unlock( &mdb->mi_idx_mutex );
 565
 566         return rc;
 567 }
 568
 569 static int
 570 mdb_monitor_idx_apply( void *v_idx, void *v_valp )
 571 {
 572         monitor_idx_t   *idx = (monitor_idx_t *)v_idx;
 573         BerVarray       *valp = (BerVarray *)v_valp;
 574
 575         struct berval   bv;
 576         char            *ptr;
 577         char            count_buf[ MDB_MONITOR_IDX_TYPES ][ SLAP_TEXT_BUFLEN ];
 578         ber_len_t       count_len[ MDB_MONITOR_IDX_TYPES ],
 579                         idx_len;
 580         int             i, num = 0;
 581
 582         idx_len = mdb_monitor_idx2len( idx );
 583
 584         bv.bv_len = 0;
 585         for ( i = 0; i < MDB_MONITOR_IDX_TYPES; i++ ) {
 586                 if ( idx->idx_count[ i ] == 0 ) {
 587                         continue;
 588                 }
 589
 590                 count_len[ i ] = snprintf( count_buf[ i ],
 591                         sizeof( count_buf[ i ] ), "%lu", idx->idx_count[ i ] );
 592                 bv.bv_len += count_len[ i ];
 593                 num++;
 594         }
 595
 596         bv.bv_len += idx->idx_ad->ad_cname.bv_len
 597                 + num
 598                 + idx_len;
 599         ptr = bv.bv_val = ch_malloc( bv.bv_len + 1 );
 600         ptr = lutil_strcopy( ptr, idx->idx_ad->ad_cname.bv_val );
 601         for ( i = 0; i < MDB_MONITOR_IDX_TYPES; i++ ) {
 602                 if ( idx->idx_count[ i ] == 0 ) {
 603                         continue;
 604                 }
 605
 606                 ptr[ 0 ] = '#';
 607                 ++ptr;
 608                 ptr = lutil_strcopy( ptr, idxbv[ i ].bv_val );
 609                 ptr = lutil_strcopy( ptr, count_buf[ i ] );
 610         }
 611
 612         ber_bvarray_add( valp, &bv );
 613
 614         return 0;
 615 }
 616
 617 static int
 618 mdb_monitor_idx_entry_add(
 619         struct mdb_info *mdb,
 620         Entry           *e )
 621 {
 622         BerVarray       vals = NULL;
 623         Attribute       *a;
 624
 625         a = attr_find( e->e_attrs, ad_olmDbNotIndexed );
 626
 627         ldap_pvt_thread_mutex_lock( &mdb->mi_idx_mutex );
 628
 629         avl_apply( mdb->mi_idx, mdb_monitor_idx_apply,
 630                 &vals, -1, AVL_INORDER );
 631
 632         ldap_pvt_thread_mutex_unlock( &mdb->mi_idx_mutex );
 633
 634         if ( vals != NULL ) {
 635                 if ( a != NULL ) {
 636                         assert( a->a_nvals == a->a_vals );
 637
 638                         ber_bvarray_free( a->a_vals );
 639
 640                 } else {
 641                         Attribute       **ap;
 642
 643                         for ( ap = &e->e_attrs; *ap != NULL; ap = &(*ap)->a_next )
 644                                 ;
 645                         *ap = attr_alloc( ad_olmDbNotIndexed );
 646                         a = *ap;
 647                 }
 648                 a->a_vals = vals;
 649                 a->a_nvals = a->a_vals;
 650         }
 651
 652         return 0;
 653 }
 654
 655 #endif /* MDB_MONITOR_IDX */