git.sur5r.net Git - bacula/bacula/blob - bacula/src/stored/bscan.c

   1 /*
   2    Bacula® - The Network Backup Solution
   3
   4    Copyright (C) 2001-2010 Free Software Foundation Europe e.V.
   5
   6    The main author of Bacula is Kern Sibbald, with contributions from
   7    many others, a complete list can be found in the file AUTHORS.
   8    This program is Free Software; you can redistribute it and/or
   9    modify it under the terms of version three of the GNU Affero General Public
  10    License as published by the Free Software Foundation and included
  11    in the file LICENSE.
  12
  13    This program is distributed in the hope that it will be useful, but
  14    WITHOUT ANY WARRANTY; without even the implied warranty of
  15    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
  16    General Public License for more details.
  17
  18    You should have received a copy of the GNU Affero General Public License
  19    along with this program; if not, write to the Free Software
  20    Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA
  21    02110-1301, USA.
  22
  23    Bacula® is a registered trademark of Kern Sibbald.
  24    The licensor of Bacula is the Free Software Foundation Europe
  25    (FSFE), Fiduciary Program, Sumatrastrasse 25, 8006 Zürich,
  26    Switzerland, email:ftf@fsfeurope.org.
  27 */
  28 /*
  29  *
  30  *  Program to scan a Bacula Volume and compare it with
  31  *    the catalog and optionally synchronize the catalog
  32  *    with the tape.
  33  *
  34  *   Kern E. Sibbald, December 2001
  35  *
  36  */
  37
  38 #include "bacula.h"
  39 #include "stored.h"
  40 #include "findlib/find.h"
  41 #include "cats/cats.h"
  42
  43 /* Dummy functions */
  44 int generate_daemon_event(JCR *jcr, const char *event) { return 1; }
  45 extern bool parse_sd_config(CONFIG *config, const char *configfile, int exit_code);
  46
  47 /* Forward referenced functions */
  48 static void do_scan(void);
  49 static bool record_cb(DCR *dcr, DEV_RECORD *rec);
  50 static int  create_file_attributes_record(B_DB *db, JCR *mjcr,
  51                                char *fname, char *lname, int type,
  52                                char *ap, DEV_RECORD *rec);
  53 static int  create_media_record(B_DB *db, MEDIA_DBR *mr, VOLUME_LABEL *vl);
  54 static bool update_media_record(B_DB *db, MEDIA_DBR *mr);
  55 static int  create_pool_record(B_DB *db, POOL_DBR *pr);
  56 static JCR *create_job_record(B_DB *db, JOB_DBR *mr, SESSION_LABEL *label, DEV_RECORD *rec);
  57 static int  update_job_record(B_DB *db, JOB_DBR *mr, SESSION_LABEL *elabel,
  58                               DEV_RECORD *rec);
  59 static int  create_client_record(B_DB *db, CLIENT_DBR *cr);
  60 static int  create_fileset_record(B_DB *db, FILESET_DBR *fsr);
  61 static int  create_jobmedia_record(B_DB *db, JCR *jcr);
  62 static JCR *create_jcr(JOB_DBR *jr, DEV_RECORD *rec, uint32_t JobId);
  63 static int update_digest_record(B_DB *db, char *digest, DEV_RECORD *rec, int type);
  64
  65
  66 /* Local variables */
  67 static DEVICE *dev = NULL;
  68 static B_DB *db;
  69 static JCR *bjcr;                     /* jcr for bscan */
  70 static BSR *bsr = NULL;
  71 static MEDIA_DBR mr;
  72 static POOL_DBR pr;
  73 static JOB_DBR jr;
  74 static CLIENT_DBR cr;
  75 static FILESET_DBR fsr;
  76 static ATTR_DBR ar;
  77 static FILE_DBR fr;
  78 static SESSION_LABEL label;
  79 static SESSION_LABEL elabel;
  80 static ATTR *attr;
  81
  82 static time_t lasttime = 0;
  83
  84 static const char *db_driver = "NULL";
  85 static const char *db_name = "bacula";
  86 static const char *db_user = "bacula";
  87 static const char *db_password = "";
  88 static const char *db_host = NULL;
  89 static int db_port = 0;
  90 static const char *wd = NULL;
  91 static bool update_db = false;
  92 static bool update_vol_info = false;
  93 static bool list_records = false;
  94 static int ignored_msgs = 0;
  95
  96 static uint64_t currentVolumeSize;
  97 static int last_pct = -1;
  98 static bool showProgress = false;
  99 static int num_jobs = 0;
 100 static int num_pools = 0;
 101 static int num_media = 0;
 102 static int num_files = 0;
 103
 104 static CONFIG *config;
 105 #define CONFIG_FILE "bacula-sd.conf"
 106 char *configfile = NULL;
 107 STORES *me = NULL;                    /* our Global resource */
 108 bool forge_on = false;                /* proceed inspite of I/O errors */
 109 pthread_mutex_t device_release_mutex = PTHREAD_MUTEX_INITIALIZER;
 110 pthread_cond_t wait_device_release = PTHREAD_COND_INITIALIZER;
 111
 112
 113 static void usage()
 114 {
 115    fprintf(stderr, _(
 116 PROG_COPYRIGHT
 117 "\nVersion: %s (%s)\n\n"
 118 "Usage: bscan [ options ] <bacula-archive>\n"
 119 "       -b bootstrap      specify a bootstrap file\n"
 120 "       -c <file>         specify configuration file\n"
 121 "       -d <nn>           set debug level to <nn>\n"
 122 "       -dt               print timestamp in debug output\n"
 123 "       -m                update media info in database\n"
 124 "       -D <driver name>  specify the driver database name (default NULL)\n"
 125 "       -n <name>         specify the database name (default bacula)\n"
 126 "       -u <user>         specify database user name (default bacula)\n"
 127 "       -P <password>     specify database password (default none)\n"
 128 "       -h <host>         specify database host (default NULL)\n"
 129 "       -t <port>         specify database port (default 0)\n"
 130 "       -p                proceed inspite of I/O errors\n"
 131 "       -r                list records\n"
 132 "       -s                synchronize or store in database\n"
 133 "       -S                show scan progress periodically\n"
 134 "       -v                verbose\n"
 135 "       -V <Volumes>      specify Volume names (separated by |)\n"
 136 "       -w <dir>          specify working directory (default from conf file)\n"
 137 "       -?                print this message\n\n"), 2001, VERSION, BDATE);
 138    exit(1);
 139 }
 140
 141 int main (int argc, char *argv[])
 142 {
 143    int ch;
 144    struct stat stat_buf;
 145    char *VolumeName = NULL;
 146
 147    setlocale(LC_ALL, "");
 148    bindtextdomain("bacula", LOCALEDIR);
 149    textdomain("bacula");
 150    init_stack_dump();
 151    lmgr_init_thread();
 152
 153    my_name_is(argc, argv, "bscan");
 154    init_msg(NULL, NULL);
 155
 156    OSDependentInit();
 157
 158    while ((ch = getopt(argc, argv, "b:c:d:D:h:p:mn:pP:rsSt:u:vV:w:?")) != -1) {
 159       switch (ch) {
 160       case 'S' :
 161          showProgress = true;
 162          break;
 163       case 'b':
 164          bsr = parse_bsr(NULL, optarg);
 165          break;
 166
 167       case 'c':                    /* specify config file */
 168          if (configfile != NULL) {
 169             free(configfile);
 170          }
 171          configfile = bstrdup(optarg);
 172          break;
 173
 174       case 'D':
 175          db_driver = optarg;
 176          break;
 177
 178       case 'd':                    /* debug level */
 179          if (*optarg == 't') {
 180             dbg_timestamp = true;
 181          } else {
 182             debug_level = atoi(optarg);
 183             if (debug_level <= 0) {
 184                debug_level = 1;
 185             }
 186          }
 187          break;
 188
 189       case 'h':
 190          db_host = optarg;
 191          break;
 192
 193       case 't':
 194          db_port = atoi(optarg);
 195          break;
 196
 197       case 'm':
 198          update_vol_info = true;
 199          break;
 200
 201       case 'n':
 202          db_name = optarg;
 203          break;
 204
 205       case 'u':
 206          db_user = optarg;
 207          break;
 208
 209       case 'P':
 210          db_password = optarg;
 211          break;
 212
 213       case 'p':
 214          forge_on = true;
 215          break;
 216
 217       case 'r':
 218          list_records = true;
 219          break;
 220
 221       case 's':
 222          update_db = true;
 223          break;
 224
 225       case 'v':
 226          verbose++;
 227          break;
 228
 229       case 'V':                    /* Volume name */
 230          VolumeName = optarg;
 231          break;
 232
 233       case 'w':
 234          wd = optarg;
 235          break;
 236
 237       case '?':
 238       default:
 239          usage();
 240
 241       }
 242    }
 243    argc -= optind;
 244    argv += optind;
 245
 246    if (argc != 1) {
 247       Pmsg0(0, _("Wrong number of arguments: \n"));
 248       usage();
 249    }
 250
 251    if (configfile == NULL) {
 252       configfile = bstrdup(CONFIG_FILE);
 253    }
 254
 255    config = new_config_parser();
 256    parse_sd_config(config, configfile, M_ERROR_TERM);
 257    LockRes();
 258    me = (STORES *)GetNextRes(R_STORAGE, NULL);
 259    if (!me) {
 260       UnlockRes();
 261       Emsg1(M_ERROR_TERM, 0, _("No Storage resource defined in %s. Cannot continue.\n"),
 262          configfile);
 263    }
 264    UnlockRes();
 265    /* Check if -w option given, otherwise use resource for working directory */
 266    if (wd) {
 267       working_directory = wd;
 268    } else if (!me->working_directory) {
 269       Emsg1(M_ERROR_TERM, 0, _("No Working Directory defined in %s. Cannot continue.\n"),
 270          configfile);
 271    } else {
 272       working_directory = me->working_directory;
 273    }
 274
 275    /* Check that working directory is good */
 276    if (stat(working_directory, &stat_buf) != 0) {
 277       Emsg1(M_ERROR_TERM, 0, _("Working Directory: %s not found. Cannot continue.\n"),
 278          working_directory);
 279    }
 280    if (!S_ISDIR(stat_buf.st_mode)) {
 281       Emsg1(M_ERROR_TERM, 0, _("Working Directory: %s is not a directory. Cannot continue.\n"),
 282          working_directory);
 283    }
 284
 285    bjcr = setup_jcr("bscan", argv[0], bsr, VolumeName, 1); /* read device */
 286    if (!bjcr) {
 287       exit(1);
 288    }
 289    dev = bjcr->read_dcr->dev;
 290    if (showProgress) {
 291       char ed1[50];
 292       struct stat sb;
 293       fstat(dev->fd(), &sb);
 294       currentVolumeSize = sb.st_size;
 295       Pmsg1(000, _("First Volume Size = %s\n"),
 296          edit_uint64(currentVolumeSize, ed1));
 297    }
 298
 299    if ((db=db_init(NULL, db_driver, db_name, db_user, db_password,
 300         db_host, db_port, NULL, 0)) == NULL) {
 301       Emsg0(M_ERROR_TERM, 0, _("Could not init Bacula database\n"));
 302    }
 303    if (!db_open_database(NULL, db)) {
 304       Emsg0(M_ERROR_TERM, 0, db_strerror(db));
 305    }
 306    Dmsg0(200, "Database opened\n");
 307    if (verbose) {
 308       Pmsg2(000, _("Using Database: %s, User: %s\n"), db_name, db_user);
 309    }
 310
 311    do_scan();
 312    if (update_db) {
 313       printf("Records added or updated in the catalog:\n%7d Media\n%7d Pool\n%7d Job\n%7d File\n",
 314          num_media, num_pools, num_jobs, num_files);
 315    } else {
 316       printf("Records would have been added or updated in the catalog:\n%7d Media\n%7d Pool\n%7d Job\n%7d File\n",
 317          num_media, num_pools, num_jobs, num_files);
 318    }
 319
 320    free_jcr(bjcr);
 321    dev->term();
 322    return 0;
 323 }
 324
 325 /*
 326  * We are at the end of reading a tape. Now, we simulate handling
 327  *   the end of writing a tape by wiffling through the attached
 328  *   jcrs creating jobmedia records.
 329  */
 330 static bool bscan_mount_next_read_volume(DCR *dcr)
 331 {
 332    DEVICE *dev = dcr->dev;
 333    DCR *mdcr;
 334    Dmsg1(100, "Walk attached jcrs. Volume=%s\n", dev->getVolCatName());
 335    foreach_dlist(mdcr, dev->attached_dcrs) {
 336       JCR *mjcr = mdcr->jcr;
 337       Dmsg1(000, "========== JobId=%u ========\n", mjcr->JobId);
 338       if (mjcr->JobId == 0) {
 339          continue;
 340       }
 341       if (verbose) {
 342          Pmsg1(000, _("Create JobMedia for Job %s\n"), mjcr->Job);
 343       }
 344       mdcr->StartBlock = dcr->StartBlock;
 345       mdcr->StartFile = dcr->StartFile;
 346       mdcr->EndBlock = dcr->EndBlock;
 347       mdcr->EndFile = dcr->EndFile;
 348       mdcr->VolMediaId = dcr->VolMediaId;
 349       mjcr->read_dcr->VolLastIndex = dcr->VolLastIndex;
 350       if (!create_jobmedia_record(db, mjcr)) {
 351          Pmsg2(000, _("Could not create JobMedia record for Volume=%s Job=%s\n"),
 352             dev->getVolCatName(), mjcr->Job);
 353       }
 354    }
 355
 356    update_media_record(db, &mr);
 357
 358    /* Now let common read routine get up next tape. Note,
 359     * we call mount_next... with bscan's jcr because that is where we
 360     * have the Volume list, but we get attached.
 361     */
 362    bool stat = mount_next_read_volume(dcr);
 363
 364    if (showProgress) {
 365       char ed1[50];
 366       struct stat sb;
 367       fstat(dev->fd(), &sb);
 368       currentVolumeSize = sb.st_size;
 369       Pmsg1(000, _("First Volume Size = %s\n"),
 370          edit_uint64(currentVolumeSize, ed1));
 371    }
 372    return stat;
 373 }
 374
 375 static void do_scan()
 376 {
 377    attr = new_attr(bjcr);
 378
 379    memset(&ar, 0, sizeof(ar));
 380    memset(&pr, 0, sizeof(pr));
 381    memset(&jr, 0, sizeof(jr));
 382    memset(&cr, 0, sizeof(cr));
 383    memset(&fsr, 0, sizeof(fsr));
 384    memset(&fr, 0, sizeof(fr));
 385
 386    /* Detach bscan's jcr as we are not a real Job on the tape */
 387
 388    read_records(bjcr->read_dcr, record_cb, bscan_mount_next_read_volume);
 389
 390    if (update_db) {
 391       db_write_batch_file_records(bjcr); /* used by bulk batch file insert */
 392    }
 393    free_attr(attr);
 394 }
 395
 396 /*
 397  * Returns: true  if OK
 398  *          false if error
 399  */
 400 static bool record_cb(DCR *dcr, DEV_RECORD *rec)
 401 {
 402    JCR *mjcr;
 403    char ec1[30];
 404    DEVICE *dev = dcr->dev;
 405    JCR *bjcr = dcr->jcr;
 406    DEV_BLOCK *block = dcr->block;
 407    char digest[BASE64_SIZE(CRYPTO_DIGEST_MAX_SIZE)];
 408
 409    if (rec->data_len > 0) {
 410       mr.VolBytes += rec->data_len + WRITE_RECHDR_LENGTH; /* Accumulate Volume bytes */
 411       if (showProgress && currentVolumeSize > 0) {
 412          int pct = (mr.VolBytes * 100) / currentVolumeSize;
 413          if (pct != last_pct) {
 414             fprintf(stdout, _("done: %d%%\n"), pct);
 415             fflush(stdout);
 416             last_pct = pct;
 417          }
 418       }
 419    }
 420
 421    if (list_records) {
 422       Pmsg5(000, _("Record: SessId=%u SessTim=%u FileIndex=%d Stream=%d len=%u\n"),
 423             rec->VolSessionId, rec->VolSessionTime, rec->FileIndex,
 424             rec->Stream, rec->data_len);
 425    }
 426    /*
 427     * Check for Start or End of Session Record
 428     *
 429     */
 430    if (rec->FileIndex < 0) {
 431       bool save_update_db = update_db;
 432
 433       if (verbose > 1) {
 434          dump_label_record(dev, rec, 1);
 435       }
 436       switch (rec->FileIndex) {
 437       case PRE_LABEL:
 438          Pmsg0(000, _("Volume is prelabeled. This tape cannot be scanned.\n"));
 439          return false;
 440          break;
 441
 442       case VOL_LABEL:
 443          unser_volume_label(dev, rec);
 444          /* Check Pool info */
 445          bstrncpy(pr.Name, dev->VolHdr.PoolName, sizeof(pr.Name));
 446          bstrncpy(pr.PoolType, dev->VolHdr.PoolType, sizeof(pr.PoolType));
 447          num_pools++;
 448          if (db_get_pool_record(bjcr, db, &pr)) {
 449             if (verbose) {
 450                Pmsg1(000, _("Pool record for %s found in DB.\n"), pr.Name);
 451             }
 452          } else {
 453             if (!update_db) {
 454                Pmsg1(000, _("VOL_LABEL: Pool record not found for Pool: %s\n"),
 455                   pr.Name);
 456             }
 457             create_pool_record(db, &pr);
 458          }
 459          if (strcmp(pr.PoolType, dev->VolHdr.PoolType) != 0) {
 460             Pmsg2(000, _("VOL_LABEL: PoolType mismatch. DB=%s Vol=%s\n"),
 461                pr.PoolType, dev->VolHdr.PoolType);
 462             return true;
 463          } else if (verbose) {
 464             Pmsg1(000, _("Pool type \"%s\" is OK.\n"), pr.PoolType);
 465          }
 466
 467          /* Check Media Info */
 468          memset(&mr, 0, sizeof(mr));
 469          bstrncpy(mr.VolumeName, dev->VolHdr.VolumeName, sizeof(mr.VolumeName));
 470          mr.PoolId = pr.PoolId;
 471          num_media++;
 472          if (db_get_media_record(bjcr, db, &mr)) {
 473             if (verbose) {
 474                Pmsg1(000, _("Media record for %s found in DB.\n"), mr.VolumeName);
 475             }
 476             /* Clear out some volume statistics that will be updated */
 477             mr.VolJobs = mr.VolFiles = mr.VolBlocks = 0;
 478             mr.VolBytes = rec->data_len + 20;
 479          } else {
 480             if (!update_db) {
 481                Pmsg1(000, _("VOL_LABEL: Media record not found for Volume: %s\n"),
 482                   mr.VolumeName);
 483             }
 484             bstrncpy(mr.MediaType, dev->VolHdr.MediaType, sizeof(mr.MediaType));
 485             create_media_record(db, &mr, &dev->VolHdr);
 486          }
 487          if (strcmp(mr.MediaType, dev->VolHdr.MediaType) != 0) {
 488             Pmsg2(000, _("VOL_LABEL: MediaType mismatch. DB=%s Vol=%s\n"),
 489                mr.MediaType, dev->VolHdr.MediaType);
 490             return true;              /* ignore error */
 491          } else if (verbose) {
 492             Pmsg1(000, _("Media type \"%s\" is OK.\n"), mr.MediaType);
 493          }
 494          /* Reset some DCR variables */
 495          foreach_dlist(dcr, dev->attached_dcrs) {
 496             dcr->VolFirstIndex = dcr->FileIndex = 0;
 497             dcr->StartBlock = dcr->EndBlock = 0;
 498             dcr->StartFile = dcr->EndFile = 0;
 499             dcr->VolMediaId = 0;
 500          }
 501
 502          Pmsg1(000, _("VOL_LABEL: OK for Volume: %s\n"), mr.VolumeName);
 503          break;
 504
 505       case SOS_LABEL:
 506          mr.VolJobs++;
 507          num_jobs++;
 508          if (ignored_msgs > 0) {
 509             Pmsg1(000, _("%d \"errors\" ignored before first Start of Session record.\n"),
 510                   ignored_msgs);
 511             ignored_msgs = 0;
 512          }
 513          unser_session_label(&label, rec);
 514          memset(&jr, 0, sizeof(jr));
 515          bstrncpy(jr.Job, label.Job, sizeof(jr.Job));
 516          if (db_get_job_record(bjcr, db, &jr)) {
 517             /* Job record already exists in DB */
 518             update_db = false;  /* don't change db in create_job_record */
 519             if (verbose) {
 520                Pmsg1(000, _("SOS_LABEL: Found Job record for JobId: %d\n"), jr.JobId);
 521             }
 522          } else {
 523             /* Must create a Job record in DB */
 524             if (!update_db) {
 525                Pmsg1(000, _("SOS_LABEL: Job record not found for JobId: %d\n"),
 526                   jr.JobId);
 527             }
 528          }
 529          /* Create Client record if not already there */
 530          bstrncpy(cr.Name, label.ClientName, sizeof(cr.Name));
 531          create_client_record(db, &cr);
 532          jr.ClientId = cr.ClientId;
 533
 534          /* process label, if Job record exists don't update db */
 535          mjcr = create_job_record(db, &jr, &label, rec);
 536          dcr = mjcr->read_dcr;
 537          update_db = save_update_db;
 538
 539          jr.PoolId = pr.PoolId;
 540          mjcr->start_time = jr.StartTime;
 541          mjcr->set_JobLevel(jr.JobLevel);
 542
 543          mjcr->client_name = get_pool_memory(PM_FNAME);
 544          pm_strcpy(mjcr->client_name, label.ClientName);
 545          mjcr->fileset_name = get_pool_memory(PM_FNAME);
 546          pm_strcpy(mjcr->fileset_name, label.FileSetName);
 547          bstrncpy(dcr->pool_type, label.PoolType, sizeof(dcr->pool_type));
 548          bstrncpy(dcr->pool_name, label.PoolName, sizeof(dcr->pool_name));
 549
 550          if (rec->VolSessionId != jr.VolSessionId) {
 551             Pmsg3(000, _("SOS_LABEL: VolSessId mismatch for JobId=%u. DB=%d Vol=%d\n"),
 552                jr.JobId,
 553                jr.VolSessionId, rec->VolSessionId);
 554             return true;              /* ignore error */
 555          }
 556          if (rec->VolSessionTime != jr.VolSessionTime) {
 557             Pmsg3(000, _("SOS_LABEL: VolSessTime mismatch for JobId=%u. DB=%d Vol=%d\n"),
 558                jr.JobId,
 559                jr.VolSessionTime, rec->VolSessionTime);
 560             return true;              /* ignore error */
 561          }
 562          if (jr.PoolId != pr.PoolId) {
 563             Pmsg3(000, _("SOS_LABEL: PoolId mismatch for JobId=%u. DB=%d Vol=%d\n"),
 564                jr.JobId,
 565                jr.PoolId, pr.PoolId);
 566             return true;              /* ignore error */
 567          }
 568          break;
 569
 570       case EOS_LABEL:
 571          unser_session_label(&elabel, rec);
 572
 573          /* Create FileSet record */
 574          bstrncpy(fsr.FileSet, label.FileSetName, sizeof(fsr.FileSet));
 575          bstrncpy(fsr.MD5, label.FileSetMD5, sizeof(fsr.MD5));
 576          create_fileset_record(db, &fsr);
 577          jr.FileSetId = fsr.FileSetId;
 578
 579          mjcr = get_jcr_by_session(rec->VolSessionId, rec->VolSessionTime);
 580          if (!mjcr) {
 581             Pmsg2(000, _("Could not find SessId=%d SessTime=%d for EOS record.\n"),
 582                   rec->VolSessionId, rec->VolSessionTime);
 583             break;
 584          }
 585
 586          /* Do the final update to the Job record */
 587          update_job_record(db, &jr, &elabel, rec);
 588
 589          mjcr->end_time = jr.EndTime;
 590          mjcr->JobStatus = JS_Terminated;
 591
 592          /* Create JobMedia record */
 593          mjcr->read_dcr->VolLastIndex = dcr->VolLastIndex;
 594          create_jobmedia_record(db, mjcr);
 595          free_dcr(mjcr->read_dcr);
 596          free_jcr(mjcr);
 597
 598          break;
 599
 600       case EOM_LABEL:
 601          break;
 602
 603       case EOT_LABEL:              /* end of all tapes */
 604          /*
 605           * Wiffle through all jobs still open and close
 606           *   them.
 607           */
 608          if (update_db) {
 609             DCR *mdcr;
 610             foreach_dlist(mdcr, dev->attached_dcrs) {
 611                JCR *mjcr = mdcr->jcr;
 612                if (!mjcr || mjcr->JobId == 0) {
 613                   continue;
 614                }
 615                jr.JobId = mjcr->JobId;
 616                /* Mark Job as Error Terimined */
 617                jr.JobStatus = JS_ErrorTerminated;
 618                jr.JobFiles = mjcr->JobFiles;
 619                jr.JobBytes = mjcr->JobBytes;
 620                jr.VolSessionId = mjcr->VolSessionId;
 621                jr.VolSessionTime = mjcr->VolSessionTime;
 622                jr.JobTDate = (utime_t)mjcr->start_time;
 623                jr.ClientId = mjcr->ClientId;
 624                if (!db_update_job_end_record(bjcr, db, &jr)) {
 625                   Pmsg1(0, _("Could not update job record. ERR=%s\n"), db_strerror(db));
 626                }
 627                mjcr->read_dcr = NULL;
 628                free_jcr(mjcr);
 629             }
 630          }
 631          mr.VolFiles = rec->File;
 632          mr.VolBlocks = rec->Block;
 633          mr.VolBytes += mr.VolBlocks * WRITE_BLKHDR_LENGTH; /* approx. */
 634          mr.VolMounts++;
 635          update_media_record(db, &mr);
 636          Pmsg3(0, _("End of all Volumes. VolFiles=%u VolBlocks=%u VolBytes=%s\n"), mr.VolFiles,
 637                     mr.VolBlocks, edit_uint64_with_commas(mr.VolBytes, ec1));
 638          break;
 639       default:
 640          break;
 641       } /* end switch */
 642       return true;
 643    }
 644
 645    mjcr = get_jcr_by_session(rec->VolSessionId, rec->VolSessionTime);
 646    if (!mjcr) {
 647       if (mr.VolJobs > 0) {
 648          Pmsg2(000, _("Could not find Job for SessId=%d SessTime=%d record.\n"),
 649                       rec->VolSessionId, rec->VolSessionTime);
 650       } else {
 651          ignored_msgs++;
 652       }
 653       return true;
 654    }
 655    dcr = mjcr->read_dcr;
 656    if (dcr->VolFirstIndex == 0) {
 657       dcr->VolFirstIndex = block->FirstIndex;
 658    }
 659
 660    /* File Attributes stream */
 661    switch (rec->Stream) {
 662    case STREAM_UNIX_ATTRIBUTES:
 663    case STREAM_UNIX_ATTRIBUTES_EX:
 664
 665       if (!unpack_attributes_record(bjcr, rec->Stream, rec->data, rec->data_len, attr)) {
 666          Emsg0(M_ERROR_TERM, 0, _("Cannot continue.\n"));
 667       }
 668
 669       if (verbose > 1) {
 670          decode_stat(attr->attr, &attr->statp, &attr->LinkFI);
 671          build_attr_output_fnames(bjcr, attr);
 672          print_ls_output(bjcr, attr);
 673       }
 674       fr.JobId = mjcr->JobId;
 675       fr.FileId = 0;
 676       num_files++;
 677       if (verbose && (num_files & 0x7FFF) == 0) {
 678          char ed1[30], ed2[30], ed3[30], ed4[30];
 679          Pmsg4(000, _("%s file records. At file:blk=%s:%s bytes=%s\n"),
 680                      edit_uint64_with_commas(num_files, ed1),
 681                      edit_uint64_with_commas(rec->File, ed2),
 682                      edit_uint64_with_commas(rec->Block, ed3),
 683                      edit_uint64_with_commas(mr.VolBytes, ed4));
 684       }
 685       create_file_attributes_record(db, mjcr, attr->fname, attr->lname,
 686             attr->type, attr->attr, rec);
 687       free_jcr(mjcr);
 688       break;
 689
 690    case STREAM_RESTORE_OBJECT:
 691    /* ****FIXME*****/
 692       /* Implement putting into catalog */
 693       break;
 694
 695    /* Data stream */
 696    case STREAM_WIN32_DATA:
 697    case STREAM_FILE_DATA:
 698    case STREAM_SPARSE_DATA:
 699    case STREAM_ENCRYPTED_FILE_DATA:
 700    case STREAM_ENCRYPTED_WIN32_DATA:
 701    case STREAM_ENCRYPTED_MACOS_FORK_DATA:
 702       /*
 703        * For encrypted stream, this is an approximation.
 704        * The data must be decrypted to know the correct length.
 705        */
 706       mjcr->JobBytes += rec->data_len;
 707       if (rec->Stream == STREAM_SPARSE_DATA) {
 708          mjcr->JobBytes -= sizeof(uint64_t);
 709       }
 710
 711       free_jcr(mjcr);                 /* done using JCR */
 712       break;
 713
 714    case STREAM_GZIP_DATA:
 715    case STREAM_ENCRYPTED_FILE_GZIP_DATA:
 716    case STREAM_ENCRYPTED_WIN32_GZIP_DATA:
 717       /* No correct, we should (decrypt and) expand it
 718          done using JCR
 719       */
 720       mjcr->JobBytes += rec->data_len;
 721       free_jcr(mjcr);
 722       break;
 723
 724    case STREAM_SPARSE_GZIP_DATA:
 725       mjcr->JobBytes += rec->data_len - sizeof(uint64_t); /* No correct, we should expand it */
 726       free_jcr(mjcr);                 /* done using JCR */
 727       break;
 728
 729    /* Win32 GZIP stream */
 730    case STREAM_WIN32_GZIP_DATA:
 731       mjcr->JobBytes += rec->data_len;
 732       free_jcr(mjcr);                 /* done using JCR */
 733       break;
 734
 735    case STREAM_MD5_DIGEST:
 736       bin_to_base64(digest, sizeof(digest), (char *)rec->data, CRYPTO_DIGEST_MD5_SIZE, true);
 737       if (verbose > 1) {
 738          Pmsg1(000, _("Got MD5 record: %s\n"), digest);
 739       }
 740       update_digest_record(db, digest, rec, CRYPTO_DIGEST_MD5);
 741       break;
 742
 743    case STREAM_SHA1_DIGEST:
 744       bin_to_base64(digest, sizeof(digest), (char *)rec->data, CRYPTO_DIGEST_SHA1_SIZE, true);
 745       if (verbose > 1) {
 746          Pmsg1(000, _("Got SHA1 record: %s\n"), digest);
 747       }
 748       update_digest_record(db, digest, rec, CRYPTO_DIGEST_SHA1);
 749       break;
 750
 751    case STREAM_SHA256_DIGEST:
 752       bin_to_base64(digest, sizeof(digest), (char *)rec->data, CRYPTO_DIGEST_SHA256_SIZE, true);
 753       if (verbose > 1) {
 754          Pmsg1(000, _("Got SHA256 record: %s\n"), digest);
 755       }
 756       update_digest_record(db, digest, rec, CRYPTO_DIGEST_SHA256);
 757       break;
 758
 759    case STREAM_SHA512_DIGEST:
 760       bin_to_base64(digest, sizeof(digest), (char *)rec->data, CRYPTO_DIGEST_SHA512_SIZE, true);
 761       if (verbose > 1) {
 762          Pmsg1(000, _("Got SHA512 record: %s\n"), digest);
 763       }
 764       update_digest_record(db, digest, rec, CRYPTO_DIGEST_SHA512);
 765       break;
 766
 767    case STREAM_ENCRYPTED_SESSION_DATA:
 768       // TODO landonf: Investigate crypto support in bscan
 769       if (verbose > 1) {
 770          Pmsg0(000, _("Got signed digest record\n"));
 771       }
 772       break;
 773
 774    case STREAM_SIGNED_DIGEST:
 775       // TODO landonf: Investigate crypto support in bscan
 776       if (verbose > 1) {
 777          Pmsg0(000, _("Got signed digest record\n"));
 778       }
 779       break;
 780
 781    case STREAM_PROGRAM_NAMES:
 782       if (verbose) {
 783          Pmsg1(000, _("Got Prog Names Stream: %s\n"), rec->data);
 784       }
 785       break;
 786
 787    case STREAM_PROGRAM_DATA:
 788       if (verbose > 1) {
 789          Pmsg0(000, _("Got Prog Data Stream record.\n"));
 790       }
 791       break;
 792
 793    case STREAM_UNIX_ACCESS_ACL:          /* Deprecated Standard ACL attributes on UNIX */
 794    case STREAM_UNIX_DEFAULT_ACL:         /* Deprecated Default ACL attributes on UNIX */
 795    case STREAM_ACL_AIX_TEXT:
 796    case STREAM_ACL_DARWIN_ACCESS_ACL:
 797    case STREAM_ACL_FREEBSD_DEFAULT_ACL:
 798    case STREAM_ACL_FREEBSD_ACCESS_ACL:
 799    case STREAM_ACL_HPUX_ACL_ENTRY:
 800    case STREAM_ACL_IRIX_DEFAULT_ACL:
 801    case STREAM_ACL_IRIX_ACCESS_ACL:
 802    case STREAM_ACL_LINUX_DEFAULT_ACL:
 803    case STREAM_ACL_LINUX_ACCESS_ACL:
 804    case STREAM_ACL_TRU64_DEFAULT_ACL:
 805    case STREAM_ACL_TRU64_DEFAULT_DIR_ACL:
 806    case STREAM_ACL_TRU64_ACCESS_ACL:
 807    case STREAM_ACL_SOLARIS_ACLENT:
 808    case STREAM_ACL_SOLARIS_ACE:
 809       /* Ignore Unix ACL attributes */
 810       break;
 811
 812    case STREAM_XATTR_AIX:
 813    case STREAM_XATTR_OPENBSD:
 814    case STREAM_XATTR_SOLARIS_SYS:
 815    case STREAM_XATTR_SOLARIS:
 816    case STREAM_XATTR_DARWIN:
 817    case STREAM_XATTR_FREEBSD:
 818    case STREAM_XATTR_LINUX:
 819    case STREAM_XATTR_NETBSD:
 820       /* Ignore Unix Extended attributes */
 821       break;
 822
 823    default:
 824       Pmsg2(0, _("Unknown stream type!!! stream=%d len=%i\n"), rec->Stream, rec->data_len);
 825       break;
 826    }
 827    return true;
 828 }
 829
 830 /*
 831  * Free the Job Control Record if no one is still using it.
 832  *  Called from main free_jcr() routine in src/lib/jcr.c so
 833  *  that we can do our Director specific cleanup of the jcr.
 834  */
 835 static void bscan_free_jcr(JCR *jcr)
 836 {
 837    Dmsg0(200, "Start bscan free_jcr\n");
 838
 839    if (jcr->file_bsock) {
 840       Dmsg0(200, "Close File bsock\n");
 841       bnet_close(jcr->file_bsock);
 842    }
 843    if (jcr->store_bsock) {
 844       Dmsg0(200, "Close Store bsock\n");
 845       bnet_close(jcr->store_bsock);
 846    }
 847    if (jcr->RestoreBootstrap) {
 848       free(jcr->RestoreBootstrap);
 849    }
 850    if (jcr->dcr) {
 851       free_dcr(jcr->dcr);
 852       jcr->dcr = NULL;
 853    }
 854    if (jcr->read_dcr) {
 855       free_dcr(jcr->read_dcr);
 856       jcr->read_dcr = NULL;
 857    }
 858    Dmsg0(200, "End bscan free_jcr\n");
 859 }
 860
 861 /*
 862  * We got a File Attributes record on the tape.  Now, lookup the Job
 863  *   record, and then create the attributes record.
 864  */
 865 static int create_file_attributes_record(B_DB *db, JCR *mjcr,
 866                                char *fname, char *lname, int type,
 867                                char *ap, DEV_RECORD *rec)
 868 {
 869    DCR *dcr = mjcr->read_dcr;
 870    ar.fname = fname;
 871    ar.link = lname;
 872    ar.ClientId = mjcr->ClientId;
 873    ar.JobId = mjcr->JobId;
 874    ar.Stream = rec->Stream;
 875    if (type == FT_DELETED) {
 876       ar.FileIndex = 0;
 877    } else {
 878       ar.FileIndex = rec->FileIndex;
 879    }
 880    ar.attr = ap;
 881    if (dcr->VolFirstIndex == 0) {
 882       dcr->VolFirstIndex = rec->FileIndex;
 883    }
 884    dcr->FileIndex = rec->FileIndex;
 885    mjcr->JobFiles++;
 886
 887    if (!update_db) {
 888       return 1;
 889    }
 890
 891    if (!db_create_file_attributes_record(bjcr, db, &ar)) {
 892       Pmsg1(0, _("Could not create File Attributes record. ERR=%s\n"), db_strerror(db));
 893       return 0;
 894    }
 895    mjcr->FileId = ar.FileId;
 896
 897    if (verbose > 1) {
 898       Pmsg1(000, _("Created File record: %s\n"), fname);
 899    }
 900    return 1;
 901 }
 902
 903 /*
 904  * For each Volume we see, we create a Medium record
 905  */
 906 static int create_media_record(B_DB *db, MEDIA_DBR *mr, VOLUME_LABEL *vl)
 907 {
 908    struct date_time dt;
 909    struct tm tm;
 910
 911    /* We mark Vols as Archive to keep them from being re-written */
 912    bstrncpy(mr->VolStatus, "Archive", sizeof(mr->VolStatus));
 913    mr->VolRetention = 365 * 3600 * 24; /* 1 year */
 914    mr->Enabled = 1;
 915    if (vl->VerNum >= 11) {
 916       mr->set_first_written = true; /* Save FirstWritten during update_media */
 917       mr->FirstWritten = btime_to_utime(vl->write_btime);
 918       mr->LabelDate    = btime_to_utime(vl->label_btime);
 919    } else {
 920       /* DEPRECATED DO NOT USE */
 921       dt.julian_day_number = vl->write_date;
 922       dt.julian_day_fraction = vl->write_time;
 923       tm_decode(&dt, &tm);
 924       mr->FirstWritten = mktime(&tm);
 925       dt.julian_day_number = vl->label_date;
 926       dt.julian_day_fraction = vl->label_time;
 927       tm_decode(&dt, &tm);
 928       mr->LabelDate = mktime(&tm);
 929    }
 930    lasttime = mr->LabelDate;
 931    if (mr->VolJobs == 0) {
 932       mr->VolJobs = 1;
 933    }
 934    if (mr->VolMounts == 0) {
 935       mr->VolMounts = 1;
 936    }
 937
 938    if (!update_db) {
 939       return 1;
 940    }
 941
 942    if (!db_create_media_record(bjcr, db, mr)) {
 943       Pmsg1(0, _("Could not create media record. ERR=%s\n"), db_strerror(db));
 944       return 0;
 945    }
 946    if (!db_update_media_record(bjcr, db, mr)) {
 947       Pmsg1(0, _("Could not update media record. ERR=%s\n"), db_strerror(db));
 948       return 0;
 949    }
 950    if (verbose) {
 951       Pmsg1(000, _("Created Media record for Volume: %s\n"), mr->VolumeName);
 952    }
 953    return 1;
 954
 955 }
 956
 957 /*
 958  * Called at end of media to update it
 959  */
 960 static bool update_media_record(B_DB *db, MEDIA_DBR *mr)
 961 {
 962    if (!update_db && !update_vol_info) {
 963       return true;
 964    }
 965
 966    mr->LastWritten = lasttime;
 967    if (!db_update_media_record(bjcr, db, mr)) {
 968       Pmsg1(0, _("Could not update media record. ERR=%s\n"), db_strerror(db));
 969       return false;;
 970    }
 971    if (verbose) {
 972       Pmsg1(000, _("Updated Media record at end of Volume: %s\n"), mr->VolumeName);
 973    }
 974    return true;
 975
 976 }
 977
 978
 979 static int create_pool_record(B_DB *db, POOL_DBR *pr)
 980 {
 981    pr->NumVols++;
 982    pr->UseCatalog = 1;
 983    pr->VolRetention = 355 * 3600 * 24; /* 1 year */
 984
 985    if (!update_db) {
 986       return 1;
 987    }
 988    if (!db_create_pool_record(bjcr, db, pr)) {
 989       Pmsg1(0, _("Could not create pool record. ERR=%s\n"), db_strerror(db));
 990       return 0;
 991    }
 992    if (verbose) {
 993       Pmsg1(000, _("Created Pool record for Pool: %s\n"), pr->Name);
 994    }
 995    return 1;
 996
 997 }
 998
 999
1000 /*
1001  * Called from SOS to create a client for the current Job
1002  */
1003 static int create_client_record(B_DB *db, CLIENT_DBR *cr)
1004 {
1005    /*
1006     * Note, update_db can temporarily be set false while
1007     * updating the database, so we must ensure that ClientId is non-zero.
1008     */
1009    if (!update_db) {
1010       cr->ClientId = 0;
1011       if (!db_get_client_record(bjcr, db, cr)) {
1012         Pmsg1(0, _("Could not get Client record. ERR=%s\n"), db_strerror(db));
1013         return 0;
1014       }
1015       return 1;
1016    }
1017    if (!db_create_client_record(bjcr, db, cr)) {
1018       Pmsg1(0, _("Could not create Client record. ERR=%s\n"), db_strerror(db));
1019       return 0;
1020    }
1021    if (verbose) {
1022       Pmsg1(000, _("Created Client record for Client: %s\n"), cr->Name);
1023    }
1024    return 1;
1025 }
1026
1027 static int create_fileset_record(B_DB *db, FILESET_DBR *fsr)
1028 {
1029    if (!update_db) {
1030       return 1;
1031    }
1032    fsr->FileSetId = 0;
1033    if (fsr->MD5[0] == 0) {
1034       fsr->MD5[0] = ' ';              /* Equivalent to nothing */
1035       fsr->MD5[1] = 0;
1036    }
1037    if (db_get_fileset_record(bjcr, db, fsr)) {
1038       if (verbose) {
1039          Pmsg1(000, _("Fileset \"%s\" already exists.\n"), fsr->FileSet);
1040       }
1041    } else {
1042       if (!db_create_fileset_record(bjcr, db, fsr)) {
1043          Pmsg2(0, _("Could not create FileSet record \"%s\". ERR=%s\n"),
1044             fsr->FileSet, db_strerror(db));
1045          return 0;
1046       }
1047       if (verbose) {
1048          Pmsg1(000, _("Created FileSet record \"%s\"\n"), fsr->FileSet);
1049       }
1050    }
1051    return 1;
1052 }
1053
1054 /*
1055  * Simulate the two calls on the database to create
1056  *  the Job record and to update it when the Job actually
1057  *  begins running.
1058  */
1059 static JCR *create_job_record(B_DB *db, JOB_DBR *jr, SESSION_LABEL *label,
1060                              DEV_RECORD *rec)
1061 {
1062    JCR *mjcr;
1063    struct date_time dt;
1064    struct tm tm;
1065
1066    jr->JobId = label->JobId;
1067    jr->JobType = label->JobType;
1068    jr->JobLevel = label->JobLevel;
1069    jr->JobStatus = JS_Created;
1070    bstrncpy(jr->Name, label->JobName, sizeof(jr->Name));
1071    bstrncpy(jr->Job, label->Job, sizeof(jr->Job));
1072    if (label->VerNum >= 11) {
1073       jr->SchedTime = btime_to_unix(label->write_btime);
1074    } else {
1075       dt.julian_day_number = label->write_date;
1076       dt.julian_day_fraction = label->write_time;
1077       tm_decode(&dt, &tm);
1078       jr->SchedTime = mktime(&tm);
1079    }
1080
1081    jr->StartTime = jr->SchedTime;
1082    jr->JobTDate = (utime_t)jr->SchedTime;
1083    jr->VolSessionId = rec->VolSessionId;
1084    jr->VolSessionTime = rec->VolSessionTime;
1085
1086    /* Now create a JCR as if starting the Job */
1087    mjcr = create_jcr(jr, rec, label->JobId);
1088
1089    if (!update_db) {
1090       return mjcr;
1091    }
1092
1093    /* This creates the bare essentials */
1094    if (!db_create_job_record(bjcr, db, jr)) {
1095       Pmsg1(0, _("Could not create JobId record. ERR=%s\n"), db_strerror(db));
1096       return mjcr;
1097    }
1098
1099    /* This adds the client, StartTime, JobTDate, ... */
1100    if (!db_update_job_start_record(bjcr, db, jr)) {
1101       Pmsg1(0, _("Could not update job start record. ERR=%s\n"), db_strerror(db));
1102       return mjcr;
1103    }
1104    Pmsg2(000, _("Created new JobId=%u record for original JobId=%u\n"), jr->JobId,
1105          label->JobId);
1106    mjcr->JobId = jr->JobId;           /* set new JobId */
1107    return mjcr;
1108 }
1109
1110 /*
1111  * Simulate the database call that updates the Job
1112  *  at Job termination time.
1113  */
1114 static int update_job_record(B_DB *db, JOB_DBR *jr, SESSION_LABEL *elabel,
1115                               DEV_RECORD *rec)
1116 {
1117    struct date_time dt;
1118    struct tm tm;
1119    JCR *mjcr;
1120
1121    mjcr = get_jcr_by_session(rec->VolSessionId, rec->VolSessionTime);
1122    if (!mjcr) {
1123       Pmsg2(000, _("Could not find SessId=%d SessTime=%d for EOS record.\n"),
1124                    rec->VolSessionId, rec->VolSessionTime);
1125       return 0;
1126    }
1127    if (elabel->VerNum >= 11) {
1128       jr->EndTime = btime_to_unix(elabel->write_btime);
1129    } else {
1130       dt.julian_day_number = elabel->write_date;
1131       dt.julian_day_fraction = elabel->write_time;
1132       tm_decode(&dt, &tm);
1133       jr->EndTime = mktime(&tm);
1134    }
1135    lasttime = jr->EndTime;
1136    mjcr->end_time = jr->EndTime;
1137
1138    jr->JobId = mjcr->JobId;
1139    jr->JobStatus = elabel->JobStatus;
1140    mjcr->JobStatus = elabel->JobStatus;
1141    jr->JobFiles = elabel->JobFiles;
1142    if (jr->JobFiles > 0) {  /* If we found files, force PurgedFiles */
1143       jr->PurgedFiles = 0;
1144    }
1145    jr->JobBytes = elabel->JobBytes;
1146    jr->VolSessionId = rec->VolSessionId;
1147    jr->VolSessionTime = rec->VolSessionTime;
1148    jr->JobTDate = (utime_t)mjcr->start_time;
1149    jr->ClientId = mjcr->ClientId;
1150
1151    if (!update_db) {
1152       free_jcr(mjcr);
1153       return 1;
1154    }
1155
1156    if (!db_update_job_end_record(bjcr, db, jr)) {
1157       Pmsg2(0, _("Could not update JobId=%u record. ERR=%s\n"), jr->JobId,  db_strerror(db));
1158       free_jcr(mjcr);
1159       return 0;
1160    }
1161    if (verbose) {
1162       Pmsg3(000, _("Updated Job termination record for JobId=%u Level=%s TermStat=%c\n"),
1163          jr->JobId, job_level_to_str(mjcr->getJobLevel()), jr->JobStatus);
1164    }
1165    if (verbose > 1) {
1166       const char *term_msg;
1167       static char term_code[70];
1168       char sdt[50], edt[50];
1169       char ec1[30], ec2[30], ec3[30];
1170
1171       switch (mjcr->JobStatus) {
1172       case JS_Terminated:
1173          term_msg = _("Backup OK");
1174          break;
1175       case JS_Warnings:
1176          term_msg = _("Backup OK -- with warnings");
1177          break;
1178       case JS_FatalError:
1179       case JS_ErrorTerminated:
1180          term_msg = _("*** Backup Error ***");
1181          break;
1182       case JS_Canceled:
1183          term_msg = _("Backup Canceled");
1184          break;
1185       default:
1186          term_msg = term_code;
1187          sprintf(term_code, _("Job Termination code: %d"), mjcr->JobStatus);
1188          break;
1189       }
1190       bstrftime(sdt, sizeof(sdt), mjcr->start_time);
1191       bstrftime(edt, sizeof(edt), mjcr->end_time);
1192       Pmsg14(000,  _("%s\n"
1193 "JobId:                  %d\n"
1194 "Job:                    %s\n"
1195 "FileSet:                %s\n"
1196 "Backup Level:           %s\n"
1197 "Client:                 %s\n"
1198 "Start time:             %s\n"
1199 "End time:               %s\n"
1200 "Files Written:          %s\n"
1201 "Bytes Written:          %s\n"
1202 "Volume Session Id:      %d\n"
1203 "Volume Session Time:    %d\n"
1204 "Last Volume Bytes:      %s\n"
1205 "Termination:            %s\n\n"),
1206         edt,
1207         mjcr->JobId,
1208         mjcr->Job,
1209         mjcr->fileset_name,
1210         job_level_to_str(mjcr->getJobLevel()),
1211         mjcr->client_name,
1212         sdt,
1213         edt,
1214         edit_uint64_with_commas(mjcr->JobFiles, ec1),
1215         edit_uint64_with_commas(mjcr->JobBytes, ec2),
1216         mjcr->VolSessionId,
1217         mjcr->VolSessionTime,
1218         edit_uint64_with_commas(mr.VolBytes, ec3),
1219         term_msg);
1220    }
1221    free_jcr(mjcr);
1222    return 1;
1223 }
1224
1225 static int create_jobmedia_record(B_DB *db, JCR *mjcr)
1226 {
1227    JOBMEDIA_DBR jmr;
1228    DCR *dcr = mjcr->read_dcr;
1229
1230    dcr->EndBlock = dev->EndBlock;
1231    dcr->EndFile  = dev->EndFile;
1232    dcr->VolMediaId = dev->VolCatInfo.VolMediaId;
1233
1234    memset(&jmr, 0, sizeof(jmr));
1235    jmr.JobId = mjcr->JobId;
1236    jmr.MediaId = mr.MediaId;
1237    jmr.FirstIndex = dcr->VolFirstIndex;
1238    jmr.LastIndex = dcr->VolLastIndex;
1239    jmr.StartFile = dcr->StartFile;
1240    jmr.EndFile = dcr->EndFile;
1241    jmr.StartBlock = dcr->StartBlock;
1242    jmr.EndBlock = dcr->EndBlock;
1243
1244
1245    if (!update_db) {
1246       return 1;
1247    }
1248
1249    if (!db_create_jobmedia_record(bjcr, db, &jmr)) {
1250       Pmsg1(0, _("Could not create JobMedia record. ERR=%s\n"), db_strerror(db));
1251       return 0;
1252    }
1253    if (verbose) {
1254       Pmsg2(000, _("Created JobMedia record JobId %d, MediaId %d\n"),
1255                 jmr.JobId, jmr.MediaId);
1256    }
1257    return 1;
1258 }
1259
1260 /*
1261  * Simulate the database call that updates the MD5/SHA1 record
1262  */
1263 static int update_digest_record(B_DB *db, char *digest, DEV_RECORD *rec, int type)
1264 {
1265    JCR *mjcr;
1266
1267    mjcr = get_jcr_by_session(rec->VolSessionId, rec->VolSessionTime);
1268    if (!mjcr) {
1269       if (mr.VolJobs > 0) {
1270          Pmsg2(000, _("Could not find SessId=%d SessTime=%d for MD5/SHA1 record.\n"),
1271                       rec->VolSessionId, rec->VolSessionTime);
1272       } else {
1273          ignored_msgs++;
1274       }
1275       return 0;
1276    }
1277
1278    if (!update_db || mjcr->FileId == 0) {
1279       free_jcr(mjcr);
1280       return 1;
1281    }
1282
1283    if (!db_add_digest_to_file_record(bjcr, db, mjcr->FileId, digest, type)) {
1284       Pmsg1(0, _("Could not add MD5/SHA1 to File record. ERR=%s\n"), db_strerror(db));
1285       free_jcr(mjcr);
1286       return 0;
1287    }
1288    if (verbose > 1) {
1289       Pmsg0(000, _("Updated MD5/SHA1 record\n"));
1290    }
1291    free_jcr(mjcr);
1292    return 1;
1293 }
1294
1295
1296 /*
1297  * Create a JCR as if we are really starting the job
1298  */
1299 static JCR *create_jcr(JOB_DBR *jr, DEV_RECORD *rec, uint32_t JobId)
1300 {
1301    JCR *jobjcr;
1302    /*
1303     * Transfer as much as possible to the Job JCR. Most important is
1304     *   the JobId and the ClientId.
1305     */
1306    jobjcr = new_jcr(sizeof(JCR), bscan_free_jcr);
1307    jobjcr->set_JobType(jr->JobType);
1308    jobjcr->set_JobLevel(jr->JobLevel);
1309    jobjcr->JobStatus = jr->JobStatus;
1310    bstrncpy(jobjcr->Job, jr->Job, sizeof(jobjcr->Job));
1311    jobjcr->JobId = JobId;      /* this is JobId on tape */
1312    jobjcr->sched_time = jr->SchedTime;
1313    jobjcr->start_time = jr->StartTime;
1314    jobjcr->VolSessionId = rec->VolSessionId;
1315    jobjcr->VolSessionTime = rec->VolSessionTime;
1316    jobjcr->ClientId = jr->ClientId;
1317    jobjcr->dcr = jobjcr->read_dcr = new_dcr(jobjcr, NULL, dev);
1318
1319    return jobjcr;
1320 }
1321
1322 /* Dummies to replace askdir.c */
1323 bool    dir_find_next_appendable_volume(DCR *dcr) { return 1;}
1324 bool    dir_update_volume_info(DCR *dcr, bool relabel, bool update_LastWritten) { return 1; }
1325 bool    dir_create_jobmedia_record(DCR *dcr, bool zero) { return 1; }
1326 bool    dir_ask_sysop_to_create_appendable_volume(DCR *dcr) { return 1; }
1327 bool    dir_update_file_attributes(DCR *dcr, DEV_RECORD *rec) { return 1;}
1328 bool    dir_send_job_status(JCR *jcr) {return 1;}
1329 int     generate_job_event(JCR *jcr, const char *event) { return 1; }
1330
1331 bool dir_ask_sysop_to_mount_volume(DCR *dcr, int /*mode*/)
1332 {
1333    DEVICE *dev = dcr->dev;
1334    Dmsg0(20, "Enter dir_ask_sysop_to_mount_volume\n");
1335    /* Close device so user can use autochanger if desired */
1336    fprintf(stderr, _("Mount Volume \"%s\" on device %s and press return when ready: "),
1337          dcr->VolumeName, dev->print_name());
1338    dev->close();
1339    getchar();
1340    return true;
1341 }
1342
1343 bool dir_get_volume_info(DCR *dcr, enum get_vol_info_rw  writing)
1344 {
1345    Dmsg0(100, "Fake dir_get_volume_info\n");
1346    dcr->setVolCatName(dcr->VolumeName);
1347    dcr->VolCatInfo.VolCatParts = find_num_dvd_parts(dcr);
1348    Dmsg2(500, "Vol=%s num_parts=%d\n", dcr->getVolCatName(), dcr->VolCatInfo.VolCatParts);
1349    return 1;
1350 }