]> git.sur5r.net Git - bacula/bacula/blobdiff - bacula/src/dird/verify.c
Add new files
[bacula/bacula] / bacula / src / dird / verify.c
index f365a2796de98e7b6e36f5a6ef9dbad2012f7042..7c7c14c3541a6ce45bc380234e748980acb7ac13 100644 (file)
@@ -4,12 +4,6 @@
  *
  *     Kern Sibbald, October MM
  *
- *    This routine is run as a separate thread.  There may be more
- *    work to be done to make it totally reentrant!!!!
- * 
- * Current implementation is Catalog verification only (i.e. no
- *  verification versus tape).
- *
  *  Basic tasks done here:
  *     Open DB
  *     Open connection with File daemon and pass him commands
@@ -49,7 +43,7 @@ extern int debug_level;
 
 /* Commands sent to File daemon */
 static char verifycmd[]    = "verify level=%s\n";
-static char storaddr[]     = "storage address=%s port=%d\n";
+static char storaddr[]     = "storage address=%s port=%d ssl=0\n";
 static char sessioncmd[]   = "session %s %ld %ld %ld %ld %ld %ld\n";  
 
 /* Responses received from File daemon */
@@ -74,6 +68,7 @@ int do_verify(JCR *jcr)
    BSOCK   *fd;
    JOB_DBR jr;
    JobId_t JobId = 0;
+   int stat;
 
    if (!get_or_create_client_record(jcr)) {
       goto bail_out;
@@ -85,13 +80,19 @@ int do_verify(JCR *jcr)
     * we must look up the time and date of the
     * last full verify.
     */
-   if (jcr->JobLevel == L_VERIFY_CATALOG || jcr->JobLevel == L_VERIFY_VOLUME_TO_CATALOG) {
-      memcpy(&jr, &(jcr->jr), sizeof(jr));
+   if (jcr->JobLevel == L_VERIFY_CATALOG || 
+       jcr->JobLevel == L_VERIFY_VOLUME_TO_CATALOG) {
+      memcpy(&jr, &jcr->jr, sizeof(jr));
       if (!db_find_last_jobid(jcr, jcr->db, &jr)) {
-        Jmsg(jcr, M_FATAL, 0, _(
-              "Unable to find JobId of previous InitCatalog Job.\n"
-              "Please run a Verify with Level=InitCatalog before\n"
-              "running the current Job.\n"));
+        if (jcr->JobLevel == L_VERIFY_CATALOG) {
+           Jmsg(jcr, M_FATAL, 0, _(
+                 "Unable to find JobId of previous InitCatalog Job.\n"
+                 "Please run a Verify with Level=InitCatalog before\n"
+                 "running the current Job.\n"));
+         } else {
+           Jmsg(jcr, M_FATAL, 0, _(
+                 "Unable to find JobId of previous Job for this client.\n"));
+        }   
         goto bail_out;
       }
       JobId = jr.JobId;
@@ -107,7 +108,7 @@ int do_verify(JCR *jcr)
    }
 
    if (!jcr->fname) {
-      jcr->fname = (char *) get_pool_memory(PM_FNAME);
+      jcr->fname = get_pool_memory(PM_FNAME);
    }
 
    jcr->jr.JobId = JobId;      /* save target JobId */
@@ -116,11 +117,13 @@ int do_verify(JCR *jcr)
    Jmsg(jcr, M_INFO, 0, _("Start Verify JobId %d Job=%s\n"),
       jcr->JobId, jcr->Job);
 
-   if (jcr->JobLevel == L_VERIFY_CATALOG || jcr->JobLevel == L_VERIFY_VOLUME_TO_CATALOG) {
+   if (jcr->JobLevel == L_VERIFY_CATALOG || 
+       jcr->JobLevel == L_VERIFY_VOLUME_TO_CATALOG) {
       memset(&jr, 0, sizeof(jr));
       jr.JobId = JobId;
       if (!db_get_job_record(jcr, jcr->db, &jr)) {
-         Jmsg(jcr, M_FATAL, 0, _("Could not get job record. %s"), db_strerror(jcr->db));
+         Jmsg(jcr, M_FATAL, 0, _("Could not get job record for previous Job. ERR=%s"), 
+             db_strerror(jcr->db));
         goto bail_out;
       }
       if (jr.JobStatus != 'T') {
@@ -133,23 +136,48 @@ int do_verify(JCR *jcr)
    }
 
    /* 
-    * If we are verifing a Volume, we need the Storage
+    * If we are verifying a Volume, we need the Storage
     *  daemon, so open a connection, otherwise, just
     *  create a dummy authorization key (passed to
     *  File daemon but not used).
     */
    if (jcr->JobLevel == L_VERIFY_VOLUME_TO_CATALOG) {
+      RBSR *bsr = new_bsr();
+      UAContext *ua;
+      bsr->JobId = jr.JobId;
+      ua = new_ua_context(jcr);
+      complete_bsr(ua, bsr);
+      bsr->fi = new_findex();
+      bsr->fi->findex = 1;
+      bsr->fi->findex2 = jr.JobFiles;
+      if (!write_bsr_file(ua, bsr)) {
+        free_ua_context(ua);
+        free_bsr(bsr);
+        goto bail_out;
+      }
+      free_ua_context(ua);
+      free_bsr(bsr);
+      if (jcr->RestoreBootstrap) {
+        free(jcr->RestoreBootstrap);
+      }
+      POOLMEM *fname = get_pool_memory(PM_MESSAGE);
+      Mmsg(&fname, "%s/restore.bsr", working_directory);
+      jcr->RestoreBootstrap = bstrdup(fname);
+      free_pool_memory(fname);
+
+#ifdef xxx
       /*
        * Now find the Volumes we will need for the Verify 
        */
       jcr->VolumeName[0] = 0;
       if (!db_get_job_volume_names(jcr, jcr->db, jr.JobId, &jcr->VolumeName) ||
           jcr->VolumeName[0] == 0) {
-         Jmsg(jcr, M_FATAL, 0, _("Cannot find Volume Name for verify JobId=%d. %s"), 
+         Jmsg(jcr, M_FATAL, 0, _("Cannot find Volume Name for verify JobId=%u. ERR=%s"), 
            jr.JobId, db_strerror(jcr->db));
         goto bail_out;
       }
       Dmsg1(20, "Got job Volume Names: %s\n", jcr->VolumeName);
+#endif
       /*
        * Start conversation with Storage daemon  
        */
@@ -200,23 +228,35 @@ int do_verify(JCR *jcr)
     *  as the Storage address if appropriate.
     */
    switch (jcr->JobLevel) {
-      case L_VERIFY_INIT:
-         level = "init";
-        break;
-      case L_VERIFY_CATALOG:
-         level = "catalog";
-        break;
-      case L_VERIFY_VOLUME_TO_CATALOG:
-        /* 
-         * send Storage daemon address to the File daemon
-         */
-        if (jcr->store->SDDport == 0) {
-           jcr->store->SDDport = jcr->store->SDport;
-        }
-        bnet_fsend(fd, storaddr, jcr->store->address, jcr->store->SDDport);
-         if (!response(fd, OKstore, "Storage")) {
-           goto bail_out;
-        }
+   case L_VERIFY_INIT:
+      level = "init";
+      break;
+   case L_VERIFY_CATALOG:
+      level = "catalog";
+      break;
+   case L_VERIFY_VOLUME_TO_CATALOG:
+      /* 
+       * send Storage daemon address to the File daemon
+       */
+      if (jcr->store->SDDport == 0) {
+        jcr->store->SDDport = jcr->store->SDport;
+      }
+      bnet_fsend(fd, storaddr, jcr->store->address, jcr->store->SDDport);
+      if (!response(jcr, fd, OKstore, "Storage", DISPLAY_ERROR)) {
+        goto bail_out;
+      }
+
+      /* 
+       * Send the bootstrap file -- what Volumes/files to restore
+       */
+      if (!send_bootstrap_file(jcr)) {
+        goto bail_out;
+      }
+
+      /* 
+       * The following code is deprecated   
+       */
+      if (!jcr->RestoreBootstrap) {
         /*
          * Pass the VolSessionId, VolSessionTime, Start and
          * end File and Blocks on the session command.
@@ -226,24 +266,25 @@ int do_verify(JCR *jcr)
                   jr.VolSessionId, jr.VolSessionTime, 
                   jr.StartFile, jr.EndFile, jr.StartBlock, 
                   jr.EndBlock);
-         if (!response(fd, OKsession, "Session")) {
+         if (!response(jcr, fd, OKsession, "Session", DISPLAY_ERROR)) {
            goto bail_out;
         }
-         level = "volume";
-        break;
-      case L_VERIFY_DATA:
-         level = "data";
-        break;
-      default:
-         Jmsg1(jcr, M_FATAL, 0, _("Unimplemented save level %d\n"), jcr->JobLevel);
-        goto bail_out;
+      }
+      level = "volume";
+      break;
+   case L_VERIFY_DATA:
+      level = "data";
+      break;
+   default:
+      Jmsg1(jcr, M_FATAL, 0, _("Unimplemented save level %d\n"), jcr->JobLevel);
+      goto bail_out;
    }
 
    /* 
     * Send verify command/level to File daemon
     */
    bnet_fsend(fd, verifycmd, level);
-   if (!response(fd, OKverify, "Verify")) {
+   if (!response(jcr, fd, OKverify, "Verify", DISPLAY_ERROR)) {
       goto bail_out;
    }
 
@@ -256,27 +297,21 @@ int do_verify(JCR *jcr)
    switch (jcr->JobLevel) { 
    case L_VERIFY_CATALOG:
       Dmsg0(10, "Verify level=catalog\n");
+      jcr->sd_msg_thread_done = true;  /* no SD msg thread, so it is done */
+      jcr->SDJobStatus = JS_Terminated;
       get_attributes_and_compare_to_catalog(jcr, JobId);
       break;
 
    case L_VERIFY_VOLUME_TO_CATALOG:
-      int stat;
       Dmsg0(10, "Verify level=volume\n");
       get_attributes_and_compare_to_catalog(jcr, JobId);
-      stat = jcr->JobStatus;
-      set_jcr_job_status(jcr, JS_WaitSD);
-      wait_for_storage_daemon_termination(jcr);
-      /* If we terminate normally, use SD term code, else, use ours */
-      if (stat == JS_Terminated) {
-        set_jcr_job_status(jcr, jcr->SDJobStatus);
-      } else {
-        set_jcr_job_status(jcr, stat);
-      }
       break;
 
    case L_VERIFY_INIT:
       /* Build catalog */
       Dmsg0(10, "Verify level=init\n");
+      jcr->sd_msg_thread_done = true;  /* no SD msg thread, so it is done */
+      jcr->SDJobStatus = JS_Terminated;
       get_attributes_and_put_in_catalog(jcr);
       break;
 
@@ -285,7 +320,9 @@ int do_verify(JCR *jcr)
       goto bail_out;
    }
 
-   verify_cleanup(jcr, jcr->JobStatus);
+   stat = wait_for_job_termination(jcr);
+
+   verify_cleanup(jcr, stat);
    return 1;
 
 bail_out:
@@ -301,12 +338,12 @@ static void verify_cleanup(JCR *jcr, int TermCode)
 {
    char sdt[50], edt[50];
    char ec1[30];
-   char term_code[100];
+   char term_code[100], fd_term_msg[100], sd_term_msg[100];
    char *term_msg;
    int msg_type;
    JobId_t JobId;
 
-   Dmsg0(100, "Enter verify_cleanup()\n");
+// Dmsg1(000, "Enter verify_cleanup() TermCod=%d\n", TermCode);
 
    JobId = jcr->jr.JobId;
    set_jcr_job_status(jcr, TermCode);
@@ -315,28 +352,31 @@ static void verify_cleanup(JCR *jcr, int TermCode)
 
    msg_type = M_INFO;                /* by default INFO message */
    switch (TermCode) {
-      case JS_Terminated:
-         term_msg = _("Verify OK");
-        break;
-      case JS_ErrorTerminated:
-         term_msg = _("*** Verify Error ***"); 
-        msg_type = M_ERROR;          /* Generate error message */
-        break;
-      case JS_Cancelled:
-         term_msg = _("Verify Cancelled");
-        break;
-      case JS_Differences:
-         term_msg = _("Verify Differences");
-        break;
-      default:
-        term_msg = term_code;
-         sprintf(term_code, _("Inappropriate term code: %c\n"), TermCode);
-        break;
+   case JS_Terminated:
+      term_msg = _("Verify OK");
+      break;
+   case JS_ErrorTerminated:
+      term_msg = _("*** Verify Error ***"); 
+      msg_type = M_ERROR;         /* Generate error message */
+      break;
+   case JS_Canceled:
+      term_msg = _("Verify Canceled");
+      break;
+   case JS_Differences:
+      term_msg = _("Verify Differences");
+      break;
+   default:
+      term_msg = term_code;
+      sprintf(term_code, _("Inappropriate term code: %c\n"), TermCode);
+      break;
    }
    bstrftime(sdt, sizeof(sdt), jcr->jr.StartTime);
    bstrftime(edt, sizeof(edt), jcr->jr.EndTime);
 
-   Jmsg(jcr, msg_type, 0, _("Bacula " VERSION " (" LSMDATE "): %s\n\
+   jobstatus_to_ascii(jcr->FDJobStatus, fd_term_msg, sizeof(fd_term_msg));
+   if (jcr->JobLevel == L_VERIFY_VOLUME_TO_CATALOG) {
+       jobstatus_to_ascii(jcr->SDJobStatus, sd_term_msg, sizeof(sd_term_msg));
+      Jmsg(jcr, msg_type, 0, _("Bacula " VERSION " (" LSMDATE "): %s\n\
 JobId:                  %d\n\
 Job:                    %s\n\
 FileSet:                %s\n\
@@ -345,18 +385,49 @@ Client:                 %s\n\
 Start time:             %s\n\
 End time:               %s\n\
 Files Examined:         %s\n\
+Non-fatal FD errors:    %d\n\
+FD termination status:  %s\n\
+SD termination status:  %s\n\
 Termination:            %s\n\n"),
-       edt,
-       jcr->jr.JobId,
-       jcr->jr.Job,
-       jcr->fileset->hdr.name,
-       level_to_str(jcr->JobLevel),
-       jcr->client->hdr.name,
-       sdt,
-       edt,
-       edit_uint64_with_commas(jcr->JobFiles, ec1),
-       term_msg);
-
+        edt,
+        jcr->jr.JobId,
+        jcr->jr.Job,
+        jcr->fileset->hdr.name,
+        level_to_str(jcr->JobLevel),
+        jcr->client->hdr.name,
+        sdt,
+        edt,
+        edit_uint64_with_commas(jcr->JobFiles, ec1),
+        jcr->Errors,
+        fd_term_msg,
+        sd_term_msg,
+        term_msg);
+   } else {
+      Jmsg(jcr, msg_type, 0, _("Bacula " VERSION " (" LSMDATE "): %s\n\
+JobId:                  %d\n\
+Job:                    %s\n\
+FileSet:                %s\n\
+Verify Level:           %s\n\
+Client:                 %s\n\
+Start time:             %s\n\
+End time:               %s\n\
+Files Examined:         %s\n\
+Non-fatal FD errors:    %d\n\
+FD termination status:  %s\n\
+Termination:            %s\n\n"),
+        edt,
+        jcr->jr.JobId,
+        jcr->jr.Job,
+        jcr->fileset->hdr.name,
+        level_to_str(jcr->JobLevel),
+        jcr->client->hdr.name,
+        sdt,
+        edt,
+        edit_uint64_with_commas(jcr->JobFiles, ec1),
+        jcr->Errors,
+        fd_term_msg,
+        term_msg);
+   }
    Dmsg0(100, "Leave verify_cleanup()\n");
    if (jcr->fname) {
       free_memory(jcr->fname);
@@ -396,7 +467,7 @@ int get_attributes_and_compare_to_catalog(JCR *jcr, JobId_t JobId)
     *  Attributes
     *  Link name  ???
     */
-   while ((n=bget_msg(fd, 0)) >= 0 && !job_cancelled(jcr)) {
+   while ((n=bget_dirmsg(fd)) >= 0 && !job_canceled(jcr)) {
       int stream;
       char *attr, *p, *fn;
       char Opts_SIG[MAXSTRING];        /* Verify Opts or MD5/SHA1 signature */
@@ -431,7 +502,7 @@ int get_attributes_and_compare_to_catalog(JCR *jcr, JobId_t JobId)
       /*
        * Got attributes stream, decode it
        */
-      if (stream == STREAM_UNIX_ATTRIBUTES || stream == STREAM_WIN32_ATTRIBUTES) {
+      if (stream == STREAM_UNIX_ATTRIBUTES || stream == STREAM_UNIX_ATTRIBUTES_EX) {
         uint32_t LinkFIf, LinkFIc;
          Dmsg2(400, "file_index=%d attr=%s\n", file_index, attr);
         jcr->JobFiles++;