]> git.sur5r.net Git - bacula/bacula/blobdiff - bacula/src/stored/read.c
Add V: to bextract and bscan
[bacula/bacula] / bacula / src / stored / read.c
index 8309a6558b9fa8ff3c26dddfdec8794ede7e05a4..b47362e48a6ff8d97466ca71de119809fea4f5c9 100644 (file)
@@ -1,9 +1,12 @@
 /*
  * Read code for Storage daemon
+ *
  *     Kern Sibbald, November MM
+ *
+ *   Version $Id$
  */
 /*
-   Copyright (C) 2000, 2001, 2002 Kern Sibbald and John Walker
+   Copyright (C) 2000-2003 Kern Sibbald and John Walker
 
    This program is free software; you can redistribute it and/or
    modify it under the terms of the GNU General Public License as
 #include "stored.h"
 
 /* Forward referenced subroutines */
-
-/* Variables used by Child process */
-/* Global statistics */
-/* Note, these probably should be in shared memory so that 
- * they are truly global for all processes
- */
-extern struct s_shm *shm;            /* shared memory structure */
-extern int  FiledDataChan;           /* File daemon data channel (port) */
+static void get_session_record(DEVICE *dev, DEV_RECORD *rec, SESSION_LABEL *sessrec);
 
 
 /* Responses sent to the File daemon */
@@ -50,15 +46,18 @@ int do_read_data(JCR *jcr)
    BSOCK *ds;
    BSOCK *fd_sock = jcr->file_bsock;
    int ok = TRUE;
+   int done = FALSE;
    DEVICE *dev;
-   DEV_RECORD rec;
+   DEV_RECORD *rec;
    DEV_BLOCK *block;
-   char *hdr, *p;
-
+   POOLMEM *hdr; 
+   SESSION_LABEL sessrec;             /* session record */
+   uint32_t BlockNumber = 0;
    
    Dmsg0(20, "Start read data.\n");
 
    dev = jcr->device->dev;
+   memset(&sessrec, 0, sizeof(sessrec));
 
    /* Tell File daemon we will send data */
    bnet_fsend(fd_sock, OK_data);
@@ -75,134 +74,221 @@ int do_read_data(JCR *jcr)
 
    block = new_block(dev);
 
-   /* Find out if we were passed multiple volumes */
-   jcr->NumVolumes = 1;
-   jcr->CurVolume = 1;
-   /* Scan through VolumeNames terminating them and counting them */
-   for (p = jcr->VolumeName; p && *p; ) {
-      p = strchr(p, '|');             /* volume name separator */
-      if (p) {
-        *p++ = 0;                    /* Terminate name */
-        jcr->NumVolumes++;
-      }
+   create_vol_list(jcr);
+   if (jcr->NumVolumes == 0) {
+      Jmsg(jcr, M_FATAL, 0, _("No Volume names found for restore.\n"));
+      free_block(block);
+      free_vol_list(jcr);
+      return 0;
    }
 
-   Dmsg1(20, "Found %d volumes names to restore.\n", jcr->NumVolumes);
+   Dmsg2(200, "Found %d volumes names to restore. First=%s\n", jcr->NumVolumes, 
+      jcr->VolList->VolumeName);
+
+   pm_strcpy(&jcr->VolumeName, jcr->VolList->VolumeName);
 
    /* 
     * Ready device for reading, and read records
     */
    if (!acquire_device_for_read(jcr, dev, block)) {
       free_block(block);
+      free_vol_list(jcr);
       return 0;
    }
 
-   memset(&rec, 0, sizeof(rec));
-   rec.data = ds->msg;               /* use socket message buffer */
-   hdr = (char *) get_pool_memory(PM_MESSAGE);
+   rec = new_record();
+   free_pool_memory(rec->data);
+   rec->data = ds->msg;               /* use socket message buffer */
+   hdr = get_pool_memory(PM_MESSAGE);
 
    /*
-    * ****FIXME**** enhance this to look for 
-    *              more things than just a session.
+    *  Read records, apply BSR filtering, and return any that are 
+    *   matched.
     */
-   for ( ;ok; ) {
-      DEV_RECORD *record;            /* for reading label of multi-volumes */
-
-      if (job_cancelled(jcr)) {
+   for ( ; ok && !done; ) {
+      if (job_canceled(jcr)) {
         ok = FALSE;
         break;
       }
       /* Read Record */
-      Dmsg1(500, "Main read_record. rem=%d\n", rec.remainder);
-      if (!read_record(dev, block, &rec)) {
-         Dmsg1(500, "Main read record failed. rem=%d\n", rec.remainder);
+      Dmsg1(500, "Main read_record. rem=%d\n", rec->remainder);
+
+      if (block_is_empty(block) && !read_block_from_device(jcr, dev, block, CHECK_BLOCK_NUMBERS)) {
+         Dmsg1(500, "Main read record failed. rem=%d\n", rec->remainder);
         if (dev->state & ST_EOT) {
-           if (rec.remainder) {
-               Dmsg0(500, "Not end of record.\n");
-           }
-            Dmsg2(90, "NumVolumes=%d CurVolume=%d\n", jcr->NumVolumes, jcr->CurVolume);
-           if (jcr->NumVolumes > 1 && jcr->CurVolume < jcr->NumVolumes) {
-              close_dev(dev);
-              for (p=jcr->VolumeName; *p++; ) /* skip to next volume name */
-                 { }
-              jcr->CurVolume++;
-               Dmsg1(20, "There is another volume %s.\n", p);
-              strcpy(jcr->VolumeName, p);
-              dev->state &= ~ST_READ; 
-              if (!acquire_device_for_read(jcr, dev, block)) {
-                  Emsg2(M_ERROR, 0, "Cannot open Dev=%s, Vol=%s\n", dev_name(dev), p);
-                 ok = FALSE;
-                 break;
-              }
-              record = new_record();
-               Dmsg1(500, "read record after new tape. rem=%d\n", record->remainder);
-              read_record(dev, block, record); /* read vol label */
-              dump_label_record(dev, record, 0);
-              free_record(record);
-              continue;
+           DEV_RECORD *record;
+           if (!mount_next_read_volume(jcr, dev, block)) {
+              break;
            }
-            Dmsg0(90, "End of Device reached.\n");
-           break;                    /* End of Tape */
-        }
-        if (dev->state & ST_EOF) {
+           /* Read and discard Volume Label */
+           record = new_record();
+           read_block_from_device(jcr, dev, block, NO_BLOCK_NUMBER_CHECK);
+           read_record_from_block(block, record);
+           get_session_record(dev, record, &sessrec);
+           free_record(record);
+           /* Now, continue to read the records on this volume */
+
+        } else if (dev->state & ST_EOF) {
             Dmsg0(90, "Got End of File. Trying again ...\n");
            continue;                 /* End of File */
+        } else if (dev->state & ST_SHORT) {
+           continue;
+        } else {
+           /* I/O error -- or non-standard end of tape */
+            Dmsg0(000, "I/O error, bailing out.\n");
+           ok = FALSE;
+           break;
         }
+      }
 
-         Emsg2(M_ABORT, 0, "Read error on Record Header %s ERR=%s\n", dev_name(dev), strerror(errno));
+      if (!block_is_empty(block) && !match_bsr_block(jcr->bsr, block)) {
+         Dmsg5(100, "reject Blk=%u blen=%u bVer=%d SessId=%u SessTim=%u\n",
+           block->BlockNumber, block->block_len, block->BlockVer,
+           block->VolSessionId, block->VolSessionTime);
+        empty_block(block);          /* force read next block */
+        continue;
       }
 
-      /* Some sort of label? */ 
-      if (rec.FileIndex < 0) {
-         Dmsg1(40, "Got label = %d\n", rec.FileIndex);
-        if (rec.FileIndex == EOM_LABEL) { /* end of tape? */
+      for (rec->state=0; !is_block_empty(rec); ) {
+
+        if (!read_record_from_block(block, rec)) {
+           break;
+        }
+        /*
+         * At this point, we have at least a record header.
+         *  Now decide if we want this record or not, but remember
+         *  before accessing the record, we may need to read again to
+         *  get all the data.
+         */
+
+        if (rec->FileIndex == EOM_LABEL) { /* end of tape? */
             Dmsg0(40, "Get EOM LABEL\n");
+           rec->remainder = 0;
            break;                         /* yes, get out */
         }
-        continue;                         /* ignore other labels */
-      }
 
-      if (rec.VolSessionId != jcr->read_VolSessionId ||
-         rec.VolSessionTime != jcr->read_VolSessionTime) {
-         Dmsg0(50, "Ignore record ids not equal\n");
-        continue;                    /* ignore */
-      }
-       
-      /* Generate Header parameters and send to File daemon
-       * Note, we build header in hdr buffer to avoid wiping
-       * out the data record
-       */
-      ds->msg = hdr;
-      if (!bnet_fsend(ds, rec_header, rec.VolSessionId, rec.VolSessionTime,
-            rec.FileIndex, rec.Stream, rec.data_len)) {
-         Dmsg1(30, ">filed: Error Hdr=%s\n", ds->msg);
-        ds->msg = rec.data;
-        ok = FALSE;
-        break;
-      } else {
-         Dmsg1(30, ">filed: Hdr=%s\n", ds->msg);
-      }
+        /* Some sort of label? */ 
+        if (rec->FileIndex < 0) {
+           get_session_record(dev, rec, &sessrec);
+           continue;
+        } /* end if label record */
 
-      ds->msg = rec.data;            /* restore data record address */
 
-      /* Send data record to File daemon */
-      ds->msglen = rec.data_len;
-      Dmsg1(40, ">filed: send %d bytes data.\n", ds->msglen);
-      if (!bnet_send(ds)) {
-         Dmsg0(0, "Error sending to FD\n");
-         Jmsg1(jcr, M_FATAL, 0, _("Error sending to File daemon. ERR=%s\n"),
-           bnet_strerror(ds));
-        ok = FALSE;
-      }
-   }
+        /* Match BSR against current record */
+        if (jcr->bsr) {
+           int stat = match_bsr(jcr->bsr, rec, &dev->VolHdr, &sessrec);
+           if (stat == -1) {         /* no more possible matches */
+              done = TRUE;
+              break;
+           } else if (stat == 0) {   /* no match */
+               Dmsg0(50, "BSR rejected record\n");
+              rec->remainder = 0;
+              continue;
+           }
+        } else { 
+           /* Old way, deprecated */
+           if (rec->VolSessionId != jcr->read_VolSessionId ||
+               rec->VolSessionTime != jcr->read_VolSessionTime) {
+               Dmsg0(50, "Ignore record ids not equal\n");
+              rec->remainder = 0;
+              continue;                    /* ignore */
+           }
+        }
+
+        if (block->block_read) {
+           if (BlockNumber != block->BlockNumber) {
+               Jmsg(jcr, M_ERROR, 0, _("Invalid block number. Expected %u, got %u\n"),
+                   BlockNumber, block->BlockNumber);
+           }
+           BlockNumber = block->BlockNumber + 1;
+           block->block_read = false;
+        }
+
+        if (is_partial_record(rec)) {
+           break;                    /* Go read full record */
+        }
+         
+        /*
+          * We "finally" have a full record here. Now
+         *   generate Header parameters and send to File daemon
+         * Note, we build header in hdr buffer to avoid wiping
+         *   out the data record
+         */
+        ds->msg = hdr;
+         Dmsg5(400, "Send to FD: SessId=%u SessTim=%u FI=%d Strm=%d, len=%d\n",
+           rec->VolSessionId, rec->VolSessionTime, rec->FileIndex, rec->Stream,
+           rec->data_len);
+        if (!bnet_fsend(ds, rec_header, rec->VolSessionId, rec->VolSessionTime,
+               rec->FileIndex, rec->Stream, rec->data_len)) {
+            Dmsg1(30, ">filed: Error Hdr=%s\n", ds->msg);
+           hdr = ds->msg;
+           ds->msg = rec->data;
+            Jmsg1(jcr, M_FATAL, 0, _("Error sending to File daemon. ERR=%s\n"),
+              bnet_strerror(ds));
+           ok = FALSE;
+           break;
+        } else {
+            Dmsg1(30, ">filed: Hdr=%s\n", ds->msg);
+        }
+
+        hdr = ds->msg;               /* restore hdr buffer */
+        ds->msg = rec->data;         /* restore data record address */
+
+        /* Send data record to File daemon */
+        ds->msglen = rec->data_len;
+         Dmsg1(40, ">filed: send %d bytes data.\n", ds->msglen);
+        if (!bnet_send(ds)) {
+            Pmsg1(000, "Error sending to FD. ERR=%s\n", bnet_strerror(ds));
+            Dmsg1(100, "Hdr=%s\n", hdr);
+            Dmsg1(100, "data=%s\n", ds->msg);
+            Jmsg1(jcr, M_FATAL, 0, _("Error sending to File daemon. ERR=%s\n"),
+              bnet_strerror(ds));
+           ok = FALSE;
+           break;
+        }
+      } /* end for loop reading records */
+   } /* end for loop reading blocks */
    /* Send end of data to FD */
-   bnet_sig(ds, BNET_EOF);
+   bnet_sig(ds, BNET_EOD);
 
-   if (!release_device(jcr, dev, block)) {
+   if (!release_device(jcr, dev)) {
       ok = FALSE;
    }
    free_pool_memory(hdr);
    free_block(block);
+   rec->data = NULL;                 /* previously released */
+   free_record(rec);
+   free_vol_list(jcr);
    Dmsg0(30, "Done reading.\n");
    return ok ? 1 : 0;
 }
+
+static void get_session_record(DEVICE *dev, DEV_RECORD *rec, SESSION_LABEL *sessrec)
+{
+   char *rtype;
+   memset(sessrec, 0, sizeof(sessrec));
+   switch (rec->FileIndex) {
+   case PRE_LABEL:
+      rtype = "Fresh Volume Label";   
+      break;
+   case VOL_LABEL:
+      rtype = "Volume Label";
+      unser_volume_label(dev, rec);
+      break;
+   case SOS_LABEL:
+      rtype = "Begin Session";
+      unser_session_label(sessrec, rec);
+      break;
+   case EOS_LABEL:
+      rtype = "End Session";
+      break;
+   case EOM_LABEL:
+      rtype = "End of Media";
+      break;
+   default:
+      rtype = "Unknown";
+      break;
+   }
+   Dmsg5(10, "%s Record: VolSessionId=%d VolSessionTime=%d JobId=%d DataLen=%d\n",
+        rtype, rec->VolSessionId, rec->VolSessionTime, rec->Stream, rec->data_len);
+}