git.sur5r.net Git - bacula/bacula/blob - bacula/src/stored/device.c

   1 /*
   2  *
   3  *  Higher Level Device routines.
   4  *  Knows about Bacula tape labels and such
   5  *
   6  *  NOTE! In general, subroutines that have the word
   7  *        "device" in the name do locking.  Subroutines
   8  *        that have the word "dev" in the name do not
   9  *        do locking.  Thus if xxx_device() calls
  10  *        yyy_dev(), all is OK, but if xxx_device()
  11  *        calls yyy_device(), everything will hang.
  12  *        Obviously, no zzz_dev() is allowed to call
  13  *        a www_device() or everything falls apart.
  14  *
  15  * Concerning the routines lock_device() and block_device()
  16  *  see the end of this module for details.  In general,
  17  *  blocking a device leaves it in a state where all threads
  18  *  other than the current thread block when they attempt to
  19  *  lock the device. They remain suspended (blocked) until the device
  20  *  is unblocked. So, a device is blocked during an operation
  21  *  that takes a long time (initialization, mounting a new
  22  *  volume, ...) locking a device is done for an operation
  23  *  that takes a short time such as writing data to the
  24  *  device.
  25  *
  26  *
  27  *   Kern Sibbald, MM, MMI
  28  *
  29  *   Version $Id$
  30  */
  31 /*
  32    Copyright (C) 2000-2003 Kern Sibbald and John Walker
  33
  34    This program is free software; you can redistribute it and/or
  35    modify it under the terms of the GNU General Public License as
  36    published by the Free Software Foundation; either version 2 of
  37    the License, or (at your option) any later version.
  38
  39    This program is distributed in the hope that it will be useful,
  40    but WITHOUT ANY WARRANTY; without even the implied warranty of
  41    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
  42    General Public License for more details.
  43
  44    You should have received a copy of the GNU General Public
  45    License along with this program; if not, write to the Free
  46    Software Foundation, Inc., 59 Temple Place - Suite 330, Boston,
  47    MA 02111-1307, USA.
  48
  49  */
  50
  51 #include "bacula.h"                   /* pull in global headers */
  52 #include "stored.h"                   /* pull in Storage Deamon headers */
  53
  54 /* Forward referenced functions */
  55
  56 extern char my_name[];
  57 extern int debug_level;
  58
  59 /*
  60  * This is the dreaded moment. We either have an end of
  61  * medium condition or worse, and error condition.
  62  * Attempt to "recover" by obtaining a new Volume.
  63  *
  64  * We enter with device locked, and
  65  *     exit with device locked.
  66  *
  67  * Note, we are called only from one place in block.c
  68  *
  69  *  Returns: 1 on success
  70  *           0 on failure
  71  */
  72 int fixup_device_block_write_error(JCR *jcr, DEVICE *dev, DEV_BLOCK *block)
  73 {
  74    uint32_t stat = 0;
  75    char PrevVolName[MAX_NAME_LENGTH];
  76    DEV_BLOCK *label_blk = NULL;
  77    char b1[30], b2[30];
  78    time_t wait_time;
  79
  80    wait_time = time(NULL);
  81    status_dev(dev, &stat);
  82    if (stat & MT_EOD) {
  83       Dmsg0(100, "======= Got EOD ========\n");
  84
  85       block_device(dev, BST_DOING_ACQUIRE);
  86       /* Unlock, but leave BLOCKED */
  87       unlock_device(dev);
  88
  89       /*
  90        * Walk through all attached jcrs creating a jobmedia_record()
  91        */
  92       Dmsg1(100, "Walk attached jcrs. Volume=%s\n", dev->VolCatInfo.VolCatName);
  93       for (JCR *mjcr=NULL; (mjcr=next_attached_jcr(dev, mjcr)); ) {
  94          Dmsg1(100, "create JobMedia for Job %s\n", mjcr->Job);
  95          if (dev->state & ST_TAPE) {
  96             mjcr->EndBlock = dev->EndBlock;
  97             mjcr->EndFile  = dev->EndFile;
  98             Dmsg2(200, "Fixup EndFile=%u EndBlock=%u\n", mjcr->EndFile, mjcr->EndBlock);
  99          } else {
 100             mjcr->EndBlock = (uint32_t)dev->file_addr;
 101             mjcr->EndFile = (uint32_t)(dev->file_addr >> 32);
 102          }
 103          if (!dir_create_jobmedia_record(mjcr)) {
 104             Jmsg(mjcr, M_ERROR, 0, _("Could not create JobMedia record for Volume=%s Job=%s\n"),
 105                dev->VolCatInfo.VolCatName, mjcr->Job);
 106             P(dev->mutex);
 107             unblock_device(dev);
 108             return 0;
 109          }
 110       }
 111
 112       strcpy(dev->VolCatInfo.VolCatStatus, "Full");
 113       Dmsg2(200, "Call update_vol_info Stat=%s Vol=%s\n",
 114          dev->VolCatInfo.VolCatStatus, dev->VolCatInfo.VolCatName);
 115       if (!dir_update_volume_info(jcr, &dev->VolCatInfo, 0)) {    /* send Volume info to Director */
 116          P(dev->mutex);
 117          unblock_device(dev);
 118          return 0;                    /* device locked */
 119       }
 120       Dmsg0(100, "Back from update_vol_info\n");
 121
 122       strcpy(PrevVolName, dev->VolCatInfo.VolCatName);
 123       strcpy(dev->VolHdr.PrevVolName, PrevVolName);
 124
 125       label_blk = new_block(dev);
 126
 127       /* Inform User about end of media */
 128       Jmsg(jcr, M_INFO, 0, _("End of media on Volume %s Bytes=%s Blocks=%s.\n"),
 129            PrevVolName, edit_uint64_with_commas(dev->VolCatInfo.VolCatBytes, b1),
 130            edit_uint64_with_commas(dev->VolCatInfo.VolCatBlocks, b2));
 131
 132       if (!mount_next_write_volume(jcr, dev, label_blk, 1)) {
 133          P(dev->mutex);
 134          unblock_device(dev);
 135          return 0;                    /* device locked */
 136       }
 137       P(dev->mutex);                  /* lock again */
 138
 139       Jmsg(jcr, M_INFO, 0, _("New volume %s mounted on device %s\n"),
 140          jcr->VolumeName, dev_name(dev));
 141
 142       /*
 143        * If this is a new tape, the label_blk will contain the
 144        *  label, so write it now. If this is a previously
 145        *  used tape, mount_next_write_volume() will return an
 146        *  empty label_blk, and nothing will be written.
 147        */
 148       Dmsg0(190, "write label block to dev\n");
 149       if (!write_block_to_dev(jcr, dev, label_blk)) {
 150          Pmsg1(0, "write_block_to_device Volume label failed. ERR=%s",
 151            strerror_dev(dev));
 152          free_block(label_blk);
 153          unblock_device(dev);
 154          return 0;                    /* device locked */
 155       }
 156
 157       /* Write overflow block to tape */
 158       Dmsg0(190, "Write overflow block to dev\n");
 159       if (!write_block_to_dev(jcr, dev, block)) {
 160          Pmsg1(0, "write_block_to_device overflow block failed. ERR=%s",
 161            strerror_dev(dev));
 162          free_block(label_blk);
 163          unblock_device(dev);
 164          return 0;                    /* device locked */
 165       }
 166
 167       jcr->NumVolumes++;
 168       Dmsg0(190, "Wake up any waiting threads.\n");
 169       free_block(label_blk);
 170       for (JCR *mjcr=NULL; (mjcr=next_attached_jcr(dev, mjcr)); ) {
 171          /* Set new start/end positions */
 172          if (dev->state & ST_TAPE) {
 173             mjcr->StartBlock = dev->block_num;
 174             mjcr->StartFile = dev->file;
 175          } else {
 176             mjcr->StartBlock = (uint32_t)dev->file_addr;
 177             mjcr->StartFile  = (uint32_t)(dev->file_addr >> 32);
 178          }
 179          mjcr->VolFirstFile = mjcr->JobFiles;
 180          mjcr->run_time += time(NULL) - wait_time; /* correct run time */
 181       }
 182       unblock_device(dev);
 183       return 1;                                /* device locked */
 184    }
 185    if (label_blk) {
 186       free_block(label_blk);
 187    }
 188    return 0;                          /* device locked */
 189 }
 190
 191
 192 /*
 193  *   Open the device. Expect dev to already be initialized.
 194  *
 195  *   This routine is used only when the Storage daemon starts
 196  *   and always_open is set, and in the stand-alone utility
 197  *   routines such as bextract.
 198  *
 199  *   Note, opening of a normal file is deferred to later so
 200  *    that we can get the filename; the device_name for
 201  *    a file is the directory only.
 202  *
 203  *   Retuns: 0 on failure
 204  *           1 on success
 205  */
 206 int open_device(DEVICE *dev)
 207 {
 208    Dmsg0(120, "start open_output_device()\n");
 209    if (!dev) {
 210       return 0;
 211    }
 212
 213    lock_device(dev);
 214
 215    /* Defer opening files */
 216    if (!dev_is_tape(dev)) {
 217       Dmsg0(129, "Device is file, deferring open.\n");
 218       unlock_device(dev);
 219       return 1;
 220    }
 221
 222    if (!(dev->state & ST_OPENED)) {
 223       Dmsg0(129, "Opening device.\n");
 224       if (open_dev(dev, NULL, READ_WRITE) < 0) {
 225          Emsg1(M_FATAL, 0, _("dev open failed: %s\n"), dev->errmsg);
 226          unlock_device(dev);
 227          return 0;
 228       }
 229    }
 230    Dmsg1(129, "open_dev %s OK\n", dev_name(dev));
 231
 232    unlock_device(dev);
 233    return 1;
 234 }
 235
 236 /*
 237  * When dev_blocked is set, all threads EXCEPT thread with id no_wait_id
 238  * must wait. The no_wait_id thread is out obtaining a new volume
 239  * and preparing the label.
 240  */
 241 void _lock_device(char *file, int line, DEVICE *dev)
 242 {
 243    int stat;
 244    Dmsg3(100, "lock %d from %s:%d\n", dev->dev_blocked, file, line);
 245    P(dev->mutex);
 246    if (dev->dev_blocked && !pthread_equal(dev->no_wait_id, pthread_self())) {
 247       dev->num_waiting++;             /* indicate that I am waiting */
 248       while (dev->dev_blocked) {
 249          if ((stat = pthread_cond_wait(&dev->wait, &dev->mutex)) != 0) {
 250             V(dev->mutex);
 251             Emsg1(M_ABORT, 0, _("pthread_cond_wait failure. ERR=%s\n"),
 252                strerror(stat));
 253          }
 254       }
 255       dev->num_waiting--;             /* no longer waiting */
 256    }
 257 }
 258
 259 void _unlock_device(char *file, int line, DEVICE *dev)
 260 {
 261    Dmsg2(100, "unlock from %s:%d\n", file, line);
 262    V(dev->mutex);
 263 }
 264
 265 /*
 266  * Block all other threads from using the device
 267  *  Device must already be locked.  After this call,
 268  *  the device is blocked to any thread calling lock_device(),
 269  *  but the device is not locked (i.e. no P on device).  Also,
 270  *  the current thread can do slip through the lock_device()
 271  *  calls without blocking.
 272  */
 273 void _block_device(char *file, int line, DEVICE *dev, int state)
 274 {
 275    Dmsg3(100, "block set %d from %s:%d\n", state, file, line);
 276    ASSERT(dev->dev_blocked == BST_NOT_BLOCKED);
 277    dev->dev_blocked = state;          /* make other threads wait */
 278    dev->no_wait_id = pthread_self();  /* allow us to continue */
 279 }
 280
 281
 282
 283 /*
 284  * Unblock the device, and wake up anyone who went to sleep.
 285  */
 286 void _unblock_device(char *file, int line, DEVICE *dev)
 287 {
 288    Dmsg3(100, "unblock %d from %s:%d\n", dev->dev_blocked, file, line);
 289    ASSERT(dev->dev_blocked);
 290    dev->dev_blocked = BST_NOT_BLOCKED;
 291    if (dev->num_waiting > 0) {
 292       pthread_cond_broadcast(&dev->wait); /* wake them up */
 293    }
 294 }
 295
 296 void _steal_device_lock(char *file, int line, DEVICE *dev, bsteal_lock_t *hold, int state)
 297 {
 298    Dmsg4(100, "steal lock. old=%d new=%d from %s:%d\n", dev->dev_blocked, state,
 299       file, line);
 300    hold->dev_blocked = dev->dev_blocked;
 301    hold->no_wait_id = dev->no_wait_id;
 302    dev->dev_blocked = state;
 303    dev->no_wait_id = pthread_self();
 304    V(dev->mutex);
 305 }
 306
 307 void _return_device_lock(char *file, int line, DEVICE *dev, bsteal_lock_t *hold)
 308 {
 309    Dmsg4(100, "return lock. old=%d new=%d from %s:%d\n",
 310       dev->dev_blocked, hold->dev_blocked, file, line);
 311    P(dev->mutex);
 312    dev->dev_blocked = hold->dev_blocked;
 313    dev->no_wait_id = hold->no_wait_id;
 314 }
 315
 316
 317
 318 /* ==================================================================
 319  *  New device locking code.  It is not currently used.
 320  * ==================================================================
 321  */
 322
 323 /*
 324  * New device locking scheme
 325  */
 326 void _new_lock_device(char *file, int line, DEVICE *dev)
 327 {
 328 #ifdef NEW_LOCK
 329    int errstat;
 330    if ((errstat=rwl_writelock(&dev->lock)) != 0) {
 331       e_msg(file, line, M_ABORT, 0, "rwl_writelock failure. ERR=%s\n",
 332            strerror(errstat));
 333    }
 334 #endif
 335 }
 336
 337 void _new_lock_device(char *file, int line, DEVICE *dev, int state)
 338 {
 339 #ifdef NEW_LOCK
 340    int errstat;
 341    if ((errstat=rwl_writelock(&dev->lock)) != 0) {
 342       e_msg(file, line, M_ABORT, 0, "rwl_writelock failure. ERR=%s\n",
 343            strerror(errstat));
 344    }
 345    dev->dev_blocked = state;
 346 #endif
 347 }
 348
 349 void _new_unlock_device(char *file, int line, DEVICE *dev)
 350 {
 351 #ifdef NEW_LOCK
 352    int errstat;
 353    if (dev->lock.w_active == 1) {
 354       dev->dev_blocked = BST_NOT_BLOCKED;
 355    }
 356    if ((errstat=rwl_writeunlock(&dev->lock)) != 0) {
 357       e_msg(file, line, M_ABORT, 0, "rwl_writeunlock failure. ERR=%s\n",
 358            strerror(errstat));
 359    }
 360 #endif
 361 }
 362
 363 void new_steal_device_lock(DEVICE *dev, brwsteal_t *hold, int state)
 364 {
 365 #ifdef NEW_LOCK
 366    hold->state = dev->dev_blocked;
 367    hold->writer_id = dev->lock.writer_id;
 368    dev->dev_blocked = state;
 369    dev->lock.writer_id = pthread_self();
 370    V(dev->lock.mutex);
 371 #endif
 372 }
 373
 374 void new_return_device_lock(DEVICE *dev, brwsteal_t *hold)
 375 {
 376 #ifdef NEW_LOCK
 377    P(dev->lock.mutex);
 378    dev->dev_blocked = hold->state;
 379    dev->lock.writer_id = hold->writer_id;
 380 #endif
 381 }