git.sur5r.net Git - bacula/bacula/blob - bacula/src/stored/job.c

   1 /*
   2    Bacula® - The Network Backup Solution
   3
   4    Copyright (C) 2000-2007 Free Software Foundation Europe e.V.
   5
   6    The main author of Bacula is Kern Sibbald, with contributions from
   7    many others, a complete list can be found in the file AUTHORS.
   8    This program is Free Software; you can redistribute it and/or
   9    modify it under the terms of version two of the GNU General Public
  10    License as published by the Free Software Foundation and included
  11    in the file LICENSE.
  12
  13    This program is distributed in the hope that it will be useful, but
  14    WITHOUT ANY WARRANTY; without even the implied warranty of
  15    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
  16    General Public License for more details.
  17
  18    You should have received a copy of the GNU General Public License
  19    along with this program; if not, write to the Free Software
  20    Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA
  21    02110-1301, USA.
  22
  23    Bacula® is a registered trademark of John Walker.
  24    The licensor of Bacula is the Free Software Foundation Europe
  25    (FSFE), Fiduciary Program, Sumatrastrasse 25, 8006 Zürich,
  26    Switzerland, email:ftf@fsfeurope.org.
  27 */
  28 /*
  29  *   Job control and execution for Storage Daemon
  30  *
  31  *   Kern Sibbald, MM
  32  *
  33  *   Version $Id$
  34  *
  35  */
  36
  37 #include "bacula.h"
  38 #include "stored.h"
  39
  40 static pthread_mutex_t mutex = PTHREAD_MUTEX_INITIALIZER;
  41
  42 /* Imported variables */
  43 extern uint32_t VolSessionTime;
  44
  45 /* Imported functions */
  46 extern uint32_t newVolSessionId();
  47 extern bool do_mac(JCR *jcr);
  48
  49 /* Requests from the Director daemon */
  50 static char jobcmd[] = "JobId=%d job=%127s job_name=%127s client_name=%127s "
  51       "type=%d level=%d FileSet=%127s NoAttr=%d SpoolAttr=%d FileSetMD5=%127s "
  52       "SpoolData=%d WritePartAfterJob=%d PreferMountedVols=%d\n";
  53
  54
  55 /* Responses sent to Director daemon */
  56 static char OKjob[]     = "3000 OK Job SDid=%u SDtime=%u Authorization=%s\n";
  57 static char BAD_job[]   = "3915 Bad Job command. stat=%d CMD: %s\n";
  58 //static char OK_query[]  = "3001 OK query\n";
  59 //static char NO_query[]  = "3918 Query failed\n";
  60 //static char BAD_query[] = "3917 Bad query command: %s\n";
  61
  62 /*
  63  * Director requests us to start a job
  64  * Basic tasks done here:
  65  *  - We pickup the JobId to be run from the Director.
  66  *  - We pickup the device, media, and pool from the Director
  67  *  - Wait for a connection from the File Daemon (FD)
  68  *  - Accept commands from the FD (i.e. run the job)
  69  *  - Return when the connection is terminated or
  70  *    there is an error.
  71  */
  72 bool job_cmd(JCR *jcr)
  73 {
  74    int JobId;
  75    char auth_key[100];
  76    BSOCK *dir = jcr->dir_bsock;
  77    POOL_MEM job_name, client_name, job, fileset_name, fileset_md5;
  78    int JobType, level, spool_attributes, no_attributes, spool_data;
  79    int write_part_after_job, PreferMountedVols;
  80    int stat;
  81    JCR *ojcr;
  82
  83    /*
  84     * Get JobId and permissions from Director
  85     */
  86    Dmsg1(100, "<dird: %s", dir->msg);
  87    stat = sscanf(dir->msg, jobcmd, &JobId, job.c_str(), job_name.c_str(),
  88               client_name.c_str(),
  89               &JobType, &level, fileset_name.c_str(), &no_attributes,
  90               &spool_attributes, fileset_md5.c_str(), &spool_data,
  91               &write_part_after_job, &PreferMountedVols);
  92    if (stat != 13) {
  93       pm_strcpy(jcr->errmsg, dir->msg);
  94       dir->fsend(BAD_job, stat, jcr->errmsg);
  95       Dmsg1(100, ">dird: %s", dir->msg);
  96       set_jcr_job_status(jcr, JS_ErrorTerminated);
  97       return false;
  98    }
  99    /*
 100     * Since this job could be rescheduled, we
 101     *  check to see if we have it already. If so
 102     *  free the old jcr and use the new one.
 103     */
 104    ojcr = get_jcr_by_full_name(job.c_str());
 105    if (ojcr && !ojcr->authenticated) {
 106       Dmsg2(100, "Found ojcr=0x%x Job %s\n", (unsigned)(long)ojcr, job.c_str());
 107       free_jcr(ojcr);
 108    }
 109    jcr->JobId = JobId;
 110    jcr->VolSessionId = newVolSessionId();
 111    jcr->VolSessionTime = VolSessionTime;
 112    bstrncpy(jcr->Job, job, sizeof(jcr->Job));
 113    unbash_spaces(job_name);
 114    jcr->job_name = get_pool_memory(PM_NAME);
 115    pm_strcpy(jcr->job_name, job_name);
 116    unbash_spaces(client_name);
 117    jcr->client_name = get_pool_memory(PM_NAME);
 118    pm_strcpy(jcr->client_name, client_name);
 119    unbash_spaces(fileset_name);
 120    jcr->fileset_name = get_pool_memory(PM_NAME);
 121    pm_strcpy(jcr->fileset_name, fileset_name);
 122    jcr->JobType = JobType;
 123    jcr->JobLevel = level;
 124    jcr->no_attributes = no_attributes;
 125    jcr->spool_attributes = spool_attributes;
 126    jcr->spool_data = spool_data;
 127    jcr->write_part_after_job = write_part_after_job;
 128    jcr->fileset_md5 = get_pool_memory(PM_NAME);
 129    pm_strcpy(jcr->fileset_md5, fileset_md5);
 130    jcr->PreferMountedVols = PreferMountedVols;
 131
 132    jcr->authenticated = false;
 133
 134    /*
 135     * Pass back an authorization key for the File daemon
 136     */
 137    make_session_key(auth_key, NULL, 1);
 138    dir->fsend(OKjob, jcr->VolSessionId, jcr->VolSessionTime, auth_key);
 139    if (debug_level == 3) {
 140       Dmsg1(000, ">dird: %s", dir->msg);
 141    }
 142    Dmsg1(100, ">dird: %s", dir->msg);
 143    jcr->sd_auth_key = bstrdup(auth_key);
 144    memset(auth_key, 0, sizeof(auth_key));
 145    generate_daemon_event(jcr, "JobStart");
 146    return true;
 147 }
 148
 149 bool run_cmd(JCR *jcr)
 150 {
 151    struct timeval tv;
 152    struct timezone tz;
 153    struct timespec timeout;
 154    int errstat;
 155
 156    Dsm_check(1);
 157    Dmsg1(200, "Run_cmd: %s\n", jcr->dir_bsock->msg);
 158    /* The following jobs don't need the FD */
 159    switch (jcr->JobType) {
 160    case JT_MIGRATE:
 161    case JT_COPY:
 162    case JT_ARCHIVE:
 163       jcr->authenticated = true;
 164       do_mac(jcr);
 165       return false;
 166    }
 167
 168    set_jcr_job_status(jcr, JS_WaitFD);          /* wait for FD to connect */
 169    dir_send_job_status(jcr);
 170
 171    gettimeofday(&tv, &tz);
 172    timeout.tv_nsec = tv.tv_usec * 1000;
 173    timeout.tv_sec = tv.tv_sec + me->client_wait;
 174
 175    Dmsg2(100, "%s waiting %d sec for FD to contact SD\n",
 176         jcr->Job, (int)me->client_wait);
 177    /*
 178     * Wait for the File daemon to contact us to start the Job,
 179     *  when he does, we will be released, unless the 30 minutes
 180     *  expires.
 181     */
 182    P(mutex);
 183    for ( ; !job_canceled(jcr); ) {
 184       errstat = pthread_cond_timedwait(&jcr->job_start_wait, &mutex, &timeout);
 185       if (errstat == 0 || errstat == ETIMEDOUT) {
 186          break;
 187       }
 188    }
 189    V(mutex);
 190
 191    if (debug_level == 3) {
 192       Dmsg0(000, "Zap sd_auth_key\n");
 193    }
 194    memset(jcr->sd_auth_key, 0, strlen(jcr->sd_auth_key));
 195
 196    if (jcr->authenticated && !job_canceled(jcr)) {
 197       Dmsg1(100, "Running job %s\n", jcr->Job);
 198       run_job(jcr);                   /* Run the job */
 199    }
 200    return false;
 201 }
 202
 203 /*
 204  * After receiving a connection (in job.c) if it is
 205  *   from the File daemon, this routine is called.
 206  */
 207 void handle_filed_connection(BSOCK *fd, char *job_name)
 208 {
 209    JCR *jcr;
 210
 211    bmicrosleep(0, 50000);             /* wait 50 millisecs */
 212    if (!(jcr=get_jcr_by_full_name(job_name))) {
 213       Jmsg1(NULL, M_FATAL, 0, _("Job name not found: %s\n"), job_name);
 214       Dmsg1(100, "Job name not found: %s\n", job_name);
 215       return;
 216    }
 217
 218    jcr->file_bsock = fd;
 219    jcr->file_bsock->set_jcr(jcr);
 220
 221    Dmsg1(110, "Found Job %s\n", job_name);
 222
 223    if (jcr->authenticated) {
 224       Jmsg2(jcr, M_FATAL, 0, _("Hey!!!! JobId %u Job %s already authenticated.\n"),
 225          jcr->JobId, jcr->Job);
 226       free_jcr(jcr);
 227       return;
 228    }
 229
 230    /*
 231     * Authenticate the File daemon
 232     */
 233    if (jcr->authenticated || !authenticate_filed(jcr)) {
 234       Dmsg1(100, "Authentication failed Job %s\n", jcr->Job);
 235       Jmsg(jcr, M_FATAL, 0, _("Unable to authenticate File daemon\n"));
 236    } else {
 237       jcr->authenticated = true;
 238       Dmsg1(110, "OK Authentication Job %s\n", jcr->Job);
 239    }
 240
 241    if (!jcr->authenticated) {
 242       set_jcr_job_status(jcr, JS_ErrorTerminated);
 243    }
 244    pthread_cond_signal(&jcr->job_start_wait); /* wake waiting job */
 245    free_jcr(jcr);
 246    return;
 247 }
 248
 249
 250 #ifdef needed
 251 /*
 252  *   Query Device command from Director
 253  *   Sends Storage Daemon's information on the device to the
 254  *    caller (presumably the Director).
 255  *   This command always returns "true" so that the line is
 256  *    not closed on an error.
 257  *
 258  */
 259 bool query_cmd(JCR *jcr)
 260 {
 261    POOL_MEM dev_name, VolumeName, MediaType, ChangerName;
 262    BSOCK *dir = jcr->dir_bsock;
 263    DEVRES *device;
 264    AUTOCHANGER *changer;
 265    bool ok;
 266
 267    Dmsg1(100, "Query_cmd: %s", dir->msg);
 268    ok = sscanf(dir->msg, query_device, dev_name.c_str()) == 1;
 269    Dmsg1(100, "<dird: %s\n", dir->msg);
 270    if (ok) {
 271       unbash_spaces(dev_name);
 272       foreach_res(device, R_DEVICE) {
 273          /* Find resource, and make sure we were able to open it */
 274          if (strcmp(dev_name.c_str(), device->hdr.name) == 0) {
 275             if (!device->dev) {
 276                device->dev = init_dev(jcr, device);
 277             }
 278             if (!device->dev) {
 279                break;
 280             }
 281             ok = dir_update_device(jcr, device->dev);
 282             if (ok) {
 283                ok = dir->fsend(OK_query);
 284             } else {
 285                dir->fsend(NO_query);
 286             }
 287             return ok;
 288          }
 289       }
 290       foreach_res(changer, R_AUTOCHANGER) {
 291          /* Find resource, and make sure we were able to open it */
 292          if (strcmp(dev_name.c_str(), changer->hdr.name) == 0) {
 293             if (!changer->device || changer->device->size() == 0) {
 294                continue;              /* no devices */
 295             }
 296             ok = dir_update_changer(jcr, changer);
 297             if (ok) {
 298                ok = dir->fsend(OK_query);
 299             } else {
 300                dir->fsend(NO_query);
 301             }
 302             return ok;
 303          }
 304       }
 305       /* If we get here, the device/autochanger was not found */
 306       unbash_spaces(dir->msg);
 307       pm_strcpy(jcr->errmsg, dir->msg);
 308       dir->fsend(NO_device, dev_name.c_str());
 309       Dmsg1(100, ">dird: %s\n", dir->msg);
 310    } else {
 311       unbash_spaces(dir->msg);
 312       pm_strcpy(jcr->errmsg, dir->msg);
 313       dir->fsend(BAD_query, jcr->errmsg);
 314       Dmsg1(100, ">dird: %s\n", dir->msg);
 315    }
 316
 317    return true;
 318 }
 319
 320 #endif
 321
 322
 323 /*
 324  * Destroy the Job Control Record and associated
 325  * resources (sockets).
 326  */
 327 void stored_free_jcr(JCR *jcr)
 328 {
 329    Dmsg1(900, "stored_free_jcr JobId=%u\n", jcr->JobId);
 330    if (jcr->file_bsock) {
 331       jcr->file_bsock->close();
 332       jcr->file_bsock = NULL;
 333    }
 334    if (jcr->job_name) {
 335       free_pool_memory(jcr->job_name);
 336    }
 337    if (jcr->client_name) {
 338       free_memory(jcr->client_name);
 339       jcr->client_name = NULL;
 340    }
 341    if (jcr->fileset_name) {
 342       free_memory(jcr->fileset_name);
 343    }
 344    if (jcr->fileset_md5) {
 345       free_memory(jcr->fileset_md5);
 346    }
 347    if (jcr->bsr) {
 348       free_bsr(jcr->bsr);
 349       jcr->bsr = NULL;
 350    }
 351    if (jcr->RestoreBootstrap) {
 352       unlink(jcr->RestoreBootstrap);
 353       free_pool_memory(jcr->RestoreBootstrap);
 354       jcr->RestoreBootstrap = NULL;
 355    }
 356    if (jcr->next_dev || jcr->prev_dev) {
 357       Emsg0(M_FATAL, 0, _("In free_jcr(), but still attached to device!!!!\n"));
 358    }
 359    pthread_cond_destroy(&jcr->job_start_wait);
 360    if (jcr->dcrs) {
 361       delete jcr->dcrs;
 362    }
 363    jcr->dcrs = NULL;
 364
 365    /* Avoid a double free */
 366    if (jcr->dcr == jcr->read_dcr) {
 367       jcr->read_dcr = NULL;
 368    }
 369    if (jcr->dcr) {
 370       free_dcr(jcr->dcr);
 371       jcr->dcr = NULL;
 372    }
 373    if (jcr->read_dcr) {
 374       free_dcr(jcr->read_dcr);
 375       jcr->read_dcr = NULL;
 376    }
 377
 378    if (jcr->read_store) {
 379       DIRSTORE *store;
 380       foreach_alist(store, jcr->read_store) {
 381          delete store->device;
 382          delete store;
 383       }
 384       delete jcr->read_store;
 385       jcr->read_store = NULL;
 386    }
 387    if (jcr->write_store) {
 388       DIRSTORE *store;
 389       foreach_alist(store, jcr->write_store) {
 390          delete store->device;
 391          delete store;
 392       }
 393       delete jcr->write_store;
 394       jcr->write_store = NULL;
 395    }
 396    Dsm_check(1);
 397    return;
 398 }