git.sur5r.net Git - bacula/bacula/blob - bacula/src/jcr.h

   1 /*
   2  * Bacula JCR Structure definition for Daemons and the Library
   3  *  This definition consists of a "Global" definition common
   4  *  to all daemons and used by the library routines, and a
   5  *  daemon specific part that is enabled with #defines.
   6  *
   7  * Kern Sibbald, Nov MM
   8  *
   9  *   Version $Id$
  10  */
  11
  12 /*
  13    Copyright (C) 2000-2005 Kern Sibbald
  14
  15    This program is free software; you can redistribute it and/or
  16    modify it under the terms of the GNU General Public License as
  17    published by the Free Software Foundation; either version 2 of
  18    the License, or (at your option) any later version.
  19
  20    This program is distributed in the hope that it will be useful,
  21    but WITHOUT ANY WARRANTY; without even the implied warranty of
  22    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
  23    General Public License for more details.
  24
  25    You should have received a copy of the GNU General Public
  26    License along with this program; if not, write to the Free
  27    Software Foundation, Inc., 59 Temple Place - Suite 330, Boston,
  28    MA 02111-1307, USA.
  29
  30  */
  31
  32 #ifndef __JCR_H_
  33 #define __JCR_H_ 1
  34
  35 /* Backup/Verify level code. These are stored in the DB */
  36 #define L_FULL                   'F'  /* Full backup */
  37 #define L_INCREMENTAL            'I'  /* since last backup */
  38 #define L_DIFFERENTIAL           'D'  /* since last full backup */
  39 #define L_SINCE                  'S'
  40 #define L_VERIFY_CATALOG         'C'  /* verify from catalog */
  41 #define L_VERIFY_INIT            'V'  /* verify save (init DB) */
  42 #define L_VERIFY_VOLUME_TO_CATALOG 'O'  /* verify Volume to catalog entries */
  43 #define L_VERIFY_DISK_TO_CATALOG 'd'  /* verify Disk attributes to catalog */
  44 #define L_VERIFY_DATA            'A'  /* verify data on volume */
  45 #define L_BASE                   'B'  /* Base level job */
  46 #define L_NONE                   ' '  /* None, for Restore and Admin */
  47
  48
  49 /* Job Types. These are stored in the DB */
  50 #define JT_BACKUP                'B'  /* Backup Job */
  51 #define JT_VERIFY                'V'  /* Verify Job */
  52 #define JT_RESTORE               'R'  /* Restore Job */
  53 #define JT_CONSOLE               'C'  /* console program */
  54 #define JT_SYSTEM                'I'  /* internal system "job" */
  55 #define JT_ADMIN                 'D'  /* admin job */
  56 #define JT_ARCHIVE               'A'  /* Archive Job */
  57 #define JT_COPY                  'Y'  /* Copy Job */
  58 #define JT_MIGRATION             'M'  /* Migration Job */
  59 #define JT_SCAN                  'S'  /* Scan Job */
  60
  61 /* Job Status. Some of these are stored in the DB */
  62 #define JS_Created               'C'  /* created but not yet running */
  63 #define JS_Running               'R'  /* running */
  64 #define JS_Blocked               'B'  /* blocked */
  65 #define JS_Terminated            'T'  /* terminated normally */
  66 #define JS_ErrorTerminated       'E'  /* Job terminated in error */
  67 #define JS_Error                 'e'  /* Non-fatal error */
  68 #define JS_FatalError            'f'  /* Fatal error */
  69 #define JS_Differences           'D'  /* Verify differences */
  70 #define JS_Canceled              'A'  /* canceled by user */
  71 #define JS_WaitFD                'F'  /* waiting on File daemon */
  72 #define JS_WaitSD                'S'  /* waiting on the Storage daemon */
  73 #define JS_WaitMedia             'm'  /* waiting for new media */
  74 #define JS_WaitMount             'M'  /* waiting for Mount */
  75 #define JS_WaitStoreRes          's'  /* Waiting for storage resource */
  76 #define JS_WaitJobRes            'j'  /* Waiting for job resource */
  77 #define JS_WaitClientRes         'c'  /* Waiting for Client resource */
  78 #define JS_WaitMaxJobs           'd'  /* Waiting for maximum jobs */
  79 #define JS_WaitStartTime         't'  /* Waiting for start time */
  80 #define JS_WaitPriority          'p'  /* Waiting for higher priority jobs to finish */
  81
  82 #define job_canceled(jcr) \
  83   (jcr->JobStatus == JS_Canceled || \
  84    jcr->JobStatus == JS_ErrorTerminated || \
  85    jcr->JobStatus == JS_FatalError)
  86
  87 #define foreach_jcr(jcr) \
  88    for ((jcr)=NULL; ((jcr)=get_next_jcr(jcr)); )
  89
  90 #define SD_APPEND 1
  91 #define SD_READ   0
  92
  93
  94 struct JCR;
  95 typedef void (JCR_free_HANDLER)(JCR *jcr);
  96
  97 /* Job Control Record (JCR) */
  98 struct JCR {
  99    /* Global part of JCR common to all daemons */
 100    JCR *next;
 101    JCR *prev;
 102    volatile int use_count;            /* use count */
 103    pthread_t my_thread_id;            /* id of thread controlling jcr */
 104    pthread_mutex_t mutex;             /* jcr mutex */
 105    BSOCK *dir_bsock;                  /* Director bsock or NULL if we are him */
 106    BSOCK *store_bsock;                /* Storage connection socket */
 107    BSOCK *file_bsock;                 /* File daemon connection socket */
 108    JCR_free_HANDLER *daemon_free_jcr; /* Local free routine */
 109    dlist *msg_queue;                  /* Queued messages */
 110    alist job_end_push;                /* Job end pushed calls */
 111    bool dequeuing;                    /* dequeuing messages */
 112    POOLMEM *VolumeName;               /* Volume name desired -- pool_memory */
 113    POOLMEM *errmsg;                   /* edited error message */
 114    char Job[MAX_NAME_LENGTH];         /* Unique name of this Job */
 115    uint32_t JobId;                    /* Director's JobId */
 116    uint32_t VolSessionId;
 117    uint32_t VolSessionTime;
 118    uint32_t JobFiles;                 /* Number of files written, this job */
 119    uint32_t JobErrors;                /* */
 120    uint64_t JobBytes;                 /* Number of bytes processed this job */
 121    uint64_t ReadBytes;                /* Bytes read -- before compression */
 122    uint32_t Errors;                   /* Number of non-fatal errors */
 123    volatile int JobStatus;            /* ready, running, blocked, terminated */
 124    int JobType;                       /* backup, restore, verify ... */
 125    int JobLevel;                      /* Job level */
 126    int JobPriority;                   /* Job priority */
 127    time_t sched_time;                 /* job schedule time, i.e. when it should start */
 128    time_t start_time;                 /* when job actually started */
 129    time_t run_time;                   /* used for computing speed */
 130    time_t end_time;                   /* job end time */
 131    POOLMEM *client_name;              /* client name */
 132    POOLMEM *RestoreBootstrap;         /* Bootstrap file to restore */
 133    char *sd_auth_key;                 /* SD auth key */
 134    MSGS *jcr_msgs;                    /* Copy of message resource -- actually used */
 135    uint32_t ClientId;                 /* Client associated with Job */
 136    char *where;                       /* prefix to restore files to */
 137    int cached_pnl;                    /* cached path length */
 138    POOLMEM *cached_path;              /* cached path */
 139    bool prefix_links;                 /* Prefix links with Where path */
 140    bool gui;                          /* set if gui using console */
 141    bool authenticated;                /* set when client authenticated */
 142
 143    /* Daemon specific part of JCR */
 144    /* This should be empty in the library */
 145
 146 #ifdef DIRECTOR_DAEMON
 147    /* Director Daemon specific part of JCR */
 148    pthread_t SD_msg_chan;             /* Message channel thread id */
 149    pthread_cond_t term_wait;          /* Wait for job termination */
 150    workq_ele_t *work_item;            /* Work queue item if scheduled */
 151    volatile bool sd_msg_thread_done;  /* Set when Storage message thread terms */
 152    BSOCK *ua;                         /* User agent */
 153    JOB *job;                          /* Job resource */
 154    JOB *verify_job;                   /* Job resource of verify target job */
 155    alist *storage;                    /* Storage possibilities */
 156    STORE *store;                      /* Storage daemon selected */
 157    CLIENT *client;                    /* Client resource */
 158    POOL *pool;                        /* Pool resource */
 159    POOL *full_pool;                   /* Full backup pool resource */
 160    POOL *inc_pool;                    /* Incremental backup pool resource */
 161    POOL *dif_pool;                    /* Differential backup pool resource */
 162    FILESET *fileset;                  /* FileSet resource */
 163    CAT *catalog;                      /* Catalog resource */
 164    MSGS *messages;                    /* Default message handler */
 165    uint32_t SDJobFiles;               /* Number of files written, this job */
 166    uint64_t SDJobBytes;               /* Number of bytes processed this job */
 167    uint32_t SDErrors;                 /* Number of non-fatal errors */
 168    volatile int SDJobStatus;          /* Storage Job Status */
 169    volatile int FDJobStatus;          /* File daemon Job Status */
 170    uint32_t ExpectedFiles;            /* Expected restore files */
 171    B_DB *db;                          /* database pointer */
 172    uint32_t MediaId;                  /* DB record IDs associated with this job */
 173    uint32_t PoolId;                   /* Pool record id */
 174    FileId_t FileId;                   /* Last file id inserted */
 175    uint32_t FileIndex;                /* Last FileIndex processed */
 176    POOLMEM *fname;                    /* name to put into catalog */
 177    POOLMEM *stime;                    /* start time for incremental/differential */
 178    JOB_DBR jr;                        /* Job DB record for current job */
 179    JOB_DBR *verify_jr;                /* Pointer to target job */
 180    uint32_t RestoreJobId;             /* Id specified by UA */
 181    POOLMEM *client_uname;             /* client uname */
 182    int replace;                       /* Replace option */
 183    int saveMaxConcurrentJobs;         /* save for restore jobs */
 184    int NumVols;                       /* Number of Volume used in pool */
 185    int reschedule_count;              /* Number of times rescheduled */
 186    bool spool_data;                   /* Spool data in SD */
 187    bool acquired_resource_locks;      /* set if resource locks acquired */
 188    bool term_wait_inited;             /* Set when cond var inited */
 189    bool fn_printed;                   /* printed filename */
 190    bool write_part_after_job;         /* Write part after job in SD */
 191 #endif /* DIRECTOR_DAEMON */
 192
 193
 194 #ifdef FILE_DAEMON
 195    /* File Daemon specific part of JCR */
 196    uint32_t num_files_examined;       /* files examined this job */
 197    POOLMEM *last_fname;               /* last file saved/verified */
 198    POOLMEM *acl_text;                 /* text of ACL for backup */
 199    /*********FIXME********* add missing files and files to be retried */
 200    int incremental;                   /* set if incremental for SINCE */
 201    time_t mtime;                      /* begin time for SINCE */
 202    int listing;                       /* job listing in estimate */
 203    long Ticket;                       /* Ticket */
 204    char *big_buf;                     /* I/O buffer */
 205    POOLMEM *compress_buf;             /* Compression buffer */
 206    int32_t compress_buf_size;         /* Length of compression buffer */
 207    int replace;                       /* Replace options */
 208    int buf_size;                      /* length of buffer */
 209    void *ff;                          /* Find Files packet */
 210    char stored_addr[MAX_NAME_LENGTH]; /* storage daemon address */
 211    uint32_t StartFile;
 212    uint32_t EndFile;
 213    uint32_t StartBlock;
 214    uint32_t EndBlock;
 215    pthread_t heartbeat_id;            /* id of heartbeat thread */
 216    volatile BSOCK *hb_bsock;          /* duped SD socket */
 217    POOLMEM *RunAfterJob;              /* Command to run after job */
 218    DIRRES* director;                  /* Director resource */
 219 #endif /* FILE_DAEMON */
 220
 221
 222 #ifdef STORAGE_DAEMON
 223    /* Storage Daemon specific part of JCR */
 224    JCR *next_dev;                     /* next JCR attached to device */
 225    JCR *prev_dev;                     /* previous JCR attached to device */
 226    pthread_cond_t job_start_wait;     /* Wait for FD to start Job */
 227    int type;
 228    DCR *dcr;                          /* device context record */
 229    alist *dcrs;                       /* list of dcrs open */
 230 // DEVRES *device;                    /* device resource to use */
 231    POOLMEM *job_name;                 /* base Job name (not unique) */
 232    POOLMEM *fileset_name;             /* FileSet */
 233    POOLMEM *fileset_md5;              /* MD5 for FileSet */
 234    VOL_LIST *VolList;                 /* list to read */
 235    int32_t NumVolumes;                /* number of volumes used */
 236    int32_t CurVolume;                 /* current volume number */
 237    int label_errors;                  /* count of label errors */
 238    bool session_opened;
 239    long Ticket;                       /* ticket for this job */
 240    bool ignore_label_errors;          /* ignore Volume label errors */
 241    bool spool_attributes;             /* set if spooling attributes */
 242    bool no_attributes;                /* set if no attributes wanted */
 243    bool spool_data;                   /* set to spool data */
 244    int CurVol;                        /* Current Volume count */
 245    DIRRES* director;                  /* Director resource */
 246    bool write_part_after_job;         /* Set to write part after job */
 247
 248    uint32_t FileId;                   /* Last file id inserted */
 249
 250    /* Parmaters for Open Read Session */
 251    BSR *bsr;                          /* Bootstrap record -- has everything */
 252    uint32_t read_VolSessionId;
 253    uint32_t read_VolSessionTime;
 254    uint32_t read_StartFile;
 255    uint32_t read_EndFile;
 256    uint32_t read_StartBlock;
 257    uint32_t read_EndBlock;
 258
 259 #endif /* STORAGE_DAEMON */
 260
 261 };
 262
 263
 264
 265 /*
 266  * Structure for all daemons that keeps some summary
 267  *  info on the last job run.
 268  */
 269 struct s_last_job {
 270    dlink link;
 271    int Errors;                        /* FD/SD errors */
 272    int JobType;
 273    int JobStatus;
 274    int JobLevel;
 275    uint32_t JobId;
 276    uint32_t VolSessionId;
 277    uint32_t VolSessionTime;
 278    uint32_t JobFiles;
 279    uint64_t JobBytes;
 280    time_t start_time;
 281    time_t end_time;
 282    char Job[MAX_NAME_LENGTH];
 283 };
 284
 285 extern struct s_last_job last_job;
 286 extern dlist *last_jobs;
 287
 288
 289 /* The following routines are found in lib/jcr.c */
 290 extern bool init_jcr_subsystem(void);
 291 extern JCR *new_jcr(int size, JCR_free_HANDLER *daemon_free_jcr);
 292 extern void free_locked_jcr(JCR *jcr);
 293 extern JCR *get_jcr_by_id(uint32_t JobId);
 294 extern JCR *get_jcr_by_session(uint32_t SessionId, uint32_t SessionTime);
 295 extern JCR *get_jcr_by_partial_name(char *Job);
 296 extern JCR *get_jcr_by_full_name(char *Job);
 297 extern JCR *get_next_jcr(JCR *jcr);
 298 extern void set_jcr_job_status(JCR *jcr, int JobStatus);
 299
 300 #ifdef TRACE_JCR_CHAIN
 301 extern void b_lock_jcr_chain(const char *filen, int line);
 302 extern void b_unlock_jcr_chain(const char *filen, int line);
 303 #define lock_jcr_chain() b_lock_jcr_chain(__FILE__, __LINE__);
 304 #define unlock_jcr_chain() b_unlock_jcr_chain(__FILE__, __LINE__);
 305 #else
 306 extern void lock_jcr_chain();
 307 extern void unlock_jcr_chain();
 308 #endif
 309
 310 #ifdef DEBUG
 311 extern void b_free_jcr(const char *file, int line, JCR *jcr);
 312 #define free_jcr(jcr) b_free_jcr(__FILE__, __LINE__, (jcr))
 313 #else
 314 extern void free_jcr(JCR *jcr);
 315 #endif
 316
 317 #endif /* __JCR_H_ */