git.sur5r.net Git - bacula/bacula/blob - bacula/src/jcr.h

   1 /*
   2  * Bacula JCR Structure definition for Daemons and the Library
   3  *  This definition consists of a "Global" definition common
   4  *  to all daemons and used by the library routines, and a
   5  *  daemon specific part that is enabled with #defines.
   6  *
   7  * Kern Sibbald, Nov MM
   8  *
   9  *   Version $Id$
  10  */
  11
  12 /*
  13    Copyright (C) 2000-2005 Kern Sibbald
  14
  15    This program is free software; you can redistribute it and/or
  16    modify it under the terms of the GNU General Public License as
  17    published by the Free Software Foundation; either version 2 of
  18    the License, or (at your option) any later version.
  19
  20    This program is distributed in the hope that it will be useful,
  21    but WITHOUT ANY WARRANTY; without even the implied warranty of
  22    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
  23    General Public License for more details.
  24
  25    You should have received a copy of the GNU General Public
  26    License along with this program; if not, write to the Free
  27    Software Foundation, Inc., 59 Temple Place - Suite 330, Boston,
  28    MA 02111-1307, USA.
  29
  30  */
  31
  32 #ifndef __JCR_H_
  33 #define __JCR_H_ 1
  34
  35 /* Backup/Verify level code. These are stored in the DB */
  36 #define L_FULL                   'F'  /* Full backup */
  37 #define L_INCREMENTAL            'I'  /* since last backup */
  38 #define L_DIFFERENTIAL           'D'  /* since last full backup */
  39 #define L_SINCE                  'S'
  40 #define L_VERIFY_CATALOG         'C'  /* verify from catalog */
  41 #define L_VERIFY_INIT            'V'  /* verify save (init DB) */
  42 #define L_VERIFY_VOLUME_TO_CATALOG 'O'  /* verify Volume to catalog entries */
  43 #define L_VERIFY_DISK_TO_CATALOG 'd'  /* verify Disk attributes to catalog */
  44 #define L_VERIFY_DATA            'A'  /* verify data on volume */
  45 #define L_BASE                   'B'  /* Base level job */
  46 #define L_NONE                   ' '  /* None, for Restore and Admin */
  47
  48
  49 /* Job Types. These are stored in the DB */
  50 #define JT_BACKUP                'B'  /* Backup Job */
  51 #define JT_VERIFY                'V'  /* Verify Job */
  52 #define JT_RESTORE               'R'  /* Restore Job */
  53 #define JT_CONSOLE               'C'  /* console program */
  54 #define JT_SYSTEM                'I'  /* internal system "job" */
  55 #define JT_ADMIN                 'D'  /* admin job */
  56 #define JT_ARCHIVE               'A'  /* Archive Job */
  57 #define JT_COPY                  'Y'  /* Copy Job */
  58 #define JT_MIGRATION             'M'  /* Migration Job */
  59 #define JT_SCAN                  'S'  /* Scan Job */
  60
  61 /* Job Status. Some of these are stored in the DB */
  62 #define JS_Created               'C'  /* created but not yet running */
  63 #define JS_Running               'R'  /* running */
  64 #define JS_Blocked               'B'  /* blocked */
  65 #define JS_Terminated            'T'  /* terminated normally */
  66 #define JS_ErrorTerminated       'E'  /* Job terminated in error */
  67 #define JS_Error                 'e'  /* Non-fatal error */
  68 #define JS_FatalError            'f'  /* Fatal error */
  69 #define JS_Differences           'D'  /* Verify differences */
  70 #define JS_Canceled              'A'  /* canceled by user */
  71 #define JS_WaitFD                'F'  /* waiting on File daemon */
  72 #define JS_WaitSD                'S'  /* waiting on the Storage daemon */
  73 #define JS_WaitMedia             'm'  /* waiting for new media */
  74 #define JS_WaitMount             'M'  /* waiting for Mount */
  75 #define JS_WaitStoreRes          's'  /* Waiting for storage resource */
  76 #define JS_WaitJobRes            'j'  /* Waiting for job resource */
  77 #define JS_WaitClientRes         'c'  /* Waiting for Client resource */
  78 #define JS_WaitMaxJobs           'd'  /* Waiting for maximum jobs */
  79 #define JS_WaitStartTime         't'  /* Waiting for start time */
  80 #define JS_WaitPriority          'p'  /* Waiting for higher priority jobs to finish */
  81
  82 #define job_canceled(jcr) \
  83   (jcr->JobStatus == JS_Canceled || \
  84    jcr->JobStatus == JS_ErrorTerminated || \
  85    jcr->JobStatus == JS_FatalError)
  86
  87 #define foreach_jcr(jcr) \
  88    for ((jcr)=NULL; ((jcr)=get_next_jcr(jcr)); )
  89
  90 #define SD_APPEND 1
  91 #define SD_READ   0
  92
  93
  94 struct JCR;
  95 typedef void (JCR_free_HANDLER)(JCR *jcr);
  96
  97 /* Job Control Record (JCR) */
  98 struct JCR {
  99    /* Global part of JCR common to all daemons */
 100    JCR *next;
 101    JCR *prev;
 102    volatile int use_count;            /* use count */
 103    pthread_t my_thread_id;            /* id of thread controlling jcr */
 104    pthread_mutex_t mutex;             /* jcr mutex */
 105    BSOCK *dir_bsock;                  /* Director bsock or NULL if we are him */
 106    BSOCK *store_bsock;                /* Storage connection socket */
 107    BSOCK *file_bsock;                 /* File daemon connection socket */
 108    JCR_free_HANDLER *daemon_free_jcr; /* Local free routine */
 109    dlist *msg_queue;                  /* Queued messages */
 110    alist job_end_push;                /* Job end pushed calls */
 111    bool dequeuing;                    /* dequeuing messages */
 112    POOLMEM *VolumeName;               /* Volume name desired -- pool_memory */
 113    POOLMEM *errmsg;                   /* edited error message */
 114    char Job[MAX_NAME_LENGTH];         /* Unique name of this Job */
 115    uint32_t JobId;                    /* Director's JobId */
 116    uint32_t VolSessionId;
 117    uint32_t VolSessionTime;
 118    uint32_t JobFiles;                 /* Number of files written, this job */
 119    uint32_t JobErrors;                /* */
 120    uint64_t JobBytes;                 /* Number of bytes processed this job */
 121    uint64_t ReadBytes;                /* Bytes read -- before compression */
 122    uint32_t Errors;                   /* Number of non-fatal errors */
 123    volatile int JobStatus;            /* ready, running, blocked, terminated */
 124    int JobType;                       /* backup, restore, verify ... */
 125    int JobLevel;                      /* Job level */
 126    int JobPriority;                   /* Job priority */
 127    time_t sched_time;                 /* job schedule time, i.e. when it should start */
 128    time_t start_time;                 /* when job actually started */
 129    time_t run_time;                   /* used for computing speed */
 130    time_t end_time;                   /* job end time */
 131    POOLMEM *client_name;              /* client name */
 132    POOLMEM *RestoreBootstrap;         /* Bootstrap file to restore */
 133    POOLMEM *stime;                    /* start time for incremental/differential */
 134    char *sd_auth_key;                 /* SD auth key */
 135    MSGS *jcr_msgs;                    /* Copy of message resource -- actually used */
 136    uint32_t ClientId;                 /* Client associated with Job */
 137    char *where;                       /* prefix to restore files to */
 138    int cached_pnl;                    /* cached path length */
 139    POOLMEM *cached_path;              /* cached path */
 140    bool prefix_links;                 /* Prefix links with Where path */
 141    bool gui;                          /* set if gui using console */
 142    bool authenticated;                /* set when client authenticated */
 143
 144    /* Daemon specific part of JCR */
 145    /* This should be empty in the library */
 146
 147 #ifdef DIRECTOR_DAEMON
 148    /* Director Daemon specific part of JCR */
 149    pthread_t SD_msg_chan;             /* Message channel thread id */
 150    pthread_cond_t term_wait;          /* Wait for job termination */
 151    workq_ele_t *work_item;            /* Work queue item if scheduled */
 152    volatile bool sd_msg_thread_done;  /* Set when Storage message thread terms */
 153    BSOCK *ua;                         /* User agent */
 154    JOB *job;                          /* Job resource */
 155    JOB *verify_job;                   /* Job resource of verify target job */
 156    alist *storage;                    /* Storage possibilities */
 157    STORE *store;                      /* Storage daemon selected */
 158    CLIENT *client;                    /* Client resource */
 159    POOL *pool;                        /* Pool resource */
 160    POOL *full_pool;                   /* Full backup pool resource */
 161    POOL *inc_pool;                    /* Incremental backup pool resource */
 162    POOL *dif_pool;                    /* Differential backup pool resource */
 163    FILESET *fileset;                  /* FileSet resource */
 164    CAT *catalog;                      /* Catalog resource */
 165    MSGS *messages;                    /* Default message handler */
 166    uint32_t SDJobFiles;               /* Number of files written, this job */
 167    uint64_t SDJobBytes;               /* Number of bytes processed this job */
 168    uint32_t SDErrors;                 /* Number of non-fatal errors */
 169    volatile int SDJobStatus;          /* Storage Job Status */
 170    volatile int FDJobStatus;          /* File daemon Job Status */
 171    uint32_t ExpectedFiles;            /* Expected restore files */
 172    B_DB *db;                          /* database pointer */
 173    uint32_t MediaId;                  /* DB record IDs associated with this job */
 174    uint32_t PoolId;                   /* Pool record id */
 175    FileId_t FileId;                   /* Last file id inserted */
 176    uint32_t FileIndex;                /* Last FileIndex processed */
 177    POOLMEM *fname;                    /* name to put into catalog */
 178    JOB_DBR jr;                        /* Job DB record for current job */
 179    JOB_DBR target_jr;                 /* target job */
 180    char FSCreateTime[MAX_TIME_LENGTH]; /* FileSet CreateTime as returned from DB */
 181    char since[MAX_TIME_LENGTH];       /* since time */
 182    uint32_t RestoreJobId;             /* Id specified by UA */
 183    POOLMEM *client_uname;             /* client uname */
 184    int replace;                       /* Replace option */
 185    int NumVols;                       /* Number of Volume used in pool */
 186    int reschedule_count;              /* Number of times rescheduled */
 187    bool spool_data;                   /* Spool data in SD */
 188    bool acquired_resource_locks;      /* set if resource locks acquired */
 189    bool term_wait_inited;             /* Set when cond var inited */
 190    bool fn_printed;                   /* printed filename */
 191    bool write_part_after_job;         /* Write part after job in SD */
 192    bool needs_sd;                     /* set if SD needed by Job */
 193    bool cloned;                       /* set if cloned */
 194 #endif /* DIRECTOR_DAEMON */
 195
 196
 197 #ifdef FILE_DAEMON
 198    /* File Daemon specific part of JCR */
 199    uint32_t num_files_examined;       /* files examined this job */
 200    POOLMEM *last_fname;               /* last file saved/verified */
 201    POOLMEM *acl_text;                 /* text of ACL for backup */
 202    /*********FIXME********* add missing files and files to be retried */
 203    int incremental;                   /* set if incremental for SINCE */
 204    time_t mtime;                      /* begin time for SINCE */
 205    int listing;                       /* job listing in estimate */
 206    long Ticket;                       /* Ticket */
 207    char *big_buf;                     /* I/O buffer */
 208    POOLMEM *compress_buf;             /* Compression buffer */
 209    int32_t compress_buf_size;         /* Length of compression buffer */
 210    int replace;                       /* Replace options */
 211    int buf_size;                      /* length of buffer */
 212    void *ff;                          /* Find Files packet */
 213    char stored_addr[MAX_NAME_LENGTH]; /* storage daemon address */
 214    uint32_t StartFile;
 215    uint32_t EndFile;
 216    uint32_t StartBlock;
 217    uint32_t EndBlock;
 218    pthread_t heartbeat_id;            /* id of heartbeat thread */
 219    volatile BSOCK *hb_bsock;          /* duped SD socket */
 220    POOLMEM *RunAfterJob;              /* Command to run after job */
 221    DIRRES* director;                  /* Director resource */
 222 #endif /* FILE_DAEMON */
 223
 224
 225 #ifdef STORAGE_DAEMON
 226    /* Storage Daemon specific part of JCR */
 227    JCR *next_dev;                     /* next JCR attached to device */
 228    JCR *prev_dev;                     /* previous JCR attached to device */
 229    pthread_cond_t job_start_wait;     /* Wait for FD to start Job */
 230    int type;
 231    DCR *dcr;                          /* device context record */
 232    alist *dcrs;                       /* list of dcrs open */
 233 // DEVRES *device;                    /* device resource to use */
 234    POOLMEM *job_name;                 /* base Job name (not unique) */
 235    POOLMEM *fileset_name;             /* FileSet */
 236    POOLMEM *fileset_md5;              /* MD5 for FileSet */
 237    VOL_LIST *VolList;                 /* list to read */
 238    int32_t NumVolumes;                /* number of volumes used */
 239    int32_t CurVolume;                 /* current volume number */
 240    int label_errors;                  /* count of label errors */
 241    bool session_opened;
 242    long Ticket;                       /* ticket for this job */
 243    bool ignore_label_errors;          /* ignore Volume label errors */
 244    bool spool_attributes;             /* set if spooling attributes */
 245    bool no_attributes;                /* set if no attributes wanted */
 246    bool spool_data;                   /* set to spool data */
 247    int CurVol;                        /* Current Volume count */
 248    DIRRES* director;                  /* Director resource */
 249    bool write_part_after_job;         /* Set to write part after job */
 250    bool NewVolEachJob;                /* Allow using new volume */
 251
 252    uint32_t FileId;                   /* Last file id inserted */
 253
 254    /* Parmaters for Open Read Session */
 255    BSR *bsr;                          /* Bootstrap record -- has everything */
 256    bool mount_next_volume;            /* set to cause next volume mount */
 257    uint32_t read_VolSessionId;
 258    uint32_t read_VolSessionTime;
 259    uint32_t read_StartFile;
 260    uint32_t read_EndFile;
 261    uint32_t read_StartBlock;
 262    uint32_t read_EndBlock;
 263    /* Device wait times */
 264    int min_wait;
 265    int max_wait;
 266    int max_num_wait;
 267    int wait_sec;
 268    int rem_wait_sec;
 269    int num_wait;
 270
 271 #endif /* STORAGE_DAEMON */
 272
 273 };
 274
 275
 276
 277 /*
 278  * Structure for all daemons that keeps some summary
 279  *  info on the last job run.
 280  */
 281 struct s_last_job {
 282    dlink link;
 283    int Errors;                        /* FD/SD errors */
 284    int JobType;
 285    int JobStatus;
 286    int JobLevel;
 287    uint32_t JobId;
 288    uint32_t VolSessionId;
 289    uint32_t VolSessionTime;
 290    uint32_t JobFiles;
 291    uint64_t JobBytes;
 292    time_t start_time;
 293    time_t end_time;
 294    char Job[MAX_NAME_LENGTH];
 295 };
 296
 297 extern struct s_last_job last_job;
 298 extern dlist *last_jobs;
 299
 300
 301 /* The following routines are found in lib/jcr.c */
 302 extern bool init_jcr_subsystem(void);
 303 extern JCR *new_jcr(int size, JCR_free_HANDLER *daemon_free_jcr);
 304 extern void free_locked_jcr(JCR *jcr);
 305 extern JCR *get_jcr_by_id(uint32_t JobId);
 306 extern JCR *get_jcr_by_session(uint32_t SessionId, uint32_t SessionTime);
 307 extern JCR *get_jcr_by_partial_name(char *Job);
 308 extern JCR *get_jcr_by_full_name(char *Job);
 309 extern JCR *get_next_jcr(JCR *jcr);
 310 extern void set_jcr_job_status(JCR *jcr, int JobStatus);
 311
 312 #ifdef TRACE_JCR_CHAIN
 313 extern void b_lock_jcr_chain(const char *filen, int line);
 314 extern void b_unlock_jcr_chain(const char *filen, int line);
 315 #define lock_jcr_chain() b_lock_jcr_chain(__FILE__, __LINE__);
 316 #define unlock_jcr_chain() b_unlock_jcr_chain(__FILE__, __LINE__);
 317 #else
 318 extern void lock_jcr_chain();
 319 extern void unlock_jcr_chain();
 320 #endif
 321
 322 #ifdef DEBUG
 323 extern void b_free_jcr(const char *file, int line, JCR *jcr);
 324 #define free_jcr(jcr) b_free_jcr(__FILE__, __LINE__, (jcr))
 325 #else
 326 extern void free_jcr(JCR *jcr);
 327 #endif
 328
 329 #endif /* __JCR_H_ */