]> git.sur5r.net Git - bacula/bacula/blob - bacula/src/jcr.h
More data spooling updates
[bacula/bacula] / bacula / src / jcr.h
1 /*
2  * Bacula JCR Structure definition for Daemons and the Library
3  *  This definition consists of a "Global" definition common
4  *  to all daemons and used by the library routines, and a
5  *  daemon specific part that is enabled with #defines.
6  *
7  * Kern Sibbald, Nov MM
8  *
9  *   Version $Id$
10  */
11
12 /*
13    Copyright (C) 2000-2004 Kern Sibbald and John Walker
14
15    This program is free software; you can redistribute it and/or
16    modify it under the terms of the GNU General Public License as
17    published by the Free Software Foundation; either version 2 of
18    the License, or (at your option) any later version.
19
20    This program is distributed in the hope that it will be useful,
21    but WITHOUT ANY WARRANTY; without even the implied warranty of
22    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
23    General Public License for more details.
24
25    You should have received a copy of the GNU General Public
26    License along with this program; if not, write to the Free
27    Software Foundation, Inc., 59 Temple Place - Suite 330, Boston,
28    MA 02111-1307, USA.
29
30  */
31  
32 #ifndef __JCR_H_
33 #define __JCR_H_ 1
34
35 /* Backup/Verify level code. These are stored in the DB */
36 #define L_FULL                   'F'  /* Full backup */
37 #define L_INCREMENTAL            'I'  /* since last backup */
38 #define L_DIFFERENTIAL           'D'  /* since last full backup */
39 #define L_SINCE                  'S'
40 #define L_VERIFY_CATALOG         'C'  /* verify from catalog */
41 #define L_VERIFY_INIT            'V'  /* verify save (init DB) */
42 #define L_VERIFY_VOLUME_TO_CATALOG 'O'  /* verify Volume to catalog entries */
43 #define L_VERIFY_DISK_TO_CATALOG 'd'  /* verify Disk attributes to catalog */
44 #define L_VERIFY_DATA            'A'  /* verify data on volume */
45 #define L_BASE                   'B'  /* Base level job */
46 #define L_NONE                   ' '  /* None, for Restore and Admin */
47
48
49 /* Job Types. These are stored in the DB */
50 #define JT_BACKUP                'B'  /* Backup Job */
51 #define JT_VERIFY                'V'  /* Verify Job */
52 #define JT_RESTORE               'R'  /* Restore Job */
53 #define JT_CONSOLE               'C'  /* console program */
54 #define JT_SYSTEM                'S'  /* internal system "job" */
55 #define JT_ADMIN                 'D'  /* admin job */
56 #define JT_ARCHIVE               'A'
57
58 /* Job Status. Some of these are stored in the DB */
59 #define JS_Created               'C'  /* created but not yet running */
60 #define JS_Running               'R'  /* running */
61 #define JS_Blocked               'B'  /* blocked */
62 #define JS_Terminated            'T'  /* terminated normally */
63 #define JS_ErrorTerminated       'E'  /* Job terminated in error */
64 #define JS_Error                 'e'  /* Non-fatal error */
65 #define JS_FatalError            'f'  /* Fatal error */
66 #define JS_Differences           'D'  /* Verify differences */
67 #define JS_Canceled              'A'  /* canceled by user */
68 #define JS_WaitFD                'F'  /* waiting on File daemon */
69 #define JS_WaitSD                'S'  /* waiting on the Storage daemon */
70 #define JS_WaitMedia             'm'  /* waiting for new media */
71 #define JS_WaitMount             'M'  /* waiting for Mount */
72 #define JS_WaitStoreRes          's'  /* Waiting for storage resource */
73 #define JS_WaitJobRes            'j'  /* Waiting for job resource */
74 #define JS_WaitClientRes         'c'  /* Waiting for Client resource */
75 #define JS_WaitMaxJobs           'd'  /* Waiting for maximum jobs */
76 #define JS_WaitStartTime         't'  /* Waiting for start time */
77 #define JS_WaitPriority          'p'  /* Waiting for higher priority jobs to finish */
78
79 #define job_canceled(jcr) \
80   (jcr->JobStatus == JS_Canceled || \
81    jcr->JobStatus == JS_ErrorTerminated || \
82    jcr->JobStatus == JS_FatalError)
83
84 #define foreach_jcr(jcr) \
85    for ((jcr)=NULL; ((jcr)=get_next_jcr(jcr)); ) 
86
87
88
89 struct JCR;
90 typedef void (JCR_free_HANDLER)(JCR *jcr);
91
92 /* Job Control Record (JCR) */
93 struct JCR {
94    /* Global part of JCR common to all daemons */
95    JCR *next;
96    JCR *prev;
97    volatile int use_count;            /* use count */
98    pthread_t my_thread_id;            /* id of thread controlling jcr */
99    pthread_mutex_t mutex;             /* jcr mutex */
100    BSOCK *dir_bsock;                  /* Director bsock or NULL if we are him */
101    BSOCK *store_bsock;                /* Storage connection socket */
102    BSOCK *file_bsock;                 /* File daemon connection socket */
103    JCR_free_HANDLER *daemon_free_jcr; /* Local free routine */
104    dlist *msg_queue;                  /* Queued messages */
105    alist job_end_push;                /* Job end pushed calls */
106    int reload_id;                     /* SIGHUP reload table id */
107    bool dequeuing;                    /* dequeuing messages */
108    POOLMEM *errmsg;                   /* edited error message */
109    char Job[MAX_NAME_LENGTH];         /* Unique name of this Job */
110    uint32_t JobId;                    /* Director's JobId */
111    uint32_t VolSessionId;
112    uint32_t VolSessionTime;
113    uint32_t JobFiles;                 /* Number of files written, this job */
114    uint32_t JobErrors;                /* */
115    uint64_t JobBytes;                 /* Number of bytes processed this job */
116    uint64_t ReadBytes;                /* Bytes read -- before compression */
117    uint32_t Errors;                   /* Number of non-fatal errors */
118    volatile int JobStatus;            /* ready, running, blocked, terminated */ 
119    int JobType;                       /* backup, restore, verify ... */
120    int JobLevel;                      /* Job level */
121    int JobPriority;                   /* Job priority */
122    int authenticated;                 /* set when client authenticated */
123    time_t sched_time;                 /* job schedule time, i.e. when it should start */
124    time_t start_time;                 /* when job actually started */
125    time_t run_time;                   /* used for computing speed */
126    time_t end_time;                   /* job end time */
127    POOLMEM *VolumeName;               /* Volume name desired -- pool_memory */
128    POOLMEM *client_name;              /* client name */
129    POOLMEM *RestoreBootstrap;         /* Bootstrap file to restore */
130    char *sd_auth_key;                 /* SD auth key */
131    MSGS *jcr_msgs;                    /* Copy of message resource -- actually used */
132    uint32_t ClientId;                 /* Client associated with Job */
133    char *where;                       /* prefix to restore files to */
134    bool prefix_links;                 /* Prefix links with Where path */
135    bool gui;                          /* set if gui using console */
136    int cached_pnl;                    /* cached path length */
137    POOLMEM *cached_path;              /* cached path */
138
139    /* Daemon specific part of JCR */
140    /* This should be empty in the library */
141
142 #ifdef DIRECTOR_DAEMON
143    /* Director Daemon specific part of JCR */
144    pthread_t SD_msg_chan;             /* Message channel thread id */
145    pthread_cond_t term_wait;          /* Wait for job termination */
146    workq_ele_t *work_item;            /* Work queue item if scheduled */
147    volatile bool sd_msg_thread_done;  /* Set when Storage message thread terms */
148    BSOCK *ua;                         /* User agent */
149    JOB *job;                          /* Job resource */
150    STORE *store;                      /* Storage resource */
151    CLIENT *client;                    /* Client resource */
152    POOL *pool;                        /* Pool resource */
153    POOL *full_pool;                   /* Full backup pool resource */
154    POOL *inc_pool;                    /* Incremental backup pool resource */
155    POOL *dif_pool;                    /* Differential backup pool resource */
156    FILESET *fileset;                  /* FileSet resource */
157    CAT *catalog;                      /* Catalog resource */
158    MSGS *messages;                    /* Default message handler */
159    uint32_t SDJobFiles;               /* Number of files written, this job */
160    uint64_t SDJobBytes;               /* Number of bytes processed this job */
161    uint32_t SDErrors;                 /* Number of non-fatal errors */
162    volatile int SDJobStatus;          /* Storage Job Status */
163    volatile int FDJobStatus;          /* File daemon Job Status */
164    uint32_t ExpectedFiles;            /* Expected restore files */
165    B_DB *db;                          /* database pointer */
166    uint32_t MediaId;                  /* DB record IDs associated with this job */
167    uint32_t PoolId;                   /* Pool record id */
168    FileId_t FileId;                   /* Last file id inserted */
169    uint32_t FileIndex;                /* Last FileIndex processed */
170    POOLMEM *fname;                    /* name to put into catalog */
171    int fn_printed;                    /* printed filename */
172    POOLMEM *stime;                    /* start time for incremental/differential */
173    JOB_DBR jr;                        /* Job DB record for current job */
174    JOB_DBR *verify_jr;                /* Pointer to target job */
175    uint32_t RestoreJobId;             /* Id specified by UA */
176    POOLMEM *client_uname;             /* client uname */ 
177    int replace;                       /* Replace option */
178    bool acquired_resource_locks;      /* set if resource locks acquired */
179    int NumVols;                       /* Number of Volume used in pool */
180    int reschedule_count;              /* Number of times rescheduled */
181    bool spool_data;                   /* Spool data in SD */
182 #endif /* DIRECTOR_DAEMON */
183
184
185 #ifdef FILE_DAEMON
186    /* File Daemon specific part of JCR */
187    uint32_t num_files_examined;       /* files examined this job */
188    POOLMEM *last_fname;               /* last file saved/verified */
189    /*********FIXME********* add missing files and files to be retried */
190    int incremental;                   /* set if incremental for SINCE */
191    time_t mtime;                      /* begin time for SINCE */
192    int listing;                       /* job listing in estimate */
193    long Ticket;                       /* Ticket */
194    char *big_buf;                     /* I/O buffer */
195    POOLMEM *compress_buf;             /* Compression buffer */
196    int32_t compress_buf_size;         /* Length of compression buffer */
197    int replace;                       /* Replace options */
198    int buf_size;                      /* length of buffer */
199    void *ff;                          /* Find Files packet */
200    char stored_addr[MAX_NAME_LENGTH]; /* storage daemon address */
201    uint32_t StartFile;
202    uint32_t EndFile;
203    uint32_t StartBlock;
204    uint32_t EndBlock;
205    pthread_t heartbeat_id;            /* id of heartbeat thread */
206    volatile BSOCK *hb_bsock;          /* duped SD socket */
207    POOLMEM *RunAfterJob;              /* Command to run after job */
208 #endif /* FILE_DAEMON */
209
210
211 #ifdef STORAGE_DAEMON
212    /* Storage Daemon specific part of JCR */
213    JCR *next_dev;                     /* next JCR attached to device */
214    JCR *prev_dev;                     /* previous JCR attached to device */
215    pthread_cond_t job_start_wait;     /* Wait for FD to start Job */
216    int type;
217    DCR *dcr;                          /* device context record */
218    DEVRES *device;                    /* device resource to use */
219    VOLUME_CAT_INFO VolCatInfo;        /* Catalog info for desired volume */
220    POOLMEM *job_name;                 /* base Job name (not unique) */
221    POOLMEM *fileset_name;             /* FileSet */
222    POOLMEM *fileset_md5;              /* MD5 for FileSet */
223    POOLMEM *pool_name;                /* pool to use */
224    POOLMEM *pool_type;                /* pool type to use */
225    POOLMEM *media_type;               /* media type */
226    POOLMEM *dev_name;                 /* device name */
227    VOL_LIST *VolList;                 /* list to read */
228    int32_t NumVolumes;                /* number of volumes used */
229    int32_t CurVolume;                 /* current volume number */
230    int label_status;                  /* device volume label status */
231    int label_errors;                  /* count of label errors */
232    bool session_opened;
233    long Ticket;                       /* ticket for this job */
234    bool ignore_label_errors;          /* ignore Volume label errors */
235    bool spool_attributes;             /* set if spooling attributes */
236    bool no_attributes;                /* set if no attributes wanted */
237    bool spool_data;                   /* set to spool data */
238    int CurVol;                        /* Current Volume count */
239
240    uint32_t FileId;                   /* Last file id inserted */
241
242    /* Parmaters for Open Read Session */
243    BSR *bsr;                          /* Bootstrap record -- has everything */
244    uint32_t read_VolSessionId;
245    uint32_t read_VolSessionTime;
246    uint32_t read_StartFile;
247    uint32_t read_EndFile;
248    uint32_t read_StartBlock;
249    uint32_t read_EndBlock;
250
251 #endif /* STORAGE_DAEMON */
252
253 }; 
254
255
256
257 /* 
258  * Structure for all daemons that keeps some summary
259  *  info on the last job run.
260  */
261 struct s_last_job {
262    dlink link;
263    int xNumJobs;                      /* no longer used */
264    int JobType;
265    int JobStatus;
266    int JobLevel;
267    uint32_t JobId;
268    uint32_t VolSessionId;
269    uint32_t VolSessionTime;
270    uint32_t JobFiles;
271    uint64_t JobBytes;
272    time_t start_time;
273    time_t end_time;
274    char Job[MAX_NAME_LENGTH];
275 };
276
277 extern struct s_last_job last_job;               
278 extern dlist *last_jobs;
279
280
281 /* The following routines are found in lib/jcr.c */
282 extern bool init_jcr_subsystem(void);
283 extern JCR *new_jcr(int size, JCR_free_HANDLER *daemon_free_jcr);
284 extern void free_locked_jcr(JCR *jcr);
285 extern JCR *get_jcr_by_id(uint32_t JobId);
286 extern JCR *get_jcr_by_session(uint32_t SessionId, uint32_t SessionTime);
287 extern JCR *get_jcr_by_partial_name(char *Job);
288 extern JCR *get_jcr_by_full_name(char *Job);
289 extern JCR *get_next_jcr(JCR *jcr);
290 extern void lock_jcr_chain();
291 extern void unlock_jcr_chain();
292 extern void set_jcr_job_status(JCR *jcr, int JobStatus);
293
294 #ifdef DEBUG
295 extern void b_free_jcr(const char *file, int line, JCR *jcr);
296 #define free_jcr(jcr) b_free_jcr(__FILE__, __LINE__, (jcr))
297 #else
298 extern void free_jcr(JCR *jcr);
299 #endif
300
301 #endif /* __JCR_H_ */