]> git.sur5r.net Git - bacula/bacula/blob - bacula/src/jcr.h
Job end push resource resturcturing
[bacula/bacula] / bacula / src / jcr.h
1 /*
2  * Bacula JCR Structure definition for Daemons and the Library
3  *  This definition consists of a "Global" definition common
4  *  to all daemons and used by the library routines, and a
5  *  daemon specific part that is enabled with #defines.
6  *
7  * Kern Sibbald, Nov MM
8  *
9  *   Version $Id$
10  */
11
12 /*
13    Copyright (C) 2000-2004 Kern Sibbald and John Walker
14
15    This program is free software; you can redistribute it and/or
16    modify it under the terms of the GNU General Public License as
17    published by the Free Software Foundation; either version 2 of
18    the License, or (at your option) any later version.
19
20    This program is distributed in the hope that it will be useful,
21    but WITHOUT ANY WARRANTY; without even the implied warranty of
22    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
23    General Public License for more details.
24
25    You should have received a copy of the GNU General Public
26    License along with this program; if not, write to the Free
27    Software Foundation, Inc., 59 Temple Place - Suite 330, Boston,
28    MA 02111-1307, USA.
29
30  */
31  
32 #ifndef __JCR_H_
33 #define __JCR_H_ 1
34
35 /* Backup/Verify level code. These are stored in the DB */
36 #define L_FULL                   'F'  /* Full backup */
37 #define L_INCREMENTAL            'I'  /* since last backup */
38 #define L_DIFFERENTIAL           'D'  /* since last full backup */
39 #define L_SINCE                  'S'
40 #define L_VERIFY_CATALOG         'C'  /* verify from catalog */
41 #define L_VERIFY_INIT            'V'  /* verify save (init DB) */
42 #define L_VERIFY_VOLUME_TO_CATALOG 'O'  /* verify Volume to catalog entries */
43 #define L_VERIFY_DISK_TO_CATALOG 'd'  /* verify Disk attributes to catalog */
44 #define L_VERIFY_DATA            'A'  /* verify data on volume */
45 #define L_BASE                   'B'  /* Base level job */
46 #define L_NONE                   ' '  /* None, for Restore and Admin */
47
48
49 /* Job Types. These are stored in the DB */
50 #define JT_BACKUP                'B'  /* Backup Job */
51 #define JT_VERIFY                'V'  /* Verify Job */
52 #define JT_RESTORE               'R'  /* Restore Job */
53 #define JT_CONSOLE               'C'  /* console program */
54 #define JT_SYSTEM                'S'  /* internal system "job" */
55 #define JT_ADMIN                 'D'  /* admin job */
56 #define JT_ARCHIVE               'A'
57
58 /* Job Status. Some of these are stored in the DB */
59 #define JS_Created               'C'  /* created but not yet running */
60 #define JS_Running               'R'  /* running */
61 #define JS_Blocked               'B'  /* blocked */
62 #define JS_Terminated            'T'  /* terminated normally */
63 #define JS_ErrorTerminated       'E'  /* Job terminated in error */
64 #define JS_Error                 'e'  /* Non-fatal error */
65 #define JS_FatalError            'f'  /* Fatal error */
66 #define JS_Differences           'D'  /* Verify differences */
67 #define JS_Canceled              'A'  /* canceled by user */
68 #define JS_WaitFD                'F'  /* waiting on File daemon */
69 #define JS_WaitSD                'S'  /* waiting on the Storage daemon */
70 #define JS_WaitMedia             'm'  /* waiting for new media */
71 #define JS_WaitMount             'M'  /* waiting for Mount */
72 #define JS_WaitStoreRes          's'  /* Waiting for storage resource */
73 #define JS_WaitJobRes            'j'  /* Waiting for job resource */
74 #define JS_WaitClientRes         'c'  /* Waiting for Client resource */
75 #define JS_WaitMaxJobs           'd'  /* Waiting for maximum jobs */
76 #define JS_WaitStartTime         't'  /* Waiting for start time */
77 #define JS_WaitPriority          'p'  /* Waiting for higher priority jobs to finish */
78
79 #define job_canceled(jcr) \
80   (jcr->JobStatus == JS_Canceled || \
81    jcr->JobStatus == JS_ErrorTerminated || \
82    jcr->JobStatus == JS_FatalError)
83
84 #define foreach_jcr(jcr) \
85    for ((jcr)=NULL; ((jcr)=get_next_jcr(jcr)); ) 
86
87
88
89 struct JCR;
90 typedef void (JCR_free_HANDLER)(JCR *jcr);
91
92 /* Job Control Record (JCR) */
93 struct JCR {
94    /* Global part of JCR common to all daemons */
95    JCR *next;
96    JCR *prev;
97    volatile int use_count;            /* use count */
98    pthread_t my_thread_id;            /* id of thread controlling jcr */
99    pthread_mutex_t mutex;             /* jcr mutex */
100    BSOCK *dir_bsock;                  /* Director bsock or NULL if we are him */
101    BSOCK *store_bsock;                /* Storage connection socket */
102    BSOCK *file_bsock;                 /* File daemon connection socket */
103    JCR_free_HANDLER *daemon_free_jcr; /* Local free routine */
104    dlist *msg_queue;                  /* Queued messages */
105    alist job_end_push;                /* Job end pushed calls */
106    int restart_count;                 /* SIGHUP restart count */
107    bool dequeuing;                    /* dequeuing messages */
108    POOLMEM *errmsg;                   /* edited error message */
109    char Job[MAX_NAME_LENGTH];         /* Unique name of this Job */
110    uint32_t JobId;                    /* Director's JobId */
111    uint32_t VolSessionId;
112    uint32_t VolSessionTime;
113    uint32_t JobFiles;                 /* Number of files written, this job */
114    uint32_t JobErrors;                /* */
115    uint64_t JobBytes;                 /* Number of bytes processed this job */
116    uint64_t ReadBytes;                /* Bytes read -- before compression */
117    uint32_t Errors;                   /* Number of non-fatal errors */
118    volatile int JobStatus;            /* ready, running, blocked, terminated */ 
119    int JobType;                       /* backup, restore, verify ... */
120    int JobLevel;                      /* Job level */
121    int JobPriority;                   /* Job priority */
122    int authenticated;                 /* set when client authenticated */
123    time_t sched_time;                 /* job schedule time, i.e. when it should start */
124    time_t start_time;                 /* when job actually started */
125    time_t run_time;                   /* used for computing speed */
126    time_t end_time;                   /* job end time */
127    POOLMEM *VolumeName;               /* Volume name desired -- pool_memory */
128    POOLMEM *client_name;              /* client name */
129    POOLMEM *RestoreBootstrap;         /* Bootstrap file to restore */
130    char *sd_auth_key;                 /* SD auth key */
131    MSGS *jcr_msgs;                    /* Copy of message resource -- actually used */
132    uint32_t ClientId;                 /* Client associated with Job */
133    char *where;                       /* prefix to restore files to */
134    bool prefix_links;                 /* Prefix links with Where path */
135    int cached_pnl;                    /* cached path length */
136    POOLMEM *cached_path;              /* cached path */
137
138    /* Daemon specific part of JCR */
139    /* This should be empty in the library */
140
141 #ifdef DIRECTOR_DAEMON
142    /* Director Daemon specific part of JCR */
143    pthread_t SD_msg_chan;             /* Message channel thread id */
144    pthread_cond_t term_wait;          /* Wait for job termination */
145    workq_ele_t *work_item;            /* Work queue item if scheduled */
146    volatile bool sd_msg_thread_done;  /* Set when Storage message thread terms */
147    BSOCK *ua;                         /* User agent */
148    JOB *job;                          /* Job resource */
149    STORE *store;                      /* Storage resource */
150    CLIENT *client;                    /* Client resource */
151    POOL *pool;                        /* Pool resource */
152    POOL *full_pool;                   /* Full backup pool resource */
153    POOL *inc_pool;                    /* Incremental backup pool resource */
154    POOL *dif_pool;                    /* Differential backup pool resource */
155    FILESET *fileset;                  /* FileSet resource */
156    CAT *catalog;                      /* Catalog resource */
157    MSGS *messages;                    /* Default message handler */
158    uint32_t SDJobFiles;               /* Number of files written, this job */
159    uint64_t SDJobBytes;               /* Number of bytes processed this job */
160    uint32_t SDErrors;                 /* Number of non-fatal errors */
161    volatile int SDJobStatus;          /* Storage Job Status */
162    volatile int FDJobStatus;          /* File daemon Job Status */
163    B_DB *db;                          /* database pointer */
164    uint32_t MediaId;                  /* DB record IDs associated with this job */
165    uint32_t PoolId;                   /* Pool record id */
166    FileId_t FileId;                   /* Last file id inserted */
167    uint32_t FileIndex;                /* Last FileIndex processed */
168    POOLMEM *fname;                    /* name to put into catalog */
169    int fn_printed;                    /* printed filename */
170    POOLMEM *stime;                    /* start time for incremental/differential */
171    JOB_DBR jr;                        /* Job DB record for current job */
172    JOB_DBR *verify_jr;                /* Pointer to target job */
173    uint32_t RestoreJobId;             /* Id specified by UA */
174    POOLMEM *client_uname;             /* client uname */ 
175    int replace;                       /* Replace option */
176    bool acquired_resource_locks;      /* set if resource locks acquired */
177    int NumVols;                       /* Number of Volume used in pool */
178    int reschedule_count;              /* Number of times rescheduled */
179 #endif /* DIRECTOR_DAEMON */
180
181
182 #ifdef FILE_DAEMON
183    /* File Daemon specific part of JCR */
184    uint32_t num_files_examined;       /* files examined this job */
185    POOLMEM *last_fname;               /* last file saved/verified */
186    /*********FIXME********* add missing files and files to be retried */
187    int incremental;                   /* set if incremental for SINCE */
188    time_t mtime;                      /* begin time for SINCE */
189    int listing;                       /* job listing in estimate */
190    long Ticket;                       /* Ticket */
191    char *big_buf;                     /* I/O buffer */
192    POOLMEM *compress_buf;             /* Compression buffer */
193    int32_t compress_buf_size;         /* Length of compression buffer */
194    int replace;                       /* Replace options */
195    int buf_size;                      /* length of buffer */
196    void *ff;                          /* Find Files packet */
197    char stored_addr[MAX_NAME_LENGTH]; /* storage daemon address */
198    uint32_t StartFile;
199    uint32_t EndFile;
200    uint32_t StartBlock;
201    uint32_t EndBlock;
202    pthread_t heartbeat_id;            /* id of heartbeat thread */
203    volatile BSOCK *hb_bsock;          /* duped SD socket */
204    POOLMEM *RunAfterJob;              /* Command to run after job */
205 #endif /* FILE_DAEMON */
206
207
208 #ifdef STORAGE_DAEMON
209    /* Storage Daemon specific part of JCR */
210    JCR *next_dev;                     /* next JCR attached to device */
211    JCR *prev_dev;                     /* previous JCR attached to device */
212    pthread_cond_t job_start_wait;     /* Wait for FD to start Job */
213    int type;
214    DEVRES *device;                    /* device to use */
215    VOLUME_CAT_INFO VolCatInfo;        /* Catalog info for desired volume */
216    POOLMEM *job_name;                 /* base Job name (not unique) */
217    POOLMEM *fileset_name;             /* FileSet */
218    POOLMEM *fileset_md5;              /* MD5 for FileSet */
219    POOLMEM *pool_name;                /* pool to use */
220    POOLMEM *pool_type;                /* pool type to use */
221    POOLMEM *media_type;               /* media type */
222    POOLMEM *dev_name;                 /* device name */
223    VOL_LIST *VolList;                 /* list to read */
224    int32_t NumVolumes;                /* number of volumes used */
225    int32_t CurVolume;                 /* current volume number */
226    int spool_attributes;              /* set if spooling attributes */
227    int no_attributes;                 /* set if no attributes wanted */
228    int label_status;                  /* device volume label status */
229    int label_errors;                  /* count of label errors */
230    int session_opened;
231    DEV_RECORD rec;                    /* Read/Write record */
232    long Ticket;                       /* ticket for this job */
233    uint32_t VolFirstIndex;            /* First file index this Volume */
234    uint32_t VolLastIndex;             /* Last file index this Volume */
235    uint32_t FileIndex;                /* Current File Index */
236    uint32_t EndFile;                  /* End file written */
237    uint32_t StartFile;                /* Start write file */
238    uint32_t StartBlock;               /* Start write block */
239    uint32_t EndBlock;                 /* Ending block written */
240    bool NewVol;                       /* set when new Volume mounted */
241    bool WroteVol;                     /* set when Volume written */
242    bool NewFile;                      /* set when EOF written */
243    bool ignore_label_errors;          /* ignore Volume label errors */
244    int CurVol;                        /* Current Volume count */
245
246    uint32_t FileId;                   /* Last file id inserted */
247
248    /* Parmaters for Open Read Session */
249    BSR *bsr;                          /* Bootstrap record -- has everything */
250    uint32_t read_VolSessionId;
251    uint32_t read_VolSessionTime;
252    uint32_t read_StartFile;
253    uint32_t read_EndFile;
254    uint32_t read_StartBlock;
255    uint32_t read_EndBlock;
256
257 #endif /* STORAGE_DAEMON */
258
259 }; 
260
261
262
263 /* 
264  * Structure for all daemons that keeps some summary
265  *  info on the last job run.
266  */
267 struct s_last_job {
268    dlink link;
269    int xNumJobs;                      /* no longer used */
270    int JobType;
271    int JobStatus;
272    int JobLevel;
273    uint32_t JobId;
274    uint32_t VolSessionId;
275    uint32_t VolSessionTime;
276    uint32_t JobFiles;
277    uint64_t JobBytes;
278    time_t start_time;
279    time_t end_time;
280    char Job[MAX_NAME_LENGTH];
281 };
282
283 extern struct s_last_job last_job;               
284 extern dlist *last_jobs;
285
286
287 /* The following routines are found in lib/jcr.c */
288 extern bool init_jcr_subsystem(void);
289 extern JCR *new_jcr(int size, JCR_free_HANDLER *daemon_free_jcr);
290 extern void free_locked_jcr(JCR *jcr);
291 extern JCR *get_jcr_by_id(uint32_t JobId);
292 extern JCR *get_jcr_by_session(uint32_t SessionId, uint32_t SessionTime);
293 extern JCR *get_jcr_by_partial_name(char *Job);
294 extern JCR *get_jcr_by_full_name(char *Job);
295 extern JCR *get_next_jcr(JCR *jcr);
296 extern void lock_jcr_chain();
297 extern void unlock_jcr_chain();
298 extern void set_jcr_job_status(JCR *jcr, int JobStatus);
299
300 #ifdef DEBUG
301 extern void b_free_jcr(const char *file, int line, JCR *jcr);
302 #define free_jcr(jcr) b_free_jcr(__FILE__, __LINE__, (jcr))
303 #else
304 extern void free_jcr(JCR *jcr);
305 #endif
306
307 #endif /* __JCR_H_ */