]> git.sur5r.net Git - bacula/bacula/blob - bacula/src/filed/restore.c
Big reorganization of restore code into lib/attr.c
[bacula/bacula] / bacula / src / filed / restore.c
1 /*
2  *  Bacula File Daemon  restore.c Restorefiles.
3  *
4  *    Kern Sibbald, November MM
5  *
6  *   Version $Id$
7  *
8  */
9 /*
10    Copyright (C) 2000-2003 Kern Sibbald and John Walker
11
12    This program is free software; you can redistribute it and/or
13    modify it under the terms of the GNU General Public License as
14    published by the Free Software Foundation; either version 2 of
15    the License, or (at your option) any later version.
16
17    This program is distributed in the hope that it will be useful,
18    but WITHOUT ANY WARRANTY; without even the implied warranty of
19    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
20    General Public License for more details.
21
22    You should have received a copy of the GNU General Public
23    License along with this program; if not, write to the Free
24    Software Foundation, Inc., 59 Temple Place - Suite 330, Boston,
25    MA 02111-1307, USA.
26
27  */
28
29 #include "bacula.h"
30 #include "filed.h"
31
32 /* Data received from Storage Daemon */
33 static char rec_header[] = "rechdr %ld %ld %ld %ld %ld";
34
35 /* Forward referenced functions */
36
37 #define RETRY 10                      /* retry wait time */
38
39 /* 
40  * Restore the requested files.
41  * 
42  */
43 void do_restore(JCR *jcr)
44 {
45    int wherelen;
46    BSOCK *sd;
47    int32_t stream;
48    uint32_t size;
49    uint32_t VolSessionId, VolSessionTime;
50    int32_t file_index;
51    int extract = FALSE;
52    BFILE bfd;
53    int stat;
54    uint32_t total = 0;                /* Job total but only 32 bits for debug */
55    char *wbuf;                        /* write buffer */
56    uint32_t wsize;                    /* write size */
57    uint64_t fileAddr = 0;             /* file write address */
58    int non_support_data = 0;
59    int non_support_attr = 0;
60    int prog_name_msg = 0;
61    ATTR *attr;
62    
63    wherelen = strlen(jcr->where);
64
65    binit(&bfd);
66    sd = jcr->store_bsock;
67    set_jcr_job_status(jcr, JS_Running);
68
69    if (!bnet_set_buffer_size(sd, MAX_NETWORK_BUFFER_SIZE, BNET_SETBUF_READ)) {
70       set_jcr_job_status(jcr, JS_ErrorTerminated);
71       return;
72    }
73    jcr->buf_size = sd->msglen;
74
75    attr = new_attr();
76
77 #ifdef HAVE_LIBZ
78    uint32_t compress_buf_size = jcr->buf_size + 12 + ((jcr->buf_size+999) / 1000) + 100;
79    jcr->compress_buf = (char *)bmalloc(compress_buf_size);
80 #endif
81
82    /* 
83     * Get a record from the Storage daemon. We are guaranteed to 
84     *   receive records in the following order:
85     *   1. Stream record header
86     *   2. Stream data
87     *        a. Attributes (Unix or Win32)
88     *    or  b. File data for the file
89     *    or  c. Possibly MD5 or SHA1 record
90     *   3. Repeat step 1
91     */
92    while (bget_msg(sd) >= 0 && !job_canceled(jcr)) {
93       /*
94        * First we expect a Stream Record Header 
95        */
96       if (sscanf(sd->msg, rec_header, &VolSessionId, &VolSessionTime, &file_index,
97           &stream, &size) != 5) {
98          Jmsg1(jcr, M_FATAL, 0, _("Record header scan error: %s\n"), sd->msg);
99          goto bail_out;
100       }
101       Dmsg2(30, "Got hdr: FilInx=%d Stream=%d.\n", file_index, stream);
102
103       /* 
104        * Now we expect the Stream Data
105        */
106       if (bget_msg(sd) < 0) {
107          Jmsg1(jcr, M_FATAL, 0, _("Data record error. ERR=%s\n"), bnet_strerror(sd));
108          goto bail_out;
109       }
110       if (size != (uint32_t)sd->msglen) {
111          Jmsg2(jcr, M_FATAL, 0, _("Actual data size %d not same as header %d\n"), sd->msglen, size);
112          goto bail_out;
113       }
114       Dmsg1(30, "Got stream data, len=%d\n", sd->msglen);
115
116       /* File Attributes stream */
117       switch (stream) {
118       case STREAM_UNIX_ATTRIBUTES:
119       case STREAM_UNIX_ATTRIBUTES_EX:
120          uint32_t LinkFI;
121
122          Dmsg1(30, "Stream=Unix Attributes. extract=%d\n", extract);
123          /* If extracting, it was from previous stream, so
124           * close the output file.
125           */
126          if (extract) {
127             if (!is_bopen(&bfd)) {
128                Jmsg0(jcr, M_ERROR, 0, _("Logic error output file should be open\n"));
129             }
130             set_attributes(jcr, attr, &bfd);
131             extract = FALSE;
132             Dmsg0(30, "Stop extracting.\n");
133          }
134
135          if (!unpack_attributes_record(jcr, stream, sd->msg, attr)) {
136             goto bail_out;
137          }
138          if (file_index != attr->file_index) {
139             Jmsg(jcr, M_FATAL, 0, _("Record header file index %ld not equal record index %ld\n"),
140                  file_index, attr->file_index);
141             Dmsg0(100, "File index error\n");
142             goto bail_out;
143          }
144             
145          Dmsg3(200, "File %s\nattrib=%s\nattribsEx=%s\n", attr->fname, 
146                attr->attr, attr->attrEx);
147
148          decode_stat(attr->attr, &attr->statp, &LinkFI);
149
150          build_attr_output_fnames(jcr, attr);
151
152          jcr->num_files_examined++;
153
154          Dmsg1(30, "Outfile=%s\n", attr->ofname);
155          extract = FALSE;
156          stat = create_file(jcr, attr, &bfd, jcr->replace);
157          switch (stat) {
158          case CF_ERROR:
159          case CF_SKIP:
160             break;
161          case CF_EXTRACT:
162             extract = TRUE;
163             P(jcr->mutex);
164             pm_strcpy(&jcr->last_fname, attr->ofname);
165             V(jcr->mutex);
166             jcr->JobFiles++;
167             fileAddr = 0;
168             print_ls_output(jcr, attr);
169             /* Set attributes after file extracted */
170             break;
171          case CF_CREATED:
172             P(jcr->mutex);
173             pm_strcpy(&jcr->last_fname, attr->ofname);
174             V(jcr->mutex);
175             jcr->JobFiles++;
176             fileAddr = 0;
177             print_ls_output(jcr, attr);
178             /* set attributes now because file will not be extracted */
179             set_attributes(jcr, attr, &bfd);
180             break;
181          }  
182          break;
183
184       /* Windows Backup data stream */
185       case STREAM_WIN32_DATA:  
186          if (!is_win32_backup()) {
187             if (!non_support_data) {
188                Jmsg(jcr, M_ERROR, 0, _("Win32 backup data not supported on this Client.\n"));
189             }
190             extract = FALSE;
191             non_support_data++;
192             continue;
193          }
194          goto extract_data;
195
196       /* Data stream */
197       case STREAM_FILE_DATA:
198       case STREAM_SPARSE_DATA:  
199
200 extract_data:
201          if (extract) {
202             if (stream == STREAM_SPARSE_DATA) {
203                ser_declare;
204                uint64_t faddr;
205                char ec1[50];
206
207                wbuf = sd->msg + SPARSE_FADDR_SIZE;
208                wsize = sd->msglen - SPARSE_FADDR_SIZE;
209                ser_begin(sd->msg, SPARSE_FADDR_SIZE);
210                unser_uint64(faddr);
211                if (fileAddr != faddr) {
212                   fileAddr = faddr;
213                   if (blseek(&bfd, (off_t)fileAddr, SEEK_SET) < 0) {
214                      Jmsg3(jcr, M_ERROR, 0, _("Seek to %s error on %s: ERR=%s\n"),
215                          edit_uint64(fileAddr, ec1), attr->ofname, berror(&bfd));
216                      extract = FALSE;
217                      continue;
218                   }
219                }
220             } else {
221                wbuf = sd->msg;
222                wsize = sd->msglen;
223             }
224             Dmsg2(30, "Write %u bytes, total before write=%u\n", wsize, total);
225             if ((uint32_t)bwrite(&bfd, wbuf, wsize) != wsize) {
226                Dmsg0(0, "===Write error===\n");
227                Jmsg2(jcr, M_ERROR, 0, _("Write error on %s: ERR=%s\n"), attr->ofname, berror(&bfd));
228                extract = FALSE;
229                continue;
230             } 
231             total += wsize;
232             jcr->JobBytes += wsize;
233             jcr->ReadBytes += wsize;
234             fileAddr += wsize;
235          }
236          break;
237
238       /* Windows Backup GZIP data stream */
239       case STREAM_WIN32_GZIP_DATA:  
240          if (!is_win32_backup()) {
241             if (!non_support_attr) {
242                Jmsg(jcr, M_ERROR, 0, _("Win32 GZIP backup data not supported on this Client.\n"));
243             }
244             extract = FALSE;
245             non_support_attr++;
246             continue;
247          }
248          /* Fall through desired */
249
250       /* GZIP data stream */
251       case STREAM_GZIP_DATA:
252       case STREAM_SPARSE_GZIP_DATA:  
253 #ifdef HAVE_LIBZ
254          if (extract) {
255             ser_declare;
256             uLong compress_len;
257             uint64_t faddr;
258             char ec1[50];
259             int stat;
260
261             if (stream == STREAM_SPARSE_GZIP_DATA) {
262                wbuf = sd->msg + SPARSE_FADDR_SIZE;
263                wsize = sd->msglen - SPARSE_FADDR_SIZE;
264                ser_begin(sd->msg, SPARSE_FADDR_SIZE);
265                unser_uint64(faddr);
266                if (fileAddr != faddr) {
267                   fileAddr = faddr;
268                   if (blseek(&bfd, (off_t)fileAddr, SEEK_SET) < 0) {
269                      Jmsg3(jcr, M_ERROR, 0, _("Seek to %s error on %s: ERR=%s\n"),
270                          edit_uint64(fileAddr, ec1), attr->ofname, berror(&bfd));
271                      extract = FALSE;
272                      continue;
273                   }
274                }
275             } else {
276                wbuf = sd->msg;
277                wsize = sd->msglen;
278             }
279             compress_len = compress_buf_size;
280             Dmsg2(100, "Comp_len=%d msglen=%d\n", compress_len, wsize);
281             if ((stat=uncompress((Byte *)jcr->compress_buf, &compress_len, 
282                   (const Byte *)wbuf, (uLong)wsize)) != Z_OK) {
283                Jmsg(jcr, M_ERROR, 0, _("Uncompression error. ERR=%d\n"), stat);
284                extract = FALSE;
285                continue;
286             }
287
288             Dmsg2(100, "Write uncompressed %d bytes, total before write=%d\n", compress_len, total);
289             if ((uLong)bwrite(&bfd, jcr->compress_buf, compress_len) != compress_len) {
290                Dmsg0(0, "===Write error===\n");
291                Jmsg2(jcr, M_ERROR, 0, _("Write error on %s: %s\n"), attr->ofname, berror(&bfd));
292                extract = FALSE;
293                continue;
294             }
295             total += compress_len;
296             jcr->JobBytes += compress_len;
297             jcr->ReadBytes += wsize;
298             fileAddr += compress_len;
299          }
300 #else
301          if (extract) {
302             Jmsg(jcr, M_ERROR, 0, _("GZIP data stream found, but GZIP not configured!\n"));
303             extract = FALSE;
304             continue;
305          }
306 #endif
307          break;
308
309       case STREAM_MD5_SIGNATURE:
310       case STREAM_SHA1_SIGNATURE:
311          break;
312
313       case STREAM_PROGRAM_NAMES:
314       case STREAM_PROGRAM_DATA:
315          if (!prog_name_msg) {
316             Pmsg0(000, "Got Program Name or Data Stream. Ignored.\n");
317             prog_name_msg++;
318          }
319          break;
320
321       default:
322          /* If extracting, wierd stream (not 1 or 2), close output file anyway */
323          if (extract) {
324             Dmsg1(30, "Found wierd stream %d\n", stream);
325             if (!is_bopen(&bfd)) {
326                Jmsg0(jcr, M_ERROR, 0, _("Logic error output file should be open but is not.\n"));
327             }
328             set_attributes(jcr, attr, &bfd);
329             extract = FALSE;
330          }
331          Jmsg(jcr, M_ERROR, 0, _("Unknown stream=%d ignored. This shouldn't happen!\n"), stream);
332          Dmsg2(0, "None of above!!! stream=%d data=%s\n", stream,sd->msg);
333          break;
334       } /* end switch(stream) */
335
336    } /* end while get_msg() */
337
338    /* If output file is still open, it was the last one in the
339     * archive since we just hit an end of file, so close the file. 
340     */
341    if (is_bopen(&bfd)) {
342       set_attributes(jcr, attr, &bfd);
343    }
344    set_jcr_job_status(jcr, JS_Terminated);
345    goto ok_out;
346
347 bail_out:
348    set_jcr_job_status(jcr, JS_ErrorTerminated);
349 ok_out:
350    if (jcr->compress_buf) {
351       free(jcr->compress_buf);
352       jcr->compress_buf = NULL;
353    }
354    free_attr(attr);
355    Dmsg2(10, "End Do Restore. Files=%d Bytes=%" lld "\n", jcr->JobFiles,
356       jcr->JobBytes);
357    if (non_support_data > 1 || non_support_attr > 1) {
358       Jmsg(jcr, M_ERROR, 0, _("%d non-supported data streams and %d non-supported attrib streams ignored.\n"),
359          non_support_data, non_support_attr);
360    }
361 }