]> git.sur5r.net Git - bacula/docs/blob - docs/manuals/en/main/restore.tex
main ok but web
[bacula/docs] / docs / manuals / en / main / restore.tex
1 %%
2 %%
3 \chapter{The Restore Command}
4 \label{RestoreChapter}
5 \index[general]{Command!Console Restore}
6 \index[general]{Console Restore Command}
7
8 \section{General}
9 \index[general]{General }
10
11 Below, we will discuss restoring files with the Console {\bf restore} command,
12 which is the recommended way of doing restoring files. It is not possible
13 to restore files by automatically starting a job as you do with Backup,
14 Verify, \ldots{} jobs.  However, in addition to the console restore command,
15 there is a standalone program named {\bf bextract}, which also permits
16 restoring files.  For more information on this program, please see the
17 \bsysxrlink{bextract}{bextract}{utility}{command} in the \utilityman{}. We
18 don't particularly recommend the {\bf bextract} program because it
19 lacks many of the features of the normal Bacula restore, such as the
20 ability to restore Win32 files to Unix systems, and the ability to
21 restore access control lists (ACL).  As a consequence, we recommend,
22 wherever possible to use Bacula itself for restores as described below.
23
24 You may also want to look at the {\bf bls} program in the same chapter,
25 which allows you to list the contents of your Volumes.  Finally, if you
26 have an old Volume that is no longer in the catalog, you can restore the
27 catalog entries using the program named {\bf bscan}, documented in the same
28 \bsysxrlink{bscan}{bscan}{utility}{command} in the \utilityman{}.
29
30 In general, to restore a file or a set of files, you must run a {\bf restore}
31 job. That is a job with {\bf Type = Restore}. As a consequence, you will need
32 a predefined {\bf restore} job in your {\bf bacula-dir.conf} (Director's
33 config) file. The exact parameters (Client, FileSet, \ldots{}) that you define are
34 not important as you can either modify them manually before running the job or
35 if you use the {\bf restore} command, explained below, Bacula will
36 automatically set them for you. In fact, you can no longer simply run a restore
37 job.  You must use the restore command.
38
39 Since Bacula is a network backup program, you must be aware that when you
40 restore files, it is up to you to ensure that you or Bacula have selected the
41 correct Client and the correct hard disk location for restoring those files.
42 {\bf Bacula} will quite willingly backup client A, and restore it by sending
43 the files to a different directory on client B. Normally, you will want to
44 avoid this, but assuming the operating systems are not too different in their
45 file structures, this should work perfectly well, if so desired.
46 By default, Bacula will restore data to the same Client that was backed
47 up, and those data will be restored not to the original places but to
48 {\bf /tmp/bacula-restores}.  You may modify any of these defaults when the
49 restore command prompts you to run the job by selecting the {\bf mod}
50 option.
51
52 \label{Example1}
53 \section{The Restore Command}
54 \index[general]{Command!Restore}
55 \index[general]{Restore Command}
56
57 Since Bacula maintains a catalog of your files and on which Volumes (disk or
58 tape), they are stored, it can do most of the bookkeeping work, allowing you
59 simply to specify what kind of restore you want (current, before a particular
60 date), and what files to restore. Bacula will then do the rest.
61
62 This is accomplished using the {\bf restore} command in the Console. First you
63 select the kind of restore you want, then the JobIds are selected,
64 the File records for those Jobs are placed in an internal Bacula directory
65 tree, and the restore enters a file selection mode that allows you to
66 interactively walk up and down the file tree selecting individual files to be
67 restored. This mode is somewhat similar to the standard Unix {\bf restore}
68 program's interactive file selection mode.
69
70 If a Job's file records have been pruned from the catalog, the {\bf restore}
71 command will be unable to find any files to restore. Bacula will ask if you
72 want to restore all of them or if you want to use a regular expression to
73 restore only a selection while reading media. See \ilink{FileRegex
74   option}{FileRegex} and below for more details on this.
75
76 Within the Console program, after entering the {\bf restore} command, you are
77 presented with the following selection prompt:
78
79 \footnotesize
80 \begin{lstlisting}
81 First you select one or more JobIds that contain files
82 to be restored. You will be presented several methods
83 of specifying the JobIds. Then you will be allowed to
84 select which files from those JobIds are to be restored.
85 To select the JobIds, you have the following choices:
86      1: List last 20 Jobs run
87      2: List Jobs where a given File is saved
88      3: Enter list of comma separated JobIds to select
89      4: Enter SQL list command
90      5: Select the most recent backup for a client
91      6: Select backup for a client before a specified time
92      7: Enter a list of files to restore
93      8: Enter a list of files to restore before a specified time
94      9: Find the JobIds of the most recent backup for a client
95     10: Find the JobIds for a backup for a client before a specified time
96     11: Enter a list of directories to restore for found JobIds
97     12: Cancel
98 Select item:  (1-12):
99 \end{lstlisting}
100 \normalsize
101
102 There are a lot of options, and as a point of reference, most people will
103 want to slect item 5 (the most recent backup for a client). The details
104 of the above options are:
105
106 \begin{bsysitemize}
107 \item Item 1 will list the last 20 jobs run. If you find the Job you want,
108    you can then select item 3 and enter its JobId(s).
109
110 \item Item 2 will list all the Jobs where a specified file is saved.  If you
111    find the Job you want, you can then select item 3 and enter the JobId.
112
113 \item Item 3 allows you the enter a list of comma separated JobIds whose
114    files will be put into the directory tree. You may then select which
115    files from those JobIds to restore. Normally, you would use this option
116    if you have a particular version of a file that you want to restore and
117    you know its JobId. The most common options (5 and 6) will not select
118    a job that did not terminate normally, so if you know a file is
119    backed up by a Job that failed (possibly because of a system crash), you
120    can access it through this option by specifying the JobId.
121
122 \item Item 4 allows you to enter any arbitrary SQL command.  This is
123    probably the most primitive way of finding the desired JobIds, but at
124    the same time, the most flexible.  Once you have found the JobId(s), you
125    can select item 3 and enter them.
126
127 \item Item 5 will automatically select the most recent Full backup and all
128    subsequent incremental and differential backups for a specified Client.
129    These are the Jobs and Files which, if reloaded, will restore your
130    system to the most current saved state.  It automatically enters the
131    JobIds found into the directory tree in an optimal way such that only
132    the most recent copy of any particular file found in the set of Jobs
133    will be restored.  This is probably the most convenient of all the above
134    options to use if you wish to restore a selected Client to its most
135    recent state.
136
137    There are two important things to note. First, this automatic selection
138    will never select a job that failed (terminated with an error status).
139    If you have such a job and want to recover one or more files from it,
140    you will need to explicitly enter the JobId in item 3, then choose the
141    files to restore.
142
143    If some of the Jobs that are needed to do the restore have had their
144    File records pruned, the restore will be incomplete. Bacula currently
145    does not correctly detect this condition.  You can however, check for
146    this by looking carefully at the list of Jobs that Bacula selects and
147    prints. If you find Jobs with the JobFiles column set to zero, when
148    files should have been backed up, then you should expect problems.
149
150    If all the File records have been pruned, Bacula will realize that there
151    are no file records in any of the JobIds chosen and will inform you. It
152    will then propose doing a full restore (non-selective) of those JobIds.
153    This is possible because Bacula still knows where the beginning of the
154    Job data is on the Volumes, even if it does not know where particular
155    files are located or what their names are.
156
157 \item Item 6 allows you to specify a date and time, after which Bacula  will
158    automatically select the most recent Full backup and all  subsequent
159    incremental and differential backups that started  before the specified date
160    and time.
161
162 \item Item 7 allows you to specify one or more filenames  (complete path
163    required) to be restored. Each filename  is entered one at a time or if you
164    prefix a filename  with the less-than symbol (\lt{}) Bacula will read that
165    file and assume it is a list of filenames to be restored.  If you
166    prefix the filename with a question mark (?), then the filename will
167    be interpreted as an SQL table name, and Bacula will include the rows
168    of that table in the list to be restored. The table must contain the
169    JobId in the first column and the FileIndex in the second column.
170    This table feature is intended for external programs that want to build
171    their own list of files to be restored.
172    The filename entry mode is terminated by entering a  blank line.
173
174 \item Item 8 allows you to specify a date and time before  entering the
175    filenames. See Item 7 above for more  details.
176
177 \item Item 9 allows you find the JobIds of the most recent backup for
178    a client. This is much like option 5 (it uses the same code), but
179    those JobIds are retained internally as if you had entered them
180    manually.  You may then select item 11 (see below) to restore one
181    or more directories.
182
183 \item Item 10 is the same as item 9, except that it allows you to enter
184    a before date (as with item 6). These JobIds will then be retained
185    internally.
186
187 \index[general]{Restore Directories}
188 \item Item 11 allows you to enter a list of JobIds from which you can
189    select directories to be restored. The list of JobIds can have been
190    previously created by using either item 9 or 10 on the menu.  You
191    may then enter a full path to a directory name or a filename preceded
192    by a less than sign (\lt{}). The filename should contain a list
193    of directories to be restored.  All files in those directories will
194    be restored, but if the directory contains subdirectories, nothing
195    will be restored in the subdirectory unless you explicitly enter its
196    name.
197
198 \item Item 12 allows you to cancel the restore command.
199 \end{bsysitemize}
200
201 As an example, suppose that we select item 5 (restore to most recent state).
202 If you have not specified a client=xxx on the command line, it
203 it will then ask for the desired Client, which on my system, will print all
204 the Clients found in the database as follows:
205
206 \footnotesize
207 \begin{lstlisting}
208 Defined clients:
209      1: Rufus
210      2: Matou
211      3: Polymatou
212      4: Minimatou
213      5: Minou
214      6: MatouVerify
215      7: PmatouVerify
216      8: RufusVerify
217      9: Watchdog
218 Select Client (File daemon) resource (1-9):
219 \end{lstlisting}
220 \normalsize
221
222 You will probably have far fewer Clients than this example, and if you have
223 only one Client, it will be automatically selected.  In this case, I enter
224 {\bf Rufus} to select the Client. Then  Bacula needs to know what FileSet is
225 to be restored, so it prompts with:
226
227 \footnotesize
228 \begin{lstlisting}
229 The defined FileSet resources are:
230      1: Full Set
231      2: Other Files
232 Select FileSet resource (1-2):
233 \end{lstlisting}
234 \normalsize
235
236 If you have only one FileSet defined for the Client, it will be selected
237 automatically.  I choose item 1, which is my full backup.  Normally, you
238 will only have a single FileSet for each Job, and if your machines are
239 similar (all Linux) you may only have one FileSet for all your Clients.
240
241 At this point, {\bf Bacula} has all the information it needs to find the most
242 recent set of backups. It will then query the database, which may take a bit
243 of time, and it will come up with something like the following. Note, some of
244 the columns are truncated here for presentation:
245
246 \footnotesize
247 \begin{lstlisting}
248 +-------+------+----------+-------------+-------------+------+-------+------------+
249 | JobId | Levl | JobFiles | StartTime   | VolumeName  | File | SesId |VolSesTime  |
250 +-------+------+----------+-------------+-------------+------+-------+------------+
251 | 1,792 | F    |  128,374 | 08-03 01:58 | DLT-19Jul02 |   67 |    18 | 1028042998 |
252 | 1,792 | F    |  128,374 | 08-03 01:58 | DLT-04Aug02 |    0 |    18 | 1028042998 |
253 | 1,797 | I    |      254 | 08-04 13:53 | DLT-04Aug02 |    5 |    23 | 1028042998 |
254 | 1,798 | I    |       15 | 08-05 01:05 | DLT-04Aug02 |    6 |    24 | 1028042998 |
255 +-------+------+----------+-------------+-------------+------+-------+------------+
256 You have selected the following JobId: 1792,1792,1797
257 Building directory tree for JobId 1792 ...
258 Building directory tree for JobId 1797 ...
259 Building directory tree for JobId 1798 ...
260 cwd is: /
261 $
262 \end{lstlisting}
263 \normalsize
264
265 Depending on the number of {\bf JobFiles} for each JobId, the {\bf Building
266 directory tree \ldots{}"} can take a bit of time. If you notice ath all the
267 JobFiles are zero, your Files have probably been pruned and you will not be
268 able to select any individual files -- it will be restore everything or
269 nothing.
270
271 In our example, Bacula found four Jobs that comprise the most recent backup of
272 the specified Client and FileSet. Two of the Jobs have the same JobId because
273 that Job wrote on two different Volumes. The third Job was an incremental
274 backup to the previous Full backup, and it only saved 254 Files compared to
275 128,374 for the Full backup. The fourth Job was also an incremental backup
276 that saved 15 files.
277
278 Next Bacula entered those Jobs into the directory tree, with no files marked
279 to be restored as a default, tells you how many files are in the tree, and
280 tells you that the current working directory ({\bf cwd}) is /. Finally, Bacula
281 prompts with the dollar sign (\$) to indicate that you may enter commands to
282 move around the directory tree and to select files.
283
284 If you want all the files to automatically be marked when the directory
285 tree is built, you could have entered the command {\bf restore all}, or
286 at the \$ prompt, you can simply enter {\bf mark *}.
287
288 Instead of choosing item 5 on the first menu (Select the most recent backup
289 for a client), if we had chosen item 3 (Enter list of JobIds to select) and we
290 had entered the JobIds {\bf 1792,1797,1798} we would have arrived at the same
291 point.
292
293 One point to note, if you are manually entering JobIds, is that you must enter
294 them in the order they were run (generally in increasing JobId order). If you
295 enter them out of order and the same file was saved in two or more of the
296 Jobs, you may end up with an old version of that file (i.e. not the most
297 recent).
298
299 Directly entering the JobIds can also permit you to recover data from
300 a Job that wrote files to tape but that terminated with an error status.
301
302 While in file selection mode, you can enter {\bf help} or a question mark (?)
303 to produce a summary of the available commands:
304
305 \footnotesize
306 \begin{lstlisting}
307  Command    Description
308   =======    ===========
309   cd         change current directory
310   count      count marked files in and below the cd
311   dir        long list current directory, wildcards allowed
312   done       leave file selection mode
313   estimate   estimate restore size
314   exit       same as done command
315   find       find files, wildcards allowed
316   help       print help
317   ls         list current directory, wildcards allowed
318   lsmark     list the marked files in and below the cd
319   mark       mark dir/file to be restored recursively in dirs
320   markdir    mark directory name to be restored (no files)
321   pwd        print current working directory
322   unmark     unmark dir/file to be restored recursively in dir
323   unmarkdir  unmark directory name only no recursion
324   quit       quit and do not do restore
325   ?          print help
326 \end{lstlisting}
327 \normalsize
328
329 As a default no files have been selected for restore (unless you
330 added {\bf all} to the command line. If you want to restore
331 everything, at this point, you should enter {\bf mark *}, and then {\bf done}
332 and {\bf Bacula} will write the bootstrap records to a file and request your
333 approval to start a restore job.
334
335 If you do not enter the above mentioned {\bf mark *} command, you will start
336 with an empty slate. Now you can simply start looking at the tree and {\bf
337 mark} particular files or directories you want restored. It is easy to make
338 a mistake in specifying a file to mark or unmark, and Bacula's error handling
339 is not perfect, so please check your work by using the {\bf ls} or {\bf dir}
340 commands to see what files are actually selected. Any selected file has its
341 name preceded by an asterisk.
342
343 To check what is marked or not marked, enter the {\bf count} command, which
344 displays:
345
346 \footnotesize
347 \begin{lstlisting}
348 128401 total files. 128401 marked to be restored.
349
350 \end{lstlisting}
351 \normalsize
352
353 Each of the above commands will be described in more detail in the next
354 section. We continue with the above example, having accepted to restore all
355 files as Bacula set by default. On entering the {\bf done} command, Bacula
356 prints:
357
358 \footnotesize
359 \begin{lstlisting}
360 Bootstrap records written to /home/kern/bacula/working/restore.bsr
361 The job will require the following
362    Volume(s)                 Storage(s)                SD Device(s)
363 ===========================================================================
364
365    DLT-19Jul02               Tape                      DLT8000
366    DLT-04Aug02               Tape                      DLT8000
367
368 128401 files selected to restore.
369 Run Restore job
370 JobName:    kernsrestore
371 Bootstrap:  /home/kern/bacula/working/restore.bsr
372 Where:      /tmp/bacula-restores
373 Replace:    always
374 FileSet:    Other Files
375 Client:     Rufus
376 Storage:    Tape
377 When:       2006-12-11 18:20:33
378 Catalog:    MyCatalog
379 Priority:   10
380 OK to run? (yes/mod/no):
381
382 \end{lstlisting}
383 \normalsize
384
385 Please examine each of the items very carefully to make sure that they are
386 correct.  In particular, look at {\bf Where}, which tells you where in the
387 directory structure the files will be restored, and {\bf Client}, which
388 tells you which client will receive the files.  Note that by default the
389 Client which will receive the files is the Client that was backed up.
390 These items will not always be completed with the correct values depending
391 on which of the restore options you chose.  You can change any of these
392 default items by entering {\bf mod} and responding to the prompts.
393
394 The above assumes that you have defined a {\bf Restore} Job resource in your
395 Director's configuration file. Normally, you will only need one Restore Job
396 resource definition because by its nature, restoring is a manual operation,
397 and using the Console interface, you will be able to modify the Restore Job to
398 do what you want.
399
400 An example Restore Job resource definition is given below.
401
402 Returning to the above example, you should verify that the Client name is
403 correct before running the Job. However, you may want to modify some of the
404 parameters of the restore job. For example, in addition to checking the Client
405 it is wise to check that the Storage device chosen by Bacula is indeed
406 correct. Although the {\bf FileSet} is shown, it will be ignored in restore.
407 The restore will choose the files to be restored either by reading the {\bf
408 Bootstrap} file, or if not specified, it will restore all files associated
409 with the specified backup {\bf JobId} (i.e. the JobId of the Job that
410 originally backed up the files).
411
412 Finally before running the job, please note that the default location for
413 restoring files is {\bf not} their original locations, but rather the directory
414 {\bf /tmp/bacula-restores}. You can change this default by modifying your {\bf
415 bacula-dir.conf} file, or you can modify it using the {\bf mod} option. If you
416 want to restore the files to their original location, you must have {\bf
417 Where} set to nothing or to the root, i.e. {\bf /}.
418
419 If you now enter {\bf yes}, Bacula will run the restore Job. The Storage
420 daemon will first request Volume {\bf DLT-19Jul02} and after the appropriate
421 files have been restored from that volume, it will request Volume {\bf
422 DLT-04Aug02}.
423
424 \subsection{Restore a pruned job using a pattern}
425   During a restore, if all File records are pruned from the catalog
426   for a Job, normally Bacula can restore only all files saved. That
427   is there is no way using the catalog to select individual files.
428   With this new feature, Bacula will ask if you want to specify a Regex
429   expression for extracting only a part of the full backup.
430
431 \begin{lstlisting}
432   Building directory tree for JobId(s) 1,3 ...
433   There were no files inserted into the tree, so file selection
434   is not possible.Most likely your retention policy pruned the files
435
436   Do you want to restore all the files? (yes|no): no
437
438   Regexp matching files to restore? (empty to abort): /tmp/regress/(bin|tests)/
439   Bootstrap records written to /tmp/regress/working/zog4-dir.restore.1.bsr
440 \end{lstlisting}
441
442   See also \ilink{FileRegex bsr option}{FileRegex} for more information.
443
444 \section{Selecting Files by Filename}
445 \index[general]{Selecting Files by Filename }
446 \index[general]{Filename!Selecting Files by }
447
448 If you have a small number of files to restore, and you know the filenames,
449 you can either put the list of filenames in a file to be read by Bacula, or
450 you can enter the names one at a time. The filenames must include the full
451 path and filename. No wild cards are used.
452
453 To enter the files, after the {\bf restore}, you select item number 7 from the
454 prompt list:
455
456 \footnotesize
457 \begin{lstlisting}
458 To select the JobIds, you have the following choices:
459      1: List last 20 Jobs run
460      2: List Jobs where a given File is saved
461      3: Enter list of comma separated JobIds to select
462      4: Enter SQL list command
463      5: Select the most recent backup for a client
464      6: Select backup for a client before a specified time
465      7: Enter a list of files to restore
466      8: Enter a list of files to restore before a specified time
467      9: Find the JobIds of the most recent backup for a client
468     10: Find the JobIds for a backup for a client before a specified time
469     11: Enter a list of directories to restore for found JobIds
470     12: Cancel
471 Select item:  (1-12):
472 \end{lstlisting}
473 \normalsize
474
475 which then prompts you for the client name:
476
477 \footnotesize
478 \begin{lstlisting}
479 Defined Clients:
480      1: Timmy
481      2: Tibs
482      3: Rufus
483 Select the Client (1-3): 3
484 \end{lstlisting}
485 \normalsize
486
487 Of course, your client list will be different, and if you have only one
488 client, it will be automatically selected. And finally, Bacula requests you to
489 enter a filename:
490
491 \footnotesize
492 \begin{lstlisting}
493 Enter filename:
494 \end{lstlisting}
495 \normalsize
496
497 At this point, you can enter the full path and filename
498
499 \footnotesize
500 \begin{lstlisting}
501 Enter filename: /home/kern/bacula/k/Makefile.in
502 Enter filename:
503 \end{lstlisting}
504 \normalsize
505
506 as you can see, it took the filename. If Bacula cannot find a copy of the
507 file, it prints the following:
508
509 \footnotesize
510 \begin{lstlisting}
511 Enter filename: junk filename
512 No database record found for: junk filename
513 Enter filename:
514 \end{lstlisting}
515 \normalsize
516
517 If you want Bacula to read the filenames from a file, you simply precede the
518 filename with a less-than symbol (\lt{}). When you have entered all the
519 filenames, you enter a blank line, and Bacula will write the bootstrap file,
520 tells you what tapes will be used, and proposes a Restore job to be run:
521
522 \footnotesize
523 \begin{lstlisting}
524 Enter filename:
525 Automatically selected Storage: DDS-4
526 Bootstrap records written to /home/kern/bacula/working/restore.bsr
527 The restore job will require the following Volumes:
528
529    test1
530 1 file selected to restore.
531 Run Restore job
532 JobName:    kernsrestore
533 Bootstrap:  /home/kern/bacula/working/restore.bsr
534 Where:      /tmp/bacula-restores
535 Replace:    always
536 FileSet:    Other Files
537 Client:     Rufus
538 Storage:    DDS-4
539 When:       2003-09-11 10:20:53
540 Priority:   10
541 OK to run? (yes/mod/no):
542 \end{lstlisting}
543 \normalsize
544
545 It is possible to automate the selection by file by putting your list of files
546 in say {\bf /tmp/file-list}, then using the following command:
547
548 \footnotesize
549 \begin{lstlisting}
550 restore client=Rufus file=</tmp/file-list
551 \end{lstlisting}
552 \normalsize
553
554 If in modifying the parameters for the Run Restore job, you find that Bacula
555 asks you to enter a Job number, this is because you have not yet specified
556 either a Job number or a Bootstrap file. Simply entering zero will allow you
557 to continue and to select another option to be modified.
558
559 \label{Replace}
560
561 \section{Replace Options}
562
563 When restoring, you have the option to specify a Replace option.  This
564 directive determines the action to be taken when restoring a file or
565 directory that already exists.  This directive can be set by selecting
566 the {\bf mod} option.  You will be given a list of parameters to choose
567 from.  Full details on this option can be found in the Job Resource section
568 of the Director documentation.
569
570 \label{CommandArguments}
571
572 \section{Command Line Arguments}
573 \index[general]{Arguments!Command Line }
574 \index[general]{Command Line Arguments }
575
576 If all the above sounds complicated, you will probably agree that it really
577 isn't after trying it a few times. It is possible to do everything that was
578 shown above, with the exception of selecting the FileSet, by using command
579 line arguments with a single command by entering:
580
581 \footnotesize
582 \begin{lstlisting}
583 restore client=Rufus select current all done yes
584 \end{lstlisting}
585 \normalsize
586
587 The {\bf client=Rufus} specification will automatically select Rufus as the
588 client, the {\bf current} tells Bacula that you want to restore the system to
589 the most current state possible, and the {\bf yes} suppresses the final {\bf
590 yes/mod/no} prompt and simply runs the restore.
591
592 The full list of possible command line arguments are:
593
594 \begin{bsysitemize}
595 \item {\bf all} -- select all Files to be restored.
596 \item {\bf select} -- use the tree selection method.
597 \item {\bf done} -- do not prompt the user in tree mode.
598 \item {\bf current} -- automatically select the most current set of  backups
599    for the specified client.
600 \item {\bf client=xxxx} -- initially specifies the client from which the
601    backup was made and the client to which the restore will be make.  See also
602    "restoreclient" keyword.
603 \item {\bf restoreclient=xxxx} -- if the keyword is specified, then the
604    restore is written to that client.
605 \item {\bf jobid=nnn} -- specify a JobId or comma separated list of  JobIds to
606    be restored.
607 \item {\bf before=YYYY-MM-DD HH:MM:SS} -- specify a date and time to  which
608    the system should be restored. Only Jobs started before  the specified
609    date/time will be selected, and as is the case  for {\bf current} Bacula will
610    automatically find the most  recent prior Full save and all Differential and
611    Incremental  saves run before the date you specify. Note, this command is  not
612    too user friendly in that you must specify the date/time  exactly as shown.
613 \item {\bf file=filename} -- specify a filename to be restored. You  must
614    specify the full path and filename. Prefixing the entry  with a less-than
615    sign
616    (\lt{}) will cause Bacula to assume that the  filename is on your system and
617    contains a list of files to be  restored. Bacula will thus read the list from
618    that file. Multiple  file=xxx specifications may be specified on the command
619    line.
620 \item {\bf jobid=nnn} -- specify a JobId to be restored.
621 \item {\bf pool=pool-name} -- specify a Pool name to be used for selection  of
622    Volumes when specifying options 5 and 6 (restore current system,  and restore
623    current system before given date). This permits you to  have several Pools,
624    possibly one offsite, and to select the Pool to  be used for restoring.
625 \item {\bf where=/tmp/bacula-restore} -- restore files in {\bf where} directory.
626 \item {\bf yes} -- automatically run the restore without prompting  for
627    modifications (most useful in batch scripts).
628 \item {\bf strip\_prefix=/prod} -- remove a part of the filename when restoring.
629 \item {\bf add\_prefix=/test} -- add a prefix to all files when restoring (like
630   where) (can't be used with {\bf where=}).
631 \item {\bf add\_suffix=.old} -- add a suffix to all your files.
632 \item {\bf regexwhere=!a.pdf!a.bkp.pdf!} -- do complex filename manipulation
633   like with sed unix command. Will overwrite other filename manipulation.
634 \end{bsysitemize}
635
636 \label{restorefilerelocation}
637 \section{Using File Relocation}
638 \index[general]{Using File Relocation}
639 \label{filerelocation}
640
641 \subsection{Introduction}
642
643 The \textbf{where=} option is simple, but not very powerful. With file
644 relocation, Bacula can restore a file to the same directory, but with a
645 different name, or in an other directory without recreating the full path.
646
647 You can also do filename and path manipulations, implemented in Bacula
648 2.1.8 or later, such as adding a suffix to all your files, renaming files
649 or directories, etc.  Theses options will overwrite {\bf where=} option.
650
651
652 For example, many users use OS snapshot features so that file
653 \texttt{/home/eric/mbox} will be backed up from the directory
654 \texttt{/.snap/home/eric/mbox}, which can complicate restores.  If you use
655 \textbf{where=/tmp}, the file will be restored to
656 \texttt{/tmp/.snap/home/eric/mbox} and you will have to move the file to
657 \texttt{/home/eric/mbox.bkp} by hand.
658
659 However, case, you could use the
660 \textbf{strip\_prefix=/.snap} and \textbf{add\_suffix=.bkp} options and
661 Bacula will restore the file to its original location -- that is
662 \texttt{/home/eric/mbox}.
663
664 To use this feature, there are command line options as described in
665 the \ilink{restore section}{restorefilerelocation} of this manual;
666 you can modify your restore job before running it; or you can
667 add options to your restore job in as described in
668 \ilink{bacula-dir.conf}{confaddprefix}.
669
670 \begin{lstlisting}
671 Parameters to modify:
672      1: Level
673      2: Storage
674     ...
675     10: File Relocation
676     ...
677 Select parameter to modify (1-12):
678
679
680 This will replace your current Where value
681      1: Strip prefix
682      2: Add prefix
683      3: Add file suffix
684      4: Enter a regexp
685      5: Test filename manipulation
686      6: Use this ?
687 Select parameter to modify (1-6):
688 \end{lstlisting}
689
690
691 \subsection{RegexWhere Format}\label{useregexwhere}
692
693 The format is very close to that used by sed or Perl (\texttt{s/replace this/by
694   that/}) operator. A valid regexwhere expression has three fields :
695 \begin{bsysitemize}
696 \item a search expression (with optionnal submatch)
697 \item a replacement expression (with optionnal back references \$1 to \$9)
698 \item a set of search options (only case-insensitive ``i'' at this time)
699 \end{bsysitemize}
700
701 Each field is delimited by a separator specified by the user as the first
702 character of the expression. The separator can be one of the following:
703 \begin{lstlisting}
704 <separator-keyword> = / ! ; % : , ~ # = &
705 \end{lstlisting}
706
707 You can use several expressions separated by a commas.
708
709 \subsection*{Examples}
710
711 \LTXtable{0.95\linewidth}{table_regexp}
712
713 %\subsubsection{Using group}
714 %
715 %Like with Perl or Sed, you can make submatch with \texttt{()},
716 %
717 %\subsubsection*{Examples}
718
719
720 %\subsubsection{Options}
721 %
722 %       i   Do case-insensitive pattern matching.
723
724 \section{Restoring Directory Attributes}
725 \index[general]{Attributes!Restoring Directory }
726 \index[general]{Restoring Directory Attributes }
727
728 Depending how you do the restore, you may or may not get the directory entries
729 back to their original state. Here are a few of the problems you can
730 encounter, and for same machine restores, how to avoid them.
731
732 \begin{bsysitemize}
733 \item You backed up on one machine and are restoring to another that is
734    either a different OS or doesn't have the same users/groups defined.  Bacula
735    does the best it can in these situations. Note, Bacula has saved the
736    user/groups in numeric form, which means on a different machine, they
737    may map to different user/group names.
738
739 \item You are restoring into a directory that is already created and has
740    file creation restrictions.  Bacula tries to reset everything but
741    without walking up the full chain of directories and modifying them all
742    during the restore, which Bacula does and will not do, getting
743    permissions back correctly in this situation depends to a large extent
744    on your OS.
745
746 \item You are doing a recursive restore of a directory tree.  In this case
747    Bacula will restore a file before restoring the file's parent directory
748    entry.  In the process of restoring the file Bacula will create the
749    parent directory with open permissions and ownership of the file being
750    restored.  Then when Bacula tries to restore the parent directory Bacula
751    sees that it already exists (Similar to the previous situation).  If you
752    had set the Restore job's "Replace" property to "never" then Bacula will
753    not change the directory's permissions and ownerships to match what it
754    backed up, you should also notice that the actual number of files
755    restored is less then the expected number.  If you had set the Restore
756    job's "Replace" property to "always" then Bacula will change the
757    Directory's ownership and permissions to match what it backed up, also
758    the actual number of files restored should be equal to the expected
759    number.
760
761 \item You selected one or more files in a directory, but did not select the
762    directory entry to be restored.  In that case, if the directory is not
763    on disk Bacula simply creates the directory with some default attributes
764    which may not be the same as the original.  If you do not select a
765    directory and all its contents to be restored, you can still select
766    items within the directory to be restored by individually marking those
767    files, but in that case, you should individually use the "markdir"
768    command to select all higher level directory entries (one at a time) to
769    be restored if you want the directory entries properly restored.
770
771 \item The {\bf bextract} program does not restore access control lists
772   (ACLs) to Unix machines.
773 \end{bsysitemize}
774
775 \label{Windows}
776 \section{Restoring on Windows}
777 \index[general]{Restoring on Windows }
778 \index[general]{Windows!Restoring on }
779
780 If you are restoring on WinNT/2K/XP systems, Bacula will restore the files
781 with the original ownerships and permissions as would be expected.  This is
782 also true if you are restoring those files to an alternate directory (using
783 the Where option in restore).  However, if the alternate directory does not
784 already exist, the Bacula File daemon (Client) will try to create it.  In
785 some cases, it may not create the directories, and if it does since the
786 File daemon runs under the SYSTEM account, the directory will be created
787 with SYSTEM ownership and permissions.  In this case, you may have problems
788 accessing the newly restored files.
789
790 To avoid this problem, you should create any alternate directory before
791 doing the restore.  Bacula will not change the ownership and permissions of
792 the directory if it is already created as long as it is not one of the
793 directories being restored (i.e.  written to tape).
794
795 The default restore location is {\bf /tmp/bacula-restores/} and if you are
796 restoring from drive {\bf E:}, the default will be
797 {\bf /tmp/bacula-restores/e/}, so you should ensure that this directory
798 exists before doing the restore, or use the {\bf mod} option to
799 select a different {\bf where} directory that does exist.
800
801 Some users have experienced problems restoring files that participate in
802 the Active Directory. They also report that changing the userid under which
803 Bacula (bacula-fd.exe) runs, from SYSTEM to a Domain Admin userid, resolves
804 the problem.
805
806
807 \section{Restoring Files Can Be Slow}
808 \index[general]{Slow!Restoring Files Can Be }
809 \index[general]{Restoring Files Can Be Slow }
810
811 Restoring files is generally {\bf much} slower than backing them up for several
812 reasons. The first is that during a backup the tape is normally already
813 positioned and Bacula only needs to write. On the other hand, because restoring
814 files is done so rarely, Bacula keeps only the start file and block on the
815 tape for the whole job rather than on a file by file basis which would use
816 quite a lot of space in the catalog.
817
818 Bacula will forward space to the correct file mark on the tape for the Job,
819 then forward space to the correct block, and finally sequentially read each
820 record until it gets to the correct one(s) for the file or files you want to
821 restore. Once the desired files are restored, Bacula will stop reading the
822 tape.
823
824 Finally, instead of just reading a file for backup, during the restore, Bacula
825 must create the file, and the operating system must allocate disk space for
826 the file as Bacula is restoring it.
827
828 For all the above reasons the restore process is generally much slower than
829 backing up (sometimes it takes three times as long).
830
831 \section{Problems Restoring Files}
832 \index[general]{Files!Problems Restoring }
833 \index[general]{Problems Restoring Files }
834
835 The most frequent problems users have restoring files are error messages such
836 as:
837
838 \footnotesize
839 \begin{lstlisting}
840 04-Jan 00:33 z217-sd: RestoreFiles.2005-01-04_00.31.04 Error:
841 block.c:868 Volume data error at 20:0! Short block of 512 bytes on
842 device /dev/tape discarded.
843 \end{lstlisting}
844 \normalsize
845
846 or
847
848 \footnotesize
849 \begin{lstlisting}
850 04-Jan 00:33 z217-sd: RestoreFiles.2005-01-04_00.31.04 Error:
851 block.c:264 Volume data error at 20:0! Wanted ID: "BB02", got ".".
852 Buffer discarded.
853 \end{lstlisting}
854 \normalsize
855
856 Both these kinds of messages indicate that you were probably running your tape
857 drive in fixed block mode rather than variable block mode. Fixed block mode
858 will work with any program that reads tapes sequentially such as tar, but
859 Bacula repositions the tape on a block basis when restoring files because this
860 will speed up the restore by orders of magnitude when only a few files are being
861 restored. There are several ways that you can attempt to recover from this
862 unfortunate situation.
863
864 Try the following things, each separately, and reset your Device resource to
865 what it is now after each individual test:
866
867 \begin{enumerate}
868 \item Set "Block Positioning = no" in your Device resource  and try the
869    restore. This is a new directive and untested.
870
871 \item Set "Minimum Block Size = 512" and "Maximum  Block Size = 512" and
872    try the restore.  If you are able to determine the block size your drive
873    was previously using, you should try that size if 512 does not work.
874    This is a really horrible solution, and it is not at all recommended
875    to continue backing up your data without correcting this condition.
876    Please see the Tape Testing chapter for more on this.
877
878 \item Try editing the restore.bsr file at the Run xxx yes/mod/no prompt
879    before starting the restore job and remove all the VolBlock statements.
880    These are what causes Bacula to reposition the tape, and where problems
881    occur if you have a fixed block size set for your drive.  The VolFile
882    commands also cause repositioning, but this will work regardless of the
883    block size.
884
885 \item Use bextract to extract the files you want -- it reads the  Volume
886    sequentially if you use the include list feature, or if you use a .bsr
887    file, but remove all the VolBlock statements after the .bsr file is
888    created (at the Run yes/mod/no) prompt but before you start the restore.
889 \end{enumerate}
890
891 \section{Restore Errors}
892 \index[general]{Errors!Restore}
893 \index[general]{Restore Errors}
894
895 There are a number of reasons why there may be restore errors or
896 warning messages. Some of the more common ones are:
897
898 \begin{description}
899
900 \item [file count mismatch]
901   This can occur for the following reasons:
902   \begin{bsysitemize}
903   \item You requested Bacula not to overwrite existing or newer
904      files.
905   \item A Bacula miscount of files/directories. This is an
906      on-going problem due to the complications of directories,
907      soft/hard link, and such.  Simply check that all the files you
908      wanted were actually restored.
909   \end{bsysitemize}
910
911 \item [file size error]
912    When Bacula restores files, it checks that the size of the
913    restored file is the same as the file status data it saved
914    when starting the backup of the file. If the sizes do not
915    agree, Bacula will print an error message. This size mismatch
916    most often occurs because the file was being written as Bacula
917    backed up the file. In this case, the size that Bacula
918    restored will be greater than the status size.  This often
919    happens with log files.
920
921    If the restored size is smaller, then you should be concerned
922    about a possible tape error and check the Bacula output as
923    well as your system logs.
924 \end{description}
925
926
927
928 \section{Example Restore Job Resource}
929 \index[general]{Example Restore Job Resource }
930 \index[general]{Resource!Example Restore Job }
931
932 \footnotesize
933 \begin{lstlisting}
934 Job {
935   Name = "RestoreFiles"
936   Type = Restore
937   Client = Any-client
938   FileSet = "Any-FileSet"
939   Storage = Any-storage
940   Where = /tmp/bacula-restores
941   Messages = Standard
942   Pool = Default
943 }
944 \end{lstlisting}
945 \normalsize
946
947 If {\bf Where} is not specified, the default location for restoring files will
948 be their original locations.
949 \label{Selection}
950
951 \section{File Selection Commands}
952 \index[general]{Commands!File Selection }
953 \index[general]{File Selection Commands }
954
955 After you have selected the Jobs to be restored and Bacula has created the
956 in-memory directory tree, you will enter file selection mode as indicated by
957 the dollar sign ({\bf \$}) prompt. While in this mode, you may use the
958 commands listed above. The basic idea is to move up and down the in memory
959 directory structure with the {\bf cd} command much as you normally do on the
960 system. Once you are in a directory, you may select the files that you want
961 restored. As a default no files are marked to be restored. If you wish to
962 start with all files, simply enter: {\bf cd /} and {\bf mark *}. Otherwise
963 proceed to select the files you wish to restore by marking them with the {\bf
964 mark} command. The available commands are:
965
966 \begin{description}
967
968 \item [cd]
969   The {\bf cd} command changes the current directory to the argument specified.
970   It operates much like the Unix {\bf cd} command.  Wildcard specifications are
971   not permitted.
972
973   Note, on Windows systems, the various drives (c:, d:, \ldots{}) are treated like a
974   directory within the file tree while in the file selection mode. As a
975   consequence, you must do a {\bf cd c:} or possibly in some cases a {\bf cd
976     C:} (note upper case) to get down to the first directory.
977
978 \item [dir]
979    \index[dir]{dir }
980    The {\bf dir} command is similar to the {\bf ls} command, except that it
981    prints it in long format (all details). This command can be a bit slower
982    than the {\bf ls} command because it must access the catalog database for
983    the detailed information for each file.
984
985 \item [estimate]
986    \index[dir]{estimate }
987    The {\bf estimate} command prints a summary of the total files in the tree,
988    how many are marked to be restored, and an estimate of the number of bytes
989    to be restored. This can be useful if you are short on disk space on the
990    machine where the files will be restored.
991
992 \item [find]
993    \index[dir]{find}
994    The {\bf find} command accepts one or more arguments  and displays all files
995    in the tree that match that argument. The argument  may have wildcards. It is
996    somewhat similar to the Unix command  {\bf find / -name arg}.
997
998 \item [ls]
999    The {\bf ls} command produces a listing of all the files  contained in the
1000    current directory much like the Unix {\bf ls} command.  You may specify an
1001    argument containing wildcards, in which case only  those files will be
1002    listed.
1003
1004    Any file that is marked to be restored will  have its name preceded by an
1005    asterisk ({\bf *}). Directory names  will be terminated with a forward slash
1006    ({\bf /}) to distinguish them  from filenames.
1007
1008 \item [lsmark]
1009    \index[fd]{lsmark}
1010    The {\bf lsmark} command is the same as the  {\bf ls} except that it will
1011    print only those files marked for  extraction. The other distinction is that
1012    it will recursively  descend into any directory selected.
1013
1014 \item [mark]
1015    \index[dir]{mark}
1016    The {\bf mark} command allows you to mark files to be restored. It takes a
1017    single argument which is the filename  or directory name in the current
1018    directory to be marked for extraction.  The argument may be a wildcard
1019    specification, in which  case all files that match in the current directory
1020    are marked to be  restored. If the argument matches a directory rather than a
1021    file,  then the directory and all the files contained in that directory
1022    (recursively)  are marked to be restored. Any marked file will have its name
1023    preceded with an asterisk ({\bf *}) in the output produced by the  {\bf ls}
1024 or
1025    {\bf dir} commands. Note, supplying a full path on  the mark command does not
1026    work as expected to select a file or  directory in the current directory.
1027    Also, the {\bf mark} command works  on the current and lower directories but
1028    does not touch higher level  directories.
1029
1030    After executing the {\bf mark} command, it will print a brief summary:
1031
1032 \footnotesize
1033 \begin{lstlisting}
1034     No files marked.
1035
1036 \end{lstlisting}
1037 \normalsize
1038
1039    If no files were marked, or:
1040
1041 \footnotesize
1042 \begin{lstlisting}
1043     nn files marked.
1044
1045 \end{lstlisting}
1046 \normalsize
1047
1048    if some files are marked.
1049
1050 \item [unmark]
1051    \index[dir]{unmark }
1052    The {\bf unmark} is identical to the {\bf mark}  command, except that it
1053    unmarks the specified file or files so that  they will not be restored. Note:
1054    the {\bf unmark} command works from  the current directory, so it does not
1055    unmark any files at a higher  level. First do a {\bf cd /} before the {\bf
1056    unmark *} command if  you want to unmark everything.
1057
1058 \item [pwd]
1059    \index[dir]{pwd }
1060    The {\bf pwd} command prints the current working  directory. It accepts no
1061    arguments.
1062
1063 \item [count]
1064    \index[dir]{count }
1065    The {\bf count} command prints the total files in the  directory tree and the
1066    number of files marked to be restored.
1067
1068 \item [done]
1069    \index[dir]{done }
1070    This command terminates file selection mode.
1071
1072 \item [exit]
1073    \index[fd]{exit }
1074    This command terminates file selection mode (the same as  done).
1075
1076 \item [quit]
1077    \index[fd]{quit }
1078    This command terminates the file selection and does  not run the restore
1079 job.
1080
1081
1082 \item [help]
1083    \index[fd]{help }
1084    This command prints a summary of the commands available.
1085
1086 \item [?]
1087    This command is the same as the {\bf help} command.
1088 \end{description}
1089
1090 If your filename contains some weird caracters, you can use \texttt{?},
1091 \texttt{*} or \textbackslash{}\textbackslash{}. For example, if your filename
1092 contains a \textbackslash{}, you can use
1093 \textbackslash{}\textbackslash{}\textbackslash{}\textbackslash{}.
1094
1095 \begin{lstlisting}
1096 * mark weird_file\\\\with-backslash
1097 \end{lstlisting}
1098
1099 \label{database_restore}
1100 \section{Restoring When Things Go Wrong}
1101 \index[general]{Restoring When Things Go Wrong }
1102 \index[general]{Restoring Your Database}
1103 \index[general]{Database!Restoring}
1104
1105 This and the following sections will try to present a few of the kinds of
1106 problems that can come up making restoring more difficult. We will try to
1107 provide a few ideas how to get out of these problem situations.
1108 In addition to what is presented here, there is more specific information
1109 on restoring a \ilink{Client}{restore_client} and your
1110 \ilink{Server}{restore_server} in the \ilink{Disaster Recovery Using
1111 Bacula}{RescueChapter} chapter of this manual.
1112
1113 \begin{description}
1114 \item[Problem]
1115    My database is broken.
1116 \item[Solution]
1117    For SQLite, use the vacuum command to try to fix the database. For either
1118    MySQL or PostgreSQL, see the vendor's documentation. They have specific tools
1119    that check and repair databases, see the \ilink{database
1120    repair}{DatabaseRepair} sections of this manual for links to vendor
1121    information.
1122
1123    Assuming the above does not resolve the problem, you will need to restore
1124    or rebuild your catalog.  Note, if it is a matter of some
1125    inconsistencies in the Bacula tables rather than a broken database, then
1126    running the \bsysxrlink{dbcheck}{dbcheck}{utility}{command}\footnote{\utilityman{}}
1127 might help, but you will need to ensure
1128    that your database indexes are properly setup.  Please see
1129    the \ilink{Database Performance Issues}{DatabasePerformance} sections
1130    of this manual for more details.
1131
1132 \item[Problem]
1133    How do I restore my catalog?
1134 \item[Solution with a Catalog backup]
1135    If you have backed up your database nightly (as you should) and you
1136    have made a bootstrap file, you can immediately load back your
1137    database (or the ASCII SQL output).  Make a copy of your current
1138    database, then re-initialize it, by running the following scripts:
1139 \begin{lstlisting}
1140    ./drop_bacula_tables
1141    ./make_bacula_tables
1142 \end{lstlisting}
1143    After re-initializing the database, you should be able to run
1144    Bacula. If you now try to use the restore command, it will not
1145    work because the database will be empty. However, you can manually
1146    run a restore job and specify your bootstrap file. You do so
1147    by entering the {bf run} command in the console and selecting the
1148    restore job.  If you are using the default bacula-dir.conf, this
1149    Job will be named {\bf RestoreFiles}. Most likely it will prompt
1150    you with something such as:
1151
1152 \footnotesize
1153 \begin{lstlisting}
1154 Run Restore job
1155 JobName:    RestoreFiles
1156 Bootstrap:  /home/kern/bacula/working/restore.bsr
1157 Where:      /tmp/bacula-restores
1158 Replace:    always
1159 FileSet:    Full Set
1160 Client:     rufus-fd
1161 Storage:    File
1162 When:       2005-07-10 17:33:40
1163 Catalog:    MyCatalog
1164 Priority:   10
1165 OK to run? (yes/mod/no):
1166 \end{lstlisting}
1167 \normalsize
1168
1169    A number of the items will be different in your case.  What you want to
1170    do is: to use the mod option to change the Bootstrap to point to your
1171    saved bootstrap file; and to make sure all the other items such as
1172    Client, Storage, Catalog, and Where are correct.  The FileSet is not
1173    used when you specify a bootstrap file.  Once you have set all the
1174    correct values, run the Job and it will restore the backup of your
1175    database, which is most likely an ASCII dump.
1176
1177    You will then need to follow the instructions for your
1178    database type to recreate the database from the ASCII backup file.
1179    See the \ilink {Catalog Maintenance}{CatMaintenanceChapter} chapter of
1180    this manual for examples of the command needed to restore a
1181    database from an ASCII dump (they are shown in the Compacting Your
1182    XXX Database sections).
1183
1184    Also, please note that after you restore your database from an ASCII
1185    backup, you do NOT want to do a {\bf make\_bacula\_tables}  command, or
1186    you will probably erase your newly restored database tables.
1187
1188
1189 \item[Solution with a Job listing]
1190    If you did save your database but did not make a bootstrap file, then
1191    recovering the database is more difficult.  You will probably need to
1192    use bextract to extract the backup copy.  First you should locate the
1193    listing of the job report from the last catalog backup.  It has
1194    important information that will allow you to quickly find your database
1195    file.  For example, in the job report for the CatalogBackup shown below,
1196    the critical items are the Volume name(s), the Volume Session Id and the
1197    Volume Session Time.  If you know those, you can easily restore your
1198    Catalog.
1199
1200 \footnotesize
1201 \begin{lstlisting}
1202 22-Apr 10:22 HeadMan: Start Backup JobId 7510,
1203 Job=CatalogBackup.2005-04-22_01.10.0
1204 22-Apr 10:23 HeadMan: Bacula 1.37.14 (21Apr05): 22-Apr-2005 10:23:06
1205   JobId:                  7510
1206   Job:                    CatalogBackup.2005-04-22_01.10.00
1207   Backup Level:           Full
1208   Client:                 Polymatou
1209   FileSet:                "CatalogFile" 2003-04-10 01:24:01
1210   Pool:                   "Default"
1211   Storage:                "DLTDrive"
1212   Start time:             22-Apr-2005 10:21:00
1213   End time:               22-Apr-2005 10:23:06
1214   FD Files Written:       1
1215   SD Files Written:       1
1216   FD Bytes Written:       210,739,395
1217   SD Bytes Written:       210,739,521
1218   Rate:                   1672.5 KB/s
1219   Software Compression:   None
1220   Volume name(s):         DLT-22Apr05
1221   Volume Session Id:      11
1222   Volume Session Time:    1114075126
1223   Last Volume Bytes:      1,428,240,465
1224   Non-fatal FD errors:    0
1225   SD Errors:              0
1226   FD termination status:  OK
1227   SD termination status:  OK
1228   Termination:            Backup OK
1229 \end{lstlisting}
1230 \normalsize
1231
1232   From the above information, you can manually create a bootstrap file,
1233   and then follow the instructions given above for restoring your database.
1234   A reconstructed bootstrap file for the above backup Job would look
1235   like the following:
1236
1237 \footnotesize
1238 \begin{lstlisting}
1239 Volume="DLT-22Apr05"
1240 VolSessionId=11
1241 VolSessionTime=1114075126
1242 FileIndex=1-1
1243 \end{lstlisting}
1244 \normalsize
1245
1246   Where we have inserted the Volume name, Volume Session Id, and Volume
1247   Session Time that correspond to the values in the job report.  We've also
1248   used a FileIndex of one, which will always be the case providing that
1249   there was only one file backed up in the job.
1250
1251   The disadvantage of this bootstrap file compared to what is created when
1252   you ask for one to be written, is that there is no File and Block
1253   specified, so the restore code must search all data in the Volume to find
1254   the requested file.  A fully specified bootstrap file would have the File
1255   and Blocks specified as follows:
1256
1257 \footnotesize
1258 \begin{lstlisting}
1259 Volume="DLT-22Apr05"
1260 VolSessionId=11
1261 VolSessionTime=1114075126
1262 VolFile=118-118
1263 VolBlock=0-4053
1264 FileIndex=1-1
1265 \end{lstlisting}
1266 \normalsize
1267
1268    Once you have restored the ASCII dump of the database,
1269    you will then to follow the instructions for your
1270    database type to recreate the database from the ASCII backup file.
1271    See the \ilink {Catalog Maintenance}{CatMaintenanceChapter} chapter of
1272    this manual for examples of the command needed to restore a
1273    database from an ASCII dump (they are shown in the Compacting Your
1274    XXX Database sections).
1275
1276    Also, please note that after you restore your database from an ASCII
1277    backup, you do NOT want to do a {\bf make\_bacula\_tables}  command, or
1278    you will probably erase your newly restored database tables.
1279
1280 \item [Solution without a Job Listing]
1281    If you do not have a job listing, then it is a bit more difficult.
1282    Either you use the \bsysxrlink{bscan}{bscan}{utility}{program} to scan the contents
1283    of your tape into a database, which can be very time consuming
1284    depending on the size of the tape, or you can use the \bsysxrlink{bls}{bls}
1285    {utility}{program} to list everything on the tape, and reconstruct a
1286    bootstrap file from the bls listing for the file or files you want following
1287    the instructions given above.
1288
1289    There is a specific example of how to use {\bf bls} below.
1290
1291 \item [Problem]
1292    I try to restore the last known good full backup by specifying
1293    item 3 on the restore menu then the JobId to restore.  Bacula
1294    then reports:
1295
1296 \footnotesize
1297 \begin{lstlisting}
1298    1 Job 0 Files
1299 \end{lstlisting}
1300 \normalsize
1301    and restores nothing.
1302
1303 \item[Solution]
1304    Most likely the File records were pruned from the database either due
1305    to the File Retention period expiring or by explicitly purging the
1306    Job. By using the "llist jobid=nn" command, you can obtain all the
1307    important information about the job:
1308
1309 \footnotesize
1310 \begin{lstlisting}
1311 llist jobid=120
1312            JobId: 120
1313              Job: save.2005-12-05_18.27.33
1314         Job.Name: save
1315      PurgedFiles: 0
1316             Type: B
1317            Level: F
1318     Job.ClientId: 1
1319      Client.Name: Rufus
1320        JobStatus: T
1321        SchedTime: 2005-12-05 18:27:32
1322        StartTime: 2005-12-05 18:27:35
1323          EndTime: 2005-12-05 18:27:37
1324         JobTDate: 1133803657
1325     VolSessionId: 1
1326   VolSessionTime: 1133803624
1327         JobFiles: 236
1328        JobErrors: 0
1329  JobMissingFiles: 0
1330       Job.PoolId: 4
1331        Pool.Name: Full
1332    Job.FileSetId: 1
1333  FileSet.FileSet: BackupSet
1334 \end{lstlisting}
1335 \normalsize
1336
1337    Then you can find the Volume(s) used by doing:
1338
1339 \footnotesize
1340 \begin{lstlisting}
1341 sql
1342 select VolumeName from JobMedia,Media where JobId=1 and JobMedia.MediaId=Media.MediaId;
1343 \end{lstlisting}
1344 \normalsize
1345
1346    Finally, you can create a bootstrap file as described in the previous
1347    problem above using this information.
1348
1349    If you are using Bacula version 1.38.0 or greater, when you select
1350    item 3 from the menu and enter the JobId, it will ask you if
1351    you would like to restore all the files in the job, and it will
1352    collect the above information and write the bootstrap file for
1353    you.
1354
1355 \item [Problem]
1356   You don't have a bootstrap file, and you don't have the Job report for
1357   the backup of your database, but you did backup the database, and you
1358   know the Volume to which it was backed up.
1359
1360 \item [Solution]
1361   Either bscan the tape (see below for bscanning), or better use {\bf bls}
1362   to find where it is on the tape, then use {\bf bextract} to
1363   restore the database.  For example,
1364
1365
1366 \footnotesize
1367 \begin{lstlisting}
1368 ./bls -j -V DLT-22Apr05 /dev/nst0
1369 \end{lstlisting}
1370 \normalsize
1371   Might produce the following output:
1372 \footnotesize
1373 \begin{lstlisting}
1374 bls: butil.c:258 Using device: "/dev/nst0" for reading.
1375 21-Jul 18:34 bls: Ready to read from volume "DLT-22Apr05" on device "DLTDrive"
1376 (/dev/nst0).
1377 Volume Record: File:blk=0:0 SessId=11 SessTime=1114075126 JobId=0 DataLen=164
1378 ...
1379 Begin Job Session Record: File:blk=118:0 SessId=11 SessTime=1114075126
1380 JobId=7510
1381    Job=CatalogBackup.2005-04-22_01.10.0 Date=22-Apr-2005 10:21:00 Level=F Type=B
1382 End Job Session Record: File:blk=118:4053 SessId=11 SessTime=1114075126
1383 JobId=7510
1384    Date=22-Apr-2005 10:23:06 Level=F Type=B Files=1 Bytes=210,739,395 Errors=0
1385 Status=T
1386 ...
1387 21-Jul 18:34 bls: End of Volume at file 201 on device "DLTDrive" (/dev/nst0),
1388 Volume "DLT-22Apr05"
1389 21-Jul 18:34 bls: End of all volumes.
1390 \end{lstlisting}
1391 \normalsize
1392   Of course, there will be many more records printed, but we have indicated
1393   the essential lines of output. From the information on the Begin Job and End
1394   Job Session Records, you can reconstruct a bootstrap file such as the one
1395   shown above.
1396
1397 \item[Problem]
1398   How can I find where a file is stored.
1399 \item[Solution]
1400   Normally, it is not necessary, you just use the {\bf restore} command to
1401   restore the most recently saved version (menu option 5), or a version
1402   saved before a given date (menu option 8).  If you know the JobId of the
1403   job in which it was saved, you can use menu option 3 to enter that JobId.
1404
1405   If you would like to know the JobId where a file was saved, select
1406   restore menu option 2.
1407
1408   You can also use the {\bf query} command to find information such as:
1409 \footnotesize
1410 \begin{lstlisting}
1411 *query
1412 Available queries:
1413      1: List up to 20 places where a File is saved regardless of the
1414 directory
1415      2: List where the most recent copies of a file are saved
1416      3: List last 20 Full Backups for a Client
1417      4: List all backups for a Client after a specified time
1418      5: List all backups for a Client
1419      6: List Volume Attributes for a selected Volume
1420      7: List Volumes used by selected JobId
1421      8: List Volumes to Restore All Files
1422      9: List Pool Attributes for a selected Pool
1423     10: List total files/bytes by Job
1424     11: List total files/bytes by Volume
1425     12: List Files for a selected JobId
1426     13: List Jobs stored on a selected MediaId
1427     14: List Jobs stored for a given Volume name
1428     15: List Volumes Bacula thinks are in changer
1429     16: List Volumes likely to need replacement from age or errors
1430 Choose a query (1-16):
1431 \end{lstlisting}
1432 \normalsize
1433
1434 \item[Problem]
1435   I didn't backup my database. What do I do now?
1436 \item[Solution]
1437   This is probably the worst of all cases, and you will probably have
1438   to re-create your database from scratch and then bscan in all your
1439   Volumes, which is a very long, painful, and inexact process.
1440
1441 There are basically three steps to take:
1442
1443 \begin{enumerate}
1444 \item Ensure that your SQL server is running (MySQL or PostgreSQL)
1445    and that the Bacula database (normally bacula) exists.  See the
1446    \ilink{Installation}{CreateDatabase} chapter of the manual.
1447 \item Ensure that the Bacula databases are created. This is also
1448    described at the above link.
1449 \item Start and stop the Bacula Director using the propriate
1450    bacula-dir.conf file so that it can create the Client and
1451    Storage records which are not stored on the Volumes.  Without these
1452    records, scanning is unable to connect the Job records to the proper
1453   client.
1454 \end{enumerate}
1455
1456 When the above is complete, you can begin bscanning your Volumes. Please
1457 see the \bsysxrlink{bscan}{bscan}{utility}{section} of the \utilityman{}.
1458
1459 \end{description}