]> git.sur5r.net Git - bacula/docs/blob - docs/manuals/es/problems/tips-en.tex
Setup es/misc es/problems and es/utility for translation
[bacula/docs] / docs / manuals / es / problems / tips-en.tex
1 %%
2 %%
3
4 \chapter{Tips and Suggestions}
5 \label{TipsChapter}
6 \index[general]{Tips and Suggestions }
7 \index[general]{Suggestions!Tips and }
8 \label{examples}
9 \index[general]{Examples }
10
11 There are a number of example scripts for various things that can be found in
12 the {\bf example} subdirectory and its subdirectories of the Bacula source
13 distribution. 
14
15 For additional tips, please see the \elink{Bacula
16 wiki}{http://wiki.bacula.org}.
17
18 \section{Upgrading Bacula Versions}
19 \label{upgrading}
20 \index[general]{Upgrading Bacula Versions }
21 \index[general]{Versions!Upgrading Bacula }
22 \index[general]{Upgrading}
23
24 The first thing to do before upgrading from one version to another is to
25 ensure that you don't overwrite or delete your production (current) version
26 of Bacula until you have tested that the new version works.
27
28 If you have installed Bacula into a single directory, this is simple: simply
29 make a copy of your Bacula directory. 
30
31 If you have done a more typical Unix installation where the binaries are
32 placed in one directory and the configuration files are placed in another,
33 then the simplest way is to configure your new Bacula to go into a single
34 file. Alternatively, make copies of all your binaries and especially your 
35 conf files.
36
37 Whatever your situation may be (one of the two just described), you should
38 probably start with the {\bf defaultconf} script that can be found in the {\bf
39 examples} subdirectory. Copy this script to the main Bacula directory, modify
40 it as necessary (there should not need to be many modifications), configure
41 Bacula, build it, install it, then stop your production Bacula, copy all the
42 {\bf *.conf} files from your production Bacula directory to the test Bacula
43 directory, start the test version, and run a few test backups. If all seems
44 good, then you can proceed to install the new Bacula in place of or possibly
45 over the old Bacula. 
46
47 When installing a new Bacula you need not worry about losing the changes you
48 made to your configuration files as the installation process will not
49 overwrite them providing that you do not do a {\bf make uninstall}.
50
51 If the new version of Bacula requires an upgrade to the database,
52 you can upgrade it with the script {\bf update\_bacula\_tables}, which
53 will be installed in your scripts directory (default {\bf /etc/bacula}),
54 or alternatively, you can find it in the  
55 {\bf \lt{}bacula-source\gt{}/src/cats} directory.
56
57 \section{Getting Notified of Job Completion}
58 \label{notification}
59 \index[general]{Getting Notified of Job Completion }
60 \index[general]{Completion!Getting Notified of Job }
61
62 One of the first things you should do is to ensure that you are being properly
63 notified of the status of each Job run by Bacula, or at a minimum of each Job
64 that terminates with an error. 
65
66 Until you are completely comfortable with {\bf Bacula}, we recommend that you
67 send an email to yourself for each Job that is run. This is most easily
68 accomplished by adding an email notification address in the {\bf Messages}
69 resource of your Director's configuration file. An email is automatically
70 configured in the default configuration files, but you must ensure that the
71 default {\bf root} address is replaced by your email address. 
72
73 For additional examples of how to configure a Bacula, please take a look at the
74 {\bf .conf} files found in the {\bf examples} sub-directory. We recommend the
75 following configuration (where you change the paths and email address to
76 correspond to your setup). Note, the {\bf mailcommand} and {\bf
77 operatorcommand} should be on a single line. They were split here for
78 presentation: 
79
80 \footnotesize
81 \begin{verbatim}
82 Messages {
83   Name = Standard
84   mailcommand = "/home/bacula/bin/bsmtp -h localhost
85                 -f \"\(Bacula\) %r\"
86                 -s \"Bacula: %t %e of %c %l\" %r"
87   operatorcommand = "/home/bacula/bin/bsmtp -h localhost
88                 -f \"\(Bacula\) %r\"
89                 -s \"Bacula: Intervention needed for %j\" %r"
90   Mail = your-email-address = all, !skipped, !terminate
91   append = "/home/bacula/bin/log" = all, !skipped, !terminate
92   operator = your-email-address = mount
93   console = all, !skipped, !saved
94 }
95 \end{verbatim}
96 \normalsize
97
98 You will need to ensure that the {\bf /home/bacula/bin} path on the {\bf
99 mailcommand} and the {\bf operatorcommand} lines point to your {\bf Bacula}
100 binary directory where the {\bf bsmtp} program will be installed. You will
101 also want to ensure that the {\bf your-email-address} is replaced by your
102 email address, and finally, you will also need to ensure that the {\bf
103 /home/bacula/bin/log} points to the file where you want to log all messages. 
104
105 With the above Messages resource, you will be notified by email of every Job
106 that ran, all the output will be appended to the {\bf log} file you specify,
107 all output will be directed to the console program, and all mount messages
108 will be emailed to you. Note, some messages will be sent to multiple
109 destinations. 
110
111 The form of the mailcommand is a bit complicated, but it allows you to
112 distinguish whether the Job terminated in error or terminated normally. Please
113 see the 
114 \ilink{Mail Command}{mailcommand} section of the Messages
115 Resource chapter of this manual for the details of the substitution characters
116 used above. 
117
118 Once you are totally comfortable with Bacula as I am, or if you have a large
119 number of nightly Jobs as I do (eight), you will probably want to change the
120 {\bf Mail} command to {\bf Mail On Error} which will generate an email message
121 only if the Job terminates in error. If the Job terminates normally, no email
122 message will be sent, but the output will still be appended to the log file as
123 well as sent to the Console program. 
124
125 \section{Getting Email Notification to Work}
126 \label{email}
127 \index[general]{Work!Getting Email Notification to }
128 \index[general]{Getting Email Notification to Work }
129
130 The section above describes how to get email notification of job status.
131 Occasionally, however, users have problems receiving any email at all. In that
132 case, the things to check are the following: 
133
134 \begin{itemize}
135 \item Ensure that you have a valid email address specified on your  {\bf Mail}
136    record in the Director's Messages resource. The email  address should be fully
137    qualified. Simply using {\bf root} generally  will not work, rather you should
138 use {\bf root@localhost} or better  yet your full domain.  
139 \item Ensure that you do not have a {\bf Mail} record in the Storage  daemon's
140    or File daemon's configuration files. The only record  you should have is {\bf
141    director}:  
142
143 \footnotesize
144 \begin{verbatim}
145       director = director-name = all
146       
147 \end{verbatim}
148 \normalsize
149
150 \item If all else fails, try replacing the {\bf mailcommand} with 
151
152    \footnotesize
153 \begin{verbatim}
154 mailcommand = "mail -s test your@domain.com"
155 \end{verbatim}
156 \normalsize
157
158 \item Once the above is working, assuming you want to use {\bf bsmtp},  submit
159    the desired bsmtp command by hand and ensure that the email  is delivered,
160    then put that command into {\bf Bacula}. Small  differences in things such as
161 the parenthesis around the word  Bacula can make a big difference to some
162 bsmtp programs.  For example, you might start simply by using: 
163
164 \footnotesize
165 \begin{verbatim}
166 mailcommand = "/home/bacula/bin/bsmtp -f \"root@localhost\" %r"
167 \end{verbatim}
168 \normalsize
169
170 \end{itemize}
171
172 \section{Getting Notified that Bacula is Running}
173 \label{JobNotification}
174 \index[general]{Running!Getting Notified that Bacula is }
175 \index[general]{Getting Notified that Bacula is Running }
176
177 If like me, you have setup Bacula so that email is sent only when a Job has
178 errors, as described in the previous section of this chapter, inevitably, one
179 day, something will go wrong and {\bf Bacula} can stall. This could be because
180 Bacula crashes, which is vary rare, or more likely the network has caused {\bf
181 Bacula} to {\bf hang} for some unknown reason. 
182
183 To avoid this, you can use the {\bf RunAfterJob} command in the Job resource
184 to schedule a Job nightly, or weekly that simply emails you a message saying
185 that Bacula is still running. For example, I have setup the following Job in
186 my Director's configuration file: 
187
188 \footnotesize
189 \begin{verbatim}
190 Schedule {
191   Name = "Watchdog"
192   Run = Level=Full sun-sat at 6:05
193 }
194 Job {
195   Name = "Watchdog"
196   Type = Admin
197   Client=Watchdog
198   FileSet="Verify Set"
199   Messages = Standard
200   Storage = DLTDrive
201   Pool = Default
202   Schedule = "Watchdog"
203   RunAfterJob = "/home/kern/bacula/bin/watchdog %c %d"
204 }
205 Client {
206   Name = Watchdog
207   Address = rufus
208   FDPort = 9102
209   Catalog = Verify
210   Password = ""
211   File Retention = 1day
212   Job Retention = 1 month
213   AutoPrune = yes
214 }
215 \end{verbatim}
216 \normalsize
217
218 Where I established a schedule to run the Job nightly. The Job itself is type
219 {\bf Admin} which means that it doesn't actually do anything, and I've defined
220 a FileSet, Pool, Storage, and Client, all of which are not really used (and
221 probably don't need to be specified). The key aspect of this Job is the
222 command: 
223
224 \footnotesize
225 \begin{verbatim}
226   RunAfterJob = "/home/kern/bacula/bin/watchdog %c %d"
227 \end{verbatim}
228 \normalsize
229
230 which runs my "watchdog" script. As an example, I have added the Job codes
231 \%c and \%d which will cause the Client name and the Director's name to be
232 passed to the script. For example, if the Client's name is {\bf Watchdog} and
233 the Director's name is {\bf main-dir} then referencing \$1 in the script would
234 get {\bf Watchdog} and referencing \$2 would get {\bf main-dir}. In this case,
235 having the script know the Client and Director's name is not really useful,
236 but in other situations it may be. 
237
238 You can put anything in the watchdog script. In my case, I like to monitor the
239 size of my catalog to be sure that {\bf Bacula} is really pruning it. The
240 following is my watchdog script: 
241
242 \footnotesize
243 \begin{verbatim}
244 #!/bin/sh
245 cd /home/kern/mysql/var/bacula
246 du . * |
247 /home/kern/bacula/bin/bsmtp  \
248    -f "\(Bacula\) abuse@whitehouse.com" -h mail.yyyy.com \
249    -s "Bacula running" abuse@whitehouse.com
250 \end{verbatim}
251 \normalsize
252
253 If you just wish to send yourself a message, you can do it with: 
254
255 \footnotesize
256 \begin{verbatim}
257 #!/bin/sh
258 cd /home/kern/mysql/var/bacula
259 /home/kern/bacula/bin/bsmtp  \
260    -f "\(Bacula\) abuse@whitehouse.com" -h mail.yyyy.com \
261    -s "Bacula running" abuse@whitehouse.com <<END-OF-DATA
262 Bacula is still running!!!
263 END-OF-DATA
264 \end{verbatim}
265 \normalsize
266
267 \section{Maintaining a Valid Bootstrap File}
268 \label{bootstrap}
269 \index[general]{Maintaining a Valid Bootstrap File }
270 \index[general]{File!Maintaining a Valid Bootstrap }
271
272 By using a 
273 \ilink{ WriteBootstrap}{writebootstrap} record in each of your
274 Director's Job resources, you can constantly maintain a 
275 \ilink{bootstrap}{BootstrapChapter} file that will enable you to
276 recover the state of your system as of the last backup without having the
277 Bacula catalog. This permits you to more easily recover from a disaster that
278 destroys your Bacula catalog. 
279
280 When a Job resource has a {\bf WriteBootstrap} record, Bacula will maintain
281 the designated file (normally on another system but mounted by NFS) with up to
282 date information necessary to restore your system. For example, in my
283 Director's configuration file, I have the following record: 
284
285 \footnotesize
286 \begin{verbatim}
287  Write Bootstrap = "/mnt/deuter/files/backup/client-name.bsr"
288 \end{verbatim}
289 \normalsize
290
291 where I replace {\bf client-name} by the actual name of the client that is
292 being backed up. Thus, Bacula automatically maintains one file for each of my
293 clients. The necessary bootstrap information is appended to this file during
294 each {\bf Incremental} backup, and the file is totally rewritten during each
295 {\bf Full} backup. 
296
297 Note, one disadvantage of writing to an NFS mounted volume as I do is
298 that if the other machine goes down, the OS will wait forever on the fopen()
299 call that Bacula makes. As a consequence, Bacula will completely stall until
300 the machine exporting the NFS mounts comes back up. A possible solution to this
301 problem was provided by Andrew Hilborne, and consists of using the {\bf soft}
302 option instead of the {\bf hard} option when mounting the NFS volume, which is
303 typically done in {\bf /etc/fstab}/. The NFS documentation explains these
304 options in detail. However, I found that with the {\bf soft} option 
305 NFS disconnected frequently causing even more problems.
306
307 If you are starting off in the middle of a cycle (i.e. with Incremental
308 backups) rather than at the beginning (with a Full backup), the {\bf
309 bootstrap} file will not be immediately valid as it must always have the
310 information from a Full backup as the first record. If you wish to synchronize
311 your bootstrap file immediately, you can do so by running a {\bf restore}
312 command for the client and selecting a full restore, but when the restore
313 command asks for confirmation to run the restore Job, you simply reply no,
314 then copy the bootstrap file that was written to the location specified on the
315 {\bf Write Bootstrap} record. The restore bootstrap file can be found in {\bf
316 restore.bsr} in the working directory that you defined. In the example given
317 below for the client {\bf rufus}, my input is shown in bold. Note, the JobId
318 output has been partially truncated to fit on the page here: 
319
320 \footnotesize
321 \begin{verbatim}
322 (in the Console program)
323 *restore
324 First you select one or more JobIds that contain files
325 to be restored. You will then be presented several methods
326 of specifying the JobIds. Then you will be allowed to
327 select which files from those JobIds are to be restored.
328 To select the JobIds, you have the following choices:
329      1: List last 20 Jobs run
330      2: List Jobs where a given File is saved
331      3: Enter list of JobIds to select
332      4: Enter SQL list command
333      5: Select the most recent backup for a client
334      6: Cancel
335 Select item:  (1-6): 5
336 The defined Client resources are:
337      1: Minimatou
338      2: Rufus
339      3: Timmy
340 Select Client (File daemon) resource (1-3): 2
341 The defined FileSet resources are:
342      1: Other Files
343 Item 1 selected automatically.
344 +-------+------+-------+---------+---------+------+-------+------------+
345 | JobId | Levl | Files | StrtTim | VolName | File | SesId | VolSesTime |
346 +-------+------+-------+---------+---------+------+-------+------------+
347 | 2     | F    | 84    |  ...    | test1   | 0    | 1     | 1035645259 |
348 +-------+------+-------+---------+---------+------+-------+------------+
349 You have selected the following JobId: 2
350 Building directory tree for JobId 2 ...
351 The defined Storage resources are:
352      1: File
353 Item 1 selected automatically.
354 You are now entering file selection mode where you add and
355 remove files to be restored. All files are initially added.
356 Enter "done" to leave this mode.
357 cwd is: /
358 $ done
359 84 files selected to restore.
360 Run Restore job
361 JobName:    kernsrestore
362 Bootstrap:  /home/kern/bacula/working/restore.bsr
363 Where:      /tmp/bacula-restores
364 FileSet:    Other Files
365 Client:     Rufus
366 Storage:    File
367 JobId:      *None*
368 OK to run? (yes/mod/no): no
369 quit
370 (in a shell window)
371 cp ../working/restore.bsr /mnt/deuter/files/backup/rufus.bsr
372 \end{verbatim}
373 \normalsize
374
375 \section{Rejected Volumes After a Crash}
376 \label{RejectedVolumes}
377 \index[general]{Crash!Rejected Volumes After a }
378 \index[general]{Rejected Volumes After a Crash }
379
380 Bacula keeps a count of the number of files on each Volume in its Catalog
381 database so that before appending to a tape, it can verify that the number of
382 files are correct, and thus prevent overwriting valid data. If the Director or
383 the Storage daemon crashes before the job has completed, the tape will contain
384 one more file than is noted in the Catalog, and the next time you attempt to
385 use the same Volume, Bacula will reject it due to a mismatch between the
386 physical tape (Volume) and the catalog. 
387
388 The easiest solution to this problem is to label a new tape and start fresh.
389 If you wish to continue appending to the current tape, you can do so by using
390 the {\bf update} command in the console program to change the {\bf Volume
391 Files} entry in the catalog. A typical sequence of events would go like the
392 following: 
393
394 \footnotesize
395 \begin{verbatim}
396 - Bacula crashes
397 - You restart Bacula
398 \end{verbatim}
399 \normalsize
400
401 Bacula then prints: 
402
403 \footnotesize
404 \begin{verbatim}
405 17-Jan-2003 16:45 rufus-dir: Start Backup JobId 13,
406                   Job=kernsave.2003-01-17_16.45.46
407 17-Jan-2003 16:45 rufus-sd: Volume test01 previously written,
408                   moving to end of data.
409 17-Jan-2003 16:46 rufus-sd: kernsave.2003-01-17_16.45.46 Error:
410                   I cannot write on this volume because:
411                   The number of files mismatch! Volume=11 Catalog=10
412 17-Jan-2003 16:46 rufus-sd: Job kernsave.2003-01-17_16.45.46 waiting.
413                    Cannot find any appendable volumes.
414 Please use the "label"  command to create a new Volume for:
415     Storage:      SDT-10000
416     Media type:   DDS-4
417     Pool:         Default
418 \end{verbatim}
419 \normalsize
420
421 (note, lines wrapped for presentation)
422 The key here is the line that reads: 
423
424 \footnotesize
425 \begin{verbatim}
426   The number of files mismatch! Volume=11 Catalog=10
427 \end{verbatim}
428 \normalsize
429
430 It says that Bacula found eleven files on the volume, but that the catalog
431 says there should be ten. When you see this, you can be reasonably sure that
432 the SD was interrupted while writing before it had a chance to update the
433 catalog. As a consequence, you can just modify the catalog count to eleven,
434 and even if the catalog contains references to files saved in file 11,
435 everything will be OK and nothing will be lost. Note that if the SD had
436 written several file marks to the volume, the difference between the Volume
437 count and the Catalog count could be larger than one, but this is unusual. 
438
439 If on the other hand the catalog is marked as having more files than Bacula
440 found on the tape, you need to consider the possible negative consequences of
441 modifying the catalog. Please see below for a more complete discussion of
442 this. 
443
444 Continuing with the example of {\bf Volume = 11 Catalog = 10}, to enable to
445 Bacula to append to the tape, you do the following: 
446
447 \footnotesize
448 \begin{verbatim}
449 update
450 Update choice:
451      1: Volume parameters
452      2: Pool from resource
453      3: Slots from autochanger
454 Choose catalog item to update (1-3): 1
455 Defined Pools:
456      1: Default
457      2: File
458 Select the Pool (1-2):
459 +-------+---------+--------+---------+-----------+------+----------+------+-----+
460 | MedId | VolName | MedTyp | VolStat | VolBytes  | Last | VolReten | Recy | Slt |
461 +-------+---------+--------+---------+-----------+------+----------+------+-----+
462 | 1     | test01  | DDS-4  | Error   | 352427156 | ...  | 31536000 | 1    | 0   |
463 +-------+---------+--------+---------+-----------+------+----------+------+-----+
464 Enter MediaId or Volume name: 1
465 \end{verbatim}
466 \normalsize
467
468 (note table output truncated for presentation) First, you chose to update the
469 Volume parameters by entering a {\bf 1}. In the volume listing that follows,
470 notice how the VolStatus is {\bf Error}. We will correct that after changing
471 the Volume Files. Continuing, you respond 1, 
472
473 \footnotesize
474 \begin{verbatim}
475 Updating Volume "test01"
476 Parameters to modify:
477      1: Volume Status
478      2: Volume Retention Period
479      3: Volume Use Duration
480      4: Maximum Volume Jobs
481      5: Maximum Volume Files
482      6: Maximum Volume Bytes
483      7: Recycle Flag
484      8: Slot
485      9: Volume Files
486     10: Pool
487     11: Done
488 Select parameter to modify (1-11): 9
489 Warning changing Volume Files can result
490 in loss of data on your Volume
491 Current Volume Files is: 10
492 Enter new number of Files for Volume: 11
493 New Volume Files is: 11
494 Updating Volume "test01"
495 Parameters to modify:
496      1: Volume Status
497      2: Volume Retention Period
498      3: Volume Use Duration
499      4: Maximum Volume Jobs
500      5: Maximum Volume Files
501      6: Maximum Volume Bytes
502      7: Recycle Flag
503      8: Slot
504      9: Volume Files
505     10: Pool
506     11: Done
507 Select parameter to modify (1-10): 1
508 \end{verbatim}
509 \normalsize
510
511 Here, you have selected {\bf 9} in order to update the Volume Files, then you
512 changed it from {\bf 10} to {\bf 11}, and you now answer {\bf 1} to change the
513 Volume Status. 
514
515 \footnotesize
516 \begin{verbatim}
517 Current Volume status is: Error
518 Possible Values are:
519      1: Append
520      2: Archive
521      3: Disabled
522      4: Full
523      5: Used
524      6: Read-Only
525 Choose new Volume Status (1-6): 1
526 New Volume status is: Append
527 Updating Volume "test01"
528 Parameters to modify:
529      1: Volume Status
530      2: Volume Retention Period
531      3: Volume Use Duration
532      4: Maximum Volume Jobs
533      5: Maximum Volume Files
534      6: Maximum Volume Bytes
535      7: Recycle Flag
536      8: Slot
537      9: Volume Files
538     10: Pool
539     11: Done
540 Select parameter to modify (1-11): 11
541 Selection done.
542 \end{verbatim}
543 \normalsize
544
545 At this point, you have changed the Volume Files from {\bf 10} to {\bf 11} to
546 account for the last file that was written but not updated in the database,
547 and you changed the Volume Status back to {\bf Append}. 
548
549 This was a lot of words to describe something quite simple. 
550
551 The {\bf Volume Files} option exists only in version 1.29 and later, and you
552 should be careful using it. Generally, if you set the value to that which
553 Bacula said is on the tape, you will be OK, especially if the value is one
554 more than what is in the catalog. 
555
556 Now lets consider the case: 
557
558 \footnotesize
559 \begin{verbatim}
560   The number of files mismatch! Volume=10 Catalog=12
561 \end{verbatim}
562 \normalsize
563
564 Here the Bacula found fewer files on the volume than what is marked in the
565 catalog. Now, in this case, you should hesitate a lot before modifying the count
566 in the catalog, because if you force the catalog from 12 to 10, Bacula will
567 start writing after the file 10 on the tape, possibly overwriting valid data,
568 and if you ever try to restore any of the files that the catalog has marked as
569 saved on Files 11 and 12, all chaos will break out. In this case, you will
570 probably be better off using a new tape. In fact, you might want to see what
571 files the catalog claims are actually stored on that Volume, and back them up
572 to another tape and recycle this tape. 
573
574 \section{Security Considerations}
575 \label{security}
576 \index[general]{Considerations!Security }
577 \index[general]{Security Considerations }
578
579 Only the File daemon needs to run with root permission (so that it can access
580 all files). As a consequence, you may run your Director, Storage daemon, and
581 MySQL or PostgreSQL database server as non-root processes. Version 1.30 has
582 the {\bf -u} and the {\bf -g} options that allow you to specify a userid and
583 groupid on the command line to be used after Bacula starts. 
584
585 As of version 1.33, thanks to Dan Langille, it is easier to configure the
586 Bacula Director and Storage daemon to run as non-root. 
587
588 You should protect the Bacula port addresses (normally 9101, 9102, and 9103)
589 from outside access by a firewall or other means of protection to prevent
590 unauthorized use of your daemons. 
591
592 You should ensure that the configuration files are not world readable since
593 they contain passwords that allow access to the daemons. Anyone who can access
594 the Director using a console program can restore any file from a backup
595 Volume. 
596
597 You should protect your Catalog database. If you are using SQLite, make sure
598 that the working directory is readable only by root (or your Bacula userid),
599 and ensure that {\bf bacula.db} has permissions {\bf -rw-r\verb:--:r\verb:--:} (i.e. 640) or
600 more strict. If you are using MySQL or PostgreSQL, please note that the Bacula
601 setup procedure leaves the database open to anyone. At a minimum, you should
602 assign the user {\bf bacula} a userid and add it to your Director's
603 configuration file in the appropriate Catalog resource. 
604
605 If you use the make\_catalog\_backup script provided by Bacula, remember that
606 you should take care when supplying passwords on the command line.  Read the
607 \ilink{Backing Up Your Bacula
608 Database - Security Considerations }{BackingUpBaculaSecurityConsiderations}
609 section for more information.
610
611 \section{Creating Holiday Schedules}
612 \label{holiday}
613 \index[general]{Schedules!Creating Holiday }
614 \index[general]{Creating Holiday Schedules }
615
616 If you normally change tapes every day or at least every Friday, but Thursday
617 is a holiday, you can use a trick proposed by Lutz Kittler to ensure that no
618 job runs on Thursday so that you can insert Friday's tape and be sure it will
619 be used on Friday. To do so, define a {\bf RunJobBefore} script that normally
620 returns zero, so that the Bacula job will normally continue. You can then
621 modify the script to return non-zero on any day when you do not want Bacula to
622 run the job. 
623
624 \section{Automatic Labeling Using Your Autochanger}
625 \label{autolabel}
626 \index[general]{Automatic Labeling Using Your Autochanger }
627 \index[general]{Autochanger!Automatic Labeling Using Your }
628
629 If you have an autochanger but it does not support barcodes, using a "trick"
630 you can make Bacula automatically label all the volumes in your autochanger's
631 magazine. 
632
633 First create a file containing one line for each slot in your autochanger that
634 has a tape to be labeled. The line will contain the slot number a colon (:)
635 then the Volume name you want to use. For example, create a file named {\bf
636 volume-list}, which contains: 
637
638 \footnotesize
639 \begin{verbatim}
640 1:Volume001
641 2:TestVolume02
642 5:LastVolume
643 \end{verbatim}
644 \normalsize
645
646 The records do not need to be in any order and you don't need to mention all
647 the slots. Normally, you will have a consistent set of Volume names and a
648 sequential set of numbers for each slot you want labeled. In the example
649 above, I've left out slots 3 and 4 just as an example. Now, modify your {\bf
650 mtx-changer} script and comment out all the lines in the {\bf list)} case by
651 putting a \# in column 1. Then add the following two lines: 
652
653 \footnotesize
654 \begin{verbatim}
655   cat <absolute-path>/volume-list
656   exit 0
657 \end{verbatim}
658 \normalsize
659
660 so that the whole case looks like: 
661
662 \footnotesize
663 \begin{verbatim}
664   list)
665 #
666 # commented out lines
667    cat <absolute-path>/volume-list
668    exit 0
669    ;;
670 \end{verbatim}
671 \normalsize
672
673 where you replace \lt{}absolute-path\gt{} with the full path to the
674 volume-list file. Then using the console, you enter the following command: 
675
676 \footnotesize
677 \begin{verbatim}
678    label barcodes
679 \end{verbatim}
680 \normalsize
681
682 and Bacula will proceed to mount the autochanger Volumes in the list and label
683 them with the Volume names you have supplied. Bacula will think that the list
684 was provided by the autochanger barcodes, but in reality, it was you who
685 supplied the \lt{}barcodes\gt{}. 
686
687 If it seems to work, when it finishes, enter: 
688
689 \footnotesize
690 \begin{verbatim}
691    list volumes
692 \end{verbatim}
693 \normalsize
694
695 and you should see all the volumes nicely created. 
696
697 \section{Backing Up Portables Using DHCP}
698 \label{DNS}
699 \index[general]{DHCP!Backing Up Portables Using }
700 \index[general]{Backing Up Portables Using DHCP }
701
702 You may want to backup laptops or portables that are not always connected to
703 the network. If you are using DHCP to assign an IP address to those machines
704 when they connect, you will need to use the Dynamic Update capability of DNS
705 to assign a name to those machines that can be used in the Address field of
706 the Client resource in the Director's conf file. 
707
708 \section{Going on Vacation}
709 \label{Vacation}
710 \index[general]{Vacation!Going on }
711 \index[general]{Going on Vacation }
712
713 At some point, you may want to be absent for a week or two and you want to
714 make sure Bacula has enough tape left so that the backups will complete. You
715 start by doing a {\bf list volumes} in the Console program: 
716
717 \footnotesize
718 \begin{verbatim}
719 list volumes
720  
721 Using default Catalog name=BackupDB DB=bacula
722 Pool: Default
723 +---------+---------------+-----------+-----------+----------------+-
724 | MediaId | VolumeName    | MediaType | VolStatus |       VolBytes |
725 +---------+---------------+-----------+-----------+----------------+-
726 |      23 | DLT-30Nov02   | DLT8000   | Full      | 54,739,278,128 |
727 |      24 | DLT-21Dec02   | DLT8000   | Full      | 56,331,524,629 |
728 |      25 | DLT-11Jan03   | DLT8000   | Full      | 67,863,514,895 |
729 |      26 | DLT-02Feb03   | DLT8000   | Full      | 63,439,314,216 |
730 |      27 | DLT-03Mar03   | DLT8000   | Full      | 66,022,754,598 |
731 |      28 | DLT-04Apr03   | DLT8000   | Full      | 60,792,559,924 |
732 |      29 | DLT-28Apr03   | DLT8000   | Full      | 62,072,494,063 |
733 |      30 | DLT-17May03   | DLT8000   | Full      | 65,901,767,839 |
734 |      31 | DLT-07Jun03   | DLT8000   | Used      | 56,558,490,015 |
735 |      32 | DLT-28Jun03   | DLT8000   | Full      | 64,274,871,265 |
736 |      33 | DLT-19Jul03   | DLT8000   | Full      | 64,648,749,480 |
737 |      34 | DLT-08Aug03   | DLT8000   | Full      | 64,293,941,255 |
738 |      35 | DLT-24Aug03   | DLT8000   | Append    |  9,999,216,782 |
739 +---------+---------------+-----------+-----------+----------------+
740 \end{verbatim}
741 \normalsize
742
743 Note, I have truncated the output for presentation purposes. What is
744 significant, is that I can see that my current tape has almost 10 Gbytes of
745 data, and that the average amount of data I get on my tapes is about 60
746 Gbytes. So if I go on vacation now, I don't need to worry about tape capacity
747 (at least not for short absences). 
748
749 Equally significant is the fact that I did go on vacation the 28th of June
750 2003, and when I did the {\bf list volumes} command, my current tape at that
751 time, DLT-07Jun03 MediaId 31, had 56.5 Gbytes written. I could see that the
752 tape would fill shortly. Consequently, I manually marked it as {\bf Used} and
753 replaced it with a fresh tape that I labeled as DLT-28Jun03, thus assuring
754 myself that the backups would all complete without my intervention. 
755
756 \section{Exclude Files on Windows Regardless of Case}
757 \label{Case}
758 \index[general]{Exclude Files on Windows Regardless of Case}
759 % TODO: should this be put in the win32 chapter?
760 % TODO: should all these tips be placed in other chapters?
761
762 This tip was submitted by Marc Brueckner who wasn't sure of the case of some
763 of his files on Win32, which is case insensitive. The problem is that Bacula
764 thinks that {\bf /UNIMPORTANT FILES} is different from {\bf /Unimportant
765 Files}. Marc was aware that the file exclusion permits wild-cards. So, he
766 specified: 
767
768 \footnotesize
769 \begin{verbatim}
770 "/[Uu][Nn][Ii][Mm][Pp][Oo][Rr][Tt][Aa][Nn][Tt] [Ff][Ii][Ll][Ee][Ss]"
771 \end{verbatim}
772 \normalsize
773
774 As a consequence, the above exclude works for files of any case. 
775
776 Please note that this works only in Bacula Exclude statement and not in
777 Include. 
778
779 \section{Executing Scripts on a Remote Machine}
780 \label{RemoteExecution}
781 \index[general]{Machine!Executing Scripts on a Remote }
782 \index[general]{Executing Scripts on a Remote Machine }
783
784 This tip also comes from Marc Brueckner. (Note, this tip is probably outdated
785 by the addition of {\bf ClientRunBeforJob} and {\bf ClientRunAfterJob} Job
786 records, but the technique still could be useful.) First I thought the "Run
787 Before Job" statement in the Job-resource is for executing a script on the
788 remote machine (the machine to be backed up). (Note, this is possible as mentioned
789 above by using {\bf ClientRunBeforJob} and {\bf ClientRunAfterJob}).
790 It could be useful to execute
791 scripts on the remote machine e.g. for stopping databases or other services
792 while doing the backup. (Of course I have to start the services again when the
793 backup has finished) I found the following solution: Bacula could execute
794 scripts on the remote machine by using ssh. The authentication is done
795 automatically using a private key. First you have to generate a keypair. I've
796 done this by: 
797
798 \footnotesize
799 \begin{verbatim}
800 ssh-keygen -b 4096 -t dsa -f Bacula_key
801 \end{verbatim}
802 \normalsize
803
804 This statement may take a little time to run. It creates a public/private key
805 pair with no passphrase. You could save the keys in /etc/bacula. Now you have
806 two new files : Bacula\_key which contains the private key and Bacula\_key.pub
807 which contains the public key. 
808
809 Now you have to append the Bacula\_key.pub file to the file authorized\_keys
810 in the \textbackslash{}root\textbackslash{}.ssh directory of the remote
811 machine. Then you have to add (or uncomment) the line 
812
813 \footnotesize
814 \begin{verbatim}
815 AuthorizedKeysFile           %h/.ssh/authorized_keys
816 \end{verbatim}
817 \normalsize
818
819 to the sshd\_config file on the remote machine. Where the \%h stands for the
820 home-directory of the user (root in this case). 
821
822 Assuming that your sshd is already running on the remote machine, you can now
823 enter the following on the machine where Bacula runs: 
824
825 \footnotesize
826 \begin{verbatim}
827 ssh -i Bacula_key  -l root <machine-name-or-ip-address> "ls -la"
828 \end{verbatim}
829 \normalsize
830
831 This should execute the "ls -la" command on the remote machine. 
832
833 Now you could add lines like the following to your Director's conf file: 
834
835 \footnotesize
836 \begin{verbatim}
837 ...
838 Run Before Job = ssh -i /etc/bacula/Bacula_key 192.168.1.1 \
839                  "/etc/init.d/database stop"
840 Run After Job = ssh -i /etc/bacula/Bacula_key 192.168.1.1 \
841                  "/etc/init.d/database start"
842 ...
843 \end{verbatim}
844 \normalsize
845
846 Even though Bacula version 1.32 and later has a ClientRunBeforeJob, the ssh method still
847 could be useful for updating all the Bacula clients on several remote machines
848 in a single script. 
849
850 \section{Recycling All Your Volumes}
851 \label{recycle}
852 \index[general]{Recycling All Your Volumes }
853 \index[general]{Volumes!Recycling All Your }
854
855 This tip comes from Phil Stracchino. 
856
857 If you decide to blow away your catalog and start over, the simplest way to
858 re-add all your prelabeled tapes with a minimum of fuss (provided you don't
859 care about the data on the tapes) is to add the tape labels using the console
860 {\bf add} command, then go into the catalog and manually set the VolStatus of
861 every tape to {\bf Recycle}. 
862
863 The SQL command to do this is very simple, either use your vendor's
864 command line interface (mysql, postgres, sqlite, ...) or use the sql
865 command in the Bacula console:
866
867 \footnotesize
868 \begin{verbatim}
869 update Media set VolStatus='Recycle';
870 \end{verbatim}
871 \normalsize
872
873 Bacula will then ignore the data already stored on the tapes and just re-use
874 each tape without further objection. 
875
876 \section{Backing up ACLs on ext3 or XFS filesystems}
877 \label{ACLs}
878 \index[general]{Filesystems!Backing up ACLs on ext3 or XFS }
879 \index[general]{Backing up ACLs on ext3 or XFS filesystems }
880
881 This tip comes from Volker Sauer. 
882
883 Note, this tip was given prior to implementation of ACLs in Bacula (version
884 1.34.5). It is left here because dumping/displaying ACLs can still be useful
885 in testing/verifying that Bacula is backing up and restoring your ACLs
886 properly. Please see the 
887 \ilink{aclsupport}{ACLSupport} FileSet option in the
888 configuration chapter of this manual. 
889
890 For example, you could dump the ACLs to a file with a script similar to the
891 following: 
892
893 \footnotesize
894 \begin{verbatim}
895 #!/bin/sh
896 BACKUP_DIRS="/foo /bar"
897 STORE_ACL=/root/acl-backup
898 umask 077
899 for i in $BACKUP_DIRS; do
900  cd $i /usr/bin/getfacl -R --skip-base .>$STORE_ACL/${i//\//_}
901 done
902 \end{verbatim}
903 \normalsize
904
905 Then use Bacula to backup {\bf /root/acl-backup}. 
906
907 The ACLs could be restored using Bacula to the {\bf /root/acl-backup} file,
908 then restored to your system using: 
909
910 \footnotesize
911 \begin{verbatim}
912 setfacl --restore/root/acl-backup
913 \end{verbatim}
914 \normalsize
915
916 \section{Total Automation of Bacula Tape Handling}
917 \label{automate}
918 \index[general]{Handling!Total Automation of Bacula Tape }
919 \index[general]{Total Automation of Bacula Tape Handling }
920
921 This tip was provided by Alexander Kuehn. 
922
923 \elink{Bacula}{http://www.bacula.org/} is a really nice backup program except
924 that the manual tape changing requires user interaction with the bacula
925 console. 
926
927 Fortunately I can fix this.
928 NOTE!!! This suggestion applies for people who do *NOT* have tape autochangers
929 and must change tapes manually.!!!!! 
930
931 Bacula supports a variety of tape changers through the use of mtx-changer
932 scripts/programs. This highly flexible approach allowed me to create 
933 \elink{this shell script}{http://www.bacula.org/en/rel-manual/mtx-changer.txt} which does the following:
934 % TODO: We need to include this in book appendix and point to it.
935 % TODO:
936 Whenever a new tape is required it sends a mail to the operator to insert the
937 new tape. Then it waits until a tape has been inserted, sends a mail again to
938 say thank you and let's bacula continue its backup.
939 So you can schedule and run backups without ever having to log on or see the
940 console.
941 To make the whole thing work you need to create a Device resource which looks
942 something like this ("Archive Device", "Maximum Changer Wait", "Media
943 Type" and "Label media" may have different values): 
944
945 \footnotesize
946 \begin{verbatim}
947 Device {
948    Name=DDS3
949    Archive Device = # use yours not mine! ;)/dev/nsa0
950    Changer Device = # not really required/dev/nsa0
951    Changer Command = "# use this (maybe change the path)!
952          /usr/local/bin/mtx-changer %o %a %S"
953    Maximum Changer Wait = 3d          # 3 days in seconds
954    AutomaticMount = yes;              # mount on start
955    AlwaysOpen = yes;                  # keep device locked
956    Media Type = DDS3                  # it's just a name
957    RemovableMedia = yes;              #
958    Offline On Unmount = Yes;          # keep this too
959    Label media = Yes;                 #
960 }
961 \end{verbatim}
962 \normalsize
963
964 As the script has to emulate the complete wisdom of a mtx-changer it has an
965 internal "database" containing where which tape is stored, you can see this on
966 the following line:
967
968 \footnotesize
969 \begin{verbatim}
970 labels="VOL-0001 VOL-0002 VOL-0003 VOL-0004 VOL-0005 VOL-0006
971 VOL-0007 VOL-0008 VOL-0009 VOL-0010 VOL-0011 VOL-0012"
972 \end{verbatim}
973 \normalsize
974
975 The above should be all on one line, and it effectively tells Bacula that
976 volume "VOL-0001" is located in slot 1 (which is our lowest slot), that
977 volume "VOL-0002" is located in slot 2 and so on..
978 The script also maintains a logfile (/var/log/mtx.log) where you can monitor
979 its operation.
980
981 \section{Running Concurrent Jobs}
982 \label{ConcurrentJobs}
983 \index[general]{Jobs!Running Concurrent}
984 \index[general]{Running Concurrent Jobs}
985 \index[general]{Concurrent Jobs}
986
987 Bacula can run multiple concurrent jobs, but the default configuration files
988 do not enable it. Using the {\bf Maximum Concurrent Jobs} directive, you
989 can configure how many and which jobs can be run simultaneously. 
990 The Director's default value for {\bf Maximum Concurrent Jobs} is "1".
991
992 To initially setup concurrent jobs you need to define {\bf Maximum Concurrent Jobs} in 
993 the Director's configuration file (bacula-dir.conf) in the 
994 Director, Job, Client, and Storage resources.
995
996 Additionally the File daemon, and the Storage daemon each have their own
997 {\bf Maximum Concurrent Jobs} directive that sets the overall maximum
998 number of concurrent jobs the daemon will run.  The default for both the
999 File daemon and the Storage daemon is "20".
1000
1001 For example, if you want two different jobs to run simultaneously backing up
1002 the same Client to the same Storage device, they will run concurrently only if
1003 you have set {\bf Maximum Concurrent Jobs} greater than one in the Director
1004 resource, the Client resource, and the Storage resource in bacula-dir.conf. 
1005
1006 We recommend that you read the \ilink{Data
1007 Spooling}{SpoolingChapter} of this manual first, then test your multiple
1008 concurrent backup including restore testing before you put it into
1009 production.
1010
1011 Below is a super stripped down bacula-dir.conf file showing you the four
1012 places where the the file must be modified to allow the same job {\bf
1013 NightlySave} to run up to four times concurrently. The change to the Job
1014 resource is not necessary if you want different Jobs to run at the same time,
1015 which is the normal case. 
1016
1017 \footnotesize
1018 \begin{verbatim}
1019 #
1020 # Bacula Director Configuration file -- bacula-dir.conf
1021 #
1022 Director {
1023   Name = rufus-dir
1024   Maximum Concurrent Jobs = 4
1025   ...
1026 }
1027 Job {
1028   Name = "NightlySave"
1029   Maximum Concurrent Jobs = 4
1030   Client = rufus-fd
1031   Storage = File
1032   ...
1033 }
1034 Client {
1035   Name = rufus-fd
1036   Maximum Concurrent Jobs = 4
1037   ...
1038 }
1039 Storage {
1040   Name = File
1041   Maximum Concurrent Jobs = 4
1042   ...
1043 }
1044 \end{verbatim}
1045 \normalsize