]> git.sur5r.net Git - bacula/bacula/blob - bacula/technotes-1.39
kes Attempt to fix problems with the msg_queue crashing on Solaris
[bacula/bacula] / bacula / technotes-1.39
1               Technical notes on version 1.39  
2
3 General:
4 02Aug06
5 kes  Change the name of the technical notes file from kes-1.39 to
6      technotes-1.39.  Prefix my messages with 'kes  '.
7 kes  Allow dequeue_messages() to be called twice. Should fix bug  
8      # 649.
9 kes  Add Job type to bscan Job information output.
10 01Aug06
11 kes  Update copyright date in program files, and for the most part
12      put it on a #define.
13 kes  Implement %q in bsnprintf.c apparently I forgot it.
14 31Jul06
15 kes  Make disk-changer sed command compatible with FreeBSD.
16 kes  Make a first cut at a ReleaseNotes and ChangeLog for a 
17      beta release.
18 kes  Make make clean decend into the src/win32 directory.
19 kes  Fix some #ifdefing so that Solaris and FreeBSD compile 
20      sys/stat.h was turned off.
21 kes  Use suffix editing for new transfer rate messages.
22 kes  Attempt to come up with a workaround which seems to be an OS
23      bug where write() returns EBUSY.  IMO this should not happen.
24      It triggered in truncatebug test. The workaround retries using
25      a 100 ms wait.
26 kes  Eliminate a strerror() call in a class method that failed with
27      older C++ compilers.
28 kes  Use rm -rf rather than rmdir to delete the src/win32/release
29      directory during make clean.
30 30Jul06
31 kes  Make bscan ignore ACL streams.
32 kes  Update projects files with new Feature Requests.
33 kes  Generate current English and French manuals and upload
34      them to the site.
35 kes  Update the home page to include the new British/French flags to
36      switch between translations. Work done by Alexandre Baron.
37 kes  Make disk-changer script print an error message if the changer
38      directory is not defined.
39 kes  Create a generic DB routine for getting an int (32/64 bit) from
40      the DB.
41 kes  Add more migration code.
42 kes  Add a few more files to .cvsignore here and there.
43 kes  Minor fixes for SD write rate and despooling rate.
44 kes  Turn off new test code in src/console.c
45
46 Version 1.39.18
47 29Jul06
48 kes  Incremented the version number to signify that all of Robert's code
49      for Win32 that was in the branch is now integrated into the HEAD,
50      and that Eric has submitted code that we hope will provide limited
51      backward compatibility with 1.38 file daemons (more testing to be
52      done).
53 kes  I rationalized a few of the names of the variables (mainly jcr names)
54      that are used during migration as keeping three different jcrs at the
55      same time clear in one's head is not easy.
56
57 Version 1.39.17
58 28Jul06
59 eb   Tweak new runscript feature to work with 1.38.x FDs. 
60 eb   Correct crypto.c to fix segfault when restoring an encrypted stream 
61      on fd which don't use rsa keys.
62 eb   Add yes/no english keywords on localised yes/no questions.
63 27Jul06
64 kes  Several important commits from Robert Nelson for code cleanup and
65      Win32 build.
66 kes  Modify console.c so that when conio is enabled, it converts \n to
67      \n\r before outputting to the console.  Hopefully this will fix
68      the problems with expect in Perl that Eric saw.
69 24Jul06
70 kes  Change cats/sql.c to elimate %-*s format, which I think is turned
71      off in bsnprintf.
72 kes  Add Comment field to llist of a volume.
73 kes  Allow true/false in some yes/no questions.
74 kes  Implement update volume enable=(on|off|true|false|archived|0|1|2)
75 kes  Remove a few /n's when scanning commands from another daemon. This
76      permits adding additional fields later.
77 kes  Modify dbcheck to handle ctl-d and to delete Log table entries.
78 kes  Update README.mingw
79 22Jul06
80 kes  Tweak authentication to work with 1.38.x FDs. 
81 kes  Tweak catalog make scripts.
82 kes  Fix catalog upgrade scripts so that they work.
83 kes  Correct despooling debug code to eliminate race condition.
84 19Jul06
85 kes  Add additional fields as specified by Arno to LocationLog.
86 kes  Add comment field to the Media record.
87 kes  Add Time field to the Log record.
88 kes  Correct migration SQL (thanks to Bill Moran) so that it
89      runs with PostgreSQL also.
90 kes  Add spooling/despooling info in status output of SD.
91 17Jul06
92 kes  Spend a lot of time integrating mkcdrec with the rescue disk.
93 kes  Add VOLMGMT message class for volume management messages (none yet).
94 kes  Add CATALOG as a destination.     It goes into the LOG table.
95 kes  Implement the Log table in the DB.
96 kes  Implement the Location Log table in the DB (for user use).
97 kes  At Eric's request add a run_scripts() just after blast_data in
98      src/filed/job.c
99 10Jul06
100 kes  Add Enabled column to Location, correct some typos in DB schemas.
101 kes  Correct bug I introduced into RunScripts enum.
102 kes  Add log table to Catalog
103 kes  Purge original job migrated if the migration terminates normally.
104 kes  Cleanup purging of files/jobs so that it is done only in a 
105      single subroutine.
106 kes  Add new VOLMGMT message class.
107 kes  Add Catalog message destination (user conf code remains to be written).
108 09Jul06
109 kes  Modify read_record and friends to properly deal with migration         
110      needs.
111 kes  Update debug code in read_record.       
112 08Jul06
113      ======================= Warning ==========================
114      Separate read and write storage in Jobs in the Director. This
115      is a major rewrite of some of the low level code and hence has
116      a high probability of introducing bugs.
117      ==========================================================
118
119 kes  Move the job init code up to *before* the job is put into
120      the job queue (resource allocation queue). This permits the
121      job to establish whether it will read or write or do both.
122 kes  Add name() methods to all the resource classes.
123 kes  Implement separate read and write storage resource 
124      allocation/deallocation in jobq.c
125
126      ======================= Warning ==========================
127      Implemented new method of getting the default Storage from the Media
128      record rather than from the MediaType for restore.  As a fall
129      back, if no Storage is defined, use the MediaType.  This
130      eliminates most all prompts if there are multiple MediaTypes
131      used. This is an important and fundamental change.
132      ==========================================================
133
134 kes  Add more detail (Storage, Device) to list of volumes printed
135      for restore.
136 kes  More code in migrate. In particular start multiple jobs if
137      migrating a volume.
138 kes  Probably overkill, but ensure that the bsr is unique even within a 
139      job in FD and SD.
140 kes  Rework bsys.c drop() so that it now should work as expected.
141 kes  Update a bunch of old copyrights -kes  particularly in .h files.
142 kes  Remove src/lib/bshm.c/h
143 05Jul06
144 kes  Migration fixes
145 04Jul06
146      ======================= Warning ==========================
147         All hash codes in the database are now kept in world
148         compatible base64 format (no = filling). This means that
149         all FileSets will be updated and if you are running
150         verify jobs, you must do an InitCatalog.
151         Authentication uses the new algorithm, but should be
152         backward compatible with 1.38.x
153      ===========================================================
154
155 kes  Modify the authentication routines so that the 1.39.15 Director
156      always runs with the compatible binary to base64 code (same as
157      the rest of the world).  It will however detect if an SD or
158      FD is running the old code and if that is the case, will use
159      the old algorithm for authentication.  However, all consoles must
160      use the compatible algorithm, and all data entered into the database
161      (all hash signatures, MD5, SHA1, ..., and all FileSet hashes) will
162      use the compatible algorithm.
163 kes  Rename the cram_md5 routine names to be slightly more appropriate
164      to what they are doing (challenge and respond).
165 kes  Robert committed his #ifdef and header cleanup.
166 30Jun06
167 kes  Fix a complier warning in files/backup.c
168 kes  Cleanup NOT NULL vs DEFALT 0 in database creation.
169 kes  Tweak btape.
170 kes  Robert committed his low impact changes.
171 kes  I removed a size_t from the jcr.h definition.
172 kes  Update the tape regression scripts (still to be tested).
173 kes  Add gcc and gcc-c++ requires to srm as suggested by a user.
174 kes  Require done or quit to exit from in memory tree restore.
175 26Jun06
176 kes  Write install/uninstall of new manpages. There are now a
177      pile of man pages. Some of which need a lot of work.
178
179      ======================= Warning ==========================
180         The --mandir ./configure option now points to the top level
181         man directory.  The man files will be installed under
182         mandir/man8 and mandir/man1 as appropriate.
183      ==========================================================
184
185 kes  Add complete text of GPL to LICENSE.
186 kes  Implement job report that indicates where Storage and Pool
187      came from -kes  with overrides and Pool storage and NextPool,
188      it is all very complicated.
189 kes  Create a few common subroutines for backup.c and migrate.c
190 kes  Eliminate warning messages from tray-monitor.c
191 25Jun06
192 kes  Apply fix for scheduler for missing unlock_jobs().
193 kes  Clean out autoconf caches before rebuilding configure
194 kes  Fix the FreeBSD pthreads lib define updated by Dan.
195 kes  Add missing semicolon in src/console/console.c
196 kes  Add Robert's enhanced version of build-win32-cross-tools
197      as well as his patch file.
198 kes  Note, the new gcc options are likely to break building of
199      wx-console or the tray-monitor ...
200 24Jun06
201 kes  Implement Robert's suggestion to suppress printing compile lines.
202 kes  Detect GCC correctly (I hope)
203 kes  If using GCC (actually g++) add the following compiler flags
204      -fno-strict-aliasing -fno-exceptions -fno-rtti
205
206      ===================== Warning =============================
207      Turn on new bsnprintf() code.  This could cause print output
208      to look different.
209      ===========================================================
210
211 kes  Fix crypto when not using openssl. I previously overlooked this.
212 kes  Eliminate crypto type punning problems by eliminating void * and
213      using uint8_t * instead.
214 kes  Harden authentication failure in FD by single threading errors
215      and forcing a 6 second wait.
216
217      ===================== Warning =============================
218           Removed  "Accept Any Volume" directive.
219      ===========================================================
220
221 kes  Major cleanup and simplification of regress using shell functions
222      (more tests to be converted to new format)   
223 kes  Add detection of 64 bit Irix as indicated by user.
224 kes  Increment catalog database id from 9 to 10.
225 kes  Add a few of the new database fields to the various C++
226      structures.
227 kes  Implement code to fill in the most important new fields (e.g.
228      Media Enable).
229 kes  Ensure that most of the new fields are in create/get/insert/update.
230      More work to be done.
231 22Jun06
232 kes  Update some very old licenses in src/cats.
233 kes  Modify the database format for handling Migration jobs:
234       Add PriorJobId, RealEndTime to Job table
235       Delete MAC table
236       Remove Stripe from JobMedia record (not used, wasting space)
237       Add ScratchPoolId, RecyclePoolId, Enabled to Media record
238       Add Cost to Location table.
239 kes  Delete mac_record subroutines.
240 kes  Add new table values to create/update/get routines as appropriate.
241 kes  Update the update_tables and make_tables scripts.
242 kes  Make a first cut in using a union where multiple pointers (actually
243      pointers to pointers) are stored.
244 kes  Make some changes to base64.c suggested by Robert and others and add
245      a small amount of documentation.
246 kes  Add some changes suggested by Peter for Solaris (bregex...)
247 kes  Make runscript.h always built because it needs to be pulled into
248      more places.  In particular its RES was left out of a union.
249 kes  Renumber the enum{} list in runscript.h to avoid starting from zero.
250      This makes it slightly easier to detect uninitialized variables.
251 14Jun06
252 kes  Remove xpg4 lib from FreeBSD build as it is no longer needed and
253      sometimes creates install problems.
254 kes  Change a couple of %T in strftime to %H:%M:%S as seen in Robert
255      Nelson's code.  More to do.
256 kes  Convert a few store_bit to store_bool in filed_conf.c.       
257 kes  DVD tweak to block.c as supplied by Uwe Muessel.
258 04Jun06
259 kes  Modify configure.in to check for typeof().
260 kes  In findlib/attribs.c use typeof instead of templates if possible.
261 01Jun06
262 kes  Implement partial error messages for src/filed/acl.c
263 kes  Fix return code to fail when doing update barcodes and
264      Pool resource is not found. This previously caused Volumes
265      to be labeled as cleaning tapes.
266 kes  Small updates to projects.
267 27May06
268 kes  Add Eric Bollengier patch for new RunScript directive. It breaks
269      compatibility between dird and fd.
270 26May06
271 kes  Prevent DVD code from rewriting label if the device cannot be
272      opened read/write.
273 kes  Used __GNUC__ to detect GNU g++ as suggested by John Goerzen to
274      fix Debian build bug.
275 kes  Fix Dir/SD run race in migrate.c, verify.c, and restore.c
276 kes  Integrate manpages contributed by Jose Luis.
277 kes  Update projects file.
278 kes  Add manpages Makefile.in to configure.in
279 kes  Remove installation of bacula.8 in scripts directory.
280 24May06
281 kes  Implement patch submitted by cesarb in bug #606 to implement O_NOATIME
282      support.
283        O_NOATIME is a open() flag which makes it possible to read a file without
284        updating the inode atime (and also without the inode ctime update which
285        happens if you try to set the atime back to its previous value). It also
286        prevents a race condition when two programs are reading the same file, but
287        only one does not want to change the atime. It's most useful for backup
288        programs and file integrity checkers (and bacula can fit on both
289        categories).
290
291        Recent versions of the Linux kernel and glibc have support for it (the
292        glibc support being mostly copying the O_NOATIME definition to
293        bits/fcntl.h). If there's no support for it on the kernel, trying to use
294        it does nothing (since the kernel ignores unknown flags).
295
296        If the kernel has support for it, trying to use it either works, fails
297        silently (mostly in remote filesystems), or returns errno=EPERM (if you
298        are not either the owner of the file or root). A simple way to prevent the
299        failure is to open the file without the flag and set it later with
300        fcntl(F_SETFL), ignoring any EPERM errors.
301 kes  Applied patch posted by Jaime Ventura to bug #570 to correct failure
302      of restarted jobs to complete (due to a destroyed pthreads conditional
303      variable used by the message thread).
304 kes  Fixed bug #619 where Bacula would not restart jobs with MaxRestartTimes
305      set to zero. 
306 kes  Apply patch from John Goerzen bug #611 to fix bad manual links in the code.
307 kes  Apply patch from Rudolf Cejka bug #614 to removed trailing
308      colons in query.sql file.
309 kes  Apply patch from Rudolf Cejka bug #613 to correct prunning of files
310      not to create orphans.
311 kes  Apply patch from Rudolf Cejka bug #617 to use mtime instead of ctime
312      in restore long listing.
313 kes  Apply patch from Rudolf Cejka bug #609 to use MarkId in verify.c instead
314      of incorrect MarkedId.
315 kes  Apply patch from adioso bug #616 to correct text in manual (replace
316      Director with File daemon).
317 kes  Rework a few of the zlib changes so that they build properly.
318
319 21May06
320 kes  Move DIR "run" command to SD before starting the message thread
321      as suggested by Cristopher Hull to avoid a race deadlock from
322      two threads using the bsock structure.
323 kes  Modify LICENSE to correct some problems pointed out by Debian.
324 05May06
325 kes  Correct EOF with no \n lex.c problem.
326 kes  Tweak compat.h compat.cpp and merge with apcupsd
327 kes  Add additional INFO messages if autochanger cannot be used.
328
329 02May06
330 kes  Simplify Win32 Makefile
331 kes  Correct count of buffers/bytes used by smartall.c
332 kes  Updated compat.h after porting apcupsd to MinGW.
333 01May06
334 kes  Work on getting wx-console building on MinGW. wxWidgets now builds
335      started adding Makefile ...
336 kes  Moved MinGW library objects to src/win32/lib to reduce clutter.
337 30Apr06
338 kes  Reloading a bad configuration file doesn't kill director any more.
339      Thanks to fix from Eric Bollengier.
340 29Apr06
341 kes  Fix problem of accents with new Win32 code.
342 kes  Integrate Howard's VSS patch. Tweak it a bit. VSS now
343      works in the MinGW build with the exception that there
344      is a problem with accented characters -kes  i.e. there is
345      some mapping problem with wide characters.
346 kes  The code no longer compiles with Microsoft VC++.
347 28Apr06
348 kes  Start implementing Christopher's St.Bernard code.
349 kes  Add Christopher's mods for opening files.
350 kes  Strip \r \n from Win32 error messages (Christopher)
351 kes  Add more info about Win32 system if unknown (Christopher)
352 kes  Use bstrn(cpy, cat) routines to avoid overrun in compat.cpp
353 kes  Fix a number of incorrect strings marked for translation, when
354      they should not be (e.g. commands).
355 kes  Fix StartTime bug reported for ClientRunBeforeJob and RunBeforeJob
356      Patches supplied by user in bugs #608 and #599.
357 kes  Use most recent of st_ctime and st_mtime in restore tree DIR
358      listing. This fixes some problems with Win32 printing incorrect
359      values.
360 kes  Correct the clock shift comm time calculation between the DIR
361      and the FD. It was added rather than subtracted.
362 kes  Strip all backslashes in filenames to be restored on Win32
363      machines -kes  the names should all be in Unix format, and if
364      there are any backslashes it is most likely due to an improper
365      FileSet definition, and the files will not otherwise be 
366      restorable.
367 kes  Remove lib/regex.c (replaced by bregex.c).
368 kes  Delete src/win32/License.txt
369 kes  Modify installer to install LICENSE
370 26Apr06
371 kes  Fix bug in build-win32-cross-tools script reported by Howard
372 kes  Implement cross compiled bconsole
373 25Apr06
374 kes  Fix barcode test, eliminate BOOL (doesn't exist on Linux).
375 kes  Write first cut of README.mingw32
376 kes  Add back ua_label barcode fix from Rufolf Cejka.
377 kes  Integrate the majority of the Mingw cross-tools submission
378      made by Howard Thomson. Everything compiles, with zlib, openssl,
379      and VSS turned off. Linking needs a pthreads library ...
380 23Apr06
381 kes  Add 'Dir Status' button to the gnome console.
382 kes  More work on migration.
383 kes  Restore non-compatible base64 coding to permit compatibility.
384 kes  Display heap stats in Storage daemon without debug level.
385 22Apr06
386 kes  Integrate most of the MinGW changes -kes  more to do.
387 21Apr06
388 kes  Implement using pg_config for finding PostgreSQL files.
389      Fixes bug #600. Patch supplied by user.
390 kes  Remove -t option from mktemp in mtx_changer.in and use
391      working directory. Fixes bug #578.
392 kes  Update job start time after the any run before job so that
393      files created by the script are only backed up once. Fixes
394      bug #599.
395 kes  Strip trailing newline only from filenames entered in
396      the restore command when reading a file. This permits
397      the user to enter filenames with trailing spaces. Fixes
398      bug #549. The user supplied a patch that I modified slightly.
399 kes  Use the most recent time (st_mtime, st_ctime) in the dir
400      command in restore. This gives the user a better idea of what
401      the newest file really is. This fixes bug #574. The fix
402      was suggested by the user.
403 kes  Implement a compatible version of base64. This permits external
404      programs to duplicate Bacula's base64 algorithm using standard
405      routines. This fixes bugs #296, and 565. Patch submitted by   
406      author of bug #565.  
407      ================= Note ========================
408      Previous Signatures stored in the database are no longer
409      compatible with this. The main downside is for Verify jobs,
410      and doing an InitCatalog run will fix the problem. Also, the
411      authentication between the deamons is changed, so all daemons
412      must be simultaneously upgraded.
413      ==============================================
414      If you don't like this fix, set:
415        const bool compatible = true;
416      to
417        const bool compatible = false;
418      in src/lib/base64.c
419 20Apr06
420 kes  Ensure that DB signature is never NULL.
421 kes  Ensure that DB table names are not translated.
422 kes  Fix scheduler to handle time skew (eg daylight savings).
423 kes  Fix scheduler to use lock_jobs() to avoid most problems
424      with reload. Window is now milliseconds.
425 19Apr06
426 kes  Apply patch from Christopher Hull
427      kes  Allow multiple connections to database with different
428        parameters.
429      kes  Invalidate the scheduler when doing a reload. Fixes seg
430        fault, but still 60 second window.
431      kes  Additional info in Reschedule message.
432      kes  Use set_jcr_job_status() everywhere to prevent loss of
433        cancel, error.
434      kes  Display peer IP in FD if error from connecting DIR.
435      kes  Don't increment file count for DIRBEGIN.
436      kes  Replace illegal characters in Win32 filename by _.
437      kes  Add SE_CREATE_PERMANENT_NAME privilege in Win32.
438      kes  Hash hard link filenames rather than linked list.
439      kes  Fix for security failure in chdir on Win32.
440      kes  Add CreateDirectoryA/W win32 API entry points.
441 kes  Add /silent option to Win32 FD for Install/Remove service.
442 kes  Always print Heap statistics in FD.
443 18Apr06
444 kes  Remove the -f option from the chown in Makefile.in for more
445      portability.
446 kes  Change setting the group in Makefile.in to use chgrp for
447      more portability.
448 kes  Implement a write_store and read_store to replace
449      dirstore in reserve.c
450 kes  Implement a Bacula read/write lock for Python rather
451      than using the Python lock to avoid recursive problems.
452 kes  Correct the uninstall directory names in filed/Makefile.in
453      as reported by a user.
454 17Apr06
455 kes  Correct some problems with database creation (new tables).
456 kes  Replace a bunch of old 0x%x by %p.
457 kes  Get first cut of Migration with Job selection working.
458 16Apr06
459 kes  Change store_bit() to store_bool() for the Spooling in 
460      dird_conf.c -kes  bug reported by Robert Nelson.
461 15Apr06
462 kes  Correct Makefile bug found by Dan Langille.
463 14Apr06
464 kes  Correct Makefile for Solaris /bin/sh
465 kes  Correct mtx-changer.in for Solaris /bin/sh
466 kes  Abort if a conf resource does not have a Name =
467 12Apr06
468 kes  Change the name of the regex program to bregex.
469 kes  Add the bwild program to the tools directory. It is similar
470      to the bregex program.
471 kes  Implement create bregex.h and bregex.c in src/lib from the
472      Python regexp program.  
473 kes  Use the new bregex.c to implement Regex expressions on Win32.
474 11Apr06
475 kes  More work on migration.
476 kes  Implement wild program in tools directory for testing
477      wild-cards. Almost identical to the regex program.
478 kes  Up port VSS single thread locking code.
479 kes  Replace N_(..) by NT_(...) to inhibit translation of
480      commands.
481 kes  Modify Makefile to change the permissions on Working Directory
482      to 770 if the directory is created.
483 kes  Do not fail the Makefile if changing the permissions or 
484      owner/group on WorkingDir fails.
485 kes  Remove early selection of Scratch Volumes in the recycling
486      algorithm.
487 kes  Correct the old recycling algorithm so that Scratch Volumes
488      are selected when looking for a Volume in the changer.
489 kes  Correct a typo in the Verify SQL reported by Joe Park.
490 10Apr06
491 kes  Remove automatic case folding on Windows FDs. You must
492      explictly use the 'Ignore Case = yes' option.
493 kes  Remove the code added to 1.38.6 and 1.38.7 that pulls a
494      scratch volume in an Autochanger early in the 'recycling'
495      algorithm.  
496 09Apr06
497 kes  Make weof() and clrerror() methods of class DEVICE.
498 08Apr06
499 kes  Tweak license to include Microsoft restrictions.
500 kes  Move mysql.reconnect to after real_connect().     Thanks to
501      Frank Sweetser for the patch.
502 kes  Disallow a backslash in a File = directive (Windows junk)
503      unless the string is quoted.                     
504 kes  Apply Eric's patch to ua_label.c so that daemon protocol
505      is not translated.
506 kes  Add NT_ definition for strings that should not be translated.
507 kes  Apply NT_() to ua_label.c
508 kes  Remove timed wait for VSS on Win2K3 as it is not yet
509      implemented.
510 kes  Correct bacula.in script to reference bacula-ctl-xx in the
511      sysconfig directory rather than the bin directory.
512 26Mar06
513 kes  Fix a long standing bug in the bacula start/stop scripts.
514 kes  Attempt to add the new bacula-ctl-* files to the rpm.
515 kes  Switch to using typeof() for list traversing to avoid
516      as many FC5 g++ compiler warnings as possible.
517 25Mar06
518 kes  Split the bacula start/start script into four files:
519       bacula         -kes  starts and stops calling other scripts
520       bacula-ctl-dir -kes  starts/stops the director
521       bacula-ctl-fd  -kes  starts/stops the File daemon
522       bacula-ctl-sd  -kes  starts/stops the Storage daemon
523 24Mar06
524 kes  Create datestyle fix for PostgreSQL. Fixes bug #574.
525 kes  Correct editing of JobId from int to int64 in fd_cmds.c
526 kes  Eliminate FileSet name race with bash_spaces() and multiple
527      threads by bashing in a local.
528 kes  Fix error return from 'use storage' to print a correct error
529      message rather than nothing.
530 kes  Correct false re-read last block error message when two jobs 
531      are simultaneously writing at the end of a tape.
532 kes  Simplify exit conditions in the reserve.c code to avoid     
533      possible non-release of reservation_lock().
534 kes  Suffle lock order in reserve to avoid deadlock between
535      reservation lock and device mutex.
536 21Mar06
537 kes  Initialize jcr mutex before first use. Thanks to Thorsten for
538      tracking this down for me !!!! as it broke the Win32 build.
539 20Mar06
540 kes  Integrate addition of line count limitation to bsmtp -l from
541      Sebastian Stark <stark at tuebingen.mpg.de>
542 17Mar06
543 kes  Implement regex test program in tools directory.
544 kes  Attempt to fix time problem with bsmtp with foreign langs.
545 kes  Add strip_trailing_newline() submitted by user.
546 kes  Implement regex matching in migrate.c
547 16Mar06
548 kes  Fix bug #537 to allow arbitrary time to mount a volume for
549      restore, if polling is turned on.     
550 kes  If dir_user or dir-group is specified in ./configure apply it to
551      the working-dir. Fixes bug #533.
552 kes  If rescheduling a job cancel the previous incarnation with the SD.
553      Fixes bugs #566 and 557.
554 kes  Fix bug #567 do_message() definition type conflict.
555
556 14Mar06
557 kes  Add more jcr methods and make mutex and use_count private.
558 kes  Create lock/unlock methods for jcr.
559 kes  Fix PostgreSQL bug doing sql_data_seeek() by explicitly reading
560      records to get to seek position.
561 kes  Integrate patch from bug #561 to correct conio.c signal definitions.
562 kes  Fix Rescheduling failed Jobs. Ensure that SD message thread 
563      terminates correctly by doing pthread_kill(). Do not destroy
564      SD cond wait variable between executions of the job. Use local
565      mutex for cond variable to avoid blocking jcr chain. Fix poor 
566      use of jcr use count in jobq.c for restarted jobs.
567 kes  Fix obsolete usage of foreach_dlist() to use foreach_jcr() in
568      lib/jcr.c -kes  prevents locking the jcr chaing.
569 kes  Apply patch from bug #564, which corrects listing volumes with
570      multiple autochangers. Apply same fix to next volume list.
571 kes  Fix bug #562 where restore bootstrap file is not unique.
572 kes  More details in implementing David's migration syntax proposal.
573 kes  Save and restore dcr when swapping drives so that if we have
574      a write dcr it is not lost.
575 kes  Use new routine lock_reservations() to lock the reservations
576      system, and call it while looking for a volume in askdir.c.
577      This could possibly fix bug #543.
578 kes  Stop SD command loop if job is canceled.
579
580 08Mar06
581 kes  Remove old code from findlib/create_file.c
582 kes  Rename mac.c migrate.c
583 kes  Add user friendly display of VolBytes in job report.
584 kes  Rename target... to previous... to make it a bit easier to
585      understand.
586 kes  Add selection type and selection pattern to Migration (idea
587      given by David Boyes). 
588
589 04Mar06
590 kes  The po files should now be current.
591 kes  Fix new sql_use_result() code to properly release the
592      buffers in all cases.
593 kes  Use the keyword ujobid to mean the unique job id; job or jobname
594      to mean the Job name given on the Name directive, and jobid to
595      be the numeric (non-unique) job id.
596 kes  Allow listing by any of the above.
597 kes  Add the user friendly job report code for reporting job elapsed time
598      and rates with suffexes from John Kodis <kodis at comcast.net>.
599 kes  Add Priority and JobLevel as Python settable items.
600 kes  Use TEMPORARY table creation where the table is created by
601      Bacula.
602 kes  Add new code submitted by Eric for waiting on specific jobid.
603 kes  Add ACL checking for the dot commands.
604 kes  Fix restore of writable FIFOs.
605 kes  Fix a bug in bpipe where the string was freed too early.
606 27Feb06
607 kes  Modify the Python class examples to inherit object -kes  new way
608      of defining classes. Patch from Felix Schwarz.
609 kes  Implement jobuid to replace old usage of job in keywords as
610      suggested by Eric Bollengier.
611 kes  Apply patch for enhancing wait from Eric Bollengier. On can now:
612       wait  (wait for all jobs to stop)
613       wait jobid=nn
614       wait jobuid=unique id
615       wait job=job-name
616 kes  Implement write variables for Python to set Priority (anytime), and
617      Job Level, only during JobInit event.
618 26Feb06
619 kes  Fix the block listing bug pointed out by Arno.
620 kes  Update the po files at Eric's request.
621 24Feb06
622 kes  Fix Maximum Changer Wait, Maximum Open Wait, Maximum Rewind Wait to 
623      accept time qualifiers.
624 kes  Make catalog respect ACL.
625 kes  Add recycle count to Media record.
626
627 Changes to 1.39.6-beta1 24Feb04
628 23Feb06
629 kes  Add Rudolf Cejka's new rc-chio-changer.
630 kes  Implement pulling Volume from Scratch Pool if the
631      Volume is in the autochanger.
632 kes  Implement additional command arguments for update Volume.
633
634 Changes to 1.39.5 
635 22Feb06
636 kes  Back port changes to 1.38.5
637 kes  Fix recycle SQL for StorageId.
638 kes  Fix misplaced quote in mtx-changer script.
639 20Feb06
640 kes  Note. Your database must be updated, or you must create 
641      a new database. I have not yet incremented the database level.
642 kes  Add Location table. 
643 kes  Add LocationId, DeviceId, and MediaTypeId to Media record.
644 18Feb06
645 kes  Implement create/get mac record in database for adding extended
646      Migration data to the job record.
647 kes  Add new MAC table to update/make database scripts.
648 kes  Return Storage name used when getting VolumeNames for a job.
649 kes  Change bsr file keyword Storage to Device, which is more accurate.
650 kes  Ensure that Mac records are pruned/purged.
651 kes  Tweak SD tools to deal with changing media type.
652 kes  Integrate more dev.c subroutines as methods (e.g. strerror, bsr, ...)
653 kes  Pass pointer to dcr pointer to acquire_device_for_read() so
654      that the subroutine can switch devices, and hence dcrs.
655 kes  Modify the multiple MediaType read code to re-use the same
656      dcr when switching devices. This makes the code much more
657      robust.
658 kes  Integrate patch from Karl Hakimian that reads JobIds, FileIndexes
659      from a table for restore.
660 kes  Add Storage name to VolParams, but it really should be Device.
661 14Feb06
662 kes  Add disk-changer to scripts directory + configure/Makefile
663 kes  Eliminate PoolId from jcr -kes  it is in jcr->jr.PoolId
664 kes  Implement store_bit scanner to replace store_yesno.     Mostly done.
665 kes  Implement new store_bool that stores in a bool. 
666 kes  Add true/false to yes/no conf directives.
667 kes  Make first cut at changing appropriate store_yesno to store_bool.
668 kes  Complete implementation of Pool storage devices.
669 kes  Move starting clones to job.c
670 kes  Move create_restore_bootstrap_file() to job.c
671 kes  Make copy_storage() more general to be able to handle
672      Pool storage.
673 kes  Cleanup a lot of migration code for manual running, including
674      using Pool storage.
675 kes  Move getting a scratch Volume into a subroutine.
676 kes  Make all places a Volume that is added to a pool to 
677      respect max vols.
678 kes  Fix bug in autochanger recycle code (improper edit 64 bit).
679 kes  Fix segfault in restore command when no value specified.
680 kes  Start adding code to handle multiple MediaTypes in restore.
681 kes  Eliminate race condition in getting Volume name for
682      two drive autochanger.
683 kes  More debug code in autochanger.
684 kes  Add storage keyword to bootstrap file, add parsing.
685 kes  Move slot in bsr file into Volume record as there will be
686      a different slot for each Volume.
687 kes  Create reserve.h
688 07Feb06
689 kes  Implement Pool storage overrides.
690 06Feb06
691 kes  Implement first cut of Migration.
692 kes  Implement mysql_use_result() from patch by Karl Hakimian.
693      This reduces significantly the memory consumption during
694      the restore tree building, and hence runs faster too.
695 kes  Implement StorageId patch supplied by user (reggie) in bug
696      #536.  This should permit Bacula to work correctly with two
697      autochangers.
698 kes  Implement Job listing variations suggested by a user.
699 kes  Move updating bootstrap code in backup.c to subroutine
700      update_bootstrap_file().
701 kes  Add new job status elapsed time and bytes written user
702      friendly job report output patch sent by John Kodis
703      <kodis at comcast.ne>.
704 kes  Implement a storage list in Pools.
705 kes  Separate out setup_job() code from run_job().
706 kes  Get migration working -kes  lots of changes in mac.c in both
707      DIR and SD.
708 kes  Apply patch from user (Eric Bollengier I think) that fixes a     
709      DIR crash when no arguments are supplied to a dot command.
710 kes  Fix typo (strcpy->strcmp) in ua_prune.c as reported by Martin.
711 kes  Fix command arg name->volume in label command of gnome-console.
712 kes  Fix SD acquire.c to release correct DCR by explicitly testing
713      on the dcr address rather than trying to devine if it is a read
714      or write dcr.  This failed in error conditions when the device was
715      not fully setup.
716  
717 30Jan06
718 kes  Apply user supplied patch for more readable rate output
719      in job report.
720 kes  Continue implementing migration.
721 kes  Implement support for removable filesystems in SD.
722 kes  Ensure that btraceback scripts can be read by anyone.
723 kes  Replace dvd-freespace and dvd-writepart by dvd-handler.
724 kes  Correct bug where canceling restore before the FD contacts
725      the SD causes the drive to be left in read mode.
726 kes  Move ofline_or_rewind into DEVICE::close().
727 kes  Eliminate close_device.
728 kes  Convert several dev subroutines to methods (e.g. bsf,
729      eod, ...)
730 kes  Eliminate force_close_device().
731 kes  Implement Device Type directive in Device resource that
732      can have values File, Tape, Fifo, DVD, or Prog.
733 kes  Add has_cap() method to Device.
734 Changes to 1.39.4
735 17Jan06
736 kes  Add patch from bug #527 to allow RedHat user to specify
737      options/user/group for starting each daemon in      
738      /etc/sysconf/bacula.
739 16Jan06
740 kes  Add two new queries to query.sql provided by Arno. One
741      list volumes known to the Storage device, and the other
742      lists volumes possibly needing replacement (error, ...).
743 15Jan06
744 kes  Add periodic (every 24 hours) garbage collection of memory 
745      pool by releasing free buffers.
746 14Jan06
747 kes  Correct bug counting sized (for display only) in smartall.c
748 kes  Print FD mempool stats if debug > 0 rather than 5.
749 12Jan06
750 kes  Make db_lock() mutex error fail the job rather than abort
751      Bacula.  Canceling the job caused the mutex to fail.
752 kes  Correct bug in alist.c that re-allocated the list if the
753      number of items goes to zero.
754 kes  Move the reservation system thread locking to the top level
755      so that one job at a time tries all possible drives before
756      waiting.
757 kes  Implement a reservation 'fail' message queue that is built            
758      and destroyed on each pass through the reservation system.
759      These messages are displayed in a 'Jobs waiting to reserve
760      a drive' list during a 'status storage='.  Note, multiple
761      messages will generally print for each JobId because they
762      represent the different problems with either the same drive
763      or different drives.  If this output proves too confusing
764      of voluminous, I will display it only when debug level 1
765      or greater is enabled in the SD.
766 11Jan06
767 kes  Add enable/disable job=<job-name>.     This command prevents
768      the specified job from being scheduled. Even when disabled,
769      the job can be manually started from the console.
770 kes  During 'update slots' clear all InChanger flags where the
771      StorageId is zero (old Media records).
772
773 Beta release 1.38.4:
774 09Jan06
775 kes  Fix autochanger code to strip leading spaces from returned
776      slots number. Remove bc from chio-changer.
777 kes  Back port a bit of 1.39 crypto code to reduce diffs.
778 kes  Fix first call to autochanger that missed close()ing the
779      drive. Put close() just before each run_program().  Fixes
780      Arno's changer bug.
781 07Jan06
782 kes  Add PoolId to Job record when updating it at job start time.
783 06Jan06
784 kes  Pull in more code from 1.39 so that there are fewer file
785      differences (the new ua_dotcmds.c, base64.h, crypto.h
786      hmac.c jcr.c (dird and lib) lib.h md5.h parse_conf.c 
787      util.c. Aside from ua_dotcmds.c these are mostly crypto
788      upgrades.
789 kes  Implement new method of walking the jcr chain. The
790      incr/dec of the use_count is done within the walking
791      routines.  This should prevent a jcr from being freed
792      from under the walk routines.
793
794
795 Changes to 1.39.3:
796 04Jan06
797 kes  Start implementing Verify list output.
798 kes  Move the suitable_drive flag to a better place to prevent
799      premature termination of the reservation if all drives
800      are busy -kes  should fix Arno's diff/inc pool failures.
801 26Dec05
802 kes  Add mutex to single thread VSS code in Win32.
803 22Dec05
804 kes  Simplify code in askdir.c that waits for creating an appendable
805      volume so that it can handle multiple returns from the wait
806      code.
807 kes  Modify the wait code to permit multiple returns.
808 kes  Return a zero when "autochanger drives" is called and
809      it is not an autochanger.
810 kes  Make rewind_dev() a method taking a DCR as an argument.
811      This permits closing and reopening the drive if the
812      rewind fails as happens if the drive was loaded while the
813      file descriptor was open. This refreshes the file descriptor.
814 kes  Remove the ST_OPENED flag and always rely on fd < 0 for knowing
815      if the device is open or not.  This should eliminate
816      Arnos problem.
817 kes  Return error if reserve cannot find at least one suitable device.
818 kes  Make wait_for_sysop() return correct state information.
819 kes  Fix Win32 state file problem. write was not using compat
820      code. This should fix bug #500.
821 21Dec05
822 kes  Modify gui on command to set only GUI mode and not batch.
823 kes  Modify .messages command to always print messages regardless
824      of the mode.
825 kes  If GUI mode is on, suppress automatic printing of 
826      You have messages. 
827 kes  Delete old bnet packet code.
828 kes  Ignore new BNET_START_SELECT and BNET_END_SELECT signals in
829      wx-console. -kes  not implemented because bconsole must be updated.
830 kes  Modify restore command in wx-console to set gui on and to use
831      only .messages instead of messages.  Hopefully this fixes bug
832      #514.
833 kes  Fix seg fault in exit of acquire when canceling a job --
834      reported by Wolfgang Denk
835 kes  Pull in latest reservation system changes from 1.38
836 kes  Make .messages command always print messages regardless
837      of the automessages flag.
838 17Dec05
839 kes  Fix seg fault if user labels a drive directory bug #513
840 kes  Remove quotes around Version as it breaks things.
841 16Dec05
842 kes  Merge in Aleksandar Milivojevic's mods to the spec file.
843 kes  Apply sparse code fix for raw drives and fifos. Bug 506
844 kes  Thorsten fixed Unicode cd problem with wx-console bug 505.
845 14Dec05
846 kes  Correct reservation system to do a last ditch try
847      for any mounted volume, then anyone anywhere.
848 kes  Add quotes around table Version because of
849      error in MySQL 4.1.15 -kes  bug report submitted.
850 kes  Correct some minor problems with btape in the fill
851      command.
852 kes  Updates to ssh-tunnel from Joshua Kugler.
853 kes  Added a report.pl program from Jonas Bjorklund.               
854 kes  Simplify the O_NONBLOCK open() code for tape drives,
855      and always open nonblocking.
856 kes  Do not wait for open() if EIO returned (shouldn't happen).
857 kes  Eliminate 3 argument to tape open().
858 kes  Correct the slot # edited in the 3995 Bad autochanger unload
859      message.
860 kes  With -S on bscan (show progress) do not divide by zero.
861 13Dec05
862 kes  Make cancel pthread_cond_signal() pthread_cond_broadcast().
863 kes  When dcr is freed, also broadcast dev->wait_next_vol signal.
864 kes  Remove unused code in wait_for_device.     
865 kes  Make wait_for_device() always return after 60 seconds of wait.
866
867 Changes to 1.39.2:
868 13Dec05
869 kes  Add stubs for non-crypto build.
870 12Dec05
871 kes  Use localhost if no network configured
872 11Dec05
873 kes  Eliminated duplicate MaxVolBytes in cat update -kes  bug 509.
874 kes  Remove debug print.
875 kes  Add bail_out in error during state file reading.
876 10Dec05
877 kes  Merge changes made to 1.38.3 into HEAD
878 kes  Add stubs for pygtk-console code
879 kes  Create Makefile.in for pygtk-console code
880 09Dec05
881 kes  Merge updates into 1.38 branch
882 kes  Update specs to include mysql4 define.
883 kes  Fix when attributes are sent, must be after binit().
884 kes  Stop read_record() if status not ok in second loop.
885 kes  Return rec->FileIndex in dcr->VolLastIndex for normal
886      and partial records in read_record().  This allows bscan
887      to get FileIndex at EOT correct.
888 kes  Fix butil.c to correctly set dcr -kes  fixes seg fault in bls.
889 08Dec05
890 kes  Fix Win32 built to work with new crypto code.
891 kes  Apply patch supplied by user (slightly modified) to fix
892      correct detection of holes in block devices and FIFOs. 
893      Bug # 506.
894 kes  Apply patch supplied by user (slightly modified) 
895      to fix SD hang with multiple pools and bad client
896      IP. Fixes bug # 508.
897 07Dec05
898 kes  Add nagios plugin to the examples directory. Submitted by
899      Christian Masopust.
900 kes  Remove warning message about multiple saves of hardlinked files
901      from find_one.c as it can generate too many warning messages.
902 kes  Modify most restore error messages to be queued so that they
903      appear at the end of the job rather than mixted with the restore
904      listing where they could be "lost".
905 06Dec05
906 kes  Reset timeout values before select() per patch from 
907      Frank Sweetser for problems with non-blocking sockets.
908 kes  Unlink the state file if either reading or writing it gets
909      errors.  Hopefully this will fix Win32 exit problems.
910 kes  Add sanity check in append.c to ensure that dcr is not NULL.
911      This can happen if multiple drive autochanger SCSI control
912      channel and drive indicies do not correspond.
913 05Dec05
914 kes  Get next volume from Scratch pool before creating a volume.
915 kes  Set new Pool defaults in Vol when moved from Scratch Pool.
916 kes  Remove argument from create_bacula_database for SQLite as it
917      caused an error.
918 kes  Add back index code so that two drive autochangers can get
919      a second tape.
920 kes  Change a bunch of debug levels to aid debugging autochangers.
921 kes  Fix reservation so that mutexes are properly applied.
922 kes  Rework reservation algorithm so that two drives can be used
923      at the same time.
924 04Dec05
925 kes  Landon merged his data encription changes into the HEAD
926 kes  Apply days keyword patch from Alexander.Bergolth at wu-wien.ac.at 
927      If this patch is applied, the number of days can be specified with
928      "list nextvol days=xx"
929      or
930      "status dir days=xx"
931      My use case is to be able to preview the next scheduled job (and the 
932      next tape to be used) on fridays if there are no scheduled jobs during 
933      the weekend.
934 Changes to 1.39.1:
935 03Dec05
936 kes  Fix font code in gnome2 console user patch. Fixes bug #501.
937 kes  Fix malformatted bnet error message that caused seg fault
938      fixes bug 502
939 kes  Applied user patch to improve README.vc8 in src/win32.
940 29Nov05
941 kes  Add Migrate, Copy, Archive Job types (some where there)
942 kes  Correct some more editing of JobId's (for 64 bit compatibility).
943 kes  Ensure that StorageId is stored in Media record when ever possible.
944 kes  Add Migration Job to Job.
945 kes  Add Migration Time, Migration High Bytes, Migration Low Bytes
946      Next Pool to Pool resource.
947 kes  Add more code to mac.c (migration archive copy).
948 kes  Change Start Storage daemon job to require read and write storage
949      pointers.
950 kes  Pass read storage data to SD as well as write storage data.
951 kes  Remove old code from winservice.cpp
952 kes  Break on error in scan.
953 kes  Fix typo in signal.c
954 kes  Separate read/write DCR in SD.     Add jcr->read_dcr.
955 kes  Cleanup how find_device() works.
956 kes  Add read output to Status in SD.
957 Changes to 1.39.0:
958 23Nov05
959 kes  Add red-black btree routines
960 21Nov05
961 kes  Remove abs() in bfile.c so that it compiles on Solaris. 
962      Bug #491.
963 20Nov05
964 kes  Fix crash in tray-monitor when daemon disconnects. Bug #479.
965 kes  Fix bnet-server bug found on OpenBSD. Bug #486
966 kes  Fix cancel failure bug. Bug #481
967 kes  Fix failure when Pool name has spaces. Bug #487      
968 kes  Fix SD crash in autochanger code. Mutex failure. Bug #488
969 kes  Fix a couple of free()s in src/filed/acl.c
970 kes  Fix memory overrun in bfile.c in building OS X resource
971      fork filename. Bug #489 
972 kes  Add Pool name to SD status output.
973 14Nov05
974 kes  Apply SunOS patch for ACLs submitted by David Duchscher.                     
975 kes  Make sure to set storage before trying to set drive.
976 kes  Add bacula_mail_summary.sh to examples directory. It makes
977      a single email summary of any number of jobs. Submitted
978      by Adrew J. Millar.
979 kes  Make sure when we do a mount to unblock the device even
980      if the drive could not be opened.  
981 13Nov05
982 kes  Remove the USE_WIN32STREAMEXTRACTION #defines (always on)
983      and correct a few minor problems to make it build on Linux.
984 10Nov05
985 kes  Remove delete of CVS from all Makefiles
986 kes  Fix seg fault when clicking on Add button in wx-console
987      restore panel.  Bug #470.
988 kes  Fix copyright date and URL typo -kes  bug #468.
989 kes  Change autostart install for FreeBSD to look for rc.conf     
990      rather than rc.local as suggested fix for bug #466.
991 kes  Apply patch supplied by Eric Bollengier to fix PostgreSQL       
992      grant on status. Bug #465
993 kes  Apply patch supplied by Eric Bollengier to fix PostgreSQL
994      update script. Bug #464
995 kes  Tweak #ifdefing a bit in new Win32 stream code.
996 kes  Fix #ifdeffing for FD_NO_SEND_TEST.
997 kes  Add documentation of performance #defines