]> git.sur5r.net Git - bacula/bacula/blob - bacula/technotes-1.39
Updated with my changes.
[bacula/bacula] / bacula / technotes-1.39
1               Technical notes on version 1.39  
2
3 General:
4 05Aug06
5 rbn  Fixed the Windows Makefiles so that they won't accidently try and
6      pickup binaries for the Unix build.  This allows both the Unix
7      build and the Windows build to be built in the same tree without
8      interfering with each other.
9 rbn  Fixed error handling and cleaned up mtx-changer.cmd.
10 rbn  Added the rest of the database scripts.  These are installed but are
11      not yet editted for variable replacement.
12 rbn  Broke out the cats functionality from bacula.dll and put into new
13      separate dlls for each database type.  At installation time the
14      correct one is copied to bacula_cats.dll.
15 rbn  Eliminate the need to install the mysql.dll on client only builds.
16 rbn  Moved dird/sql_cmds.c into the cats directory so all the database
17      specific #ifdefs were in the cats directory.
18 rbn  Added a new sql_cmds.h with all the declarations for the variables
19      exported from sql_cmds.c.
20 rbn  Moved catalog_db[] from lib/message.c to a new routine db_get_type()
21      which is implemented in bdb.c, mysql.c, postgresql.c and sqlite.c in
22      src/cats.
23 kes  Correct improperly formated list command output reported by Dan.
24 04Aug06
25 kes  Correct despool time calculation.
26 03Aug06
27 kes  Remove previous changes to compat.cpp as they create problems.
28 kes  Use old style MD5 for FileSets to avoid Full saves on every Job.
29 kes  Attempt to fix problems with the msg_queue crashing on Solaris
30      when Bacula is terminating, but problems remain.
31 kes  Add WIN32_VSS to HAVES in src/Makefile.inc.in to correct VSS
32      name editing problems with too many \\?\es.
33 kes  Fix some Bacula source code stlye problems in compat.cpp.
34 kes  Add debug code to compat.cpp and convert non-Bacula debug code
35      to Bacula style.
36 02Aug06
37 kes  Change the name of the technical notes file from kes-1.39 to
38      technotes-1.39.  Prefix my messages with 'kes  '.
39 kes  Allow dequeue_messages() to be called twice. Should fix bug  
40      # 649.
41 kes  Add Job type to bscan Job information output.
42 01Aug06
43 kes  Update copyright date in program files, and for the most part
44      put it on a #define.
45 kes  Implement %q in bsnprintf.c apparently I forgot it.
46 31Jul06
47 kes  Make disk-changer sed command compatible with FreeBSD.
48 kes  Make a first cut at a ReleaseNotes and ChangeLog for a 
49      beta release.
50 kes  Make make clean decend into the src/win32 directory.
51 kes  Fix some #ifdefing so that Solaris and FreeBSD compile 
52      sys/stat.h was turned off.
53 kes  Use suffix editing for new transfer rate messages.
54 kes  Attempt to come up with a workaround which seems to be an OS
55      bug where write() returns EBUSY.  IMO this should not happen.
56      It triggered in truncatebug test. The workaround retries using
57      a 100 ms wait.
58 kes  Eliminate a strerror() call in a class method that failed with
59      older C++ compilers.
60 kes  Use rm -rf rather than rmdir to delete the src/win32/release
61      directory during make clean.
62 30Jul06
63 kes  Make bscan ignore ACL streams.
64 kes  Update projects files with new Feature Requests.
65 kes  Generate current English and French manuals and upload
66      them to the site.
67 kes  Update the home page to include the new British/French flags to
68      switch between translations. Work done by Alexandre Baron.
69 kes  Make disk-changer script print an error message if the changer
70      directory is not defined.
71 kes  Create a generic DB routine for getting an int (32/64 bit) from
72      the DB.
73 kes  Add more migration code.
74 kes  Add a few more files to .cvsignore here and there.
75 kes  Minor fixes for SD write rate and despooling rate.
76 kes  Turn off new test code in src/console.c
77
78 Version 1.39.18
79 29Jul06
80 kes  Incremented the version number to signify that all of Robert's code
81      for Win32 that was in the branch is now integrated into the HEAD,
82      and that Eric has submitted code that we hope will provide limited
83      backward compatibility with 1.38 file daemons (more testing to be
84      done).
85 kes  I rationalized a few of the names of the variables (mainly jcr names)
86      that are used during migration as keeping three different jcrs at the
87      same time clear in one's head is not easy.
88
89 Version 1.39.17
90 28Jul06
91 eb   Tweak new runscript feature to work with 1.38.x FDs. 
92 eb   Correct crypto.c to fix segfault when restoring an encrypted stream 
93      on fd which don't use rsa keys.
94 eb   Add yes/no english keywords on localised yes/no questions.
95 27Jul06
96 kes  Several important commits from Robert Nelson for code cleanup and
97      Win32 build.
98 kes  Modify console.c so that when conio is enabled, it converts \n to
99      \n\r before outputting to the console.  Hopefully this will fix
100      the problems with expect in Perl that Eric saw.
101 24Jul06
102 kes  Change cats/sql.c to elimate %-*s format, which I think is turned
103      off in bsnprintf.
104 kes  Add Comment field to llist of a volume.
105 kes  Allow true/false in some yes/no questions.
106 kes  Implement update volume enable=(on|off|true|false|archived|0|1|2)
107 kes  Remove a few /n's when scanning commands from another daemon. This
108      permits adding additional fields later.
109 kes  Modify dbcheck to handle ctl-d and to delete Log table entries.
110 kes  Update README.mingw
111 22Jul06
112 kes  Tweak authentication to work with 1.38.x FDs. 
113 kes  Tweak catalog make scripts.
114 kes  Fix catalog upgrade scripts so that they work.
115 kes  Correct despooling debug code to eliminate race condition.
116 19Jul06
117 kes  Add additional fields as specified by Arno to LocationLog.
118 kes  Add comment field to the Media record.
119 kes  Add Time field to the Log record.
120 kes  Correct migration SQL (thanks to Bill Moran) so that it
121      runs with PostgreSQL also.
122 kes  Add spooling/despooling info in status output of SD.
123 17Jul06
124 kes  Spend a lot of time integrating mkcdrec with the rescue disk.
125 kes  Add VOLMGMT message class for volume management messages (none yet).
126 kes  Add CATALOG as a destination.     It goes into the LOG table.
127 kes  Implement the Log table in the DB.
128 kes  Implement the Location Log table in the DB (for user use).
129 kes  At Eric's request add a run_scripts() just after blast_data in
130      src/filed/job.c
131 10Jul06
132 kes  Add Enabled column to Location, correct some typos in DB schemas.
133 kes  Correct bug I introduced into RunScripts enum.
134 kes  Add log table to Catalog
135 kes  Purge original job migrated if the migration terminates normally.
136 kes  Cleanup purging of files/jobs so that it is done only in a 
137      single subroutine.
138 kes  Add new VOLMGMT message class.
139 kes  Add Catalog message destination (user conf code remains to be written).
140 09Jul06
141 kes  Modify read_record and friends to properly deal with migration         
142      needs.
143 kes  Update debug code in read_record.       
144 08Jul06
145      ======================= Warning ==========================
146      Separate read and write storage in Jobs in the Director. This
147      is a major rewrite of some of the low level code and hence has
148      a high probability of introducing bugs.
149      ==========================================================
150
151 kes  Move the job init code up to *before* the job is put into
152      the job queue (resource allocation queue). This permits the
153      job to establish whether it will read or write or do both.
154 kes  Add name() methods to all the resource classes.
155 kes  Implement separate read and write storage resource 
156      allocation/deallocation in jobq.c
157
158      ======================= Warning ==========================
159      Implemented new method of getting the default Storage from the Media
160      record rather than from the MediaType for restore.  As a fall
161      back, if no Storage is defined, use the MediaType.  This
162      eliminates most all prompts if there are multiple MediaTypes
163      used. This is an important and fundamental change.
164      ==========================================================
165
166 kes  Add more detail (Storage, Device) to list of volumes printed
167      for restore.
168 kes  More code in migrate. In particular start multiple jobs if
169      migrating a volume.
170 kes  Probably overkill, but ensure that the bsr is unique even within a 
171      job in FD and SD.
172 kes  Rework bsys.c drop() so that it now should work as expected.
173 kes  Update a bunch of old copyrights -kes  particularly in .h files.
174 kes  Remove src/lib/bshm.c/h
175 05Jul06
176 kes  Migration fixes
177 04Jul06
178      ======================= Warning ==========================
179         All hash codes in the database are now kept in world
180         compatible base64 format (no = filling). This means that
181         all FileSets will be updated and if you are running
182         verify jobs, you must do an InitCatalog.
183         Authentication uses the new algorithm, but should be
184         backward compatible with 1.38.x
185      ===========================================================
186
187 kes  Modify the authentication routines so that the 1.39.15 Director
188      always runs with the compatible binary to base64 code (same as
189      the rest of the world).  It will however detect if an SD or
190      FD is running the old code and if that is the case, will use
191      the old algorithm for authentication.  However, all consoles must
192      use the compatible algorithm, and all data entered into the database
193      (all hash signatures, MD5, SHA1, ..., and all FileSet hashes) will
194      use the compatible algorithm.
195 kes  Rename the cram_md5 routine names to be slightly more appropriate
196      to what they are doing (challenge and respond).
197 kes  Robert committed his #ifdef and header cleanup.
198 30Jun06
199 kes  Fix a complier warning in files/backup.c
200 kes  Cleanup NOT NULL vs DEFALT 0 in database creation.
201 kes  Tweak btape.
202 kes  Robert committed his low impact changes.
203 kes  I removed a size_t from the jcr.h definition.
204 kes  Update the tape regression scripts (still to be tested).
205 kes  Add gcc and gcc-c++ requires to srm as suggested by a user.
206 kes  Require done or quit to exit from in memory tree restore.
207 26Jun06
208 kes  Write install/uninstall of new manpages. There are now a
209      pile of man pages. Some of which need a lot of work.
210
211      ======================= Warning ==========================
212         The --mandir ./configure option now points to the top level
213         man directory.  The man files will be installed under
214         mandir/man8 and mandir/man1 as appropriate.
215      ==========================================================
216
217 kes  Add complete text of GPL to LICENSE.
218 kes  Implement job report that indicates where Storage and Pool
219      came from -kes  with overrides and Pool storage and NextPool,
220      it is all very complicated.
221 kes  Create a few common subroutines for backup.c and migrate.c
222 kes  Eliminate warning messages from tray-monitor.c
223 25Jun06
224 kes  Apply fix for scheduler for missing unlock_jobs().
225 kes  Clean out autoconf caches before rebuilding configure
226 kes  Fix the FreeBSD pthreads lib define updated by Dan.
227 kes  Add missing semicolon in src/console/console.c
228 kes  Add Robert's enhanced version of build-win32-cross-tools
229      as well as his patch file.
230 kes  Note, the new gcc options are likely to break building of
231      wx-console or the tray-monitor ...
232 24Jun06
233 kes  Implement Robert's suggestion to suppress printing compile lines.
234 kes  Detect GCC correctly (I hope)
235 kes  If using GCC (actually g++) add the following compiler flags
236      -fno-strict-aliasing -fno-exceptions -fno-rtti
237
238      ===================== Warning =============================
239      Turn on new bsnprintf() code.  This could cause print output
240      to look different.
241      ===========================================================
242
243 kes  Fix crypto when not using openssl. I previously overlooked this.
244 kes  Eliminate crypto type punning problems by eliminating void * and
245      using uint8_t * instead.
246 kes  Harden authentication failure in FD by single threading errors
247      and forcing a 6 second wait.
248
249      ===================== Warning =============================
250           Removed  "Accept Any Volume" directive.
251      ===========================================================
252
253 kes  Major cleanup and simplification of regress using shell functions
254      (more tests to be converted to new format)   
255 kes  Add detection of 64 bit Irix as indicated by user.
256 kes  Increment catalog database id from 9 to 10.
257 kes  Add a few of the new database fields to the various C++
258      structures.
259 kes  Implement code to fill in the most important new fields (e.g.
260      Media Enable).
261 kes  Ensure that most of the new fields are in create/get/insert/update.
262      More work to be done.
263 22Jun06
264 kes  Update some very old licenses in src/cats.
265 kes  Modify the database format for handling Migration jobs:
266       Add PriorJobId, RealEndTime to Job table
267       Delete MAC table
268       Remove Stripe from JobMedia record (not used, wasting space)
269       Add ScratchPoolId, RecyclePoolId, Enabled to Media record
270       Add Cost to Location table.
271 kes  Delete mac_record subroutines.
272 kes  Add new table values to create/update/get routines as appropriate.
273 kes  Update the update_tables and make_tables scripts.
274 kes  Make a first cut in using a union where multiple pointers (actually
275      pointers to pointers) are stored.
276 kes  Make some changes to base64.c suggested by Robert and others and add
277      a small amount of documentation.
278 kes  Add some changes suggested by Peter for Solaris (bregex...)
279 kes  Make runscript.h always built because it needs to be pulled into
280      more places.  In particular its RES was left out of a union.
281 kes  Renumber the enum{} list in runscript.h to avoid starting from zero.
282      This makes it slightly easier to detect uninitialized variables.
283 14Jun06
284 kes  Remove xpg4 lib from FreeBSD build as it is no longer needed and
285      sometimes creates install problems.
286 kes  Change a couple of %T in strftime to %H:%M:%S as seen in Robert
287      Nelson's code.  More to do.
288 kes  Convert a few store_bit to store_bool in filed_conf.c.       
289 kes  DVD tweak to block.c as supplied by Uwe Muessel.
290 04Jun06
291 kes  Modify configure.in to check for typeof().
292 kes  In findlib/attribs.c use typeof instead of templates if possible.
293 01Jun06
294 kes  Implement partial error messages for src/filed/acl.c
295 kes  Fix return code to fail when doing update barcodes and
296      Pool resource is not found. This previously caused Volumes
297      to be labeled as cleaning tapes.
298 kes  Small updates to projects.
299 27May06
300 kes  Add Eric Bollengier patch for new RunScript directive. It breaks
301      compatibility between dird and fd.
302 26May06
303 kes  Prevent DVD code from rewriting label if the device cannot be
304      opened read/write.
305 kes  Used __GNUC__ to detect GNU g++ as suggested by John Goerzen to
306      fix Debian build bug.
307 kes  Fix Dir/SD run race in migrate.c, verify.c, and restore.c
308 kes  Integrate manpages contributed by Jose Luis.
309 kes  Update projects file.
310 kes  Add manpages Makefile.in to configure.in
311 kes  Remove installation of bacula.8 in scripts directory.
312 24May06
313 kes  Implement patch submitted by cesarb in bug #606 to implement O_NOATIME
314      support.
315        O_NOATIME is a open() flag which makes it possible to read a file without
316        updating the inode atime (and also without the inode ctime update which
317        happens if you try to set the atime back to its previous value). It also
318        prevents a race condition when two programs are reading the same file, but
319        only one does not want to change the atime. It's most useful for backup
320        programs and file integrity checkers (and bacula can fit on both
321        categories).
322
323        Recent versions of the Linux kernel and glibc have support for it (the
324        glibc support being mostly copying the O_NOATIME definition to
325        bits/fcntl.h). If there's no support for it on the kernel, trying to use
326        it does nothing (since the kernel ignores unknown flags).
327
328        If the kernel has support for it, trying to use it either works, fails
329        silently (mostly in remote filesystems), or returns errno=EPERM (if you
330        are not either the owner of the file or root). A simple way to prevent the
331        failure is to open the file without the flag and set it later with
332        fcntl(F_SETFL), ignoring any EPERM errors.
333 kes  Applied patch posted by Jaime Ventura to bug #570 to correct failure
334      of restarted jobs to complete (due to a destroyed pthreads conditional
335      variable used by the message thread).
336 kes  Fixed bug #619 where Bacula would not restart jobs with MaxRestartTimes
337      set to zero. 
338 kes  Apply patch from John Goerzen bug #611 to fix bad manual links in the code.
339 kes  Apply patch from Rudolf Cejka bug #614 to removed trailing
340      colons in query.sql file.
341 kes  Apply patch from Rudolf Cejka bug #613 to correct prunning of files
342      not to create orphans.
343 kes  Apply patch from Rudolf Cejka bug #617 to use mtime instead of ctime
344      in restore long listing.
345 kes  Apply patch from Rudolf Cejka bug #609 to use MarkId in verify.c instead
346      of incorrect MarkedId.
347 kes  Apply patch from adioso bug #616 to correct text in manual (replace
348      Director with File daemon).
349 kes  Rework a few of the zlib changes so that they build properly.
350
351 21May06
352 kes  Move DIR "run" command to SD before starting the message thread
353      as suggested by Cristopher Hull to avoid a race deadlock from
354      two threads using the bsock structure.
355 kes  Modify LICENSE to correct some problems pointed out by Debian.
356 05May06
357 kes  Correct EOF with no \n lex.c problem.
358 kes  Tweak compat.h compat.cpp and merge with apcupsd
359 kes  Add additional INFO messages if autochanger cannot be used.
360
361 02May06
362 kes  Simplify Win32 Makefile
363 kes  Correct count of buffers/bytes used by smartall.c
364 kes  Updated compat.h after porting apcupsd to MinGW.
365 01May06
366 kes  Work on getting wx-console building on MinGW. wxWidgets now builds
367      started adding Makefile ...
368 kes  Moved MinGW library objects to src/win32/lib to reduce clutter.
369 30Apr06
370 kes  Reloading a bad configuration file doesn't kill director any more.
371      Thanks to fix from Eric Bollengier.
372 29Apr06
373 kes  Fix problem of accents with new Win32 code.
374 kes  Integrate Howard's VSS patch. Tweak it a bit. VSS now
375      works in the MinGW build with the exception that there
376      is a problem with accented characters -kes  i.e. there is
377      some mapping problem with wide characters.
378 kes  The code no longer compiles with Microsoft VC++.
379 28Apr06
380 kes  Start implementing Christopher's St.Bernard code.
381 kes  Add Christopher's mods for opening files.
382 kes  Strip \r \n from Win32 error messages (Christopher)
383 kes  Add more info about Win32 system if unknown (Christopher)
384 kes  Use bstrn(cpy, cat) routines to avoid overrun in compat.cpp
385 kes  Fix a number of incorrect strings marked for translation, when
386      they should not be (e.g. commands).
387 kes  Fix StartTime bug reported for ClientRunBeforeJob and RunBeforeJob
388      Patches supplied by user in bugs #608 and #599.
389 kes  Use most recent of st_ctime and st_mtime in restore tree DIR
390      listing. This fixes some problems with Win32 printing incorrect
391      values.
392 kes  Correct the clock shift comm time calculation between the DIR
393      and the FD. It was added rather than subtracted.
394 kes  Strip all backslashes in filenames to be restored on Win32
395      machines -kes  the names should all be in Unix format, and if
396      there are any backslashes it is most likely due to an improper
397      FileSet definition, and the files will not otherwise be 
398      restorable.
399 kes  Remove lib/regex.c (replaced by bregex.c).
400 kes  Delete src/win32/License.txt
401 kes  Modify installer to install LICENSE
402 26Apr06
403 kes  Fix bug in build-win32-cross-tools script reported by Howard
404 kes  Implement cross compiled bconsole
405 25Apr06
406 kes  Fix barcode test, eliminate BOOL (doesn't exist on Linux).
407 kes  Write first cut of README.mingw32
408 kes  Add back ua_label barcode fix from Rufolf Cejka.
409 kes  Integrate the majority of the Mingw cross-tools submission
410      made by Howard Thomson. Everything compiles, with zlib, openssl,
411      and VSS turned off. Linking needs a pthreads library ...
412 23Apr06
413 kes  Add 'Dir Status' button to the gnome console.
414 kes  More work on migration.
415 kes  Restore non-compatible base64 coding to permit compatibility.
416 kes  Display heap stats in Storage daemon without debug level.
417 22Apr06
418 kes  Integrate most of the MinGW changes -kes  more to do.
419 21Apr06
420 kes  Implement using pg_config for finding PostgreSQL files.
421      Fixes bug #600. Patch supplied by user.
422 kes  Remove -t option from mktemp in mtx_changer.in and use
423      working directory. Fixes bug #578.
424 kes  Update job start time after the any run before job so that
425      files created by the script are only backed up once. Fixes
426      bug #599.
427 kes  Strip trailing newline only from filenames entered in
428      the restore command when reading a file. This permits
429      the user to enter filenames with trailing spaces. Fixes
430      bug #549. The user supplied a patch that I modified slightly.
431 kes  Use the most recent time (st_mtime, st_ctime) in the dir
432      command in restore. This gives the user a better idea of what
433      the newest file really is. This fixes bug #574. The fix
434      was suggested by the user.
435 kes  Implement a compatible version of base64. This permits external
436      programs to duplicate Bacula's base64 algorithm using standard
437      routines. This fixes bugs #296, and 565. Patch submitted by   
438      author of bug #565.  
439      ================= Note ========================
440      Previous Signatures stored in the database are no longer
441      compatible with this. The main downside is for Verify jobs,
442      and doing an InitCatalog run will fix the problem. Also, the
443      authentication between the deamons is changed, so all daemons
444      must be simultaneously upgraded.
445      ==============================================
446      If you don't like this fix, set:
447        const bool compatible = true;
448      to
449        const bool compatible = false;
450      in src/lib/base64.c
451 20Apr06
452 kes  Ensure that DB signature is never NULL.
453 kes  Ensure that DB table names are not translated.
454 kes  Fix scheduler to handle time skew (eg daylight savings).
455 kes  Fix scheduler to use lock_jobs() to avoid most problems
456      with reload. Window is now milliseconds.
457 19Apr06
458 kes  Apply patch from Christopher Hull
459      kes  Allow multiple connections to database with different
460        parameters.
461      kes  Invalidate the scheduler when doing a reload. Fixes seg
462        fault, but still 60 second window.
463      kes  Additional info in Reschedule message.
464      kes  Use set_jcr_job_status() everywhere to prevent loss of
465        cancel, error.
466      kes  Display peer IP in FD if error from connecting DIR.
467      kes  Don't increment file count for DIRBEGIN.
468      kes  Replace illegal characters in Win32 filename by _.
469      kes  Add SE_CREATE_PERMANENT_NAME privilege in Win32.
470      kes  Hash hard link filenames rather than linked list.
471      kes  Fix for security failure in chdir on Win32.
472      kes  Add CreateDirectoryA/W win32 API entry points.
473 kes  Add /silent option to Win32 FD for Install/Remove service.
474 kes  Always print Heap statistics in FD.
475 18Apr06
476 kes  Remove the -f option from the chown in Makefile.in for more
477      portability.
478 kes  Change setting the group in Makefile.in to use chgrp for
479      more portability.
480 kes  Implement a write_store and read_store to replace
481      dirstore in reserve.c
482 kes  Implement a Bacula read/write lock for Python rather
483      than using the Python lock to avoid recursive problems.
484 kes  Correct the uninstall directory names in filed/Makefile.in
485      as reported by a user.
486 17Apr06
487 kes  Correct some problems with database creation (new tables).
488 kes  Replace a bunch of old 0x%x by %p.
489 kes  Get first cut of Migration with Job selection working.
490 16Apr06
491 kes  Change store_bit() to store_bool() for the Spooling in 
492      dird_conf.c -kes  bug reported by Robert Nelson.
493 15Apr06
494 kes  Correct Makefile bug found by Dan Langille.
495 14Apr06
496 kes  Correct Makefile for Solaris /bin/sh
497 kes  Correct mtx-changer.in for Solaris /bin/sh
498 kes  Abort if a conf resource does not have a Name =
499 12Apr06
500 kes  Change the name of the regex program to bregex.
501 kes  Add the bwild program to the tools directory. It is similar
502      to the bregex program.
503 kes  Implement create bregex.h and bregex.c in src/lib from the
504      Python regexp program.  
505 kes  Use the new bregex.c to implement Regex expressions on Win32.
506 11Apr06
507 kes  More work on migration.
508 kes  Implement wild program in tools directory for testing
509      wild-cards. Almost identical to the regex program.
510 kes  Up port VSS single thread locking code.
511 kes  Replace N_(..) by NT_(...) to inhibit translation of
512      commands.
513 kes  Modify Makefile to change the permissions on Working Directory
514      to 770 if the directory is created.
515 kes  Do not fail the Makefile if changing the permissions or 
516      owner/group on WorkingDir fails.
517 kes  Remove early selection of Scratch Volumes in the recycling
518      algorithm.
519 kes  Correct the old recycling algorithm so that Scratch Volumes
520      are selected when looking for a Volume in the changer.
521 kes  Correct a typo in the Verify SQL reported by Joe Park.
522 10Apr06
523 kes  Remove automatic case folding on Windows FDs. You must
524      explictly use the 'Ignore Case = yes' option.
525 kes  Remove the code added to 1.38.6 and 1.38.7 that pulls a
526      scratch volume in an Autochanger early in the 'recycling'
527      algorithm.  
528 09Apr06
529 kes  Make weof() and clrerror() methods of class DEVICE.
530 08Apr06
531 kes  Tweak license to include Microsoft restrictions.
532 kes  Move mysql.reconnect to after real_connect().     Thanks to
533      Frank Sweetser for the patch.
534 kes  Disallow a backslash in a File = directive (Windows junk)
535      unless the string is quoted.                     
536 kes  Apply Eric's patch to ua_label.c so that daemon protocol
537      is not translated.
538 kes  Add NT_ definition for strings that should not be translated.
539 kes  Apply NT_() to ua_label.c
540 kes  Remove timed wait for VSS on Win2K3 as it is not yet
541      implemented.
542 kes  Correct bacula.in script to reference bacula-ctl-xx in the
543      sysconfig directory rather than the bin directory.
544 26Mar06
545 kes  Fix a long standing bug in the bacula start/stop scripts.
546 kes  Attempt to add the new bacula-ctl-* files to the rpm.
547 kes  Switch to using typeof() for list traversing to avoid
548      as many FC5 g++ compiler warnings as possible.
549 25Mar06
550 kes  Split the bacula start/start script into four files:
551       bacula         -kes  starts and stops calling other scripts
552       bacula-ctl-dir -kes  starts/stops the director
553       bacula-ctl-fd  -kes  starts/stops the File daemon
554       bacula-ctl-sd  -kes  starts/stops the Storage daemon
555 24Mar06
556 kes  Create datestyle fix for PostgreSQL. Fixes bug #574.
557 kes  Correct editing of JobId from int to int64 in fd_cmds.c
558 kes  Eliminate FileSet name race with bash_spaces() and multiple
559      threads by bashing in a local.
560 kes  Fix error return from 'use storage' to print a correct error
561      message rather than nothing.
562 kes  Correct false re-read last block error message when two jobs 
563      are simultaneously writing at the end of a tape.
564 kes  Simplify exit conditions in the reserve.c code to avoid     
565      possible non-release of reservation_lock().
566 kes  Suffle lock order in reserve to avoid deadlock between
567      reservation lock and device mutex.
568 21Mar06
569 kes  Initialize jcr mutex before first use. Thanks to Thorsten for
570      tracking this down for me !!!! as it broke the Win32 build.
571 20Mar06
572 kes  Integrate addition of line count limitation to bsmtp -l from
573      Sebastian Stark <stark at tuebingen.mpg.de>
574 17Mar06
575 kes  Implement regex test program in tools directory.
576 kes  Attempt to fix time problem with bsmtp with foreign langs.
577 kes  Add strip_trailing_newline() submitted by user.
578 kes  Implement regex matching in migrate.c
579 16Mar06
580 kes  Fix bug #537 to allow arbitrary time to mount a volume for
581      restore, if polling is turned on.     
582 kes  If dir_user or dir-group is specified in ./configure apply it to
583      the working-dir. Fixes bug #533.
584 kes  If rescheduling a job cancel the previous incarnation with the SD.
585      Fixes bugs #566 and 557.
586 kes  Fix bug #567 do_message() definition type conflict.
587
588 14Mar06
589 kes  Add more jcr methods and make mutex and use_count private.
590 kes  Create lock/unlock methods for jcr.
591 kes  Fix PostgreSQL bug doing sql_data_seeek() by explicitly reading
592      records to get to seek position.
593 kes  Integrate patch from bug #561 to correct conio.c signal definitions.
594 kes  Fix Rescheduling failed Jobs. Ensure that SD message thread 
595      terminates correctly by doing pthread_kill(). Do not destroy
596      SD cond wait variable between executions of the job. Use local
597      mutex for cond variable to avoid blocking jcr chain. Fix poor 
598      use of jcr use count in jobq.c for restarted jobs.
599 kes  Fix obsolete usage of foreach_dlist() to use foreach_jcr() in
600      lib/jcr.c -kes  prevents locking the jcr chaing.
601 kes  Apply patch from bug #564, which corrects listing volumes with
602      multiple autochangers. Apply same fix to next volume list.
603 kes  Fix bug #562 where restore bootstrap file is not unique.
604 kes  More details in implementing David's migration syntax proposal.
605 kes  Save and restore dcr when swapping drives so that if we have
606      a write dcr it is not lost.
607 kes  Use new routine lock_reservations() to lock the reservations
608      system, and call it while looking for a volume in askdir.c.
609      This could possibly fix bug #543.
610 kes  Stop SD command loop if job is canceled.
611
612 08Mar06
613 kes  Remove old code from findlib/create_file.c
614 kes  Rename mac.c migrate.c
615 kes  Add user friendly display of VolBytes in job report.
616 kes  Rename target... to previous... to make it a bit easier to
617      understand.
618 kes  Add selection type and selection pattern to Migration (idea
619      given by David Boyes). 
620
621 04Mar06
622 kes  The po files should now be current.
623 kes  Fix new sql_use_result() code to properly release the
624      buffers in all cases.
625 kes  Use the keyword ujobid to mean the unique job id; job or jobname
626      to mean the Job name given on the Name directive, and jobid to
627      be the numeric (non-unique) job id.
628 kes  Allow listing by any of the above.
629 kes  Add the user friendly job report code for reporting job elapsed time
630      and rates with suffexes from John Kodis <kodis at comcast.net>.
631 kes  Add Priority and JobLevel as Python settable items.
632 kes  Use TEMPORARY table creation where the table is created by
633      Bacula.
634 kes  Add new code submitted by Eric for waiting on specific jobid.
635 kes  Add ACL checking for the dot commands.
636 kes  Fix restore of writable FIFOs.
637 kes  Fix a bug in bpipe where the string was freed too early.
638 27Feb06
639 kes  Modify the Python class examples to inherit object -kes  new way
640      of defining classes. Patch from Felix Schwarz.
641 kes  Implement jobuid to replace old usage of job in keywords as
642      suggested by Eric Bollengier.
643 kes  Apply patch for enhancing wait from Eric Bollengier. On can now:
644       wait  (wait for all jobs to stop)
645       wait jobid=nn
646       wait jobuid=unique id
647       wait job=job-name
648 kes  Implement write variables for Python to set Priority (anytime), and
649      Job Level, only during JobInit event.
650 26Feb06
651 kes  Fix the block listing bug pointed out by Arno.
652 kes  Update the po files at Eric's request.
653 24Feb06
654 kes  Fix Maximum Changer Wait, Maximum Open Wait, Maximum Rewind Wait to 
655      accept time qualifiers.
656 kes  Make catalog respect ACL.
657 kes  Add recycle count to Media record.
658
659 Changes to 1.39.6-beta1 24Feb04
660 23Feb06
661 kes  Add Rudolf Cejka's new rc-chio-changer.
662 kes  Implement pulling Volume from Scratch Pool if the
663      Volume is in the autochanger.
664 kes  Implement additional command arguments for update Volume.
665
666 Changes to 1.39.5 
667 22Feb06
668 kes  Back port changes to 1.38.5
669 kes  Fix recycle SQL for StorageId.
670 kes  Fix misplaced quote in mtx-changer script.
671 20Feb06
672 kes  Note. Your database must be updated, or you must create 
673      a new database. I have not yet incremented the database level.
674 kes  Add Location table. 
675 kes  Add LocationId, DeviceId, and MediaTypeId to Media record.
676 18Feb06
677 kes  Implement create/get mac record in database for adding extended
678      Migration data to the job record.
679 kes  Add new MAC table to update/make database scripts.
680 kes  Return Storage name used when getting VolumeNames for a job.
681 kes  Change bsr file keyword Storage to Device, which is more accurate.
682 kes  Ensure that Mac records are pruned/purged.
683 kes  Tweak SD tools to deal with changing media type.
684 kes  Integrate more dev.c subroutines as methods (e.g. strerror, bsr, ...)
685 kes  Pass pointer to dcr pointer to acquire_device_for_read() so
686      that the subroutine can switch devices, and hence dcrs.
687 kes  Modify the multiple MediaType read code to re-use the same
688      dcr when switching devices. This makes the code much more
689      robust.
690 kes  Integrate patch from Karl Hakimian that reads JobIds, FileIndexes
691      from a table for restore.
692 kes  Add Storage name to VolParams, but it really should be Device.
693 14Feb06
694 kes  Add disk-changer to scripts directory + configure/Makefile
695 kes  Eliminate PoolId from jcr -kes  it is in jcr->jr.PoolId
696 kes  Implement store_bit scanner to replace store_yesno.     Mostly done.
697 kes  Implement new store_bool that stores in a bool. 
698 kes  Add true/false to yes/no conf directives.
699 kes  Make first cut at changing appropriate store_yesno to store_bool.
700 kes  Complete implementation of Pool storage devices.
701 kes  Move starting clones to job.c
702 kes  Move create_restore_bootstrap_file() to job.c
703 kes  Make copy_storage() more general to be able to handle
704      Pool storage.
705 kes  Cleanup a lot of migration code for manual running, including
706      using Pool storage.
707 kes  Move getting a scratch Volume into a subroutine.
708 kes  Make all places a Volume that is added to a pool to 
709      respect max vols.
710 kes  Fix bug in autochanger recycle code (improper edit 64 bit).
711 kes  Fix segfault in restore command when no value specified.
712 kes  Start adding code to handle multiple MediaTypes in restore.
713 kes  Eliminate race condition in getting Volume name for
714      two drive autochanger.
715 kes  More debug code in autochanger.
716 kes  Add storage keyword to bootstrap file, add parsing.
717 kes  Move slot in bsr file into Volume record as there will be
718      a different slot for each Volume.
719 kes  Create reserve.h
720 07Feb06
721 kes  Implement Pool storage overrides.
722 06Feb06
723 kes  Implement first cut of Migration.
724 kes  Implement mysql_use_result() from patch by Karl Hakimian.
725      This reduces significantly the memory consumption during
726      the restore tree building, and hence runs faster too.
727 kes  Implement StorageId patch supplied by user (reggie) in bug
728      #536.  This should permit Bacula to work correctly with two
729      autochangers.
730 kes  Implement Job listing variations suggested by a user.
731 kes  Move updating bootstrap code in backup.c to subroutine
732      update_bootstrap_file().
733 kes  Add new job status elapsed time and bytes written user
734      friendly job report output patch sent by John Kodis
735      <kodis at comcast.ne>.
736 kes  Implement a storage list in Pools.
737 kes  Separate out setup_job() code from run_job().
738 kes  Get migration working -kes  lots of changes in mac.c in both
739      DIR and SD.
740 kes  Apply patch from user (Eric Bollengier I think) that fixes a     
741      DIR crash when no arguments are supplied to a dot command.
742 kes  Fix typo (strcpy->strcmp) in ua_prune.c as reported by Martin.
743 kes  Fix command arg name->volume in label command of gnome-console.
744 kes  Fix SD acquire.c to release correct DCR by explicitly testing
745      on the dcr address rather than trying to devine if it is a read
746      or write dcr.  This failed in error conditions when the device was
747      not fully setup.
748  
749 30Jan06
750 kes  Apply user supplied patch for more readable rate output
751      in job report.
752 kes  Continue implementing migration.
753 kes  Implement support for removable filesystems in SD.
754 kes  Ensure that btraceback scripts can be read by anyone.
755 kes  Replace dvd-freespace and dvd-writepart by dvd-handler.
756 kes  Correct bug where canceling restore before the FD contacts
757      the SD causes the drive to be left in read mode.
758 kes  Move ofline_or_rewind into DEVICE::close().
759 kes  Eliminate close_device.
760 kes  Convert several dev subroutines to methods (e.g. bsf,
761      eod, ...)
762 kes  Eliminate force_close_device().
763 kes  Implement Device Type directive in Device resource that
764      can have values File, Tape, Fifo, DVD, or Prog.
765 kes  Add has_cap() method to Device.
766 Changes to 1.39.4
767 17Jan06
768 kes  Add patch from bug #527 to allow RedHat user to specify
769      options/user/group for starting each daemon in      
770      /etc/sysconf/bacula.
771 16Jan06
772 kes  Add two new queries to query.sql provided by Arno. One
773      list volumes known to the Storage device, and the other
774      lists volumes possibly needing replacement (error, ...).
775 15Jan06
776 kes  Add periodic (every 24 hours) garbage collection of memory 
777      pool by releasing free buffers.
778 14Jan06
779 kes  Correct bug counting sized (for display only) in smartall.c
780 kes  Print FD mempool stats if debug > 0 rather than 5.
781 12Jan06
782 kes  Make db_lock() mutex error fail the job rather than abort
783      Bacula.  Canceling the job caused the mutex to fail.
784 kes  Correct bug in alist.c that re-allocated the list if the
785      number of items goes to zero.
786 kes  Move the reservation system thread locking to the top level
787      so that one job at a time tries all possible drives before
788      waiting.
789 kes  Implement a reservation 'fail' message queue that is built            
790      and destroyed on each pass through the reservation system.
791      These messages are displayed in a 'Jobs waiting to reserve
792      a drive' list during a 'status storage='.  Note, multiple
793      messages will generally print for each JobId because they
794      represent the different problems with either the same drive
795      or different drives.  If this output proves too confusing
796      of voluminous, I will display it only when debug level 1
797      or greater is enabled in the SD.
798 11Jan06
799 kes  Add enable/disable job=<job-name>.     This command prevents
800      the specified job from being scheduled. Even when disabled,
801      the job can be manually started from the console.
802 kes  During 'update slots' clear all InChanger flags where the
803      StorageId is zero (old Media records).
804
805 Beta release 1.38.4:
806 09Jan06
807 kes  Fix autochanger code to strip leading spaces from returned
808      slots number. Remove bc from chio-changer.
809 kes  Back port a bit of 1.39 crypto code to reduce diffs.
810 kes  Fix first call to autochanger that missed close()ing the
811      drive. Put close() just before each run_program().  Fixes
812      Arno's changer bug.
813 07Jan06
814 kes  Add PoolId to Job record when updating it at job start time.
815 06Jan06
816 kes  Pull in more code from 1.39 so that there are fewer file
817      differences (the new ua_dotcmds.c, base64.h, crypto.h
818      hmac.c jcr.c (dird and lib) lib.h md5.h parse_conf.c 
819      util.c. Aside from ua_dotcmds.c these are mostly crypto
820      upgrades.
821 kes  Implement new method of walking the jcr chain. The
822      incr/dec of the use_count is done within the walking
823      routines.  This should prevent a jcr from being freed
824      from under the walk routines.
825
826
827 Changes to 1.39.3:
828 04Jan06
829 kes  Start implementing Verify list output.
830 kes  Move the suitable_drive flag to a better place to prevent
831      premature termination of the reservation if all drives
832      are busy -kes  should fix Arno's diff/inc pool failures.
833 26Dec05
834 kes  Add mutex to single thread VSS code in Win32.
835 22Dec05
836 kes  Simplify code in askdir.c that waits for creating an appendable
837      volume so that it can handle multiple returns from the wait
838      code.
839 kes  Modify the wait code to permit multiple returns.
840 kes  Return a zero when "autochanger drives" is called and
841      it is not an autochanger.
842 kes  Make rewind_dev() a method taking a DCR as an argument.
843      This permits closing and reopening the drive if the
844      rewind fails as happens if the drive was loaded while the
845      file descriptor was open. This refreshes the file descriptor.
846 kes  Remove the ST_OPENED flag and always rely on fd < 0 for knowing
847      if the device is open or not.  This should eliminate
848      Arnos problem.
849 kes  Return error if reserve cannot find at least one suitable device.
850 kes  Make wait_for_sysop() return correct state information.
851 kes  Fix Win32 state file problem. write was not using compat
852      code. This should fix bug #500.
853 21Dec05
854 kes  Modify gui on command to set only GUI mode and not batch.
855 kes  Modify .messages command to always print messages regardless
856      of the mode.
857 kes  If GUI mode is on, suppress automatic printing of 
858      You have messages. 
859 kes  Delete old bnet packet code.
860 kes  Ignore new BNET_START_SELECT and BNET_END_SELECT signals in
861      wx-console. -kes  not implemented because bconsole must be updated.
862 kes  Modify restore command in wx-console to set gui on and to use
863      only .messages instead of messages.  Hopefully this fixes bug
864      #514.
865 kes  Fix seg fault in exit of acquire when canceling a job --
866      reported by Wolfgang Denk
867 kes  Pull in latest reservation system changes from 1.38
868 kes  Make .messages command always print messages regardless
869      of the automessages flag.
870 17Dec05
871 kes  Fix seg fault if user labels a drive directory bug #513
872 kes  Remove quotes around Version as it breaks things.
873 16Dec05
874 kes  Merge in Aleksandar Milivojevic's mods to the spec file.
875 kes  Apply sparse code fix for raw drives and fifos. Bug 506
876 kes  Thorsten fixed Unicode cd problem with wx-console bug 505.
877 14Dec05
878 kes  Correct reservation system to do a last ditch try
879      for any mounted volume, then anyone anywhere.
880 kes  Add quotes around table Version because of
881      error in MySQL 4.1.15 -kes  bug report submitted.
882 kes  Correct some minor problems with btape in the fill
883      command.
884 kes  Updates to ssh-tunnel from Joshua Kugler.
885 kes  Added a report.pl program from Jonas Bjorklund.               
886 kes  Simplify the O_NONBLOCK open() code for tape drives,
887      and always open nonblocking.
888 kes  Do not wait for open() if EIO returned (shouldn't happen).
889 kes  Eliminate 3 argument to tape open().
890 kes  Correct the slot # edited in the 3995 Bad autochanger unload
891      message.
892 kes  With -S on bscan (show progress) do not divide by zero.
893 13Dec05
894 kes  Make cancel pthread_cond_signal() pthread_cond_broadcast().
895 kes  When dcr is freed, also broadcast dev->wait_next_vol signal.
896 kes  Remove unused code in wait_for_device.     
897 kes  Make wait_for_device() always return after 60 seconds of wait.
898
899 Changes to 1.39.2:
900 13Dec05
901 kes  Add stubs for non-crypto build.
902 12Dec05
903 kes  Use localhost if no network configured
904 11Dec05
905 kes  Eliminated duplicate MaxVolBytes in cat update -kes  bug 509.
906 kes  Remove debug print.
907 kes  Add bail_out in error during state file reading.
908 10Dec05
909 kes  Merge changes made to 1.38.3 into HEAD
910 kes  Add stubs for pygtk-console code
911 kes  Create Makefile.in for pygtk-console code
912 09Dec05
913 kes  Merge updates into 1.38 branch
914 kes  Update specs to include mysql4 define.
915 kes  Fix when attributes are sent, must be after binit().
916 kes  Stop read_record() if status not ok in second loop.
917 kes  Return rec->FileIndex in dcr->VolLastIndex for normal
918      and partial records in read_record().  This allows bscan
919      to get FileIndex at EOT correct.
920 kes  Fix butil.c to correctly set dcr -kes  fixes seg fault in bls.
921 08Dec05
922 kes  Fix Win32 built to work with new crypto code.
923 kes  Apply patch supplied by user (slightly modified) to fix
924      correct detection of holes in block devices and FIFOs. 
925      Bug # 506.
926 kes  Apply patch supplied by user (slightly modified) 
927      to fix SD hang with multiple pools and bad client
928      IP. Fixes bug # 508.
929 07Dec05
930 kes  Add nagios plugin to the examples directory. Submitted by
931      Christian Masopust.
932 kes  Remove warning message about multiple saves of hardlinked files
933      from find_one.c as it can generate too many warning messages.
934 kes  Modify most restore error messages to be queued so that they
935      appear at the end of the job rather than mixted with the restore
936      listing where they could be "lost".
937 06Dec05
938 kes  Reset timeout values before select() per patch from 
939      Frank Sweetser for problems with non-blocking sockets.
940 kes  Unlink the state file if either reading or writing it gets
941      errors.  Hopefully this will fix Win32 exit problems.
942 kes  Add sanity check in append.c to ensure that dcr is not NULL.
943      This can happen if multiple drive autochanger SCSI control
944      channel and drive indicies do not correspond.
945 05Dec05
946 kes  Get next volume from Scratch pool before creating a volume.
947 kes  Set new Pool defaults in Vol when moved from Scratch Pool.
948 kes  Remove argument from create_bacula_database for SQLite as it
949      caused an error.
950 kes  Add back index code so that two drive autochangers can get
951      a second tape.
952 kes  Change a bunch of debug levels to aid debugging autochangers.
953 kes  Fix reservation so that mutexes are properly applied.
954 kes  Rework reservation algorithm so that two drives can be used
955      at the same time.
956 04Dec05
957 kes  Landon merged his data encription changes into the HEAD
958 kes  Apply days keyword patch from Alexander.Bergolth at wu-wien.ac.at 
959      If this patch is applied, the number of days can be specified with
960      "list nextvol days=xx"
961      or
962      "status dir days=xx"
963      My use case is to be able to preview the next scheduled job (and the 
964      next tape to be used) on fridays if there are no scheduled jobs during 
965      the weekend.
966 Changes to 1.39.1:
967 03Dec05
968 kes  Fix font code in gnome2 console user patch. Fixes bug #501.
969 kes  Fix malformatted bnet error message that caused seg fault
970      fixes bug 502
971 kes  Applied user patch to improve README.vc8 in src/win32.
972 29Nov05
973 kes  Add Migrate, Copy, Archive Job types (some where there)
974 kes  Correct some more editing of JobId's (for 64 bit compatibility).
975 kes  Ensure that StorageId is stored in Media record when ever possible.
976 kes  Add Migration Job to Job.
977 kes  Add Migration Time, Migration High Bytes, Migration Low Bytes
978      Next Pool to Pool resource.
979 kes  Add more code to mac.c (migration archive copy).
980 kes  Change Start Storage daemon job to require read and write storage
981      pointers.
982 kes  Pass read storage data to SD as well as write storage data.
983 kes  Remove old code from winservice.cpp
984 kes  Break on error in scan.
985 kes  Fix typo in signal.c
986 kes  Separate read/write DCR in SD.     Add jcr->read_dcr.
987 kes  Cleanup how find_device() works.
988 kes  Add read output to Status in SD.
989 Changes to 1.39.0:
990 23Nov05
991 kes  Add red-black btree routines
992 21Nov05
993 kes  Remove abs() in bfile.c so that it compiles on Solaris. 
994      Bug #491.
995 20Nov05
996 kes  Fix crash in tray-monitor when daemon disconnects. Bug #479.
997 kes  Fix bnet-server bug found on OpenBSD. Bug #486
998 kes  Fix cancel failure bug. Bug #481
999 kes  Fix failure when Pool name has spaces. Bug #487      
1000 kes  Fix SD crash in autochanger code. Mutex failure. Bug #488
1001 kes  Fix a couple of free()s in src/filed/acl.c
1002 kes  Fix memory overrun in bfile.c in building OS X resource
1003      fork filename. Bug #489 
1004 kes  Add Pool name to SD status output.
1005 14Nov05
1006 kes  Apply SunOS patch for ACLs submitted by David Duchscher.                     
1007 kes  Make sure to set storage before trying to set drive.
1008 kes  Add bacula_mail_summary.sh to examples directory. It makes
1009      a single email summary of any number of jobs. Submitted
1010      by Adrew J. Millar.
1011 kes  Make sure when we do a mount to unblock the device even
1012      if the drive could not be opened.  
1013 13Nov05
1014 kes  Remove the USE_WIN32STREAMEXTRACTION #defines (always on)
1015      and correct a few minor problems to make it build on Linux.
1016 10Nov05
1017 kes  Remove delete of CVS from all Makefiles
1018 kes  Fix seg fault when clicking on Add button in wx-console
1019      restore panel.  Bug #470.
1020 kes  Fix copyright date and URL typo -kes  bug #468.
1021 kes  Change autostart install for FreeBSD to look for rc.conf     
1022      rather than rc.local as suggested fix for bug #466.
1023 kes  Apply patch supplied by Eric Bollengier to fix PostgreSQL       
1024      grant on status. Bug #465
1025 kes  Apply patch supplied by Eric Bollengier to fix PostgreSQL
1026      update script. Bug #464
1027 kes  Tweak #ifdefing a bit in new Win32 stream code.
1028 kes  Fix #ifdeffing for FD_NO_SEND_TEST.
1029 kes  Add documentation of performance #defines