git.sur5r.net Git - bacula/bacula/blob - bacula/technotes-2.1

   1               Technical notes on version 2.1
   2
   3 General:
   4 22Apr07
   5 ebl  Commit File relocation patch
   6 kes  Make bat have 'make install' target.
   7 kes  Warn during install if old gnome-console binary found.
   8 kes  Warn during install if old wx-console binary found.
   9 kes  Add -8 option to bsmtp command line to add content type utf-8.
  10      Fixes bug #809. (Character coding problem in bsmtp).
  11 kes  If < is found in target (from, to, cc) then do not enclose the
  12      target in < >  in bsmtp. Fixes bug #772  (malformed address).
  13 kes  When printing certain items in dbcheck, stop after 300000.
  14      Fixes bug #822. (dbcheck loops).
  15 kes  Incorrect status in Dir after waiting for mount with poll set.
  16      Fixes bug #825.
  17 21Apr07
  18 kes  Extend idea of Prefer Mounted Volumes to mean a volume about
  19      to be mounted.
  20 kes  Print waiting to reserve a device every 5 mins.
  21 20Apr07
  22 kes  Don't call close_part in label.c if tape and relabel.
  23 kes  Don't free volume if busy in close() -- should help with
  24      bug 801.
  25 ebl  Fix #824 RunScript bug (After script could be execute twice)
  26      Now, Before Script can use RunsOnSuccess and RunsOnFailure options
  27      By default (like before) RunsOnSuccess=true and RunsOnFailure=false
  28      Add a regression script to test RunScript
  29 19Apr07
  30 kes  Correct usage of MTIOCLRERR ioctl for clearing persistant errors
  31      on Solaris.
  32 18Apr07
  33 kes  The bgnome-console (gnome-console) and bwx-console (wx-console) are
  34      deprecated. No additional bugs will be fixed, and they will be dropped
  35      in a future release (probably 2.4.0).
  36 kes  Change name of wx-console to bwx-console to make it more Bacula
  37      unique.
  38 kes  Change the name of gnome-console to bgnome-console to make it
  39      more Bacula unique.
  40 14Apr07
  41 kes  Some time in March, a Feature Request with patch from Jorj Bauer
  42      <jorj@seas.upenn.edu> was committed by Landon (with my approval).
  43      It implements:
  44      The ability for the director to validate a Client (FD) CN against
  45      an arbitrary set of patterns rather than the hostname, with
  46      A new 'TLS Allowed CN' set of directives which are implemented
  47      in the Client resource.  Then pattern matching is used in place
  48      of hostname matching against the Certificate's CN. As an example, we
  49      have certificates which (a) use a local CA, and (b) have a CN of the
  50      form client_123.
  51 kes  Add new/changed entry points to Win32 build
  52 kes  Create unaccepted-projects for projects that are not accepted.
  53 kes  Simplify locking in the reservations system.
  54 kes  Add more debug code in reservations.
  55 kes  Make sure error condition on reserving a volume is handled correctly.
  56 kes  Correct handling of volume_in_use.
  57 kes  Correct handling of initializing a device.
  58 kes  Move handling of broadcasting releasing a device into release_device().
  59 kes  Correct attaching dcr to dev so that it is only done if device
  60      is properly initiated.
  61 12Apr07
  62 kes  Locking debug level tweaks in SD.
  63 kes  Tweak new Volume code.
  64 11Apr07
  65 kes  Add exec external-command [wait-seconds] to bconsole. This
  66      executes the external-command.  Note! normally external-command
  67      should be enclosed in double quotes.
  68 kes  Turn the .die command on only if DEVELOPER is defined -- i.e.
  69      it should normally be off in a production system.
  70 10Apr07
  71 kes  Implement die command for SD so that we can force it to dump.
  72 kes  Implement SD lock debug code.
  73 kes  Implement new algorithm for keeping Volume list in SD.  It
  74      is now owned by the device.
  75 04Apr07
  76 kes  Implement new code for freeing in use volumes that should
  77      resolve if not all, some of the problems of multiple drive
  78      tape conflicts described in bug 801.
  79 03Apr07
  80 kes  Fix gui/bacula-web/images files in svn.
  81 kes  Turn on FreeBSD/OpenBSD code to set EOT model on tape.
  82 02Apr07
  83 ebl  Fix a bug in batch mode (in string escape)
  84 kes  Correct migration prune SQL typo that crept in in a
  85      recent 2.1.x change.
  86 01Apr07
  87 kes  Move bnet_despool() into class in bsock.c
  88 kes  Modify job report to include director name and Build OS.
  89 kes  Move drop and check_catalog() before fork.
  90 kes  Add update database scripts (version 9 to 10) to updatedb directory.
  91 31Mar07
  92 ebl  Check size and age of each file after its backup to see if
  93      it has changed during backup, if 'checkfilechanges' is set.
  94      The FD will do an extra check (stat(2)) after
  95      each file backup. mtime, ctime and size are compared with
  96      'before backup' information. If time or size mismatch, an
  97      error message will be generated. You must upgrade FD to use it.
  98 30Mar07
  99 kes  Make database name and user configurable
 100      --with-db-name=xxx --with-db-user=xxx
 101 kes  Add back database type to message.c for debugging.
 102 29Mar07
 103 kes  Implement dir_sql() which issues an SQL query.
 104 kes  Modify bat medialist to use dir_sql() and do some minor C++
 105      formatting as well as eliminating a number of pointers, simplifing
 106      the code.
 107 28Mar07
 108 kes  Fix some of the mtx-changer grep commands for tape label readers.
 109 kes  Convert a number of bsendmsg into the appropriate send/warning/error
 110      message class calls.
 111 kes  Suppress the using database message in the .sql command.
 112 kes  Correct an incorrect bnet_tls_client prototype -- patch from Martin.
 113 27Mar07
 114 kes  Add context menu for floating a window.
 115 kes  Some minor cleanup and name changes in qt-console
 116 kes  Add doing mt setblk 0 in Win32 mtx-changer.
 117 kes  Apply Martin's bug fix to move definition of ENODATA for
 118      FreeBSD to bsock.c
 119 ebl  Add a BUSY handler to sqlite to be able to use multi_db = 1 with
 120      sqlite2 and sqlite3.
 121 26Mar07
 122 kes  More pruning cleanup.
 123 kes  Turn on wait_for_drive by default in mtx-changer.
 124 kes  Turn on Batch insert code by default as it now passes regression.
 125 kes  Add ./configure --enable-bat to enable building of Bat.
 126      No install yet though.
 127 25Mar07
 128 kes  Implement a new .sql command for bat.
 129 kes  Implement code to turn off pruning in obtaining the next volume.
 130      Pruning is turned off for the status dir command, but turned on
 131      for SD requests and for the list nextvolume command.
 132 24Mar07
 133 kes  Correct Qmsg() that was not updated correctly when committing a
 134      previous change (probably the recent TLS patch).
 135 23Mar07
 136 kes  Write new subroutine is_volume_purged() that explicitly checks
 137      if the Volume is purged, and if so marks it as such. This should
 138      resolve problems reported about needing to mount twice to recycle
 139      volumes.
 140 kes  Rewrite pruning algorithm to do more work in the SQL engine, and
 141      to pass a list of JobIds to be deleted to SQL.  Also, minimize the
 142      amount of duplicated code.
 143 kes  Do volume pruning only for the Media Type desired (reduces pruning time
 144      if multiple Media Types are in the same pool).
 145 kes  Implement more detailed info in the Job report for the Bacula version
 146      and architecture.
 147 kes  Switch from POOLMEM to POOL_MEM (a real class) in ua_prune.c and
 148      ua_purge.c.
 149 ebl  Add bbatch tool to bench database and insert mode.
 150      Fix sql quote stuff in batch mode
 151      Fix sql stuff for mysql
 152 22Mar07
 153 kes  Correct problems with am/pm scheduling. Fixes bug #808.
 154 kes  Implement new prunning code that prunes up to 1000 jobs at
 155      the same time.  The same technique can be applied to a number
 156      of other prune/purge subroutines.
 157 kes  Add an insanity check when starting a new tape job to ensure
 158      that the tape position has not been changed. If so fail the
 159      job.
 160 kes  Fix Win32 build for dlls to add the folllowing:
 161      src/lib/bsock.c -- new file with new entry points
 162      src/lib/dlist.c  -- new entry points
 163      src/cats/sql_create.c -- new entry point
 164      src/cats/sql_cmds.c -- new DATA item exported
 165 21Mar07
 166 ebl  batch mode cleanup bscan-test is ok now.
 167 kes  Implement SD code to check length of disk volume before appending.
 168 18Mar07
 169 kes  Correct return status on db_batch... routines.
 170 kes  Add call to db_write_batch_file_records() to migration code.
 171 ebl  Fix AfterJob timing
 172 kes  Move the checking of the database in initializion of the Director
 173      to after we drop privileges.  This avoids the need for both root
 174      and bacula access to the DB.
 175 kes  Correct a misplaced variable definition in src/filed/backup.c
 176 kes  Correct how the new batch insert db_create_attributes_record()
 177      uses the arguments.  Caused a seg fault in bscan.
 178 kes  Implement lock() and unlock() methods in DEVICE class.
 179      Implement block() and set_block(xx) methods in DEVICE class.
 180 kes  Modify bnet_connect() so that it uses time() to check for the
 181      wait time expiring (on some OSes, some system calls may not
 182      return immediately).
 183 kes  Modify Verify to obtain the previous JobId when it is actually
 184      running rather than at schedule time (as it was in 1.38.x).
 185 kes  Fix src/job.c to handle MaxWaitTime correctly.  This should
 186      fix bug #802.
 187 kes  When checking pid in pid file, continue running if the pid is
 188      the same as ours. This occurs on IRIX after a system crash.
 189      Fixes bug #797.
 190 10Mar07
 191 kes  Extend new GUI API.
 192 kes  Make the ua structure a class, and implement send_msg(),
 193      error_msg(), warning_msg(), and info_msg().
 194 08Mar07
 195 kes  Apply fix from for building wx-console on the Mac from
 196      bug #798.
 197 kes  Implement new select mechanism for GUI programs.
 198 kes  Reorganize initialization of stackedWidgets in bat.
 199 07Mar07
 200 kes  Add updated nagios plugin supplied by Christian Masopust.
 201 05Mar07
 202 kes  More bat implementation.
 203 kes  File migrate bug with Pool Occupancy using mediaid instead
 204      of jobids.  Fixes bug #795.
 205 kes  Fix orphaned buffers in filed backup and verify due to
 206      crypto buffers not freed during errors.  Fixes bug #789.
 207 kes  Extend new GUI api code to tree commands.
 208 kes  Ensure that tree and dot commands check console ACLs.
 209 kes  Permit marking directory with trailing slash.
 210 kes  Allow 20 console connections (instead of only 10).
 211 04Mar07
 212 kes  Add smartctl call to bacula-sd.conf as an example of getting
 213      tape alert info.
 214 02Mar07
 215 kes  Modify jobq.c to let simultaneous restore jobs run. This may
 216      cause them to fail if they cannot get a drive.
 217 kes  Add Client Connect Wait to Storage daemon to permit users to
 218      modify the time the SD waits for a FD connection.
 219 29Feb07
 220 kes  Correct virtual changer check which was backwards. This caused
 221      volumes to be unloaded into slots already occupied.
 222 28Feb07
 223 kes  Apply Command ACL filter to JobId list in restore command.
 224 kes  Correct typeo in var.c patch.
 225 27Feb07
 226 kes  Don't let Bacula prune File or Job records for the current Job.
 227 kes  Fix variable substitution pad + inc bug reported (with patch)
 228      in bug #791.
 229 26Feb07
 230 kes  Correct SQLite log table index as reported by Luca Berra.
 231 24Feb07
 232 ebl  fix fifo stuff, bacula tries to rewind the fifo... Thanks to Andreas
 233 22Feb07
 234 kes  Begin implementing new comm signals for API.
 235 kes  Fix a few places in lib/message.c where the open fd may
 236      not be zeroed.
 237 kes  Continue implementing lib/bsock.c (real class).  Make jcr,
 238      who, host, and port private. There are new methods to access
 239      them for non-class use. This required touching a number of files.
 240 21Feb07
 241 kes  Add LANG=C to autoconf/randpass so it works with languages other
 242      than English.  Fixes bug #788.
 243 20Feb07
 244 ebl  Revert ClientRunBeforeJob to old position as in 1.38.X.
 245      This fixes bug #780
 246      You will not be able to generate Include/Exclude list any more.
 247      It will be fixed soon.
 248      If you want to use this, you can apply
 249      trunk/bacula/patches/testing/clientrunbeforejob_can_generate_include_exclude_list.patch
 250 19Feb07
 251 kes  Restore of sockets created false error messages because Bacula
 252      no longer restores sockets, but the code was still trying to
 253      set the attributes on a non-existent file. Reported by a user.
 254 ebl  finish RecyclePool feature
 255      Media will takes Pool.RecyclePool
 256      when moving from Scratch to a Pool or when user will do
 257      update volume=xxx frompool
 258      To use it, add RecyclePool = aPool to your Pool resource
 259         Pool {
 260                 Name = Default
 261                 RecyclePool = Scratch
 262                 ...
 263         }
 264      TODO: update manual
 265 kes  Expand new BSOCK class adding signal() and new BNET signals.
 266 kes  Begin enhancing the dot commands adding a new API function
 267      that returns more information and will make it easier
 268      to interface to the Director from a program.
 269 18Feb07
 270 kes  Make DEVICE fd private. Its new name is m_fd, and can be
 271      obtained with dev->fd() outside the class.  This is the
 272      first of many DEVICE members to be made private.
 273 kes  Implement Michael Renner's idea on having a virtual disk
 274      changer. I made some minor modifications (e.g. I did not
 275      implement the Virtual Changer directive, but simply set
 276      the Changer Command to an empty string.
 277 17Feb07
 278 kes  Implement a BSOCK send() method that writes the whole record
 279      in a single write() request rather than in two.
 280 ebl  add update volume=xxx recyclepool=yyyy
 281      volume takes recyclepool from pool when using update volume=xxx from pool
 282 16Feb07
 283 kes  Fix encryption deblocking bug, which caused some restored files
 284      to be truncated. This fixes bug #763.
 285 kes  Add FD event sequence order prepared by Eric -- for RunScripts.
 286 kes  Fix 12am/pm bug as reported in bug #782.
 287 13Feb07
 288 kes  Apply Eric's ClientRunScriptAfter patch to 2.0 and 2.1.
 289 ebl  Use btime_t instead of uint64_t in media patch.
 290 11Feb07
 291 kes  Optimize the use of the database a bit in the Status dir command.
 292      Only open it when needed, ensure that if any previous database
 293      was opened, it is closed.
 294 10Feb07
 295 kes  Correct VolCatBytes bug from media patch.
 296 kes  Apply patch from bug #612 by Rudolf Cejka to speedup pruning
 297      in the case of orphaned records.
 298 kes  Modify dbcheck to handle orphaned JobMedia, Path, Filename,
 299      and File records in 300K chunks to be more efficient. This
 300      idea came from Juan Luis Frances (if I remember right).
 301 kes  Apply Eric's scratch patch that moves a purged Volume to
 302      the RecyclePool.  Question: how is RecyclePool set? what
 303      happens to the ScratchPool?
 304 kes  Apply Eric's media patch that collects read/write media
 305      times as well as byte counts.  This patch requires a
 306      simultaneous upgrade of the DIR and SD.  Note, there
 307      should be some way to turn off timing. I'm not sure
 308      times are in Bacula units.
 309 kes  Apply Eric's batch-insert patch.
 310 09Feb07
 311 kes  Update projects list.
 312 08Feb07
 313 kes  Implement Include/Exclude file lists in FD as dlists using
 314      the new dlistString class. This permits efficiently having
 315      large include/exclude lists and completes project Item 25.
 316 kes  Fix dird/ua_cmds.c so that a cancel command checks if the
 317      console is authorized to cancel the job.  This fixes bug
 318      #767.
 319 kes  Modify SD so that the VolCatJobs medium record is updated
 320      at the beginning of a Job rather than the end.  This
 321      fixes bug #775 where exceeding MaxVolJobs caused jobs
 322      to fail.
 323 kes  Added a mutex around getting and setting Volume information
 324      so that multiple simultaneous jobs will single thread.
 325 07Feb07
 326      Switch to using Subversion
 327 kes  Remove src/pygtk-console/ from configure
 328 06Feb07
 329 kes  Delete src/lib/btree.c from win32 build, then add rblist.c
 330      plus the entrypoints.
 331 kes  Apply patch supplied that corrects debug print
 332      in canceling jobs for max run time.  Supplied as
 333      part of bug #621, which was previously fixed.
 334 05Feb07
 335 kes  Test on job_canceled() and sd_msg_thread_done inside
 336      loop starting the message thread to avoid a race condition.
 337      Fixes bug #771.
 338 kes  Remove rl_catch_signal from console.c as it conflicted
 339      with the header definition. Fixes bug #765.
 340 ebl  Fixes bug #766 about RunsOnClient = Yes (case sensitive)
 341 04Feb07
 342 kes  Clarify some stored/acquire messages to indicate if the
 343      problem is with read or append.
 344 02Feb07
 345 kes  Fix memory leak with storage ids in cats/sql_get.c
 346 kes  Terminate watchdog earlier to avoid reference to released
 347      memory -- reported by Jason Austin.
 348 kes  Move closing the database from jobq.c to the director daemon
 349      termination routine. This fixes memory leaks for shadow jobs
 350      (i.e. migration jobs).
 351 kes  Free up the unique jobid chain items in migrate.c.  This fixes
 352      a memory leak problem.
 353 kes  Convert some ugly looking for statements to use foreach_alist
 354      in findlib/find.c.  This will facilitate converting the structures
 355      to use dlist (for large include/exclude lists).
 356 kes  Fix a bug in the btree.c and btree.h routines, then rename them
 357      rblist and add them to be built in src/lib.  Include some new
 358      methods written by Rudolf Cejka that make the code more readable
 359      (hides some of the ugly casting).
 360 kes  Add set_next() and set_prev() methods which make the code much more
 361      readable. Also add a new dlistString class that facilitates storing
 362      strings in dlists.  To be used in the large include/exclude lists.
 363 kes  Make some trivial modifications to lib/tree.h that use rblist
 364      rather than dlist for storing the tree links. This was suggested
 365      by Rudolf Cejka.  The result of this is that the restore tree now
 366      uses red-black binary trees rather than simple linked lists. This
 367      should give rather dramatic speed improvements for directories
 368      contining large numbers of directories/files (more than 10000).
 369 28Jan07
 370 kes  Fix maxruntime bug #621.
 371 26Jan07
 372 ebl  Implement the include JobID in spool file name project.
 373 kes  Reorder projects file in order determined by Jan 2007 vote.
 374 kes  Implement item #12 on project list -- quick release of FD by
 375      the SD.
 376 kes  Fix open of SQLite3 db where user does not have write permission
 377      so that DIR does not crash. Fixes bug #761.
 378 25Jan07
 379 kes  Add back missing @ in Win32 Makefile.
 380 kes  Change 'Device not configured to autolabel' from INFO
 381      to WARNING.
 382 kes  Fix jobq.c to restart failed jobs when Reschedule Times = 0
 383      which should restart an indefinite # of times.
 384 kes  Fix configure --help to print --with-mysql[=DIR]. Same for
 385      other DIR specifications.
 386 23Jan07
 387 rn   Fix msvc build problems. Fix bacula.dll exports for msvc build.
 388      Fix path quoting in SQLite scripts.
 389      Fix problems with SHGetFolderPath.
 390 19Jan07
 391 kes  Create patches/2.0.1-restart.patch. Fixes bug #755.
 392 18Jan07
 393 kes  Fix Job restart on error bug that promotes an Inc to a Full
 394      backup.  This should fix bug #755.
 395 kes  Add qt-console and first cut of code.
 396
 397 Version 2.0.1
 398 12Jan07
 399 kes  Fix Bacula->Documentation link on Win32 to point to index.html
 400      instead of bacula.html. Fixed bug #750.
 401 kes  Return JobId in db_get_job_record() when JobId==0. This should
 402      fix bug #741.
 403 kes  Do not release source pointers when restarting a failed job.
 404 11Jan07
 405 kes  Add dynamic dll entry point for SHGetFolderPath to Win32 code.
 406      This *should* fix bug #747.
 407 kes  Modify winbacula.nsi to substitute with g bin_dir_cmd. Should fix
 408      bug #742.
 409 09Jan07
 410 kes  Modify USTORE constructor to set an empty store_source string,
 411      and don't copy the store_source string in a cancel.  Hopefully
 412      this will fix Arno's seg fault, bug #744.
 413 kes  Add back code to disable conio in configure. Fixes bug #743.
 414 kes  Correct the Options scanner in the FD to correctly handle
 415      SHA1 option, which was eating the next option.  Reported by
 416      Sebastien Guilbaud.
 417 kes  Add code to indicate when the SD is spooling, spool wait, and
 418      despooling as requested by Alan Brown.
 419
 420 Version 2.0.0 released: 4 January 2007