git.sur5r.net Git - bacula/bacula/blob - bacula/technotes-2.1

   1               Technical notes on version 2.1
   2
   3 General:
   4 12Apr07
   5 kes  Locking debug level tweaks in SD.
   6 kes  Tweak new Volume code.
   7 11Apr07
   8 kes  Add exec external-command [wait-seconds] to bconsole. This
   9      executes the external-command.  Note! normally external-command
  10      should be enclosed in double quotes.
  11 kes  Turn the .die command on only if DEVELOPER is defined -- i.e.
  12      it should normally be off in a production system.
  13 10Apr07
  14 kes  Implement die command for SD so that we can force it to dump.
  15 kes  Implement SD lock debug code.
  16 kes  Implement new algorithm for keeping Volume list in SD.  It
  17      is now owned by the device.
  18 04Apr07
  19 kes  Implement new code for freeing in use volumes that should
  20      resolve if not all, some of the problems of multiple drive
  21      tape conflicts described in bug 801.
  22 03Apr07
  23 kes  Fix gui/bacula-web/images files in svn.
  24 kes  Turn on FreeBSD/OpenBSD code to set EOT model on tape.
  25 02Apr07
  26 ebl  Fix a bug in batch mode (in string escape)
  27 kes  Correct migration prune SQL typo that crept in in a
  28      recent 2.1.x change.
  29 01Apr07
  30 kes  Move bnet_despool() into class in bsock.c
  31 kes  Modify job report to include director name and Build OS.
  32 kes  Move drop and check_catalog() before fork.
  33 kes  Add update database scripts (version 9 to 10) to updatedb directory.
  34 31Mar07
  35 ebl  Check size and age of each file after its backup to see if
  36      it has changed during backup, if 'checkfilechanges' is set.
  37      The FD will do an extra check (stat(2)) after
  38      each file backup. mtime, ctime and size are compared with
  39      'before backup' information. If time or size mismatch, an
  40      error message will be generated. You must upgrade FD to use it.
  41 30Mar07
  42 kes  Make database name and user configurable
  43      --with-db-name=xxx --with-db-user=xxx
  44 kes  Add back database type to message.c for debugging.
  45 29Mar07
  46 kes  Implement dir_sql() which issues an SQL query.
  47 kes  Modify bat medialist to use dir_sql() and do some minor C++
  48      formatting as well as eliminating a number of pointers, simplifing
  49      the code.
  50 28Mar07
  51 kes  Fix some of the mtx-changer grep commands for tape label readers.
  52 kes  Convert a number of bsendmsg into the appropriate send/warning/error
  53      message class calls.
  54 kes  Suppress the using database message in the .sql command.
  55 kes  Correct an incorrect bnet_tls_client prototype -- patch from Martin.
  56 27Mar07
  57 kes  Add context menu for floating a window.
  58 kes  Some minor cleanup and name changes in qt-console
  59 kes  Add doing mt setblk 0 in Win32 mtx-changer.
  60 kes  Apply Martin's bug fix to move definition of ENODATA for
  61      FreeBSD to bsock.c
  62 ebl  Add a BUSY handler to sqlite to be able to use multi_db = 1 with
  63      sqlite2 and sqlite3.
  64 26Mar07
  65 kes  More pruning cleanup.
  66 kes  Turn on wait_for_drive by default in mtx-changer.
  67 kes  Turn on Batch insert code by default as it now passes regression.
  68 kes  Add ./configure --enable-bat to enable building of Bat.
  69      No install yet though.
  70 25Mar07
  71 kes  Implement a new .sql command for bat.
  72 kes  Implement code to turn off pruning in obtaining the next volume.
  73      Pruning is turned off for the status dir command, but turned on
  74      for SD requests and for the list nextvolume command.
  75 24Mar07
  76 kes  Correct Qmsg() that was not updated correctly when committing a
  77      previous change (probably the recent TLS patch).
  78 23Mar07
  79 kes  Write new subroutine is_volume_purged() that explicitly checks
  80      if the Volume is purged, and if so marks it as such. This should
  81      resolve problems reported about needing to mount twice to recycle
  82      volumes.
  83 kes  Rewrite pruning algorithm to do more work in the SQL engine, and
  84      to pass a list of JobIds to be deleted to SQL.  Also, minimize the
  85      amount of duplicated code.
  86 kes  Do volume pruning only for the Media Type desired (reduces pruning time
  87      if multiple Media Types are in the same pool).
  88 kes  Implement more detailed info in the Job report for the Bacula version
  89      and architecture.
  90 kes  Switch from POOLMEM to POOL_MEM (a real class) in ua_prune.c and
  91      ua_purge.c.
  92 ebl  Add bbatch tool to bench database and insert mode.
  93      Fix sql quote stuff in batch mode
  94      Fix sql stuff for mysql
  95 22Mar07
  96 kes  Correct problems with am/pm scheduling. Fixes bug #808.
  97 kes  Implement new prunning code that prunes up to 1000 jobs at
  98      the same time.  The same technique can be applied to a number
  99      of other prune/purge subroutines.
 100 kes  Add an insanity check when starting a new tape job to ensure
 101      that the tape position has not been changed. If so fail the
 102      job.
 103 kes  Fix Win32 build for dlls to add the folllowing:
 104      src/lib/bsock.c -- new file with new entry points
 105      src/lib/dlist.c  -- new entry points
 106      src/cats/sql_create.c -- new entry point
 107      src/cats/sql_cmds.c -- new DATA item exported
 108 21Mar07
 109 ebl  batch mode cleanup bscan-test is ok now.
 110 kes  Implement SD code to check length of disk volume before appending.
 111 18Mar07
 112 kes  Correct return status on db_batch... routines.
 113 kes  Add call to db_write_batch_file_records() to migration code.
 114 ebl  Fix AfterJob timing
 115 kes  Move the checking of the database in initializion of the Director
 116      to after we drop privileges.  This avoids the need for both root
 117      and bacula access to the DB.
 118 kes  Correct a misplaced variable definition in src/filed/backup.c
 119 kes  Correct how the new batch insert db_create_attributes_record()
 120      uses the arguments.  Caused a seg fault in bscan.
 121 kes  Implement lock() and unlock() methods in DEVICE class.
 122      Implement block() and set_block(xx) methods in DEVICE class.
 123 kes  Modify bnet_connect() so that it uses time() to check for the
 124      wait time expiring (on some OSes, some system calls may not
 125      return immediately).
 126 kes  Modify Verify to obtain the previous JobId when it is actually
 127      running rather than at schedule time (as it was in 1.38.x).
 128 kes  Fix src/job.c to handle MaxWaitTime correctly.  This should
 129      fix bug #802.
 130 kes  When checking pid in pid file, continue running if the pid is
 131      the same as ours. This occurs on IRIX after a system crash.
 132      Fixes bug #797.
 133 10Mar07
 134 kes  Extend new GUI API.
 135 kes  Make the ua structure a class, and implement send_msg(),
 136      error_msg(), warning_msg(), and info_msg().
 137 08Mar07
 138 kes  Apply fix from for building wx-console on the Mac from
 139      bug #798.
 140 kes  Implement new select mechanism for GUI programs.
 141 kes  Reorganize initialization of stackedWidgets in bat.
 142 07Mar07
 143 kes  Add updated nagios plugin supplied by Christian Masopust.
 144 05Mar07
 145 kes  More bat implementation.
 146 kes  File migrate bug with Pool Occupancy using mediaid instead
 147      of jobids.  Fixes bug #795.
 148 kes  Fix orphaned buffers in filed backup and verify due to
 149      crypto buffers not freed during errors.  Fixes bug #789.
 150 kes  Extend new GUI api code to tree commands.
 151 kes  Ensure that tree and dot commands check console ACLs.
 152 kes  Permit marking directory with trailing slash.
 153 kes  Allow 20 console connections (instead of only 10).
 154 04Mar07
 155 kes  Add smartctl call to bacula-sd.conf as an example of getting
 156      tape alert info.
 157 02Mar07
 158 kes  Modify jobq.c to let simultaneous restore jobs run. This may
 159      cause them to fail if they cannot get a drive.
 160 kes  Add Client Connect Wait to Storage daemon to permit users to
 161      modify the time the SD waits for a FD connection.
 162 29Feb07
 163 kes  Correct virtual changer check which was backwards. This caused
 164      volumes to be unloaded into slots already occupied.
 165 28Feb07
 166 kes  Apply Command ACL filter to JobId list in restore command.
 167 kes  Correct typeo in var.c patch.
 168 27Feb07
 169 kes  Don't let Bacula prune File or Job records for the current Job.
 170 kes  Fix variable substitution pad + inc bug reported (with patch)
 171      in bug #791.
 172 26Feb07
 173 kes  Correct SQLite log table index as reported by Luca Berra.
 174 24Feb07
 175 ebl  fix fifo stuff, bacula tries to rewind the fifo... Thanks to Andreas
 176 22Feb07
 177 kes  Begin implementing new comm signals for API.
 178 kes  Fix a few places in lib/message.c where the open fd may
 179      not be zeroed.
 180 kes  Continue implementing lib/bsock.c (real class).  Make jcr,
 181      who, host, and port private. There are new methods to access
 182      them for non-class use. This required touching a number of files.
 183 21Feb07
 184 kes  Add LANG=C to autoconf/randpass so it works with languages other
 185      than English.  Fixes bug #788.
 186 20Feb07
 187 ebl  Revert ClientRunBeforeJob to old position as in 1.38.X.
 188      This fixes bug #780
 189      You will not be able to generate Include/Exclude list any more.
 190      It will be fixed soon.
 191      If you want to use this, you can apply
 192      trunk/bacula/patches/testing/clientrunbeforejob_can_generate_include_exclude_list.patch
 193 19Feb07
 194 kes  Restore of sockets created false error messages because Bacula
 195      no longer restores sockets, but the code was still trying to
 196      set the attributes on a non-existent file. Reported by a user.
 197 ebl  finish RecyclePool feature
 198      Media will takes Pool.RecyclePool
 199      when moving from Scratch to a Pool or when user will do
 200      update volume=xxx frompool
 201      To use it, add RecyclePool = aPool to your Pool resource
 202         Pool {
 203                 Name = Default
 204                 RecyclePool = Scratch
 205                 ...
 206         }
 207      TODO: update manual
 208 kes  Expand new BSOCK class adding signal() and new BNET signals.
 209 kes  Begin enhancing the dot commands adding a new API function
 210      that returns more information and will make it easier
 211      to interface to the Director from a program.
 212 18Feb07
 213 kes  Make DEVICE fd private. Its new name is m_fd, and can be
 214      obtained with dev->fd() outside the class.  This is the
 215      first of many DEVICE members to be made private.
 216 kes  Implement Michael Renner's idea on having a virtual disk
 217      changer. I made some minor modifications (e.g. I did not
 218      implement the Virtual Changer directive, but simply set
 219      the Changer Command to an empty string.
 220 17Feb07
 221 kes  Implement a BSOCK send() method that writes the whole record
 222      in a single write() request rather than in two.
 223 ebl  add update volume=xxx recyclepool=yyyy
 224      volume takes recyclepool from pool when using update volume=xxx from pool
 225 16Feb07
 226 kes  Fix encryption deblocking bug, which caused some restored files
 227      to be truncated. This fixes bug #763.
 228 kes  Add FD event sequence order prepared by Eric -- for RunScripts.
 229 kes  Fix 12am/pm bug as reported in bug #782.
 230 13Feb07
 231 kes  Apply Eric's ClientRunScriptAfter patch to 2.0 and 2.1.
 232 ebl  Use btime_t instead of uint64_t in media patch.
 233 11Feb07
 234 kes  Optimize the use of the database a bit in the Status dir command.
 235      Only open it when needed, ensure that if any previous database
 236      was opened, it is closed.
 237 10Feb07
 238 kes  Correct VolCatBytes bug from media patch.
 239 kes  Apply patch from bug #612 by Rudolf Cejka to speedup pruning
 240      in the case of orphaned records.
 241 kes  Modify dbcheck to handle orphaned JobMedia, Path, Filename,
 242      and File records in 300K chunks to be more efficient. This
 243      idea came from Juan Luis Frances (if I remember right).
 244 kes  Apply Eric's scratch patch that moves a purged Volume to
 245      the RecyclePool.  Question: how is RecyclePool set? what
 246      happens to the ScratchPool?
 247 kes  Apply Eric's media patch that collects read/write media
 248      times as well as byte counts.  This patch requires a
 249      simultaneous upgrade of the DIR and SD.  Note, there
 250      should be some way to turn off timing. I'm not sure
 251      times are in Bacula units.
 252 kes  Apply Eric's batch-insert patch.
 253 09Feb07
 254 kes  Update projects list.
 255 08Feb07
 256 kes  Implement Include/Exclude file lists in FD as dlists using
 257      the new dlistString class. This permits efficiently having
 258      large include/exclude lists and completes project Item 25.
 259 kes  Fix dird/ua_cmds.c so that a cancel command checks if the
 260      console is authorized to cancel the job.  This fixes bug
 261      #767.
 262 kes  Modify SD so that the VolCatJobs medium record is updated
 263      at the beginning of a Job rather than the end.  This
 264      fixes bug #775 where exceeding MaxVolJobs caused jobs
 265      to fail.
 266 kes  Added a mutex around getting and setting Volume information
 267      so that multiple simultaneous jobs will single thread.
 268 07Feb07
 269      Switch to using Subversion
 270 kes  Remove src/pygtk-console/ from configure
 271 06Feb07
 272 kes  Delete src/lib/btree.c from win32 build, then add rblist.c
 273      plus the entrypoints.
 274 kes  Apply patch supplied that corrects debug print
 275      in canceling jobs for max run time.  Supplied as
 276      part of bug #621, which was previously fixed.
 277 05Feb07
 278 kes  Test on job_canceled() and sd_msg_thread_done inside
 279      loop starting the message thread to avoid a race condition.
 280      Fixes bug #771.
 281 kes  Remove rl_catch_signal from console.c as it conflicted
 282      with the header definition. Fixes bug #765.
 283 ebl  Fixes bug #766 about RunsOnClient = Yes (case sensitive)
 284 04Feb07
 285 kes  Clarify some stored/acquire messages to indicate if the
 286      problem is with read or append.
 287 02Feb07
 288 kes  Fix memory leak with storage ids in cats/sql_get.c
 289 kes  Terminate watchdog earlier to avoid reference to released
 290      memory -- reported by Jason Austin.
 291 kes  Move closing the database from jobq.c to the director daemon
 292      termination routine. This fixes memory leaks for shadow jobs
 293      (i.e. migration jobs).
 294 kes  Free up the unique jobid chain items in migrate.c.  This fixes
 295      a memory leak problem.
 296 kes  Convert some ugly looking for statements to use foreach_alist
 297      in findlib/find.c.  This will facilitate converting the structures
 298      to use dlist (for large include/exclude lists).
 299 kes  Fix a bug in the btree.c and btree.h routines, then rename them
 300      rblist and add them to be built in src/lib.  Include some new
 301      methods written by Rudolf Cejka that make the code more readable
 302      (hides some of the ugly casting).
 303 kes  Add set_next() and set_prev() methods which make the code much more
 304      readable. Also add a new dlistString class that facilitates storing
 305      strings in dlists.  To be used in the large include/exclude lists.
 306 kes  Make some trivial modifications to lib/tree.h that use rblist
 307      rather than dlist for storing the tree links. This was suggested
 308      by Rudolf Cejka.  The result of this is that the restore tree now
 309      uses red-black binary trees rather than simple linked lists. This
 310      should give rather dramatic speed improvements for directories
 311      contining large numbers of directories/files (more than 10000).
 312 28Jan07
 313 kes  Fix maxruntime bug #621.
 314 26Jan07
 315 ebl  Implement the include JobID in spool file name project.
 316 kes  Reorder projects file in order determined by Jan 2007 vote.
 317 kes  Implement item #12 on project list -- quick release of FD by
 318      the SD.
 319 kes  Fix open of SQLite3 db where user does not have write permission
 320      so that DIR does not crash. Fixes bug #761.
 321 25Jan07
 322 kes  Add back missing @ in Win32 Makefile.
 323 kes  Change 'Device not configured to autolabel' from INFO
 324      to WARNING.
 325 kes  Fix jobq.c to restart failed jobs when Reschedule Times = 0
 326      which should restart an indefinite # of times.
 327 kes  Fix configure --help to print --with-mysql[=DIR]. Same for
 328      other DIR specifications.
 329 23Jan07
 330 rn   Fix msvc build problems. Fix bacula.dll exports for msvc build.
 331      Fix path quoting in SQLite scripts.
 332      Fix problems with SHGetFolderPath.
 333 19Jan07
 334 kes  Create patches/2.0.1-restart.patch. Fixes bug #755.
 335 18Jan07
 336 kes  Fix Job restart on error bug that promotes an Inc to a Full
 337      backup.  This should fix bug #755.
 338 kes  Add qt-console and first cut of code.
 339
 340 Version 2.0.1
 341 12Jan07
 342 kes  Fix Bacula->Documentation link on Win32 to point to index.html
 343      instead of bacula.html. Fixed bug #750.
 344 kes  Return JobId in db_get_job_record() when JobId==0. This should
 345      fix bug #741.
 346 kes  Do not release source pointers when restarting a failed job.
 347 11Jan07
 348 kes  Add dynamic dll entry point for SHGetFolderPath to Win32 code.
 349      This *should* fix bug #747.
 350 kes  Modify winbacula.nsi to substitute with g bin_dir_cmd. Should fix
 351      bug #742.
 352 09Jan07
 353 kes  Modify USTORE constructor to set an empty store_source string,
 354      and don't copy the store_source string in a cancel.  Hopefully
 355      this will fix Arno's seg fault, bug #744.
 356 kes  Add back code to disable conio in configure. Fixes bug #743.
 357 kes  Correct the Options scanner in the FD to correctly handle
 358      SHA1 option, which was eating the next option.  Reported by
 359      Sebastien Guilbaud.
 360 kes  Add code to indicate when the SD is spooling, spool wait, and
 361      despooling as requested by Alan Brown.
 362
 363 Version 2.0.0 released: 4 January 2007