]> git.sur5r.net Git - bacula/bacula/blob - bacula/technotes-2.1
ebl update
[bacula/bacula] / bacula / technotes-2.1
1               Technical notes on version 2.1
2
3 General:
4 20Apr07
5 ebl  Fix #824 RunScript bug (After script could be execute twice)
6      Now, Before Script can use RunsOnSuccess and RunsOnFailure options
7      By default (like before) RunsOnSuccess=true and RunsOnFailure=false
8      Add a regression script to test RunScript
9 19Apr07
10 kes  Correct usage of MTIOCLRERR ioctl for clearing persistant errors
11      on Solaris.
12 18Apr07
13 kes  The bgnome-console (gnome-console) and bwx-console (wx-console) are
14      deprecated. No additional bugs will be fixed, and they will be dropped
15      in a future release (probably 2.4.0).
16 kes  Change name of wx-console to bwx-console to make it more Bacula
17      unique.
18 kes  Change the name of gnome-console to bgnome-console to make it
19      more Bacula unique.
20 14Apr07
21 kes  Some time in March, a Feature Request with patch from Jorj Bauer
22      <jorj@seas.upenn.edu> was committed by Landon (with my approval).
23      It implements:
24      The ability for the director to validate a Client (FD) CN against
25      an arbitrary set of patterns rather than the hostname, with
26      A new 'TLS Allowed CN' set of directives which are implemented
27      in the Client resource.  Then pattern matching is used in place
28      of hostname matching against the Certificate's CN. As an example, we
29      have certificates which (a) use a local CA, and (b) have a CN of the
30      form client_123.
31 kes  Add new/changed entry points to Win32 build
32 kes  Create unaccepted-projects for projects that are not accepted.
33 kes  Simplify locking in the reservations system.
34 kes  Add more debug code in reservations.
35 kes  Make sure error condition on reserving a volume is handled correctly.
36 kes  Correct handling of volume_in_use.
37 kes  Correct handling of initializing a device.
38 kes  Move handling of broadcasting releasing a device into release_device().
39 kes  Correct attaching dcr to dev so that it is only done if device
40      is properly initiated.
41 12Apr07
42 kes  Locking debug level tweaks in SD.
43 kes  Tweak new Volume code.
44 11Apr07
45 kes  Add exec external-command [wait-seconds] to bconsole. This
46      executes the external-command.  Note! normally external-command
47      should be enclosed in double quotes.
48 kes  Turn the .die command on only if DEVELOPER is defined -- i.e.
49      it should normally be off in a production system.
50 10Apr07
51 kes  Implement die command for SD so that we can force it to dump.
52 kes  Implement SD lock debug code.
53 kes  Implement new algorithm for keeping Volume list in SD.  It
54      is now owned by the device.
55 04Apr07
56 kes  Implement new code for freeing in use volumes that should 
57      resolve if not all, some of the problems of multiple drive
58      tape conflicts described in bug 801.
59 03Apr07
60 kes  Fix gui/bacula-web/images files in svn.
61 kes  Turn on FreeBSD/OpenBSD code to set EOT model on tape.
62 02Apr07
63 ebl  Fix a bug in batch mode (in string escape)
64 kes  Correct migration prune SQL typo that crept in in a    
65      recent 2.1.x change.
66 01Apr07
67 kes  Move bnet_despool() into class in bsock.c
68 kes  Modify job report to include director name and Build OS.
69 kes  Move drop and check_catalog() before fork.
70 kes  Add update database scripts (version 9 to 10) to updatedb directory.
71 31Mar07
72 ebl  Check size and age of each file after its backup to see if
73      it has changed during backup, if 'checkfilechanges' is set.
74      The FD will do an extra check (stat(2)) after
75      each file backup. mtime, ctime and size are compared with
76      'before backup' information. If time or size mismatch, an
77      error message will be generated. You must upgrade FD to use it.
78 30Mar07
79 kes  Make database name and user configurable
80      --with-db-name=xxx --with-db-user=xxx
81 kes  Add back database type to message.c for debugging.
82 29Mar07
83 kes  Implement dir_sql() which issues an SQL query.
84 kes  Modify bat medialist to use dir_sql() and do some minor C++
85      formatting as well as eliminating a number of pointers, simplifing
86      the code.
87 28Mar07
88 kes  Fix some of the mtx-changer grep commands for tape label readers.
89 kes  Convert a number of bsendmsg into the appropriate send/warning/error
90      message class calls.
91 kes  Suppress the using database message in the .sql command.
92 kes  Correct an incorrect bnet_tls_client prototype -- patch from Martin.
93 27Mar07
94 kes  Add context menu for floating a window.
95 kes  Some minor cleanup and name changes in qt-console
96 kes  Add doing mt setblk 0 in Win32 mtx-changer.
97 kes  Apply Martin's bug fix to move definition of ENODATA for 
98      FreeBSD to bsock.c
99 ebl  Add a BUSY handler to sqlite to be able to use multi_db = 1 with
100      sqlite2 and sqlite3.
101 26Mar07
102 kes  More pruning cleanup.
103 kes  Turn on wait_for_drive by default in mtx-changer.
104 kes  Turn on Batch insert code by default as it now passes regression.
105 kes  Add ./configure --enable-bat to enable building of Bat.   
106      No install yet though.
107 25Mar07
108 kes  Implement a new .sql command for bat.
109 kes  Implement code to turn off pruning in obtaining the next volume.
110      Pruning is turned off for the status dir command, but turned on
111      for SD requests and for the list nextvolume command.
112 24Mar07
113 kes  Correct Qmsg() that was not updated correctly when committing a
114      previous change (probably the recent TLS patch).
115 23Mar07
116 kes  Write new subroutine is_volume_purged() that explicitly checks
117      if the Volume is purged, and if so marks it as such. This should
118      resolve problems reported about needing to mount twice to recycle
119      volumes.
120 kes  Rewrite pruning algorithm to do more work in the SQL engine, and
121      to pass a list of JobIds to be deleted to SQL.  Also, minimize the
122      amount of duplicated code.     
123 kes  Do volume pruning only for the Media Type desired (reduces pruning time
124      if multiple Media Types are in the same pool).
125 kes  Implement more detailed info in the Job report for the Bacula version
126      and architecture.
127 kes  Switch from POOLMEM to POOL_MEM (a real class) in ua_prune.c and
128      ua_purge.c.
129 ebl  Add bbatch tool to bench database and insert mode.
130      Fix sql quote stuff in batch mode
131      Fix sql stuff for mysql
132 22Mar07
133 kes  Correct problems with am/pm scheduling. Fixes bug #808.
134 kes  Implement new prunning code that prunes up to 1000 jobs at
135      the same time.  The same technique can be applied to a number
136      of other prune/purge subroutines.
137 kes  Add an insanity check when starting a new tape job to ensure
138      that the tape position has not been changed. If so fail the
139      job.
140 kes  Fix Win32 build for dlls to add the folllowing:
141      src/lib/bsock.c -- new file with new entry points
142      src/lib/dlist.c  -- new entry points
143      src/cats/sql_create.c -- new entry point
144      src/cats/sql_cmds.c -- new DATA item exported
145 21Mar07
146 ebl  batch mode cleanup bscan-test is ok now.
147 kes  Implement SD code to check length of disk volume before appending.
148 18Mar07
149 kes  Correct return status on db_batch... routines.
150 kes  Add call to db_write_batch_file_records() to migration code.
151 ebl  Fix AfterJob timing
152 kes  Move the checking of the database in initializion of the Director
153      to after we drop privileges.  This avoids the need for both root
154      and bacula access to the DB.
155 kes  Correct a misplaced variable definition in src/filed/backup.c
156 kes  Correct how the new batch insert db_create_attributes_record()
157      uses the arguments.  Caused a seg fault in bscan.
158 kes  Implement lock() and unlock() methods in DEVICE class.
159      Implement block() and set_block(xx) methods in DEVICE class.
160 kes  Modify bnet_connect() so that it uses time() to check for the
161      wait time expiring (on some OSes, some system calls may not
162      return immediately).
163 kes  Modify Verify to obtain the previous JobId when it is actually
164      running rather than at schedule time (as it was in 1.38.x).     
165 kes  Fix src/job.c to handle MaxWaitTime correctly.  This should
166      fix bug #802.
167 kes  When checking pid in pid file, continue running if the pid is
168      the same as ours. This occurs on IRIX after a system crash.
169      Fixes bug #797.
170 10Mar07
171 kes  Extend new GUI API.
172 kes  Make the ua structure a class, and implement send_msg(),
173      error_msg(), warning_msg(), and info_msg().
174 08Mar07
175 kes  Apply fix from for building wx-console on the Mac from
176      bug #798.
177 kes  Implement new select mechanism for GUI programs.
178 kes  Reorganize initialization of stackedWidgets in bat.
179 07Mar07
180 kes  Add updated nagios plugin supplied by Christian Masopust.
181 05Mar07
182 kes  More bat implementation.
183 kes  File migrate bug with Pool Occupancy using mediaid instead
184      of jobids.  Fixes bug #795.
185 kes  Fix orphaned buffers in filed backup and verify due to
186      crypto buffers not freed during errors.  Fixes bug #789.
187 kes  Extend new GUI api code to tree commands.
188 kes  Ensure that tree and dot commands check console ACLs.
189 kes  Permit marking directory with trailing slash.
190 kes  Allow 20 console connections (instead of only 10).
191 04Mar07
192 kes  Add smartctl call to bacula-sd.conf as an example of getting
193      tape alert info.
194 02Mar07
195 kes  Modify jobq.c to let simultaneous restore jobs run. This may 
196      cause them to fail if they cannot get a drive.
197 kes  Add Client Connect Wait to Storage daemon to permit users to
198      modify the time the SD waits for a FD connection.
199 29Feb07
200 kes  Correct virtual changer check which was backwards. This caused
201      volumes to be unloaded into slots already occupied.
202 28Feb07
203 kes  Apply Command ACL filter to JobId list in restore command.
204 kes  Correct typeo in var.c patch.
205 27Feb07
206 kes  Don't let Bacula prune File or Job records for the current Job.
207 kes  Fix variable substitution pad + inc bug reported (with patch)
208      in bug #791.
209 26Feb07
210 kes  Correct SQLite log table index as reported by Luca Berra.
211 24Feb07
212 ebl  fix fifo stuff, bacula tries to rewind the fifo... Thanks to Andreas
213 22Feb07
214 kes  Begin implementing new comm signals for API.
215 kes  Fix a few places in lib/message.c where the open fd may 
216      not be zeroed.
217 kes  Continue implementing lib/bsock.c (real class).  Make jcr,
218      who, host, and port private. There are new methods to access
219      them for non-class use. This required touching a number of files.
220 21Feb07
221 kes  Add LANG=C to autoconf/randpass so it works with languages other
222      than English.  Fixes bug #788.
223 20Feb07
224 ebl  Revert ClientRunBeforeJob to old position as in 1.38.X.
225      This fixes bug #780
226      You will not be able to generate Include/Exclude list any more.
227      It will be fixed soon.
228      If you want to use this, you can apply
229      trunk/bacula/patches/testing/clientrunbeforejob_can_generate_include_exclude_list.patch
230 19Feb07
231 kes  Restore of sockets created false error messages because Bacula
232      no longer restores sockets, but the code was still trying to
233      set the attributes on a non-existent file. Reported by a user.
234 ebl  finish RecyclePool feature
235      Media will takes Pool.RecyclePool
236      when moving from Scratch to a Pool or when user will do
237      update volume=xxx frompool
238      To use it, add RecyclePool = aPool to your Pool resource
239         Pool {
240                 Name = Default
241                 RecyclePool = Scratch
242                 ...
243         }
244      TODO: update manual
245 kes  Expand new BSOCK class adding signal() and new BNET signals.
246 kes  Begin enhancing the dot commands adding a new API function
247      that returns more information and will make it easier
248      to interface to the Director from a program.
249 18Feb07
250 kes  Make DEVICE fd private. Its new name is m_fd, and can be
251      obtained with dev->fd() outside the class.  This is the
252      first of many DEVICE members to be made private.
253 kes  Implement Michael Renner's idea on having a virtual disk
254      changer. I made some minor modifications (e.g. I did not
255      implement the Virtual Changer directive, but simply set
256      the Changer Command to an empty string.
257 17Feb07
258 kes  Implement a BSOCK send() method that writes the whole record
259      in a single write() request rather than in two.
260 ebl  add update volume=xxx recyclepool=yyyy
261      volume takes recyclepool from pool when using update volume=xxx from pool
262 16Feb07
263 kes  Fix encryption deblocking bug, which caused some restored files
264      to be truncated. This fixes bug #763.
265 kes  Add FD event sequence order prepared by Eric -- for RunScripts.
266 kes  Fix 12am/pm bug as reported in bug #782.
267 13Feb07
268 kes  Apply Eric's ClientRunScriptAfter patch to 2.0 and 2.1.
269 ebl  Use btime_t instead of uint64_t in media patch.
270 11Feb07
271 kes  Optimize the use of the database a bit in the Status dir command.
272      Only open it when needed, ensure that if any previous database
273      was opened, it is closed.
274 10Feb07
275 kes  Correct VolCatBytes bug from media patch.
276 kes  Apply patch from bug #612 by Rudolf Cejka to speedup pruning
277      in the case of orphaned records.
278 kes  Modify dbcheck to handle orphaned JobMedia, Path, Filename,
279      and File records in 300K chunks to be more efficient. This
280      idea came from Juan Luis Frances (if I remember right).
281 kes  Apply Eric's scratch patch that moves a purged Volume to
282      the RecyclePool.  Question: how is RecyclePool set? what
283      happens to the ScratchPool?
284 kes  Apply Eric's media patch that collects read/write media
285      times as well as byte counts.  This patch requires a
286      simultaneous upgrade of the DIR and SD.  Note, there
287      should be some way to turn off timing. I'm not sure
288      times are in Bacula units.
289 kes  Apply Eric's batch-insert patch.
290 09Feb07
291 kes  Update projects list.
292 08Feb07
293 kes  Implement Include/Exclude file lists in FD as dlists using
294      the new dlistString class. This permits efficiently having
295      large include/exclude lists and completes project Item 25.
296 kes  Fix dird/ua_cmds.c so that a cancel command checks if the
297      console is authorized to cancel the job.  This fixes bug 
298      #767.
299 kes  Modify SD so that the VolCatJobs medium record is updated
300      at the beginning of a Job rather than the end.  This
301      fixes bug #775 where exceeding MaxVolJobs caused jobs
302      to fail.
303 kes  Added a mutex around getting and setting Volume information
304      so that multiple simultaneous jobs will single thread.
305 07Feb07
306      Switch to using Subversion
307 kes  Remove src/pygtk-console/ from configure
308 06Feb07
309 kes  Delete src/lib/btree.c from win32 build, then add rblist.c
310      plus the entrypoints.
311 kes  Apply patch supplied that corrects debug print
312      in canceling jobs for max run time.  Supplied as
313      part of bug #621, which was previously fixed.
314 05Feb07
315 kes  Test on job_canceled() and sd_msg_thread_done inside
316      loop starting the message thread to avoid a race condition.
317      Fixes bug #771.
318 kes  Remove rl_catch_signal from console.c as it conflicted
319      with the header definition. Fixes bug #765.
320 ebl  Fixes bug #766 about RunsOnClient = Yes (case sensitive)
321 04Feb07
322 kes  Clarify some stored/acquire messages to indicate if the
323      problem is with read or append.
324 02Feb07
325 kes  Fix memory leak with storage ids in cats/sql_get.c
326 kes  Terminate watchdog earlier to avoid reference to released
327      memory -- reported by Jason Austin.
328 kes  Move closing the database from jobq.c to the director daemon
329      termination routine. This fixes memory leaks for shadow jobs
330      (i.e. migration jobs).
331 kes  Free up the unique jobid chain items in migrate.c.  This fixes
332      a memory leak problem.
333 kes  Convert some ugly looking for statements to use foreach_alist
334      in findlib/find.c.  This will facilitate converting the structures
335      to use dlist (for large include/exclude lists).
336 kes  Fix a bug in the btree.c and btree.h routines, then rename them
337      rblist and add them to be built in src/lib.  Include some new
338      methods written by Rudolf Cejka that make the code more readable
339      (hides some of the ugly casting).
340 kes  Add set_next() and set_prev() methods which make the code much more 
341      readable. Also add a new dlistString class that facilitates storing
342      strings in dlists.  To be used in the large include/exclude lists.
343 kes  Make some trivial modifications to lib/tree.h that use rblist
344      rather than dlist for storing the tree links. This was suggested
345      by Rudolf Cejka.  The result of this is that the restore tree now
346      uses red-black binary trees rather than simple linked lists. This
347      should give rather dramatic speed improvements for directories
348      contining large numbers of directories/files (more than 10000).
349 28Jan07 
350 kes  Fix maxruntime bug #621.
351 26Jan07
352 ebl  Implement the include JobID in spool file name project.
353 kes  Reorder projects file in order determined by Jan 2007 vote.
354 kes  Implement item #12 on project list -- quick release of FD by
355      the SD.
356 kes  Fix open of SQLite3 db where user does not have write permission
357      so that DIR does not crash. Fixes bug #761.
358 25Jan07
359 kes  Add back missing @ in Win32 Makefile.
360 kes  Change 'Device not configured to autolabel' from INFO
361      to WARNING.
362 kes  Fix jobq.c to restart failed jobs when Reschedule Times = 0 
363      which should restart an indefinite # of times.
364 kes  Fix configure --help to print --with-mysql[=DIR]. Same for
365      other DIR specifications.
366 23Jan07
367 rn   Fix msvc build problems. Fix bacula.dll exports for msvc build.
368      Fix path quoting in SQLite scripts.
369      Fix problems with SHGetFolderPath.
370 19Jan07
371 kes  Create patches/2.0.1-restart.patch. Fixes bug #755.
372 18Jan07
373 kes  Fix Job restart on error bug that promotes an Inc to a Full
374      backup.  This should fix bug #755.
375 kes  Add qt-console and first cut of code.
376
377 Version 2.0.1
378 12Jan07
379 kes  Fix Bacula->Documentation link on Win32 to point to index.html
380      instead of bacula.html. Fixed bug #750.
381 kes  Return JobId in db_get_job_record() when JobId==0. This should
382      fix bug #741.
383 kes  Do not release source pointers when restarting a failed job.
384 11Jan07
385 kes  Add dynamic dll entry point for SHGetFolderPath to Win32 code.
386      This *should* fix bug #747.
387 kes  Modify winbacula.nsi to substitute with g bin_dir_cmd. Should fix
388      bug #742.
389 09Jan07
390 kes  Modify USTORE constructor to set an empty store_source string, 
391      and don't copy the store_source string in a cancel.  Hopefully
392      this will fix Arno's seg fault, bug #744.
393 kes  Add back code to disable conio in configure. Fixes bug #743.
394 kes  Correct the Options scanner in the FD to correctly handle  
395      SHA1 option, which was eating the next option.  Reported by    
396      Sebastien Guilbaud.
397 kes  Add code to indicate when the SD is spooling, spool wait, and 
398      despooling as requested by Alan Brown.
399
400 Version 2.0.0 released: 4 January 2007