]> git.sur5r.net Git - bacula/bacula/blob - bacula/technotes-2.1
kes Add new/changed entry points to Win32 build
[bacula/bacula] / bacula / technotes-2.1
1               Technical notes on version 2.1
2
3 General:
4 14Apr07
5 kes  Add new/changed entry points to Win32 build
6 kes  Create unaccepted-projects for projects that are not accepted.
7 kes  Simplify locking in the reservations system.
8 kes  Add more debug code in reservations.
9 kes  Make sure error condition on reserving a volume is handled correctly.
10 kes  Correct handling of volume_in_use.
11 kes  Correct handling of initializing a device.
12 kes  Move handling of broadcasting releasing a device into release_device().
13 kes  Correct attaching dcr to dev so that it is only done if device
14      is properly initiated.
15 12Apr07
16 kes  Locking debug level tweaks in SD.
17 kes  Tweak new Volume code.
18 11Apr07
19 kes  Add exec external-command [wait-seconds] to bconsole. This
20      executes the external-command.  Note! normally external-command
21      should be enclosed in double quotes.
22 kes  Turn the .die command on only if DEVELOPER is defined -- i.e.
23      it should normally be off in a production system.
24 10Apr07
25 kes  Implement die command for SD so that we can force it to dump.
26 kes  Implement SD lock debug code.
27 kes  Implement new algorithm for keeping Volume list in SD.  It
28      is now owned by the device.
29 04Apr07
30 kes  Implement new code for freeing in use volumes that should 
31      resolve if not all, some of the problems of multiple drive
32      tape conflicts described in bug 801.
33 03Apr07
34 kes  Fix gui/bacula-web/images files in svn.
35 kes  Turn on FreeBSD/OpenBSD code to set EOT model on tape.
36 02Apr07
37 ebl  Fix a bug in batch mode (in string escape)
38 kes  Correct migration prune SQL typo that crept in in a    
39      recent 2.1.x change.
40 01Apr07
41 kes  Move bnet_despool() into class in bsock.c
42 kes  Modify job report to include director name and Build OS.
43 kes  Move drop and check_catalog() before fork.
44 kes  Add update database scripts (version 9 to 10) to updatedb directory.
45 31Mar07
46 ebl  Check size and age of each file after its backup to see if
47      it has changed during backup, if 'checkfilechanges' is set.
48      The FD will do an extra check (stat(2)) after
49      each file backup. mtime, ctime and size are compared with
50      'before backup' information. If time or size mismatch, an
51      error message will be generated. You must upgrade FD to use it.
52 30Mar07
53 kes  Make database name and user configurable
54      --with-db-name=xxx --with-db-user=xxx
55 kes  Add back database type to message.c for debugging.
56 29Mar07
57 kes  Implement dir_sql() which issues an SQL query.
58 kes  Modify bat medialist to use dir_sql() and do some minor C++
59      formatting as well as eliminating a number of pointers, simplifing
60      the code.
61 28Mar07
62 kes  Fix some of the mtx-changer grep commands for tape label readers.
63 kes  Convert a number of bsendmsg into the appropriate send/warning/error
64      message class calls.
65 kes  Suppress the using database message in the .sql command.
66 kes  Correct an incorrect bnet_tls_client prototype -- patch from Martin.
67 27Mar07
68 kes  Add context menu for floating a window.
69 kes  Some minor cleanup and name changes in qt-console
70 kes  Add doing mt setblk 0 in Win32 mtx-changer.
71 kes  Apply Martin's bug fix to move definition of ENODATA for 
72      FreeBSD to bsock.c
73 ebl  Add a BUSY handler to sqlite to be able to use multi_db = 1 with
74      sqlite2 and sqlite3.
75 26Mar07
76 kes  More pruning cleanup.
77 kes  Turn on wait_for_drive by default in mtx-changer.
78 kes  Turn on Batch insert code by default as it now passes regression.
79 kes  Add ./configure --enable-bat to enable building of Bat.   
80      No install yet though.
81 25Mar07
82 kes  Implement a new .sql command for bat.
83 kes  Implement code to turn off pruning in obtaining the next volume.
84      Pruning is turned off for the status dir command, but turned on
85      for SD requests and for the list nextvolume command.
86 24Mar07
87 kes  Correct Qmsg() that was not updated correctly when committing a
88      previous change (probably the recent TLS patch).
89 23Mar07
90 kes  Write new subroutine is_volume_purged() that explicitly checks
91      if the Volume is purged, and if so marks it as such. This should
92      resolve problems reported about needing to mount twice to recycle
93      volumes.
94 kes  Rewrite pruning algorithm to do more work in the SQL engine, and
95      to pass a list of JobIds to be deleted to SQL.  Also, minimize the
96      amount of duplicated code.     
97 kes  Do volume pruning only for the Media Type desired (reduces pruning time
98      if multiple Media Types are in the same pool).
99 kes  Implement more detailed info in the Job report for the Bacula version
100      and architecture.
101 kes  Switch from POOLMEM to POOL_MEM (a real class) in ua_prune.c and
102      ua_purge.c.
103 ebl  Add bbatch tool to bench database and insert mode.
104      Fix sql quote stuff in batch mode
105      Fix sql stuff for mysql
106 22Mar07
107 kes  Correct problems with am/pm scheduling. Fixes bug #808.
108 kes  Implement new prunning code that prunes up to 1000 jobs at
109      the same time.  The same technique can be applied to a number
110      of other prune/purge subroutines.
111 kes  Add an insanity check when starting a new tape job to ensure
112      that the tape position has not been changed. If so fail the
113      job.
114 kes  Fix Win32 build for dlls to add the folllowing:
115      src/lib/bsock.c -- new file with new entry points
116      src/lib/dlist.c  -- new entry points
117      src/cats/sql_create.c -- new entry point
118      src/cats/sql_cmds.c -- new DATA item exported
119 21Mar07
120 ebl  batch mode cleanup bscan-test is ok now.
121 kes  Implement SD code to check length of disk volume before appending.
122 18Mar07
123 kes  Correct return status on db_batch... routines.
124 kes  Add call to db_write_batch_file_records() to migration code.
125 ebl  Fix AfterJob timing
126 kes  Move the checking of the database in initializion of the Director
127      to after we drop privileges.  This avoids the need for both root
128      and bacula access to the DB.
129 kes  Correct a misplaced variable definition in src/filed/backup.c
130 kes  Correct how the new batch insert db_create_attributes_record()
131      uses the arguments.  Caused a seg fault in bscan.
132 kes  Implement lock() and unlock() methods in DEVICE class.
133      Implement block() and set_block(xx) methods in DEVICE class.
134 kes  Modify bnet_connect() so that it uses time() to check for the
135      wait time expiring (on some OSes, some system calls may not
136      return immediately).
137 kes  Modify Verify to obtain the previous JobId when it is actually
138      running rather than at schedule time (as it was in 1.38.x).     
139 kes  Fix src/job.c to handle MaxWaitTime correctly.  This should
140      fix bug #802.
141 kes  When checking pid in pid file, continue running if the pid is
142      the same as ours. This occurs on IRIX after a system crash.
143      Fixes bug #797.
144 10Mar07
145 kes  Extend new GUI API.
146 kes  Make the ua structure a class, and implement send_msg(),
147      error_msg(), warning_msg(), and info_msg().
148 08Mar07
149 kes  Apply fix from for building wx-console on the Mac from
150      bug #798.
151 kes  Implement new select mechanism for GUI programs.
152 kes  Reorganize initialization of stackedWidgets in bat.
153 07Mar07
154 kes  Add updated nagios plugin supplied by Christian Masopust.
155 05Mar07
156 kes  More bat implementation.
157 kes  File migrate bug with Pool Occupancy using mediaid instead
158      of jobids.  Fixes bug #795.
159 kes  Fix orphaned buffers in filed backup and verify due to
160      crypto buffers not freed during errors.  Fixes bug #789.
161 kes  Extend new GUI api code to tree commands.
162 kes  Ensure that tree and dot commands check console ACLs.
163 kes  Permit marking directory with trailing slash.
164 kes  Allow 20 console connections (instead of only 10).
165 04Mar07
166 kes  Add smartctl call to bacula-sd.conf as an example of getting
167      tape alert info.
168 02Mar07
169 kes  Modify jobq.c to let simultaneous restore jobs run. This may 
170      cause them to fail if they cannot get a drive.
171 kes  Add Client Connect Wait to Storage daemon to permit users to
172      modify the time the SD waits for a FD connection.
173 29Feb07
174 kes  Correct virtual changer check which was backwards. This caused
175      volumes to be unloaded into slots already occupied.
176 28Feb07
177 kes  Apply Command ACL filter to JobId list in restore command.
178 kes  Correct typeo in var.c patch.
179 27Feb07
180 kes  Don't let Bacula prune File or Job records for the current Job.
181 kes  Fix variable substitution pad + inc bug reported (with patch)
182      in bug #791.
183 26Feb07
184 kes  Correct SQLite log table index as reported by Luca Berra.
185 24Feb07
186 ebl  fix fifo stuff, bacula tries to rewind the fifo... Thanks to Andreas
187 22Feb07
188 kes  Begin implementing new comm signals for API.
189 kes  Fix a few places in lib/message.c where the open fd may 
190      not be zeroed.
191 kes  Continue implementing lib/bsock.c (real class).  Make jcr,
192      who, host, and port private. There are new methods to access
193      them for non-class use. This required touching a number of files.
194 21Feb07
195 kes  Add LANG=C to autoconf/randpass so it works with languages other
196      than English.  Fixes bug #788.
197 20Feb07
198 ebl  Revert ClientRunBeforeJob to old position as in 1.38.X.
199      This fixes bug #780
200      You will not be able to generate Include/Exclude list any more.
201      It will be fixed soon.
202      If you want to use this, you can apply
203      trunk/bacula/patches/testing/clientrunbeforejob_can_generate_include_exclude_list.patch
204 19Feb07
205 kes  Restore of sockets created false error messages because Bacula
206      no longer restores sockets, but the code was still trying to
207      set the attributes on a non-existent file. Reported by a user.
208 ebl  finish RecyclePool feature
209      Media will takes Pool.RecyclePool
210      when moving from Scratch to a Pool or when user will do
211      update volume=xxx frompool
212      To use it, add RecyclePool = aPool to your Pool resource
213         Pool {
214                 Name = Default
215                 RecyclePool = Scratch
216                 ...
217         }
218      TODO: update manual
219 kes  Expand new BSOCK class adding signal() and new BNET signals.
220 kes  Begin enhancing the dot commands adding a new API function
221      that returns more information and will make it easier
222      to interface to the Director from a program.
223 18Feb07
224 kes  Make DEVICE fd private. Its new name is m_fd, and can be
225      obtained with dev->fd() outside the class.  This is the
226      first of many DEVICE members to be made private.
227 kes  Implement Michael Renner's idea on having a virtual disk
228      changer. I made some minor modifications (e.g. I did not
229      implement the Virtual Changer directive, but simply set
230      the Changer Command to an empty string.
231 17Feb07
232 kes  Implement a BSOCK send() method that writes the whole record
233      in a single write() request rather than in two.
234 ebl  add update volume=xxx recyclepool=yyyy
235      volume takes recyclepool from pool when using update volume=xxx from pool
236 16Feb07
237 kes  Fix encryption deblocking bug, which caused some restored files
238      to be truncated. This fixes bug #763.
239 kes  Add FD event sequence order prepared by Eric -- for RunScripts.
240 kes  Fix 12am/pm bug as reported in bug #782.
241 13Feb07
242 kes  Apply Eric's ClientRunScriptAfter patch to 2.0 and 2.1.
243 ebl  Use btime_t instead of uint64_t in media patch.
244 11Feb07
245 kes  Optimize the use of the database a bit in the Status dir command.
246      Only open it when needed, ensure that if any previous database
247      was opened, it is closed.
248 10Feb07
249 kes  Correct VolCatBytes bug from media patch.
250 kes  Apply patch from bug #612 by Rudolf Cejka to speedup pruning
251      in the case of orphaned records.
252 kes  Modify dbcheck to handle orphaned JobMedia, Path, Filename,
253      and File records in 300K chunks to be more efficient. This
254      idea came from Juan Luis Frances (if I remember right).
255 kes  Apply Eric's scratch patch that moves a purged Volume to
256      the RecyclePool.  Question: how is RecyclePool set? what
257      happens to the ScratchPool?
258 kes  Apply Eric's media patch that collects read/write media
259      times as well as byte counts.  This patch requires a
260      simultaneous upgrade of the DIR and SD.  Note, there
261      should be some way to turn off timing. I'm not sure
262      times are in Bacula units.
263 kes  Apply Eric's batch-insert patch.
264 09Feb07
265 kes  Update projects list.
266 08Feb07
267 kes  Implement Include/Exclude file lists in FD as dlists using
268      the new dlistString class. This permits efficiently having
269      large include/exclude lists and completes project Item 25.
270 kes  Fix dird/ua_cmds.c so that a cancel command checks if the
271      console is authorized to cancel the job.  This fixes bug 
272      #767.
273 kes  Modify SD so that the VolCatJobs medium record is updated
274      at the beginning of a Job rather than the end.  This
275      fixes bug #775 where exceeding MaxVolJobs caused jobs
276      to fail.
277 kes  Added a mutex around getting and setting Volume information
278      so that multiple simultaneous jobs will single thread.
279 07Feb07
280      Switch to using Subversion
281 kes  Remove src/pygtk-console/ from configure
282 06Feb07
283 kes  Delete src/lib/btree.c from win32 build, then add rblist.c
284      plus the entrypoints.
285 kes  Apply patch supplied that corrects debug print
286      in canceling jobs for max run time.  Supplied as
287      part of bug #621, which was previously fixed.
288 05Feb07
289 kes  Test on job_canceled() and sd_msg_thread_done inside
290      loop starting the message thread to avoid a race condition.
291      Fixes bug #771.
292 kes  Remove rl_catch_signal from console.c as it conflicted
293      with the header definition. Fixes bug #765.
294 ebl  Fixes bug #766 about RunsOnClient = Yes (case sensitive)
295 04Feb07
296 kes  Clarify some stored/acquire messages to indicate if the
297      problem is with read or append.
298 02Feb07
299 kes  Fix memory leak with storage ids in cats/sql_get.c
300 kes  Terminate watchdog earlier to avoid reference to released
301      memory -- reported by Jason Austin.
302 kes  Move closing the database from jobq.c to the director daemon
303      termination routine. This fixes memory leaks for shadow jobs
304      (i.e. migration jobs).
305 kes  Free up the unique jobid chain items in migrate.c.  This fixes
306      a memory leak problem.
307 kes  Convert some ugly looking for statements to use foreach_alist
308      in findlib/find.c.  This will facilitate converting the structures
309      to use dlist (for large include/exclude lists).
310 kes  Fix a bug in the btree.c and btree.h routines, then rename them
311      rblist and add them to be built in src/lib.  Include some new
312      methods written by Rudolf Cejka that make the code more readable
313      (hides some of the ugly casting).
314 kes  Add set_next() and set_prev() methods which make the code much more 
315      readable. Also add a new dlistString class that facilitates storing
316      strings in dlists.  To be used in the large include/exclude lists.
317 kes  Make some trivial modifications to lib/tree.h that use rblist
318      rather than dlist for storing the tree links. This was suggested
319      by Rudolf Cejka.  The result of this is that the restore tree now
320      uses red-black binary trees rather than simple linked lists. This
321      should give rather dramatic speed improvements for directories
322      contining large numbers of directories/files (more than 10000).
323 28Jan07 
324 kes  Fix maxruntime bug #621.
325 26Jan07
326 ebl  Implement the include JobID in spool file name project.
327 kes  Reorder projects file in order determined by Jan 2007 vote.
328 kes  Implement item #12 on project list -- quick release of FD by
329      the SD.
330 kes  Fix open of SQLite3 db where user does not have write permission
331      so that DIR does not crash. Fixes bug #761.
332 25Jan07
333 kes  Add back missing @ in Win32 Makefile.
334 kes  Change 'Device not configured to autolabel' from INFO
335      to WARNING.
336 kes  Fix jobq.c to restart failed jobs when Reschedule Times = 0 
337      which should restart an indefinite # of times.
338 kes  Fix configure --help to print --with-mysql[=DIR]. Same for
339      other DIR specifications.
340 23Jan07
341 rn   Fix msvc build problems. Fix bacula.dll exports for msvc build.
342      Fix path quoting in SQLite scripts.
343      Fix problems with SHGetFolderPath.
344 19Jan07
345 kes  Create patches/2.0.1-restart.patch. Fixes bug #755.
346 18Jan07
347 kes  Fix Job restart on error bug that promotes an Inc to a Full
348      backup.  This should fix bug #755.
349 kes  Add qt-console and first cut of code.
350
351 Version 2.0.1
352 12Jan07
353 kes  Fix Bacula->Documentation link on Win32 to point to index.html
354      instead of bacula.html. Fixed bug #750.
355 kes  Return JobId in db_get_job_record() when JobId==0. This should
356      fix bug #741.
357 kes  Do not release source pointers when restarting a failed job.
358 11Jan07
359 kes  Add dynamic dll entry point for SHGetFolderPath to Win32 code.
360      This *should* fix bug #747.
361 kes  Modify winbacula.nsi to substitute with g bin_dir_cmd. Should fix
362      bug #742.
363 09Jan07
364 kes  Modify USTORE constructor to set an empty store_source string, 
365      and don't copy the store_source string in a cancel.  Hopefully
366      this will fix Arno's seg fault, bug #744.
367 kes  Add back code to disable conio in configure. Fixes bug #743.
368 kes  Correct the Options scanner in the FD to correctly handle  
369      SHA1 option, which was eating the next option.  Reported by    
370      Sebastien Guilbaud.
371 kes  Add code to indicate when the SD is spooling, spool wait, and 
372      despooling as requested by Alan Brown.
373
374 Version 2.0.0 released: 4 January 2007