]> git.sur5r.net Git - bacula/bacula/blob - bacula/technotes-2.1
kes Implement dir_sql() which issues an SQL query.
[bacula/bacula] / bacula / technotes-2.1
1               Technical notes on version 2.1
2
3 General:
4 29Mar07
5 kes  Implement dir_sql() which issues an SQL query.
6 kes  Modify bat medialist to use dir_sql() and do some minor C++
7      formatting as well as eliminating a number of pointers, simplifing
8      the code.
9 28Mar07
10 kes  Fix some of the mtx-changer grep commands for tape label readers.
11 kes  Convert a number of bsendmsg into the appropriate send/warning/error
12      message class calls.
13 kes  Suppress the using database message in the .sql command.
14 kes  Correct an incorrect bnet_tls_client prototype -- patch from Martin.
15 27Mar07
16 kes  Add context menu for floating a window.
17 kes  Some minor cleanup and name changes in qt-console
18 kes  Add doing mt setblk 0 in Win32 mtx-changer.
19 kes  Apply Martin's bug fix to move definition of ENODATA for 
20      FreeBSD to bsock.c
21 ebl  Add a BUSY handler to sqlite to be able to use multi_db = 1 with
22      sqlite2 and sqlite3.
23 26Mar07
24 kes  More pruning cleanup.
25 kes  Turn on wait_for_drive by default in mtx-changer.
26 kes  Turn on Batch insert code by default as it now passes regression.
27 kes  Add ./configure --enable-bat to enable building of Bat.   
28      No install yet though.
29 25Mar07
30 kes  Implement a new .sql command for bat.
31 kes  Implement code to turn off pruning in obtaining the next volume.
32      Pruning is turned off for the status dir command, but turned on
33      for SD requests and for the list nextvolume command.
34 24Mar07
35 kes  Correct Qmsg() that was not updated correctly when committing a
36      previous change (probably the recent TLS patch).
37 23Mar07
38 kes  Write new subroutine is_volume_purged() that explicitly checks
39      if the Volume is purged, and if so marks it as such. This should
40      resolve problems reported about needing to mount twice to recycle
41      volumes.
42 kes  Rewrite pruning algorithm to do more work in the SQL engine, and
43      to pass a list of JobIds to be deleted to SQL.  Also, minimize the
44      amount of duplicated code.     
45 kes  Do volume pruning only for the Media Type desired (reduces pruning time
46      if multiple Media Types are in the same pool).
47 kes  Implement more detailed info in the Job report for the Bacula version
48      and architecture.
49 kes  Switch from POOLMEM to POOL_MEM (a real class) in ua_prune.c and
50      ua_purge.c.
51 ebl  Add bbatch tool to bench database and insert mode.
52      Fix sql quote stuff in batch mode
53      Fix sql stuff for mysql
54 22Mar07
55 kes  Correct problems with am/pm scheduling. Fixes bug #808.
56 kes  Implement new prunning code that prunes up to 1000 jobs at
57      the same time.  The same technique can be applied to a number
58      of other prune/purge subroutines.
59 kes  Add an insanity check when starting a new tape job to ensure
60      that the tape position has not been changed. If so fail the
61      job.
62 kes  Fix Win32 build for dlls to add the folllowing:
63      src/lib/bsock.c -- new file with new entry points
64      src/lib/dlist.c  -- new entry points
65      src/cats/sql_create.c -- new entry point
66      src/cats/sql_cmds.c -- new DATA item exported
67 21Mar07
68 ebl  batch mode cleanup bscan-test is ok now.
69 kes  Implement SD code to check length of disk volume before appending.
70 18Mar07
71 kes  Correct return status on db_batch... routines.
72 kes  Add call to db_write_batch_file_records() to migration code.
73 ebl  Fix AfterJob timing
74 kes  Move the checking of the database in initializion of the Director
75      to after we drop privileges.  This avoids the need for both root
76      and bacula access to the DB.
77 kes  Correct a misplaced variable definition in src/filed/backup.c
78 kes  Correct how the new batch insert db_create_attributes_record()
79      uses the arguments.  Caused a seg fault in bscan.
80 kes  Implement lock() and unlock() methods in DEVICE class.
81      Implement block() and set_block(xx) methods in DEVICE class.
82 kes  Modify bnet_connect() so that it uses time() to check for the
83      wait time expiring (on some OSes, some system calls may not
84      return immediately).
85 kes  Modify Verify to obtain the previous JobId when it is actually
86      running rather than at schedule time (as it was in 1.38.x).     
87 kes  Fix src/job.c to handle MaxWaitTime correctly.  This should
88      fix bug #802.
89 kes  When checking pid in pid file, continue running if the pid is
90      the same as ours. This occurs on IRIX after a system crash.
91      Fixes bug #797.
92 10Mar07
93 kes  Extend new GUI API.
94 kes  Make the ua structure a class, and implement send_msg(),
95      error_msg(), warning_msg(), and info_msg().
96 08Mar07
97 kes  Apply fix from for building wx-console on the Mac from
98      bug #798.
99 kes  Implement new select mechanism for GUI programs.
100 kes  Reorganize initialization of stackedWidgets in bat.
101 07Mar07
102 kes  Add updated nagios plugin supplied by Christian Masopust.
103 05Mar07
104 kes  More bat implementation.
105 kes  File migrate bug with Pool Occupancy using mediaid instead
106      of jobids.  Fixes bug #795.
107 kes  Fix orphaned buffers in filed backup and verify due to
108      crypto buffers not freed during errors.  Fixes bug #789.
109 kes  Extend new GUI api code to tree commands.
110 kes  Ensure that tree and dot commands check console ACLs.
111 kes  Permit marking directory with trailing slash.
112 kes  Allow 20 console connections (instead of only 10).
113 04Mar07
114 kes  Add smartctl call to bacula-sd.conf as an example of getting
115      tape alert info.
116 02Mar07
117 kes  Modify jobq.c to let simultaneous restore jobs run. This may 
118      cause them to fail if they cannot get a drive.
119 kes  Add Client Connect Wait to Storage daemon to permit users to
120      modify the time the SD waits for a FD connection.
121 29Feb07
122 kes  Correct virtual changer check which was backwards. This caused
123      volumes to be unloaded into slots already occupied.
124 28Feb07
125 kes  Apply Command ACL filter to JobId list in restore command.
126 kes  Correct typeo in var.c patch.
127 27Feb07
128 kes  Don't let Bacula prune File or Job records for the current Job.
129 kes  Fix variable substitution pad + inc bug reported (with patch)
130      in bug #791.
131 26Feb07
132 kes  Correct SQLite log table index as reported by Luca Berra.
133 24Feb07
134 ebl  fix fifo stuff, bacula tries to rewind the fifo... Thanks to Andreas
135 22Feb07
136 kes  Begin implementing new comm signals for API.
137 kes  Fix a few places in lib/message.c where the open fd may 
138      not be zeroed.
139 kes  Continue implementing lib/bsock.c (real class).  Make jcr,
140      who, host, and port private. There are new methods to access
141      them for non-class use. This required touching a number of files.
142 21Feb07
143 kes  Add LANG=C to autoconf/randpass so it works with languages other
144      than English.  Fixes bug #788.
145 20Feb07
146 ebl  Revert ClientRunBeforeJob to old position as in 1.38.X.
147      This fixes bug #780
148      You will not be able to generate Include/Exclude list any more.
149      It will be fixed soon.
150      If you want to use this, you can apply
151      trunk/bacula/patches/testing/clientrunbeforejob_can_generate_include_exclude_list.patch
152 19Feb07
153 kes  Restore of sockets created false error messages because Bacula
154      no longer restores sockets, but the code was still trying to
155      set the attributes on a non-existent file. Reported by a user.
156 ebl  finish RecyclePool feature
157      Media will takes Pool.RecyclePool
158      when moving from Scratch to a Pool or when user will do
159      update volume=xxx frompool
160      To use it, add RecyclePool = aPool to your Pool resource
161         Pool {
162                 Name = Default
163                 RecyclePool = Scratch
164                 ...
165         }
166      TODO: update manual
167 kes  Expand new BSOCK class adding signal() and new BNET signals.
168 kes  Begin enhancing the dot commands adding a new API function
169      that returns more information and will make it easier
170      to interface to the Director from a program.
171 18Feb07
172 kes  Make DEVICE fd private. Its new name is m_fd, and can be
173      obtained with dev->fd() outside the class.  This is the
174      first of many DEVICE members to be made private.
175 kes  Implement Michael Renner's idea on having a virtual disk
176      changer. I made some minor modifications (e.g. I did not
177      implement the Virtual Changer directive, but simply set
178      the Changer Command to an empty string.
179 17Feb07
180 kes  Implement a BSOCK send() method that writes the whole record
181      in a single write() request rather than in two.
182 ebl  add update volume=xxx recyclepool=yyyy
183      volume takes recyclepool from pool when using update volume=xxx from pool
184 16Feb07
185 kes  Fix encryption deblocking bug, which caused some restored files
186      to be truncated. This fixes bug #763.
187 kes  Add FD event sequence order prepared by Eric -- for RunScripts.
188 kes  Fix 12am/pm bug as reported in bug #782.
189 13Feb07
190 kes  Apply Eric's ClientRunScriptAfter patch to 2.0 and 2.1.
191 ebl  Use btime_t instead of uint64_t in media patch.
192 11Feb07
193 kes  Optimize the use of the database a bit in the Status dir command.
194      Only open it when needed, ensure that if any previous database
195      was opened, it is closed.
196 10Feb07
197 kes  Correct VolCatBytes bug from media patch.
198 kes  Apply patch from bug #612 by Rudolf Cejka to speedup pruning
199      in the case of orphaned records.
200 kes  Modify dbcheck to handle orphaned JobMedia, Path, Filename,
201      and File records in 300K chunks to be more efficient. This
202      idea came from Juan Luis Frances (if I remember right).
203 kes  Apply Eric's scratch patch that moves a purged Volume to
204      the RecyclePool.  Question: how is RecyclePool set? what
205      happens to the ScratchPool?
206 kes  Apply Eric's media patch that collects read/write media
207      times as well as byte counts.  This patch requires a
208      simultaneous upgrade of the DIR and SD.  Note, there
209      should be some way to turn off timing. I'm not sure
210      times are in Bacula units.
211 kes  Apply Eric's batch-insert patch.
212 09Feb07
213 kes  Update projects list.
214 08Feb07
215 kes  Implement Include/Exclude file lists in FD as dlists using
216      the new dlistString class. This permits efficiently having
217      large include/exclude lists and completes project Item 25.
218 kes  Fix dird/ua_cmds.c so that a cancel command checks if the
219      console is authorized to cancel the job.  This fixes bug 
220      #767.
221 kes  Modify SD so that the VolCatJobs medium record is updated
222      at the beginning of a Job rather than the end.  This
223      fixes bug #775 where exceeding MaxVolJobs caused jobs
224      to fail.
225 kes  Added a mutex around getting and setting Volume information
226      so that multiple simultaneous jobs will single thread.
227 07Feb07
228      Switch to using Subversion
229 kes  Remove src/pygtk-console/ from configure
230 06Feb07
231 kes  Delete src/lib/btree.c from win32 build, then add rblist.c
232      plus the entrypoints.
233 kes  Apply patch supplied that corrects debug print
234      in canceling jobs for max run time.  Supplied as
235      part of bug #621, which was previously fixed.
236 05Feb07
237 kes  Test on job_canceled() and sd_msg_thread_done inside
238      loop starting the message thread to avoid a race condition.
239      Fixes bug #771.
240 kes  Remove rl_catch_signal from console.c as it conflicted
241      with the header definition. Fixes bug #765.
242 ebl  Fixes bug #766 about RunsOnClient = Yes (case sensitive)
243 04Feb07
244 kes  Clarify some stored/acquire messages to indicate if the
245      problem is with read or append.
246 02Feb07
247 kes  Fix memory leak with storage ids in cats/sql_get.c
248 kes  Terminate watchdog earlier to avoid reference to released
249      memory -- reported by Jason Austin.
250 kes  Move closing the database from jobq.c to the director daemon
251      termination routine. This fixes memory leaks for shadow jobs
252      (i.e. migration jobs).
253 kes  Free up the unique jobid chain items in migrate.c.  This fixes
254      a memory leak problem.
255 kes  Convert some ugly looking for statements to use foreach_alist
256      in findlib/find.c.  This will facilitate converting the structures
257      to use dlist (for large include/exclude lists).
258 kes  Fix a bug in the btree.c and btree.h routines, then rename them
259      rblist and add them to be built in src/lib.  Include some new
260      methods written by Rudolf Cejka that make the code more readable
261      (hides some of the ugly casting).
262 kes  Add set_next() and set_prev() methods which make the code much more 
263      readable. Also add a new dlistString class that facilitates storing
264      strings in dlists.  To be used in the large include/exclude lists.
265 kes  Make some trivial modifications to lib/tree.h that use rblist
266      rather than dlist for storing the tree links. This was suggested
267      by Rudolf Cejka.  The result of this is that the restore tree now
268      uses red-black binary trees rather than simple linked lists. This
269      should give rather dramatic speed improvements for directories
270      contining large numbers of directories/files (more than 10000).
271 28Jan07 
272 kes  Fix maxruntime bug #621.
273 26Jan07
274 ebl  Implement the include JobID in spool file name project.
275 kes  Reorder projects file in order determined by Jan 2007 vote.
276 kes  Implement item #12 on project list -- quick release of FD by
277      the SD.
278 kes  Fix open of SQLite3 db where user does not have write permission
279      so that DIR does not crash. Fixes bug #761.
280 25Jan07
281 kes  Add back missing @ in Win32 Makefile.
282 kes  Change 'Device not configured to autolabel' from INFO
283      to WARNING.
284 kes  Fix jobq.c to restart failed jobs when Reschedule Times = 0 
285      which should restart an indefinite # of times.
286 kes  Fix configure --help to print --with-mysql[=DIR]. Same for
287      other DIR specifications.
288 23Jan07
289 rn   Fix msvc build problems. Fix bacula.dll exports for msvc build.
290      Fix path quoting in SQLite scripts.
291      Fix problems with SHGetFolderPath.
292 19Jan07
293 kes  Create patches/2.0.1-restart.patch. Fixes bug #755.
294 18Jan07
295 kes  Fix Job restart on error bug that promotes an Inc to a Full
296      backup.  This should fix bug #755.
297 kes  Add qt-console and first cut of code.
298
299 Version 2.0.1
300 12Jan07
301 kes  Fix Bacula->Documentation link on Win32 to point to index.html
302      instead of bacula.html. Fixed bug #750.
303 kes  Return JobId in db_get_job_record() when JobId==0. This should
304      fix bug #741.
305 kes  Do not release source pointers when restarting a failed job.
306 11Jan07
307 kes  Add dynamic dll entry point for SHGetFolderPath to Win32 code.
308      This *should* fix bug #747.
309 kes  Modify winbacula.nsi to substitute with g bin_dir_cmd. Should fix
310      bug #742.
311 09Jan07
312 kes  Modify USTORE constructor to set an empty store_source string, 
313      and don't copy the store_source string in a cancel.  Hopefully
314      this will fix Arno's seg fault, bug #744.
315 kes  Add back code to disable conio in configure. Fixes bug #743.
316 kes  Correct the Options scanner in the FD to correctly handle  
317      SHA1 option, which was eating the next option.  Reported by    
318      Sebastien Guilbaud.
319 kes  Add code to indicate when the SD is spooling, spool wait, and 
320      despooling as requested by Alan Brown.
321
322 Version 2.0.0 released: 4 January 2007