]> git.sur5r.net Git - bacula/bacula/blob - bacula/technotes-2.1
Implement code to turn off pruning in obtaining the next volume.
[bacula/bacula] / bacula / technotes-2.1
1               Technical notes on version 2.1
2
3 General:
4 25Mar07
5 kes  Implement code to turn off pruning in obtaining the next volume.
6      Pruning is turned off for the status dir command, but turned on
7      for SD requests and for the list nextvolume command.
8 24Mar07
9 kes  Correct Qmsg() that was not updated correctly when committing a
10      previous change (probably the recent TLS patch).
11 23Mar07
12 kes  Write new subroutine is_volume_purged() that explicitly checks
13      if the Volume is purged, and if so marks it as such. This should
14      resolve problems reported about needing to mount twice to recycle
15      volumes.
16 kes  Rewrite pruning algorithm to do more work in the SQL engine, and
17      to pass a list of JobIds to be deleted to SQL.  Also, minimize the
18      amount of duplicated code.     
19 kes  Do volume pruning only for the Media Type desired (reduces pruning time
20      if multiple Media Types are in the same pool).
21 kes  Implement more detailed info in the Job report for the Bacula version
22      and architecture.
23 kes  Switch from POOLMEM to POOL_MEM (a real class) in ua_prune.c and
24      ua_purge.c.
25 ebl  Add bbatch tool to bench database and insert mode.
26      Fix sql quote stuff in batch mode
27      Fix sql stuff for mysql
28 22Mar07
29 kes  Correct problems with am/pm scheduling. Fixes bug #808.
30 kes  Implement new prunning code that prunes up to 1000 jobs at
31      the same time.  The same technique can be applied to a number
32      of other prune/purge subroutines.
33 kes  Add an insanity check when starting a new tape job to ensure
34      that the tape position has not been changed. If so fail the
35      job.
36 kes  Fix Win32 build for dlls to add the folllowing:
37      src/lib/bsock.c -- new file with new entry points
38      src/lib/dlist.c  -- new entry points
39      src/cats/sql_create.c -- new entry point
40      src/cats/sql_cmds.c -- new DATA item exported
41 21Mar07
42 ebl  batch mode cleanup bscan-test is ok now.
43 kes  Implement SD code to check length of disk volume before appending.
44 18Mar07
45 kes  Correct return status on db_batch... routines.
46 kes  Add call to db_write_batch_file_records() to migration code.
47 ebl  Fix AfterJob timing
48 kes  Move the checking of the database in initializion of the Director
49      to after we drop privileges.  This avoids the need for both root
50      and bacula access to the DB.
51 kes  Correct a misplaced variable definition in src/filed/backup.c
52 kes  Correct how the new batch insert db_create_attributes_record()
53      uses the arguments.  Caused a seg fault in bscan.
54 kes  Implement lock() and unlock() methods in DEVICE class.
55      Implement block() and set_block(xx) methods in DEVICE class.
56 kes  Modify bnet_connect() so that it uses time() to check for the
57      wait time expiring (on some OSes, some system calls may not
58      return immediately).
59 kes  Modify Verify to obtain the previous JobId when it is actually
60      running rather than at schedule time (as it was in 1.38.x).     
61 kes  Fix src/job.c to handle MaxWaitTime correctly.  This should
62      fix bug #802.
63 kes  When checking pid in pid file, continue running if the pid is
64      the same as ours. This occurs on IRIX after a system crash.
65      Fixes bug #797.
66 10Mar07
67 kes  Extend new GUI API.
68 kes  Make the ua structure a class, and implement send_msg(),
69      error_msg(), warning_msg(), and info_msg().
70 08Mar07
71 kes  Apply fix from for building wx-console on the Mac from
72      bug #798.
73 kes  Implement new select mechanism for GUI programs.
74 kes  Reorganize initialization of stackedWidgets in bat.
75 07Mar07
76 kes  Add updated nagios plugin supplied by Christian Masopust.
77 05Mar07
78 kes  More bat implementation.
79 kes  File migrate bug with Pool Occupancy using mediaid instead
80      of jobids.  Fixes bug #795.
81 kes  Fix orphaned buffers in filed backup and verify due to
82      crypto buffers not freed during errors.  Fixes bug #789.
83 kes  Extend new GUI api code to tree commands.
84 kes  Ensure that tree and dot commands check console ACLs.
85 kes  Permit marking directory with trailing slash.
86 kes  Allow 20 console connections (instead of only 10).
87 04Mar07
88 kes  Add smartctl call to bacula-sd.conf as an example of getting
89      tape alert info.
90 02Mar07
91 kes  Modify jobq.c to let simultaneous restore jobs run. This may 
92      cause them to fail if they cannot get a drive.
93 kes  Add Client Connect Wait to Storage daemon to permit users to
94      modify the time the SD waits for a FD connection.
95 29Feb07
96 kes  Correct virtual changer check which was backwards. This caused
97      volumes to be unloaded into slots already occupied.
98 28Feb07
99 kes  Apply Command ACL filter to JobId list in restore command.
100 kes  Correct typeo in var.c patch.
101 27Feb07
102 kes  Don't let Bacula prune File or Job records for the current Job.
103 kes  Fix variable substitution pad + inc bug reported (with patch)
104      in bug #791.
105 26Feb07
106 kes  Correct SQLite log table index as reported by Luca Berra.
107 24Feb07
108 ebl  fix fifo stuff, bacula tries to rewind the fifo... Thanks to Andreas
109 22Feb07
110 kes  Begin implementing new comm signals for API.
111 kes  Fix a few places in lib/message.c where the open fd may 
112      not be zeroed.
113 kes  Continue implementing lib/bsock.c (real class).  Make jcr,
114      who, host, and port private. There are new methods to access
115      them for non-class use. This required touching a number of files.
116 21Feb07
117 kes  Add LANG=C to autoconf/randpass so it works with languages other
118      than English.  Fixes bug #788.
119 20Feb07
120 ebl  Revert ClientRunBeforeJob to old position as in 1.38.X.
121      This fixes bug #780
122      You will not be able to generate Include/Exclude list any more.
123      It will be fixed soon.
124      If you want to use this, you can apply
125      trunk/bacula/patches/testing/clientrunbeforejob_can_generate_include_exclude_list.patch
126 19Feb07
127 kes  Restore of sockets created false error messages because Bacula
128      no longer restores sockets, but the code was still trying to
129      set the attributes on a non-existent file. Reported by a user.
130 ebl  finish RecyclePool feature
131      Media will takes Pool.RecyclePool
132      when moving from Scratch to a Pool or when user will do
133      update volume=xxx frompool
134      To use it, add RecyclePool = aPool to your Pool resource
135         Pool {
136                 Name = Default
137                 RecyclePool = Scratch
138                 ...
139         }
140      TODO: update manual
141 kes  Expand new BSOCK class adding signal() and new BNET signals.
142 kes  Begin enhancing the dot commands adding a new API function
143      that returns more information and will make it easier
144      to interface to the Director from a program.
145 18Feb07
146 kes  Make DEVICE fd private. Its new name is m_fd, and can be
147      obtained with dev->fd() outside the class.  This is the
148      first of many DEVICE members to be made private.
149 kes  Implement Michael Renner's idea on having a virtual disk
150      changer. I made some minor modifications (e.g. I did not
151      implement the Virtual Changer directive, but simply set
152      the Changer Command to an empty string.
153 17Feb07
154 kes  Implement a BSOCK send() method that writes the whole record
155      in a single write() request rather than in two.
156 ebl  add update volume=xxx recyclepool=yyyy
157      volume takes recyclepool from pool when using update volume=xxx from pool
158 16Feb07
159 kes  Fix encryption deblocking bug, which caused some restored files
160      to be truncated. This fixes bug #763.
161 kes  Add FD event sequence order prepared by Eric -- for RunScripts.
162 kes  Fix 12am/pm bug as reported in bug #782.
163 13Feb07
164 kes  Apply Eric's ClientRunScriptAfter patch to 2.0 and 2.1.
165 ebl  Use btime_t instead of uint64_t in media patch.
166 11Feb07
167 kes  Optimize the use of the database a bit in the Status dir command.
168      Only open it when needed, ensure that if any previous database
169      was opened, it is closed.
170 10Feb07
171 kes  Correct VolCatBytes bug from media patch.
172 kes  Apply patch from bug #612 by Rudolf Cejka to speedup pruning
173      in the case of orphaned records.
174 kes  Modify dbcheck to handle orphaned JobMedia, Path, Filename,
175      and File records in 300K chunks to be more efficient. This
176      idea came from Juan Luis Frances (if I remember right).
177 kes  Apply Eric's scratch patch that moves a purged Volume to
178      the RecyclePool.  Question: how is RecyclePool set? what
179      happens to the ScratchPool?
180 kes  Apply Eric's media patch that collects read/write media
181      times as well as byte counts.  This patch requires a
182      simultaneous upgrade of the DIR and SD.  Note, there
183      should be some way to turn off timing. I'm not sure
184      times are in Bacula units.
185 kes  Apply Eric's batch-insert patch.
186 09Feb07
187 kes  Update projects list.
188 08Feb07
189 kes  Implement Include/Exclude file lists in FD as dlists using
190      the new dlistString class. This permits efficiently having
191      large include/exclude lists and completes project Item 25.
192 kes  Fix dird/ua_cmds.c so that a cancel command checks if the
193      console is authorized to cancel the job.  This fixes bug 
194      #767.
195 kes  Modify SD so that the VolCatJobs medium record is updated
196      at the beginning of a Job rather than the end.  This
197      fixes bug #775 where exceeding MaxVolJobs caused jobs
198      to fail.
199 kes  Added a mutex around getting and setting Volume information
200      so that multiple simultaneous jobs will single thread.
201 07Feb07
202      Switch to using Subversion
203 kes  Remove src/pygtk-console/ from configure
204 06Feb07
205 kes  Delete src/lib/btree.c from win32 build, then add rblist.c
206      plus the entrypoints.
207 kes  Apply patch supplied that corrects debug print
208      in canceling jobs for max run time.  Supplied as
209      part of bug #621, which was previously fixed.
210 05Feb07
211 kes  Test on job_canceled() and sd_msg_thread_done inside
212      loop starting the message thread to avoid a race condition.
213      Fixes bug #771.
214 kes  Remove rl_catch_signal from console.c as it conflicted
215      with the header definition. Fixes bug #765.
216 ebl  Fixes bug #766 about RunsOnClient = Yes (case sensitive)
217 04Feb07
218 kes  Clarify some stored/acquire messages to indicate if the
219      problem is with read or append.
220 02Feb07
221 kes  Fix memory leak with storage ids in cats/sql_get.c
222 kes  Terminate watchdog earlier to avoid reference to released
223      memory -- reported by Jason Austin.
224 kes  Move closing the database from jobq.c to the director daemon
225      termination routine. This fixes memory leaks for shadow jobs
226      (i.e. migration jobs).
227 kes  Free up the unique jobid chain items in migrate.c.  This fixes
228      a memory leak problem.
229 kes  Convert some ugly looking for statements to use foreach_alist
230      in findlib/find.c.  This will facilitate converting the structures
231      to use dlist (for large include/exclude lists).
232 kes  Fix a bug in the btree.c and btree.h routines, then rename them
233      rblist and add them to be built in src/lib.  Include some new
234      methods written by Rudolf Cejka that make the code more readable
235      (hides some of the ugly casting).
236 kes  Add set_next() and set_prev() methods which make the code much more 
237      readable. Also add a new dlistString class that facilitates storing
238      strings in dlists.  To be used in the large include/exclude lists.
239 kes  Make some trivial modifications to lib/tree.h that use rblist
240      rather than dlist for storing the tree links. This was suggested
241      by Rudolf Cejka.  The result of this is that the restore tree now
242      uses red-black binary trees rather than simple linked lists. This
243      should give rather dramatic speed improvements for directories
244      contining large numbers of directories/files (more than 10000).
245 28Jan07 
246 kes  Fix maxruntime bug #621.
247 26Jan07
248 ebl  Implement the include JobID in spool file name project.
249 kes  Reorder projects file in order determined by Jan 2007 vote.
250 kes  Implement item #12 on project list -- quick release of FD by
251      the SD.
252 kes  Fix open of SQLite3 db where user does not have write permission
253      so that DIR does not crash. Fixes bug #761.
254 25Jan07
255 kes  Add back missing @ in Win32 Makefile.
256 kes  Change 'Device not configured to autolabel' from INFO
257      to WARNING.
258 kes  Fix jobq.c to restart failed jobs when Reschedule Times = 0 
259      which should restart an indefinite # of times.
260 kes  Fix configure --help to print --with-mysql[=DIR]. Same for
261      other DIR specifications.
262 23Jan07
263 rn   Fix msvc build problems. Fix bacula.dll exports for msvc build.
264      Fix path quoting in SQLite scripts.
265      Fix problems with SHGetFolderPath.
266 19Jan07
267 kes  Create patches/2.0.1-restart.patch. Fixes bug #755.
268 18Jan07
269 kes  Fix Job restart on error bug that promotes an Inc to a Full
270      backup.  This should fix bug #755.
271 kes  Add qt-console and first cut of code.
272
273 Version 2.0.1
274 12Jan07
275 kes  Fix Bacula->Documentation link on Win32 to point to index.html
276      instead of bacula.html. Fixed bug #750.
277 kes  Return JobId in db_get_job_record() when JobId==0. This should
278      fix bug #741.
279 kes  Do not release source pointers when restarting a failed job.
280 11Jan07
281 kes  Add dynamic dll entry point for SHGetFolderPath to Win32 code.
282      This *should* fix bug #747.
283 kes  Modify winbacula.nsi to substitute with g bin_dir_cmd. Should fix
284      bug #742.
285 09Jan07
286 kes  Modify USTORE constructor to set an empty store_source string, 
287      and don't copy the store_source string in a cancel.  Hopefully
288      this will fix Arno's seg fault, bug #744.
289 kes  Add back code to disable conio in configure. Fixes bug #743.
290 kes  Correct the Options scanner in the FD to correctly handle  
291      SHA1 option, which was eating the next option.  Reported by    
292      Sebastien Guilbaud.
293 kes  Add code to indicate when the SD is spooling, spool wait, and 
294      despooling as requested by Alan Brown.
295
296 Version 2.0.0 released: 4 January 2007