git.sur5r.net Git - bacula/bacula/blob - bacula/src/cats/sql_cmds.c

   1 /*
   2    Bacula® - The Network Backup Solution
   3
   4    Copyright (C) 2002-2008 Free Software Foundation Europe e.V.
   5
   6    The main author of Bacula is Kern Sibbald, with contributions from
   7    many others, a complete list can be found in the file AUTHORS.
   8    This program is Free Software; you can redistribute it and/or
   9    modify it under the terms of version two of the GNU General Public
  10    License as published by the Free Software Foundation and included
  11    in the file LICENSE.
  12
  13    This program is distributed in the hope that it will be useful, but
  14    WITHOUT ANY WARRANTY; without even the implied warranty of
  15    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
  16    General Public License for more details.
  17
  18    You should have received a copy of the GNU General Public License
  19    along with this program; if not, write to the Free Software
  20    Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA
  21    02110-1301, USA.
  22
  23    Bacula® is a registered trademark of Kern Sibbald.
  24    The licensor of Bacula is the Free Software Foundation Europe
  25    (FSFE), Fiduciary Program, Sumatrastrasse 25, 8006 Zürich,
  26    Switzerland, email:ftf@fsfeurope.org.
  27 */
  28 /*
  29  *  This file contains all the SQL commands that are either issued by the
  30  *  Director or which are database backend specific.
  31  *
  32  *     Kern Sibbald, July MMII
  33  */
  34 /*
  35  * Note, PostgreSQL imposes some constraints on using DISTINCT and GROUP BY
  36  *  for example, the following is illegal in PostgreSQL:
  37  *  SELECT DISTINCT JobId FROM temp ORDER BY StartTime ASC;
  38  *  because all the ORDER BY expressions must appear in the SELECT list!
  39  */
  40
  41 #include "bacula.h"
  42 #include "cats.h"
  43
  44 const char *cleanup_created_job =
  45    "UPDATE Job SET JobStatus='f', StartTime=SchedTime, EndTime=SchedTime "
  46    "WHERE JobStatus = 'C'";
  47 const char *cleanup_running_job =
  48    "UPDATE Job SET JobStatus='f', EndTime=StartTime WHERE JobStatus = 'R'";
  49
  50 /* For sql_update.c db_update_stats */
  51 const char *fill_jobhisto =
  52         "INSERT INTO JobHisto ("
  53            "JobId, Job, Name, Type, Level, ClientId, JobStatus, "
  54            "SchedTime, StartTime, EndTime, RealEndTime, JobTDate, "
  55            "VolSessionId, VolSessionTime, JobFiles, JobBytes, ReadBytes, "
  56            "JobErrors, JobMissingFiles, PoolId, FileSetId, PriorJobId, "
  57            "PurgedFiles, HasBase, Reviewed, Comment ) "
  58         "SELECT "
  59            "JobId, Job, Name, Type, Level, ClientId, JobStatus, "
  60            "SchedTime, StartTime, EndTime, RealEndTime, JobTDate, "
  61            "VolSessionId, VolSessionTime, JobFiles, JobBytes, ReadBytes, "
  62            "JobErrors, JobMissingFiles, PoolId, FileSetId, PriorJobId, "
  63            "PurgedFiles, HasBase, Reviewed, Comment "
  64           "FROM Job "
  65          "WHERE JobStatus IN ('T','W','f','A','E') "
  66            "AND NOT EXISTS "
  67                 "(SELECT JobHisto.JobId "
  68                    "FROM JobHisto WHERE JobHisto.Jobid=Job.JobId) "
  69            "AND JobTDate < %s ";
  70
  71 /* For ua_update.c */
  72 const char *list_pool = "SELECT * FROM Pool WHERE PoolId=%s";
  73
  74 /* For ua_dotcmds.c */
  75 const char *client_backups =
  76    "SELECT DISTINCT Job.JobId,Client.Name as Client,Level,StartTime,"
  77    "JobFiles,JobBytes,VolumeName,MediaType,FileSet,Media.Enabled as Enabled"
  78    " FROM Client,Job,JobMedia,Media,FileSet"
  79    " WHERE Client.Name='%s'"
  80    " AND FileSet='%s'"
  81    " AND Client.ClientId=Job.ClientId"
  82    " AND JobStatus IN ('T','W') AND Type='B'"
  83    " AND JobMedia.JobId=Job.JobId AND JobMedia.MediaId=Media.MediaId"
  84    " AND Job.FileSetId=FileSet.FileSetId"
  85    " ORDER BY Job.StartTime";
  86
  87
  88 /* ====== ua_prune.c */
  89
  90 const char *del_File     = "DELETE FROM File WHERE JobId=%s";
  91 const char *upd_Purged   = "UPDATE Job Set PurgedFiles=1 WHERE JobId=%s";
  92 const char *cnt_DelCand  = "SELECT count(*) FROM DelCandidates";
  93 const char *del_Job      = "DELETE FROM Job WHERE JobId=%s";
  94 const char *del_JobMedia = "DELETE FROM JobMedia WHERE JobId=%s";
  95 const char *cnt_JobMedia = "SELECT count(*) FROM JobMedia WHERE MediaId=%s";
  96
  97 const char *sel_JobMedia =
  98    "SELECT DISTINCT JobMedia.JobId FROM JobMedia,Job "
  99    "WHERE MediaId=%s AND Job.JobId=JobMedia.JobId "
 100    "AND Job.JobTDate<%s";
 101
 102 /* Count Select JobIds for File deletion */
 103 const char *count_select_job =
 104    "SELECT count(*) from Job "
 105    "WHERE JobTDate<%s "
 106    "AND ClientId=%s "
 107    "AND PurgedFiles=0";
 108
 109
 110 /* Select JobIds for File deletion. */
 111 const char *select_job =
 112    "SELECT DISTINCT JobId from Job "
 113    "WHERE JobTDate<%s "
 114    "AND ClientId=%s "
 115    "AND PurgedFiles=0";
 116
 117 /* Delete temp tables and indexes  */
 118 const char *drop_deltabs[] = {
 119    "DROP TABLE DelCandidates",
 120    NULL};
 121
 122 const char *create_delindex = "CREATE INDEX DelInx1 ON DelCandidates (JobId)";
 123
 124 /* ======= ua_restore.c */
 125 const char *uar_count_files =
 126    "SELECT JobFiles FROM Job WHERE JobId=%s";
 127
 128 /* List last 20 Jobs */
 129 const char *uar_list_jobs =
 130    "SELECT JobId,Client.Name as Client,StartTime,Level as "
 131    "JobLevel,JobFiles,JobBytes "
 132    "FROM Client,Job WHERE Client.ClientId=Job.ClientId AND JobStatus IN ('T','W') "
 133    "AND Type='B' ORDER BY StartTime DESC LIMIT 20";
 134
 135 const char *uar_print_jobs =
 136    "SELECT DISTINCT JobId,Level,JobFiles,JobBytes,StartTime,VolumeName"
 137    " FROM Job JOIN JobMedia USING (JobId) JOIN Media USING (MediaId) "
 138    " WHERE JobId IN (%s) "
 139    " ORDER BY StartTime ASC";
 140
 141 /*
 142  * Find all files for a particular JobId and insert them into
 143  *  the tree during a restore.
 144  */
 145 const char *uar_sel_files =
 146    "SELECT Path.Path,Filename.Name,FileIndex,JobId,LStat "
 147    "FROM File,Filename,Path "
 148    "WHERE File.JobId IN (%s) AND Filename.FilenameId=File.FilenameId "
 149    "AND Path.PathId=File.PathId";
 150
 151 const char *uar_del_temp  = "DROP TABLE temp";
 152 const char *uar_del_temp1 = "DROP TABLE temp1";
 153
 154 const char *uar_last_full =
 155    "INSERT INTO temp1 SELECT Job.JobId,JobTdate "
 156    "FROM Client,Job,JobMedia,Media,FileSet WHERE Client.ClientId=%s "
 157    "AND Job.ClientId=%s "
 158    "AND Job.StartTime < '%s' "
 159    "AND Level='F' AND JobStatus IN ('T','W') AND Type='B' "
 160    "AND JobMedia.JobId=Job.JobId "
 161    "AND Media.Enabled=1 "
 162    "AND JobMedia.MediaId=Media.MediaId "
 163    "AND Job.FileSetId=FileSet.FileSetId "
 164    "AND FileSet.FileSet='%s' "
 165    "%s"
 166    "ORDER BY Job.JobTDate DESC LIMIT 1";
 167
 168 const char *uar_full =
 169    "INSERT INTO temp SELECT Job.JobId,Job.JobTDate,"
 170    "Job.ClientId,Job.Level,Job.JobFiles,Job.JobBytes,"
 171    "StartTime,VolumeName,JobMedia.StartFile,VolSessionId,VolSessionTime "
 172    "FROM temp1,Job,JobMedia,Media WHERE temp1.JobId=Job.JobId "
 173    "AND Level='F' AND JobStatus IN ('T','W') AND Type='B' "
 174    "AND Media.Enabled=1 "
 175    "AND JobMedia.JobId=Job.JobId "
 176    "AND JobMedia.MediaId=Media.MediaId";
 177
 178 const char *uar_dif =
 179    "INSERT INTO temp SELECT Job.JobId,Job.JobTDate,Job.ClientId,"
 180    "Job.Level,Job.JobFiles,Job.JobBytes,"
 181    "Job.StartTime,Media.VolumeName,JobMedia.StartFile,"
 182    "Job.VolSessionId,Job.VolSessionTime "
 183    "FROM Job,JobMedia,Media,FileSet "
 184    "WHERE Job.JobTDate>%s AND Job.StartTime<'%s' "
 185    "AND Job.ClientId=%s "
 186    "AND JobMedia.JobId=Job.JobId "
 187    "AND Media.Enabled=1 "
 188    "AND JobMedia.MediaId=Media.MediaId "
 189    "AND Job.Level='D' AND JobStatus IN ('T','W') AND Type='B' "
 190    "AND Job.FileSetId=FileSet.FileSetId "
 191    "AND FileSet.FileSet='%s' "
 192    "%s"
 193    "ORDER BY Job.JobTDate DESC LIMIT 1";
 194
 195 const char *uar_inc =
 196    "INSERT INTO temp SELECT Job.JobId,Job.JobTDate,Job.ClientId,"
 197    "Job.Level,Job.JobFiles,Job.JobBytes,"
 198    "Job.StartTime,Media.VolumeName,JobMedia.StartFile,"
 199    "Job.VolSessionId,Job.VolSessionTime "
 200    "FROM Job,JobMedia,Media,FileSet "
 201    "WHERE Job.JobTDate>%s AND Job.StartTime<'%s' "
 202    "AND Job.ClientId=%s "
 203    "AND Media.Enabled=1 "
 204    "AND JobMedia.JobId=Job.JobId "
 205    "AND JobMedia.MediaId=Media.MediaId "
 206    "AND Job.Level='I' AND JobStatus IN ('T','W') AND Type='B' "
 207    "AND Job.FileSetId=FileSet.FileSetId "
 208    "AND FileSet.FileSet='%s' "
 209    "%s";
 210
 211 const char *uar_list_temp =
 212    "SELECT DISTINCT JobId,Level,JobFiles,JobBytes,StartTime,VolumeName"
 213    " FROM temp"
 214    " ORDER BY StartTime ASC";
 215
 216
 217 const char *uar_sel_jobid_temp =
 218    "SELECT DISTINCT JobId,StartTime FROM temp ORDER BY StartTime ASC";
 219
 220 const char *uar_sel_all_temp1 = "SELECT * FROM temp1";
 221
 222 const char *uar_sel_all_temp = "SELECT * FROM temp";
 223
 224
 225
 226 /* Select FileSet names for this Client */
 227 const char *uar_sel_fileset =
 228    "SELECT DISTINCT FileSet.FileSet FROM Job,"
 229    "Client,FileSet WHERE Job.FileSetId=FileSet.FileSetId "
 230    "AND Job.ClientId=%s AND Client.ClientId=%s "
 231    "ORDER BY FileSet.FileSet";
 232
 233 /* Find MediaType used by this Job */
 234 const char *uar_mediatype =
 235    "SELECT MediaType FROM JobMedia,Media WHERE JobMedia.JobId=%s "
 236    "AND JobMedia.MediaId=Media.MediaId";
 237
 238 /*
 239  *  Find JobId, FileIndex for a given path/file and date
 240  *  for use when inserting individual files into the tree.
 241  */
 242 const char *uar_jobid_fileindex =
 243    "SELECT Job.JobId,File.FileIndex FROM Job,File,Path,Filename,Client "
 244    "WHERE Job.JobId=File.JobId "
 245    "AND Job.StartTime<='%s' "
 246    "AND Path.Path='%s' "
 247    "AND Filename.Name='%s' "
 248    "AND Client.Name='%s' "
 249    "AND Job.ClientId=Client.ClientId "
 250    "AND Path.PathId=File.PathId "
 251    "AND Filename.FilenameId=File.FilenameId "
 252    "AND JobStatus IN ('T','W') AND Type='B' "
 253    "ORDER BY Job.StartTime DESC LIMIT 1";
 254
 255 const char *uar_jobids_fileindex =
 256    "SELECT Job.JobId,File.FileIndex FROM Job,File,Path,Filename,Client "
 257    "WHERE Job.JobId IN (%s) "
 258    "AND Job.JobId=File.JobId "
 259    "AND Job.StartTime<='%s' "
 260    "AND Path.Path='%s' "
 261    "AND Filename.Name='%s' "
 262    "AND Client.Name='%s' "
 263    "AND Job.ClientId=Client.ClientId "
 264    "AND Path.PathId=File.PathId "
 265    "AND Filename.FilenameId=File.FilenameId "
 266    "ORDER BY Job.StartTime DESC LIMIT 1";
 267
 268 /* Query to get list of files from table -- presuably built by an external program */
 269 const char *uar_jobid_fileindex_from_table =
 270    "SELECT JobId,FileIndex from %s";
 271
 272 /* Get the list of the last recent version with a given jobid list
 273  * This is a tricky part because with SQL the result of
 274  *
 275  * SELECT MAX(A), B, C, D FROM... GROUP BY (B,C)
 276  *
 277  * doesn't give the good result (for D).
 278  *
 279  * With PostgreSQL, we can use DISTINCT ON(), but with Mysql or Sqlite,
 280  * we need an extra join using JobTDate.
 281  */
 282 const char *select_recent_version_with_basejob[5] = {
 283  /* MySQL */
 284 "SELECT FileId, Job.JobId AS JobId, FileIndex, File.PathId AS PathId, "
 285        "File.FilenameId AS FilenameId, LStat, MD5 "
 286 "FROM Job, File, ( "
 287     "SELECT MAX(JobTDate) AS JobTDate, PathId, FilenameId "
 288       "FROM ( "
 289         "SELECT JobTDate, PathId, FilenameId "   /* Get all normal files */
 290           "FROM File JOIN Job USING (JobId) "    /* from selected backup */
 291          "WHERE File.JobId IN (%s) "
 292           "UNION ALL "
 293         "SELECT JobTDate, PathId, FilenameId "   /* Get all files from */
 294           "FROM BaseFiles "                      /* BaseJob */
 295                "JOIN File USING (FileId) "
 296                "JOIN Job  ON    (BaseJobId = Job.JobId) "
 297          "WHERE BaseFiles.JobId IN (%s) "        /* Use Max(JobTDate) to find */
 298        ") AS tmp GROUP BY PathId, FilenameId "   /* the latest file version */
 299     ") AS T1 "
 300 "WHERE (Job.JobId IN ( "  /* Security, we force JobId to be valid */
 301         "SELECT DISTINCT BaseJobId FROM BaseFiles WHERE JobId IN (%s)) "
 302         "OR Job.JobId IN (%s)) "
 303   "AND T1.JobTDate = Job.JobTDate " /* Join on JobTDate to get the orginal */
 304   "AND Job.JobId = File.JobId "     /* Job/File record */
 305   "AND T1.PathId = File.PathId "
 306   "AND T1.FilenameId = File.FilenameId",
 307
 308   /* Postgresql */    /* The DISTINCT ON () permits to avoid extra join */
 309  "SELECT DISTINCT ON (FilenameId, PathId) StartTime, JobId, FileId, "
 310          "FileIndex, PathId, FilenameId, LStat, MD5 "
 311    "FROM "
 312        "(SELECT FileId, JobId, PathId, FilenameId, FileIndex, LStat, MD5 "
 313           "FROM File WHERE JobId IN (%s) "
 314          "UNION ALL "
 315         "SELECT File.FileId, File.JobId, PathId, FilenameId, "
 316                "File.FileIndex, LStat, MD5 "
 317           "FROM BaseFiles JOIN File USING (FileId) "
 318          "WHERE BaseFiles.JobId IN (%s) "
 319         ") AS T JOIN Job USING (JobId) "
 320    "ORDER BY FilenameId, PathId, StartTime DESC ",
 321
 322   /* SQLite */              /* See Mysql section for doc */
 323 "SELECT FileId, Job.JobId AS JobId, FileIndex, File.PathId AS PathId, "
 324        "File.FilenameId AS FilenameId, LStat, MD5 "
 325 "FROM Job, File, ( "
 326     "SELECT MAX(JobTDate) AS JobTDate, PathId, FilenameId "
 327       "FROM ( "
 328         "SELECT JobTDate, PathId, FilenameId "
 329           "FROM File JOIN Job USING (JobId) "
 330          "WHERE File.JobId IN (%s) "
 331           "UNION ALL "
 332         "SELECT JobTDate, PathId, FilenameId "
 333           "FROM BaseFiles "
 334                "JOIN File USING (FileId) "
 335                "JOIN Job  ON    (BaseJobId = Job.JobId) "
 336          "WHERE BaseFiles.JobId IN (%s) "
 337        ") AS tmp GROUP BY PathId, FilenameId "
 338     ") AS T1 "
 339 "WHERE (Job.JobId IN ( "
 340        "SELECT DISTINCT BaseJobId FROM BaseFiles WHERE JobId IN (%s)) "
 341        "OR Job.JobId IN (%s)) "
 342   "AND T1.JobTDate = Job.JobTDate "
 343   "AND Job.JobId = File.JobId "
 344   "AND T1.PathId = File.PathId "
 345   "AND T1.FilenameId = File.FilenameId",
 346
 347  /* SQLite3 */              /* See Mysql section for doc */
 348 "SELECT FileId, Job.JobId AS JobId, FileIndex, File.PathId AS PathId, "
 349        "File.FilenameId AS FilenameId, LStat, MD5 "
 350 "FROM Job, File, ( "
 351     "SELECT MAX(JobTDate) AS JobTDate, PathId, FilenameId "
 352       "FROM ( "
 353         "SELECT JobTDate, PathId, FilenameId "
 354           "FROM File JOIN Job USING (JobId) "
 355          "WHERE File.JobId IN (%s) "
 356           "UNION ALL "
 357         "SELECT JobTDate, PathId, FilenameId "
 358           "FROM BaseFiles "
 359                "JOIN File USING (FileId) "
 360                "JOIN Job  ON    (BaseJobId = Job.JobId) "
 361          "WHERE BaseFiles.JobId IN (%s) "
 362        ") AS tmp GROUP BY PathId, FilenameId "
 363     ") AS T1 "
 364 "WHERE (Job.JobId IN ( "
 365          "SELECT DISTINCT BaseJobId FROM BaseFiles WHERE JobId IN (%s)) "
 366         "OR Job.JobId IN (%s)) "
 367   "AND T1.JobTDate = Job.JobTDate "
 368   "AND Job.JobId = File.JobId "
 369   "AND T1.PathId = File.PathId "
 370   "AND T1.FilenameId = File.FilenameId",
 371
 372   /* Ingres */              /* See Mysql section for doc */
 373 "SELECT FileId, Job.JobId AS JobId, FileIndex, File.PathId AS PathId, "
 374        "File.FilenameId AS FilenameId, LStat, MD5 "
 375 "FROM Job, File, ( "
 376     "SELECT MAX(JobTDate) AS JobTDate, PathId, FilenameId "
 377       "FROM ( "
 378         "SELECT JobTDate, PathId, FilenameId "
 379           "FROM File JOIN Job USING (JobId) "
 380          "WHERE File.JobId IN (%s) "
 381           "UNION ALL "
 382         "SELECT JobTDate, PathId, FilenameId "
 383           "FROM BaseFiles "
 384                "JOIN File USING (FileId) "
 385                "JOIN Job  ON    (BaseJobId = Job.JobId) "
 386          "WHERE BaseFiles.JobId IN (%s) "
 387        ") AS tmp GROUP BY PathId, FilenameId "
 388     ") AS T1 "
 389 "WHERE (Job.JobId IN ( "
 390          "SELECT DISTINCT BaseJobId FROM BaseFiles WHERE JobId IN (%s)) "
 391         "OR Job.JobId IN (%s)) "
 392   "AND T1.JobTDate = Job.JobTDate "
 393   "AND Job.JobId = File.JobId "
 394   "AND T1.PathId = File.PathId "
 395   "AND T1.FilenameId = File.FilenameId"
 396 };
 397
 398 /* Get the list of the last recent version with a given BaseJob jobid list */
 399 const char *select_recent_version[5] = {
 400    /* MySQL */
 401    "SELECT j1.JobId AS JobId, f1.FileId AS FileId, f1.FileIndex AS FileIndex, "
 402           "f1.PathId AS PathId, f1.FilenameId AS FilenameId, "
 403           "f1.LStat AS LStat, f1.MD5 AS MD5 "
 404      "FROM ( "     /* Choose the last version for each Path/Filename */
 405        "SELECT max(JobTDate) AS JobTDate, PathId, FilenameId "
 406          "FROM File JOIN Job USING (JobId) "
 407         "WHERE File.JobId IN (%s) "
 408        "GROUP BY PathId, FilenameId "
 409      ") AS t1, Job AS j1, File AS f1 "
 410     "WHERE t1.JobTDate = j1.JobTDate "
 411       "AND j1.JobId IN (%s) "
 412       "AND t1.FilenameId = f1.FilenameId "
 413       "AND t1.PathId = f1.PathId "
 414       "AND j1.JobId = f1.JobId",
 415
 416    /* Postgresql */
 417    "SELECT DISTINCT ON (FilenameId, PathId) StartTime, JobId, FileId, "
 418           "FileIndex, PathId, FilenameId, LStat, MD5 "
 419      "FROM File JOIN Job USING (JobId) "
 420     "WHERE JobId IN (%s) "
 421     "ORDER BY FilenameId, PathId, StartTime DESC ",
 422
 423    /* SQLite */
 424    "SELECT j1.JobId AS JobId, f1.FileId AS FileId, f1.FileIndex AS FileIndex, "
 425           "f1.PathId AS PathId, f1.FilenameId AS FilenameId, "
 426           "f1.LStat AS LStat, f1.MD5 AS MD5 "
 427      "FROM ( "
 428        "SELECT max(JobTDate) AS JobTDate, PathId, FilenameId "
 429          "FROM File JOIN Job USING (JobId) "
 430         "WHERE File.JobId IN (%s) "
 431        "GROUP BY PathId, FilenameId "
 432      ") AS t1, Job AS j1, File AS f1 "
 433     "WHERE t1.JobTDate = j1.JobTDate "
 434       "AND j1.JobId IN (%s) "
 435       "AND t1.FilenameId = f1.FilenameId "
 436       "AND t1.PathId = f1.PathId "
 437       "AND j1.JobId = f1.JobId",
 438
 439    /* SQLite3 */
 440    "SELECT j1.JobId AS JobId, f1.FileId AS FileId, f1.FileIndex AS FileIndex, "
 441           "f1.PathId AS PathId, f1.FilenameId AS FilenameId, "
 442           "f1.LStat AS LStat, f1.MD5 AS MD5 "
 443      "FROM ( "
 444        "SELECT max(JobTDate) AS JobTDate, PathId, FilenameId "
 445          "FROM File JOIN Job USING (JobId) "
 446         "WHERE File.JobId IN (%s) "
 447        "GROUP BY PathId, FilenameId "
 448      ") AS t1, Job AS j1, File AS f1 "
 449     "WHERE t1.JobTDate = j1.JobTDate "
 450       "AND j1.JobId IN (%s) "
 451       "AND t1.FilenameId = f1.FilenameId "
 452       "AND t1.PathId = f1.PathId "
 453       "AND j1.JobId = f1.JobId",
 454
 455    /* Ingres */
 456    "SELECT j1.JobId AS JobId, f1.FileId AS FileId, f1.FileIndex AS FileIndex, "
 457           "f1.PathId AS PathId, f1.FilenameId AS FilenameId, "
 458           "f1.LStat AS LStat, f1.MD5 AS MD5 "
 459      "FROM ( "     /* Choose the last version for each Path/Filename */
 460        "SELECT max(JobTDate) AS JobTDate, PathId, FilenameId "
 461          "FROM File JOIN Job USING (JobId) "
 462         "WHERE File.JobId IN (%s) "
 463        "GROUP BY PathId, FilenameId "
 464      ") AS t1, Job AS j1, File AS f1 "
 465     "WHERE t1.JobTDate = j1.JobTDate "
 466       "AND j1.JobId IN (%s) "
 467       "AND t1.FilenameId = f1.FilenameId "
 468       "AND t1.PathId = f1.PathId "
 469       "AND j1.JobId = f1.JobId"
 470 };
 471
 472 /* We don't create this table as TEMPORARY because MySQL MyISAM
 473  * 5.0 and 5.1 are unable to run further queries in this mode
 474  */
 475 const char *create_temp_accurate_jobids_default =
 476  "CREATE TABLE btemp3%s AS "
 477     "SELECT JobId, StartTime, EndTime, JobTDate, PurgedFiles "
 478       "FROM Job JOIN FileSet USING (FileSetId) "
 479      "WHERE ClientId = %s "
 480        "AND Level='F' AND JobStatus IN ('T','W') AND Type='B' "
 481        "AND StartTime<'%s' "
 482        "AND FileSet.FileSet=(SELECT FileSet FROM FileSet WHERE FileSetId = %s) "
 483      "ORDER BY Job.JobTDate DESC LIMIT 1";
 484
 485 const char *create_temp_accurate_jobids[5] = {
 486    /* Mysql */
 487    create_temp_accurate_jobids_default,
 488    /* Postgresql */
 489    create_temp_accurate_jobids_default,
 490    /* SQLite */
 491    create_temp_accurate_jobids_default,
 492    /* SQLite3 */
 493    create_temp_accurate_jobids_default,
 494    /* Ingres */
 495    "DECLARE GLOBAL TEMPORARY TABLE btemp3%s AS "
 496    "SELECT JobId, StartTime, EndTime, JobTDate, PurgedFiles "
 497    "FROM Job JOIN FileSet USING (FileSetId) "
 498    "WHERE ClientId = %s "
 499    "AND Level='F' AND JobStatus IN ('T','W') AND Type='B' "
 500    "AND StartTime<'%s' "
 501    "AND FileSet.FileSet=(SELECT FileSet FROM FileSet WHERE FileSetId = %s) "
 502    "ORDER BY Job.JobTDate DESC FETCH FIRST 1 ROW ONLY "
 503    "ON COMMIT PRESERVE ROWS WITH NORECOVERY"
 504 };
 505
 506 const char *create_temp_basefile[5] = {
 507    /* Mysql */
 508    "CREATE TEMPORARY TABLE basefile%lld ("
 509    "Path BLOB NOT NULL,"
 510    "Name BLOB NOT NULL)",
 511    /* Postgresql */
 512    "CREATE TEMPORARY TABLE basefile%lld ("
 513    "Path TEXT,"
 514    "Name TEXT)",
 515    /* SQLite */
 516    "CREATE TEMPORARY TABLE basefile%lld ("
 517    "Path TEXT,"
 518    "Name TEXT)",
 519    /* SQLite3 */
 520    "CREATE TEMPORARY TABLE basefile%lld ("
 521    "Path TEXT,"
 522    "Name TEXT)",
 523    /* Ingres */
 524    "DECLARE GLOBAL TEMPORARY TABLE basefile%lld ("
 525    "Path VARBYTE(32000) NOT NULL,"
 526    "Name VARBYTE(32000) NOT NULL) "
 527    "ON COMMIT PRESERVE ROWS WITH NORECOVERY"
 528 };
 529
 530 const char *create_temp_new_basefile[5] = {
 531    /* Mysql */
 532    "CREATE TEMPORARY TABLE new_basefile%lld AS "
 533    "SELECT Path.Path AS Path, Filename.Name AS Name, Temp.FileIndex AS FileIndex,"
 534    "Temp.JobId AS JobId, Temp.LStat AS LStat, Temp.FileId AS FileId, "
 535    "Temp.MD5 AS MD5 "
 536    "FROM ( %s ) AS Temp "
 537    "JOIN Filename ON (Filename.FilenameId = Temp.FilenameId) "
 538    "JOIN Path ON (Path.PathId = Temp.PathId) "
 539    "WHERE Temp.FileIndex > 0",
 540    /* Postgresql */
 541    "CREATE TEMPORARY TABLE new_basefile%lld AS "
 542    "SELECT Path.Path AS Path, Filename.Name AS Name, Temp.FileIndex AS FileIndex,"
 543    "Temp.JobId AS JobId, Temp.LStat AS LStat, Temp.FileId AS FileId, "
 544    "Temp.MD5 AS MD5 "
 545    "FROM ( %s ) AS Temp "
 546    "JOIN Filename ON (Filename.FilenameId = Temp.FilenameId) "
 547    "JOIN Path ON (Path.PathId = Temp.PathId) "
 548    "WHERE Temp.FileIndex > 0",
 549    /* SQLite */
 550    "CREATE TEMPORARY TABLE new_basefile%lld AS "
 551    "SELECT Path.Path AS Path, Filename.Name AS Name, Temp.FileIndex AS FileIndex,"
 552    "Temp.JobId AS JobId, Temp.LStat AS LStat, Temp.FileId AS FileId, "
 553    "Temp.MD5 AS MD5 "
 554    "FROM ( %s ) AS Temp "
 555    "JOIN Filename ON (Filename.FilenameId = Temp.FilenameId) "
 556    "JOIN Path ON (Path.PathId = Temp.PathId) "
 557    "WHERE Temp.FileIndex > 0",
 558    /* SQLite3 */
 559    "CREATE TEMPORARY TABLE new_basefile%lld AS "
 560    "SELECT Path.Path AS Path, Filename.Name AS Name, Temp.FileIndex AS FileIndex,"
 561    "Temp.JobId AS JobId, Temp.LStat AS LStat, Temp.FileId AS FileId, "
 562    "Temp.MD5 AS MD5 "
 563    "FROM ( %s ) AS Temp "
 564    "JOIN Filename ON (Filename.FilenameId = Temp.FilenameId) "
 565    "JOIN Path ON (Path.PathId = Temp.PathId) "
 566    "WHERE Temp.FileIndex > 0",
 567    /* Ingres */
 568    "DECLARE GLOBAL TEMPORARY TABLE new_basefile%lld AS "
 569    "SELECT Path.Path AS Path, Filename.Name AS Name, Temp.FileIndex AS FileIndex,"
 570    "Temp.JobId AS JobId, Temp.LStat AS LStat, Temp.FileId AS FileId, "
 571    "Temp.MD5 AS MD5 "
 572    "FROM ( %s ) AS Temp "
 573    "JOIN Filename ON (Filename.FilenameId = Temp.FilenameId) "
 574    "JOIN Path ON (Path.PathId = Temp.PathId) "
 575    "WHERE Temp.FileIndex > 0 "
 576    "ON COMMIT PRESERVE ROWS WITH NORECOVERY"
 577 };
 578
 579 /* ====== ua_prune.c */
 580
 581 /* List of SQL commands to create temp table and indicies  */
 582 const char *create_deltabs[5] = {
 583    /* MySQL */
 584    "CREATE TEMPORARY TABLE DelCandidates ("
 585    "JobId INTEGER UNSIGNED NOT NULL, "
 586    "PurgedFiles TINYINT, "
 587    "FileSetId INTEGER UNSIGNED, "
 588    "JobFiles INTEGER UNSIGNED, "
 589    "JobStatus BINARY(1))",
 590    /* Postgresql */
 591    "CREATE TEMPORARY TABLE DelCandidates ("
 592    "JobId INTEGER NOT NULL, "
 593    "PurgedFiles SMALLINT, "
 594    "FileSetId INTEGER, "
 595    "JobFiles INTEGER, "
 596    "JobStatus char(1))",
 597    /* SQLite */
 598    "CREATE TEMPORARY TABLE DelCandidates ("
 599    "JobId INTEGER UNSIGNED NOT NULL, "
 600    "PurgedFiles TINYINT, "
 601    "FileSetId INTEGER UNSIGNED, "
 602    "JobFiles INTEGER UNSIGNED, "
 603    "JobStatus CHAR)",
 604    /* SQLite3 */
 605    "CREATE TEMPORARY TABLE DelCandidates ("
 606    "JobId INTEGER UNSIGNED NOT NULL, "
 607    "PurgedFiles TINYINT, "
 608    "FileSetId INTEGER UNSIGNED, "
 609    "JobFiles INTEGER UNSIGNED, "
 610    "JobStatus CHAR)",
 611    /* Ingres */
 612    "DECLARE GLOBAL TEMPORARY TABLE DelCandidates ("
 613    "JobId INTEGER NOT NULL, "
 614    "PurgedFiles SMALLINT, "
 615    "FileSetId INTEGER, "
 616    "JobFiles INTEGER, "
 617    "JobStatus CHAR(1)) "
 618    "ON COMMIT PRESERVE ROWS WITH NORECOVERY"
 619 };
 620
 621 /* ======= ua_purge.c */
 622
 623 /* Select the first available Copy Job that must be upgraded to a Backup job when the original backup job is expired. */
 624
 625 const char *uap_upgrade_copies_oldest_job_default =
 626 "CREATE TEMPORARY TABLE cpy_tmp AS "
 627        "SELECT MIN(JobId) AS JobId FROM Job "     /* Choose the oldest job */
 628         "WHERE Type='%c' "                        /* JT_JOB_COPY */
 629           "AND ( PriorJobId IN (%s) "             /* JobId selection */
 630               "OR "
 631                " PriorJobId IN ( "
 632                   "SELECT PriorJobId "
 633                     "FROM Job "
 634                    "WHERE JobId IN (%s) "         /* JobId selection */
 635                     " AND Type='B' "
 636                  ") "
 637               ") "
 638           "GROUP BY PriorJobId ";           /* one result per copy */
 639
 640 const char *uap_upgrade_copies_oldest_job[5] = {
 641    /* Mysql */
 642    uap_upgrade_copies_oldest_job_default,
 643    /* Postgresql */
 644    uap_upgrade_copies_oldest_job_default,
 645    /* SQLite */
 646    uap_upgrade_copies_oldest_job_default,
 647    /* SQLite3 */
 648    uap_upgrade_copies_oldest_job_default,
 649    /* Ingres */
 650    "DECLARE GLOBAL TEMPORARY TABLE cpy_tmp AS "
 651        "SELECT MIN(JobId) AS JobId FROM Job "     /* Choose the oldest job */
 652         "WHERE Type='%c' "                        /* JT_JOB_COPY */
 653           "AND ( PriorJobId IN (%s) "             /* JobId selection */
 654               "OR "
 655                " PriorJobId IN ( "
 656                   "SELECT PriorJobId "
 657                     "FROM Job "
 658                    "WHERE JobId IN (%s) "         /* JobId selection */
 659                     " AND Type='B' "
 660                  ") "
 661               ") "
 662           "GROUP BY PriorJobId "           /* one result per copy */
 663    "ON COMMIT PRESERVE ROWS WITH NORECOVERY"
 664 };
 665
 666 /* ======= ua_restore.c */
 667
 668 /* List Jobs where a particular file is saved */
 669 const char *uar_file[5] = {
 670    /* Mysql */
 671    "SELECT Job.JobId as JobId,"
 672    "CONCAT(Path.Path,Filename.Name) as Name, "
 673    "StartTime,Type as JobType,JobStatus,JobFiles,JobBytes "
 674    "FROM Client,Job,File,Filename,Path WHERE Client.Name='%s' "
 675    "AND Client.ClientId=Job.ClientId "
 676    "AND Job.JobId=File.JobId AND File.FileIndex > 0 "
 677    "AND Path.PathId=File.PathId AND Filename.FilenameId=File.FilenameId "
 678    "AND Filename.Name='%s' ORDER BY StartTime DESC LIMIT 20",
 679    /* Postgresql */
 680    "SELECT Job.JobId as JobId,"
 681    "Path.Path||Filename.Name as Name, "
 682    "StartTime,Type as JobType,JobStatus,JobFiles,JobBytes "
 683    "FROM Client,Job,File,Filename,Path WHERE Client.Name='%s' "
 684    "AND Client.ClientId=Job.ClientId "
 685    "AND Job.JobId=File.JobId AND File.FileIndex > 0 "
 686    "AND Path.PathId=File.PathId AND Filename.FilenameId=File.FilenameId "
 687    "AND Filename.Name='%s' ORDER BY StartTime DESC LIMIT 20",
 688    /* SQLite */
 689    "SELECT Job.JobId as JobId,"
 690    "Path.Path||Filename.Name as Name, "
 691    "StartTime,Type as JobType,JobStatus,JobFiles,JobBytes "
 692    "FROM Client,Job,File,Filename,Path WHERE Client.Name='%s' "
 693    "AND Client.ClientId=Job.ClientId "
 694    "AND Job.JobId=File.JobId AND File.FileIndex > 0 "
 695    "AND Path.PathId=File.PathId AND Filename.FilenameId=File.FilenameId "
 696    "AND Filename.Name='%s' ORDER BY StartTime DESC LIMIT 20",
 697    /* SQLite3 */
 698    "SELECT Job.JobId as JobId,"
 699    "Path.Path||Filename.Name as Name, "
 700    "StartTime,Type as JobType,JobStatus,JobFiles,JobBytes "
 701    "FROM Client,Job,File,Filename,Path WHERE Client.Name='%s' "
 702    "AND Client.ClientId=Job.ClientId "
 703    "AND Job.JobId=File.JobId AND File.FileIndex > 0 "
 704    "AND Path.PathId=File.PathId AND Filename.FilenameId=File.FilenameId "
 705    "AND Filename.Name='%s' ORDER BY StartTime DESC LIMIT 20",
 706    /* Ingres */
 707    "SELECT Job.JobId as JobId,"
 708    "Path.Path||Filename.Name as Name, "
 709    "StartTime,Type as JobType,JobStatus,JobFiles,JobBytes "
 710    "FROM Client,Job,File,Filename,Path WHERE Client.Name='%s' "
 711    "AND Client.ClientId=Job.ClientId "
 712    "AND Job.JobId=File.JobId AND File.FileIndex > 0 "
 713    "AND Path.PathId=File.PathId AND Filename.FilenameId=File.FilenameId "
 714    "AND Filename.Name='%s' ORDER BY StartTime DESC FETCH FIRST 20 ROWS ONLY"
 715 };
 716
 717 const char *uar_create_temp[5] = {
 718    /* Mysql */
 719    "CREATE TEMPORARY TABLE temp ("
 720    "JobId INTEGER UNSIGNED NOT NULL,"
 721    "JobTDate BIGINT UNSIGNED,"
 722    "ClientId INTEGER UNSIGNED,"
 723    "Level CHAR,"
 724    "JobFiles INTEGER UNSIGNED,"
 725    "JobBytes BIGINT UNSIGNED,"
 726    "StartTime TEXT,"
 727    "VolumeName TEXT,"
 728    "StartFile INTEGER UNSIGNED,"
 729    "VolSessionId INTEGER UNSIGNED,"
 730    "VolSessionTime INTEGER UNSIGNED)",
 731    /* Postgresql */
 732    "CREATE TEMPORARY TABLE temp ("
 733    "JobId INTEGER NOT NULL,"
 734    "JobTDate BIGINT,"
 735    "ClientId INTEGER,"
 736    "Level CHAR,"
 737    "JobFiles INTEGER,"
 738    "JobBytes BIGINT,"
 739    "StartTime TEXT,"
 740    "VolumeName TEXT,"
 741    "StartFile INTEGER,"
 742    "VolSessionId INTEGER,"
 743    "VolSessionTime INTEGER)",
 744    /* SQLite */
 745    "CREATE TEMPORARY TABLE temp ("
 746    "JobId INTEGER UNSIGNED NOT NULL,"
 747    "JobTDate BIGINT UNSIGNED,"
 748    "ClientId INTEGER UNSIGNED,"
 749    "Level CHAR,"
 750    "JobFiles INTEGER UNSIGNED,"
 751    "JobBytes BIGINT UNSIGNED,"
 752    "StartTime TEXT,"
 753    "VolumeName TEXT,"
 754    "StartFile INTEGER UNSIGNED,"
 755    "VolSessionId INTEGER UNSIGNED,"
 756    "VolSessionTime INTEGER UNSIGNED)",
 757    /* SQLite3 */
 758    "CREATE TEMPORARY TABLE temp ("
 759    "JobId INTEGER UNSIGNED NOT NULL,"
 760    "JobTDate BIGINT UNSIGNED,"
 761    "ClientId INTEGER UNSIGNED,"
 762    "Level CHAR,"
 763    "JobFiles INTEGER UNSIGNED,"
 764    "JobBytes BIGINT UNSIGNED,"
 765    "StartTime TEXT,"
 766    "VolumeName TEXT,"
 767    "StartFile INTEGER UNSIGNED,"
 768    "VolSessionId INTEGER UNSIGNED,"
 769    "VolSessionTime INTEGER UNSIGNED)",
 770    /* Ingres */
 771    "DECLARE GLOBAL TEMPORARY TABLE temp ("
 772    "JobId INTEGER NOT NULL,"
 773    "JobTDate BIGINT,"
 774    "ClientId INTEGER,"
 775    "Level CHAR(1),"
 776    "JobFiles INTEGER,"
 777    "JobBytes BIGINT,"
 778    "StartTime TIMESTAMP WITHOUT TIME ZONE,"
 779    "VolumeName VARBYTE(128),"
 780    "StartFile INTEGER,"
 781    "VolSessionId INTEGER,"
 782    "VolSessionTime INTEGER) "
 783    "ON COMMIT PRESERVE ROWS WITH NORECOVERY"
 784 };
 785
 786 const char *uar_create_temp1[5] = {
 787    /* Mysql */
 788    "CREATE TEMPORARY TABLE temp1 ("
 789    "JobId INTEGER UNSIGNED NOT NULL,"
 790    "JobTDate BIGINT UNSIGNED)",
 791    /* Postgresql */
 792    "CREATE TEMPORARY TABLE temp1 ("
 793    "JobId INTEGER NOT NULL,"
 794    "JobTDate BIGINT)",
 795    /* SQLite */
 796    "CREATE TEMPORARY TABLE temp1 ("
 797    "JobId INTEGER UNSIGNED NOT NULL,"
 798    "JobTDate BIGINT UNSIGNED)",
 799    /* SQLite3 */
 800    "CREATE TEMPORARY TABLE temp1 ("
 801    "JobId INTEGER UNSIGNED NOT NULL,"
 802    "JobTDate BIGINT UNSIGNED)",
 803    /* Ingres */
 804    "DECLARE GLOBAL TEMPORARY TABLE temp1 ("
 805    "JobId INTEGER NOT NULL,"
 806    "JobTDate BIGINT) "
 807    "ON COMMIT PRESERVE ROWS WITH NORECOVERY"
 808    };
 809
 810 /* Query to get all files in a directory -- no recursing
 811  *  Note, for PostgreSQL since it respects the "Single Value
 812  *  rule", the results of the SELECT will be unoptimized.
 813  *  I.e. the same file will be restored multiple times, once
 814  *  for each time it was backed up.
 815  */
 816
 817 const char *uar_jobid_fileindex_from_dir[5] = {
 818    /* Mysql */
 819    "SELECT Job.JobId,File.FileIndex FROM Job,File,Path,Filename,Client "
 820    "WHERE Job.JobId IN (%s) "
 821    "AND Job.JobId=File.JobId "
 822    "AND Path.Path='%s' "
 823    "AND Client.Name='%s' "
 824    "AND Job.ClientId=Client.ClientId "
 825    "AND Path.PathId=File.Pathid "
 826    "AND Filename.FilenameId=File.FilenameId "
 827    "GROUP BY File.FileIndex ",
 828    /* Postgresql */
 829    "SELECT Job.JobId,File.FileIndex FROM Job,File,Path,Filename,Client "
 830    "WHERE Job.JobId IN (%s) "
 831    "AND Job.JobId=File.JobId "
 832    "AND Path.Path='%s' "
 833    "AND Client.Name='%s' "
 834    "AND Job.ClientId=Client.ClientId "
 835    "AND Path.PathId=File.Pathid "
 836    "AND Filename.FilenameId=File.FilenameId",
 837    /* SQLite */
 838    "SELECT Job.JobId,File.FileIndex FROM Job,File,Path,Filename,Client "
 839    "WHERE Job.JobId IN (%s) "
 840    "AND Job.JobId=File.JobId "
 841    "AND Path.Path='%s' "
 842    "AND Client.Name='%s' "
 843    "AND Job.ClientId=Client.ClientId "
 844    "AND Path.PathId=File.Pathid "
 845    "AND Filename.FilenameId=File.FilenameId "
 846    "GROUP BY File.FileIndex ",
 847    /* SQLite3 */
 848    "SELECT Job.JobId,File.FileIndex FROM Job,File,Path,Filename,Client "
 849    "WHERE Job.JobId IN (%s) "
 850    "AND Job.JobId=File.JobId "
 851    "AND Path.Path='%s' "
 852    "AND Client.Name='%s' "
 853    "AND Job.ClientId=Client.ClientId "
 854    "AND Path.PathId=File.Pathid "
 855    "AND Filename.FilenameId=File.FilenameId "
 856    "GROUP BY File.FileIndex ",
 857    /* Ingres */
 858    "SELECT Job.JobId,File.FileIndex FROM Job,File,Path,Filename,Client "
 859    "WHERE Job.JobId IN (%s) "
 860    "AND Job.JobId=File.JobId "
 861    "AND Path.Path='%s' "
 862    "AND Client.Name='%s' "
 863    "AND Job.ClientId=Client.ClientId "
 864    "AND Path.PathId=File.Pathid "
 865    "AND Filename.FilenameId=File.FilenameId"
 866 };
 867
 868 const char *sql_media_order_most_recently_written[5] = {
 869    /* Mysql */
 870    "ORDER BY LastWritten IS NULL,LastWritten DESC,MediaId",
 871    /* Postgresql */
 872    "ORDER BY LastWritten IS NULL,LastWritten DESC,MediaId",
 873    /* SQLite */
 874    "ORDER BY LastWritten IS NULL,LastWritten DESC,MediaId",
 875    /* SQLite3 */
 876    "ORDER BY LastWritten IS NULL,LastWritten DESC,MediaId",
 877    /* Ingres */
 878    "ORDER BY IFNULL(LastWritten, '1970-01-01 00:00:00') DESC,MediaId"
 879 };
 880
 881 const char *sql_get_max_connections[5] = {
 882    /* Mysql */
 883    "SHOW VARIABLES LIKE 'max_connections'",
 884    /* Postgresql */
 885    "SHOW max_connections",
 886    /* SQLite */
 887    "SELECT 0",
 888    /* SQLite3 */
 889    "SELECT 0",
 890    /* Ingres (TODO) */
 891    "SELECT 0"
 892 };
 893
 894 /* Row number of the max_connections setting */
 895 const uint32_t sql_get_max_connections_index[5] = {
 896     /* Mysql */
 897    1,
 898    /* Postgresql */
 899    0,
 900    /* SQLite */
 901    0,
 902    /* SQLite3 */
 903    0,
 904    /* Ingres (TODO) */
 905    0
 906 };