git.sur5r.net Git - bacula/bacula/blob - bacula/src/findlib/find_one.c

   1 /*
   2    Bacula® - The Network Backup Solution
   3
   4    Copyright (C) 2000-2009 Free Software Foundation Europe e.V.
   5
   6    The main author of Bacula is Kern Sibbald, with contributions from
   7    many others, a complete list can be found in the file AUTHORS.
   8    This program is Free Software; you can redistribute it and/or
   9    modify it under the terms of version two of the GNU General Public
  10    License as published by the Free Software Foundation and included
  11    in the file LICENSE.
  12
  13    This program is distributed in the hope that it will be useful, but
  14    WITHOUT ANY WARRANTY; without even the implied warranty of
  15    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU
  16    General Public License for more details.
  17
  18    You should have received a copy of the GNU General Public License
  19    along with this program; if not, write to the Free Software
  20    Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA
  21    02110-1301, USA.
  22
  23    Bacula® is a registered trademark of Kern Sibbald.
  24    The licensor of Bacula is the Free Software Foundation Europe
  25    (FSFE), Fiduciary Program, Sumatrastrasse 25, 8006 Zürich,
  26    Switzerland, email:ftf@fsfeurope.org.
  27 */
  28 /*
  29
  30    This file was derived from GNU TAR source code. Except for a few key
  31    ideas, it has been entirely rewritten for Bacula.
  32
  33       Kern Sibbald, MM
  34
  35    Thanks to the TAR programmers.
  36
  37      Version $Id$
  38
  39  */
  40
  41 #include "bacula.h"
  42 #include "find.h"
  43 #ifdef HAVE_DARWIN_OS
  44 #include <sys/param.h>
  45 #include <sys/mount.h>
  46 #include <sys/attr.h>
  47 #endif
  48
  49 extern int32_t name_max;              /* filename max length */
  50 extern int32_t path_max;              /* path name max length */
  51
  52 /*
  53  * Structure for keeping track of hard linked files, we
  54  *   keep an entry for each hardlinked file that we save,
  55  *   which is the first one found. For all the other files that
  56  *   are linked to this one, we save only the directory
  57  *   entry so we can link it.
  58  */
  59 struct f_link {
  60     struct f_link *next;
  61     dev_t dev;                        /* device */
  62     ino_t ino;                        /* inode with device is unique */
  63     uint32_t FileIndex;               /* Bacula FileIndex of this file */
  64     char name[1];                     /* The name */
  65 };
  66
  67 typedef struct f_link link_t;
  68 #define LINK_HASHTABLE_BITS 16
  69 #define LINK_HASHTABLE_SIZE (1<<LINK_HASHTABLE_BITS)
  70 #define LINK_HASHTABLE_MASK (LINK_HASHTABLE_SIZE-1)
  71
  72 static inline int LINKHASH(const struct stat &info)
  73 {
  74     int hash = info.st_dev;
  75     unsigned long long i = info.st_ino;
  76     hash ^= i;
  77     i >>= 16;
  78     hash ^= i;
  79     i >>= 16;
  80     hash ^= i;
  81     i >>= 16;
  82     hash ^= i;
  83     return hash & LINK_HASHTABLE_MASK;
  84 }
  85
  86 /*
  87  * Create a new directory Find File packet, but copy
  88  *   some of the essential info from the current packet.
  89  *   However, be careful to zero out the rest of the
  90  *   packet.
  91  */
  92 static FF_PKT *new_dir_ff_pkt(FF_PKT *ff_pkt)
  93 {
  94    FF_PKT *dir_ff_pkt = (FF_PKT *)bmalloc(sizeof(FF_PKT));
  95    memcpy(dir_ff_pkt, ff_pkt, sizeof(FF_PKT));
  96    dir_ff_pkt->fname = bstrdup(ff_pkt->fname);
  97    dir_ff_pkt->link = bstrdup(ff_pkt->link);
  98    dir_ff_pkt->sys_fname = get_pool_memory(PM_FNAME);
  99    dir_ff_pkt->included_files_list = NULL;
 100    dir_ff_pkt->excluded_files_list = NULL;
 101    dir_ff_pkt->excluded_paths_list = NULL;
 102    dir_ff_pkt->linkhash = NULL;
 103    dir_ff_pkt->fname_save = NULL;
 104    dir_ff_pkt->link_save = NULL;
 105    return dir_ff_pkt;
 106 }
 107
 108 /*
 109  * Free the temp directory ff_pkt
 110  */
 111 static void free_dir_ff_pkt(FF_PKT *dir_ff_pkt)
 112 {
 113    free(dir_ff_pkt->fname);
 114    free(dir_ff_pkt->link);
 115    free_pool_memory(dir_ff_pkt->sys_fname);
 116    if (dir_ff_pkt->fname_save) {
 117       free_pool_memory(dir_ff_pkt->fname_save);
 118    }
 119    if (dir_ff_pkt->link_save) {
 120       free_pool_memory(dir_ff_pkt->link_save);
 121    }
 122    free(dir_ff_pkt);
 123 }
 124
 125 /*
 126  * Check to see if we allow the file system type of a file or directory.
 127  * If we do not have a list of file system types, we accept anything.
 128  */
 129 static int accept_fstype(FF_PKT *ff, void *dummy) {
 130    int i;
 131    char fs[1000];
 132    bool accept = true;
 133
 134    if (ff->fstypes.size()) {
 135       accept = false;
 136       if (!fstype(ff->fname, fs, sizeof(fs))) {
 137          Dmsg1(50, "Cannot determine file system type for \"%s\"\n", ff->fname);
 138       } else {
 139          for (i = 0; i < ff->fstypes.size(); ++i) {
 140             if (strcmp(fs, (char *)ff->fstypes.get(i)) == 0) {
 141                Dmsg2(100, "Accepting fstype %s for \"%s\"\n", fs, ff->fname);
 142                accept = true;
 143                break;
 144             }
 145             Dmsg3(200, "fstype %s for \"%s\" does not match %s\n", fs,
 146                   ff->fname, ff->fstypes.get(i));
 147          }
 148       }
 149    }
 150    return accept;
 151 }
 152
 153 /*
 154  * Check to see if we allow the drive type of a file or directory.
 155  * If we do not have a list of drive types, we accept anything.
 156  */
 157 static int accept_drivetype(FF_PKT *ff, void *dummy) {
 158    int i;
 159    char dt[100];
 160    bool accept = true;
 161
 162    if (ff->drivetypes.size()) {
 163       accept = false;
 164       if (!drivetype(ff->fname, dt, sizeof(dt))) {
 165          Dmsg1(50, "Cannot determine drive type for \"%s\"\n", ff->fname);
 166       } else {
 167          for (i = 0; i < ff->drivetypes.size(); ++i) {
 168             if (strcmp(dt, (char *)ff->drivetypes.get(i)) == 0) {
 169                Dmsg2(100, "Accepting drive type %s for \"%s\"\n", dt, ff->fname);
 170                accept = true;
 171                break;
 172             }
 173             Dmsg3(200, "drive type %s for \"%s\" does not match %s\n", dt,
 174                   ff->fname, ff->drivetypes.get(i));
 175          }
 176       }
 177    }
 178    return accept;
 179 }
 180
 181 /*
 182  * This function determines whether we can use getattrlist()
 183  * It's odd, but we have to use the function to determine that...
 184  * Also, the man pages talk about things as if they were implemented.
 185  *
 186  * On Mac OS X, this succesfully differentiates between HFS+ and UFS
 187  * volumes, which makes me trust it is OK for others, too.
 188  */
 189 static bool volume_has_attrlist(const char *fname)
 190 {
 191 #ifdef HAVE_DARWIN_OS
 192    struct statfs st;
 193    struct volinfo_struct {
 194       unsigned long length;               /* Mandatory field */
 195       vol_capabilities_attr_t info;       /* Volume capabilities */
 196    } vol;
 197    struct attrlist attrList;
 198
 199    memset(&attrList, 0, sizeof(attrList));
 200    attrList.bitmapcount = ATTR_BIT_MAP_COUNT;
 201    attrList.volattr = ATTR_VOL_INFO | ATTR_VOL_CAPABILITIES;
 202    if (statfs(fname, &st) == 0) {
 203       /* We need to check on the mount point */
 204       if (getattrlist(st.f_mntonname, &attrList, &vol, sizeof(vol), FSOPT_NOFOLLOW) == 0
 205             && (vol.info.capabilities[VOL_CAPABILITIES_INTERFACES] & VOL_CAP_INT_ATTRLIST)
 206             && (vol.info.valid[VOL_CAPABILITIES_INTERFACES] & VOL_CAP_INT_ATTRLIST)) {
 207          return true;
 208       }
 209    }
 210 #endif
 211    return false;
 212 }
 213
 214 /*
 215  * check for BSD nodump flag
 216  */
 217 static bool no_dump(JCR *jcr, FF_PKT *ff_pkt)
 218 {
 219 #if defined(HAVE_CHFLAGS) && defined(UF_NODUMP)
 220    if ( (ff_pkt->flags & FO_HONOR_NODUMP) &&
 221         (ff_pkt->statp.st_flags & UF_NODUMP) ) {
 222       Jmsg(jcr, M_INFO, 1, _("     NODUMP flag set - will not process %s\n"),
 223            ff_pkt->fname);
 224       return true;                    /* do not backup this file */
 225    }
 226 #endif
 227    return false;                      /* do backup */
 228 }
 229
 230 /* check if a file have changed during backup and display an error */
 231 bool has_file_changed(JCR *jcr, FF_PKT *ff_pkt)
 232 {
 233    struct stat statp;
 234    Dmsg1(500, "has_file_changed fname=%s\n",ff_pkt->fname);
 235
 236    if (ff_pkt->type != FT_REG) { /* not a regular file */
 237       return false;
 238    }
 239
 240    if (lstat(ff_pkt->fname, &statp) != 0) {
 241       berrno be;
 242       Jmsg(jcr, M_WARNING, 0,
 243            _("Cannot stat file %s: ERR=%s\n"),ff_pkt->fname,be.bstrerror());
 244       return true;
 245    }
 246
 247    if (statp.st_mtime != ff_pkt->statp.st_mtime) {
 248       /* TODO: add time of changes */
 249       Jmsg(jcr, M_ERROR, 0, _("%s mtime changed during backup.\n"), ff_pkt->fname);
 250       return true;
 251    }
 252
 253    if (statp.st_ctime != ff_pkt->statp.st_ctime) {
 254       /* TODO: add time of changes */
 255       Jmsg(jcr, M_ERROR, 0, _("%s ctime changed during backup.\n"), ff_pkt->fname);
 256       return true;
 257    }
 258
 259    if (statp.st_size != ff_pkt->statp.st_size) {
 260       /* TODO: add size change */
 261       Jmsg(jcr, M_ERROR, 0, _("%s size changed during backup.\n"),ff_pkt->fname);
 262       return true;
 263    }
 264
 265    if ((statp.st_blksize != ff_pkt->statp.st_blksize) ||
 266        (statp.st_blocks  != ff_pkt->statp.st_blocks)) {
 267       /* TODO: add size change */
 268       Jmsg(jcr, M_ERROR, 0, _("%s size changed during backup.\n"),ff_pkt->fname);
 269       return true;
 270    }
 271
 272    return false;
 273 }
 274
 275 /*
 276  * For incremental/diffential or accurate backups, we
 277  *   determine if the current file has changed.
 278  */
 279 static bool check_changes(JCR *jcr, FF_PKT *ff_pkt)
 280 {
 281    /* in special mode (like accurate backup), the programmer can
 282     * choose his comparison function.
 283     */
 284    if (ff_pkt->check_fct) {
 285       return ff_pkt->check_fct(jcr, ff_pkt);
 286    }
 287
 288    /* For normal backups (incr/diff), we use this default
 289     * behaviour
 290     */
 291    if (ff_pkt->incremental &&
 292        (ff_pkt->statp.st_mtime < ff_pkt->save_time &&
 293         ((ff_pkt->flags & FO_MTIMEONLY) ||
 294          ff_pkt->statp.st_ctime < ff_pkt->save_time)))
 295    {
 296       return false;
 297    }
 298
 299    return true;
 300 }
 301
 302 static bool have_ignoredir(FF_PKT *ff_pkt)
 303 {
 304    struct stat sb;
 305    char tmp_name[MAXPATHLEN];
 306    char *ignoredir;
 307
 308    /* Ensure that pointers are defined */
 309    if (!ff_pkt->fileset || !ff_pkt->fileset->incexe) {
 310       return false;
 311    }
 312    ignoredir = ff_pkt->fileset->incexe->ignoredir;
 313
 314    if (ignoredir) {
 315       if (strlen(ff_pkt->fname) + strlen(ignoredir) + 2 > MAXPATHLEN) {
 316          return false;
 317       }
 318
 319       strcpy(tmp_name, ff_pkt->fname);
 320       strcat(tmp_name, "/");
 321       strcat(tmp_name, ignoredir);
 322       if (stat(tmp_name, &sb) == 0) {
 323          Dmsg2(100, "Directory '%s' ignored (found %s)\n",
 324                ff_pkt->fname, ignoredir);
 325          return true;      /* Just ignore this directory */
 326       }
 327    }
 328    return false;
 329 }
 330
 331 /*
 332  * Find a single file.
 333  * handle_file is the callback for handling the file.
 334  * p is the filename
 335  * parent_device is the device we are currently on
 336  * top_level is 1 when not recursing or 0 when
 337  *  descending into a directory.
 338  */
 339 int
 340 find_one_file(JCR *jcr, FF_PKT *ff_pkt,
 341                int handle_file(JCR *jcr, FF_PKT *ff, bool top_level),
 342                char *fname, dev_t parent_device, bool top_level)
 343 {
 344    struct utimbuf restore_times;
 345    int rtn_stat;
 346    int len;
 347
 348    ff_pkt->fname = ff_pkt->link = fname;
 349
 350    if (lstat(fname, &ff_pkt->statp) != 0) {
 351        /* Cannot stat file */
 352        ff_pkt->type = FT_NOSTAT;
 353        ff_pkt->ff_errno = errno;
 354        return handle_file(jcr, ff_pkt, top_level);
 355    }
 356
 357    Dmsg1(300, "File ----: %s\n", fname);
 358
 359    /* Save current times of this directory in case we need to
 360     * reset them because the user doesn't want them changed.
 361     */
 362    restore_times.actime = ff_pkt->statp.st_atime;
 363    restore_times.modtime = ff_pkt->statp.st_mtime;
 364
 365    /*
 366     * We check for allowed fstypes and drivetypes at top_level and fstype change (below).
 367     */
 368    if (top_level) {
 369       if (!accept_fstype(ff_pkt, NULL)) {
 370          ff_pkt->type = FT_INVALIDFS;
 371          if (ff_pkt->flags & FO_KEEPATIME) {
 372             utime(fname, &restore_times);
 373          }
 374
 375          char fs[100];
 376
 377          if (!fstype(ff_pkt->fname, fs, sizeof(fs))) {
 378              bstrncpy(fs, "unknown", sizeof(fs));
 379          }
 380
 381          Jmsg(jcr, M_INFO, 0, _("Top level directory \"%s\" has unlisted fstype \"%s\"\n"), fname, fs);
 382          return 1;      /* Just ignore this error - or the whole backup is cancelled */
 383       }
 384       if (!accept_drivetype(ff_pkt, NULL)) {
 385          ff_pkt->type = FT_INVALIDDT;
 386          if (ff_pkt->flags & FO_KEEPATIME) {
 387             utime(fname, &restore_times);
 388          }
 389
 390          char dt[100];
 391
 392          if (!drivetype(ff_pkt->fname, dt, sizeof(dt))) {
 393              bstrncpy(dt, "unknown", sizeof(dt));
 394          }
 395
 396          Jmsg(jcr, M_INFO, 0, _("Top level directory \"%s\" has an unlisted drive type \"%s\"\n"), fname, dt);
 397          return 1;      /* Just ignore this error - or the whole backup is cancelled */
 398       }
 399       ff_pkt->volhas_attrlist = volume_has_attrlist(fname);
 400    }
 401
 402    /*
 403     * Ignore this entry if no_dump() returns true
 404     */
 405    if (no_dump(jcr, ff_pkt)) {
 406            Dmsg1(100, "'%s' ignored (NODUMP flag set)\n",
 407                  ff_pkt->fname);
 408            return 1;
 409    }
 410
 411    /*
 412     * If this is an Incremental backup, see if file was modified
 413     * since our last "save_time", presumably the last Full save
 414     * or Incremental.
 415     */
 416    if (   !S_ISDIR(ff_pkt->statp.st_mode)
 417        && !check_changes(jcr, ff_pkt))
 418    {
 419       Dmsg1(500, "Non-directory incremental: %s\n", ff_pkt->fname);
 420       ff_pkt->type = FT_NOCHG;
 421       return handle_file(jcr, ff_pkt, top_level);
 422    }
 423
 424 #ifdef HAVE_DARWIN_OS
 425    if (ff_pkt->flags & FO_HFSPLUS && ff_pkt->volhas_attrlist
 426          && S_ISREG(ff_pkt->statp.st_mode)) {
 427        /* TODO: initialise attrList once elsewhere? */
 428        struct attrlist attrList;
 429        memset(&attrList, 0, sizeof(attrList));
 430        attrList.bitmapcount = ATTR_BIT_MAP_COUNT;
 431        attrList.commonattr = ATTR_CMN_FNDRINFO;
 432        attrList.fileattr = ATTR_FILE_RSRCLENGTH;
 433        if (getattrlist(fname, &attrList, &ff_pkt->hfsinfo,
 434                 sizeof(ff_pkt->hfsinfo), FSOPT_NOFOLLOW) != 0) {
 435           ff_pkt->type = FT_NOSTAT;
 436           ff_pkt->ff_errno = errno;
 437           return handle_file(jcr, ff_pkt, top_level);
 438        }
 439    }
 440 #endif
 441
 442    ff_pkt->LinkFI = 0;
 443    /*
 444     * Handle hard linked files
 445     *
 446     * Maintain a list of hard linked files already backed up. This
 447     *  allows us to ensure that the data of each file gets backed
 448     *  up only once.
 449     */
 450    if (!(ff_pkt->flags & FO_NO_HARDLINK)
 451        && ff_pkt->statp.st_nlink > 1
 452        && (S_ISREG(ff_pkt->statp.st_mode)
 453            || S_ISCHR(ff_pkt->statp.st_mode)
 454            || S_ISBLK(ff_pkt->statp.st_mode)
 455            || S_ISFIFO(ff_pkt->statp.st_mode)
 456            || S_ISSOCK(ff_pkt->statp.st_mode))) {
 457
 458        struct f_link *lp;
 459        if (ff_pkt->linkhash == NULL) {
 460            ff_pkt->linkhash = (link_t **)bmalloc(LINK_HASHTABLE_SIZE * sizeof(link_t *));
 461            memset(ff_pkt->linkhash, 0, LINK_HASHTABLE_SIZE * sizeof(link_t *));
 462        }
 463        const int linkhash = LINKHASH(ff_pkt->statp);
 464
 465       /* Search link list of hard linked files */
 466        for (lp = ff_pkt->linkhash[linkhash]; lp; lp = lp->next)
 467          if (lp->ino == (ino_t)ff_pkt->statp.st_ino &&
 468              lp->dev == (dev_t)ff_pkt->statp.st_dev) {
 469              /* If we have already backed up the hard linked file don't do it again */
 470              if (strcmp(lp->name, fname) == 0) {
 471                 Dmsg2(400, "== Name identical skip FI=%d file=%s\n", lp->FileIndex, fname);
 472                 return 1;             /* ignore */
 473              }
 474              ff_pkt->link = lp->name;
 475              ff_pkt->type = FT_LNKSAVED;       /* Handle link, file already saved */
 476              ff_pkt->LinkFI = lp->FileIndex;
 477              ff_pkt->linked = 0;
 478              rtn_stat = handle_file(jcr, ff_pkt, top_level);
 479              Dmsg3(400, "FT_LNKSAVED FI=%d LinkFI=%d file=%s\n",
 480                 ff_pkt->FileIndex, lp->FileIndex, lp->name);
 481              return rtn_stat;
 482          }
 483
 484       /* File not previously dumped. Chain it into our list. */
 485       len = strlen(fname) + 1;
 486       lp = (struct f_link *)bmalloc(sizeof(struct f_link) + len);
 487       lp->ino = ff_pkt->statp.st_ino;
 488       lp->dev = ff_pkt->statp.st_dev;
 489       lp->FileIndex = 0;                  /* set later */
 490       bstrncpy(lp->name, fname, len);
 491       lp->next = ff_pkt->linkhash[linkhash];
 492       ff_pkt->linkhash[linkhash] = lp;
 493       ff_pkt->linked = lp;            /* mark saved link */
 494       Dmsg2(400, "added to hash FI=%d file=%s\n", ff_pkt->FileIndex, lp->name);
 495    } else {
 496       ff_pkt->linked = NULL;
 497    }
 498
 499    /* This is not a link to a previously dumped file, so dump it.  */
 500    if (S_ISREG(ff_pkt->statp.st_mode)) {
 501       boffset_t sizeleft;
 502
 503       sizeleft = ff_pkt->statp.st_size;
 504
 505       /* Don't bother opening empty, world readable files.  Also do not open
 506          files when archive is meant for /dev/null.  */
 507       if (ff_pkt->null_output_device || (sizeleft == 0
 508               && MODE_RALL == (MODE_RALL & ff_pkt->statp.st_mode))) {
 509          ff_pkt->type = FT_REGE;
 510       } else {
 511          ff_pkt->type = FT_REG;
 512       }
 513       rtn_stat = handle_file(jcr, ff_pkt, top_level);
 514       if (ff_pkt->linked) {
 515          ff_pkt->linked->FileIndex = ff_pkt->FileIndex;
 516       }
 517       Dmsg3(400, "FT_REG FI=%d linked=%d file=%s\n", ff_pkt->FileIndex,
 518          ff_pkt->linked ? 1 : 0, fname);
 519       if (ff_pkt->flags & FO_KEEPATIME) {
 520          utime(fname, &restore_times);
 521       }
 522       return rtn_stat;
 523
 524
 525    } else if (S_ISLNK(ff_pkt->statp.st_mode)) {  /* soft link */
 526       int size;
 527       char *buffer = (char *)alloca(path_max + name_max + 102);
 528
 529       size = readlink(fname, buffer, path_max + name_max + 101);
 530       if (size < 0) {
 531          /* Could not follow link */
 532          ff_pkt->type = FT_NOFOLLOW;
 533          ff_pkt->ff_errno = errno;
 534          rtn_stat = handle_file(jcr, ff_pkt, top_level);
 535          if (ff_pkt->linked) {
 536             ff_pkt->linked->FileIndex = ff_pkt->FileIndex;
 537          }
 538          return rtn_stat;
 539       }
 540       buffer[size] = 0;
 541       ff_pkt->link = buffer;          /* point to link */
 542       ff_pkt->type = FT_LNK;          /* got a real link */
 543       rtn_stat = handle_file(jcr, ff_pkt, top_level);
 544       if (ff_pkt->linked) {
 545          ff_pkt->linked->FileIndex = ff_pkt->FileIndex;
 546       }
 547       return rtn_stat;
 548
 549    } else if (S_ISDIR(ff_pkt->statp.st_mode)) {
 550       DIR *directory;
 551       struct dirent *entry, *result;
 552       char *link;
 553       int link_len;
 554       int len;
 555       int status;
 556       dev_t our_device = ff_pkt->statp.st_dev;
 557       bool recurse = true;
 558       bool volhas_attrlist = ff_pkt->volhas_attrlist;    /* Remember this if we recurse */
 559
 560       /*
 561        * If we are using Win32 (non-portable) backup API, don't check
 562        *  access as everything is more complicated, and
 563        *  in principle, we should be able to access everything.
 564        */
 565       if (!have_win32_api() || (ff_pkt->flags & FO_PORTABLE)) {
 566          if (access(fname, R_OK) == -1 && geteuid() != 0) {
 567             /* Could not access() directory */
 568             ff_pkt->type = FT_NOACCESS;
 569             ff_pkt->ff_errno = errno;
 570             rtn_stat = handle_file(jcr, ff_pkt, top_level);
 571             if (ff_pkt->linked) {
 572                ff_pkt->linked->FileIndex = ff_pkt->FileIndex;
 573             }
 574             return rtn_stat;
 575          }
 576       }
 577
 578       /*
 579        * Ignore this directory and everything below if the file .nobackup
 580        * (or what is defined for IgnoreDir in this fileset) exists
 581        */
 582       if (have_ignoredir(ff_pkt)) {
 583          return 1; /* Just ignore this directory */
 584       }
 585
 586       /* Build a canonical directory name with a trailing slash in link var */
 587       len = strlen(fname);
 588       link_len = len + 200;
 589       link = (char *)bmalloc(link_len + 2);
 590       bstrncpy(link, fname, link_len);
 591       /* Strip all trailing slashes */
 592       while (len >= 1 && IsPathSeparator(link[len - 1]))
 593         len--;
 594       link[len++] = '/';             /* add back one */
 595       link[len] = 0;
 596
 597       ff_pkt->link = link;
 598       if (!check_changes(jcr, ff_pkt)) {
 599          /* Incremental/Full+Base option, directory entry not changed */
 600          ff_pkt->type = FT_DIRNOCHG;
 601       } else {
 602          ff_pkt->type = FT_DIRBEGIN;
 603       }
 604       /*
 605        * We have set st_rdev to 1 if it is a reparse point, otherwise 0,
 606        *  if st_rdev is 2, it is a mount point
 607        */
 608 #if defined(HAVE_WIN32)
 609       if (ff_pkt->statp.st_rdev == WIN32_REPARSE_POINT) {
 610          ff_pkt->type = FT_REPARSE;
 611       }
 612 #endif
 613       /*
 614        * Note, we return the directory to the calling program (handle_file)
 615        * when we first see the directory (FT_DIRBEGIN.
 616        * This allows the program to apply matches and make a
 617        * choice whether or not to accept it.  If it is accepted, we
 618        * do not immediately save it, but do so only after everything
 619        * in the directory is seen (i.e. the FT_DIREND).
 620        */
 621       rtn_stat = handle_file(jcr, ff_pkt, top_level);
 622       if (rtn_stat < 1 || ff_pkt->type == FT_REPARSE) {   /* ignore or error status */
 623          free(link);
 624          return rtn_stat;
 625       }
 626       /* Done with DIRBEGIN, next call will be DIREND */
 627       if (ff_pkt->type == FT_DIRBEGIN) {
 628          ff_pkt->type = FT_DIREND;
 629       }
 630
 631       /*
 632        * Create a temporary ff packet for this directory
 633        *   entry, and defer handling the directory until
 634        *   we have recursed into it.  This saves the
 635        *   directory after all files have been processed, and
 636        *   during the restore, the directory permissions will
 637        *   be reset after all the files have been restored.
 638        */
 639       Dmsg1(300, "Create temp ff packet for dir: %s\n", ff_pkt->fname);
 640       FF_PKT *dir_ff_pkt = new_dir_ff_pkt(ff_pkt);
 641
 642       /*
 643        * Do not descend into subdirectories (recurse) if the
 644        * user has turned it off for this directory.
 645        *
 646        * If we are crossing file systems, we are either not allowed
 647        * to cross, or we may be restricted by a list of permitted
 648        * file systems.
 649        */
 650       bool is_win32_mount_point = false;
 651 #if defined(HAVE_WIN32)
 652       is_win32_mount_point = ff_pkt->statp.st_rdev == WIN32_MOUNT_POINT;
 653 #endif
 654       if (!top_level && ff_pkt->flags & FO_NO_RECURSION) {
 655          ff_pkt->type = FT_NORECURSE;
 656          recurse = false;
 657       } else if (!top_level && (parent_device != ff_pkt->statp.st_dev ||
 658                  is_win32_mount_point)) {
 659          if(!(ff_pkt->flags & FO_MULTIFS)) {
 660             ff_pkt->type = FT_NOFSCHG;
 661             recurse = false;
 662          } else if (!accept_fstype(ff_pkt, NULL)) {
 663             ff_pkt->type = FT_INVALIDFS;
 664             recurse = false;
 665          } else {
 666             ff_pkt->volhas_attrlist = volume_has_attrlist(fname);
 667          }
 668       }
 669       /* If not recursing, just backup dir and return */
 670       if (!recurse) {
 671          rtn_stat = handle_file(jcr, ff_pkt, top_level);
 672          if (ff_pkt->linked) {
 673             ff_pkt->linked->FileIndex = ff_pkt->FileIndex;
 674          }
 675          free(link);
 676          free_dir_ff_pkt(dir_ff_pkt);
 677          ff_pkt->link = ff_pkt->fname;     /* reset "link" */
 678          if (ff_pkt->flags & FO_KEEPATIME) {
 679             utime(fname, &restore_times);
 680          }
 681          return rtn_stat;
 682       }
 683
 684       ff_pkt->link = ff_pkt->fname;     /* reset "link" */
 685
 686       /*
 687        * Descend into or "recurse" into the directory to read
 688        *   all the files in it.
 689        */
 690       errno = 0;
 691       if ((directory = opendir(fname)) == NULL) {
 692          ff_pkt->type = FT_NOOPEN;
 693          ff_pkt->ff_errno = errno;
 694          rtn_stat = handle_file(jcr, ff_pkt, top_level);
 695          if (ff_pkt->linked) {
 696             ff_pkt->linked->FileIndex = ff_pkt->FileIndex;
 697          }
 698          free(link);
 699          free_dir_ff_pkt(dir_ff_pkt);
 700          return rtn_stat;
 701       }
 702
 703       /*
 704        * Process all files in this directory entry (recursing).
 705        *    This would possibly run faster if we chdir to the directory
 706        *    before traversing it.
 707        */
 708       rtn_stat = 1;
 709       entry = (struct dirent *)malloc(sizeof(struct dirent) + name_max + 100);
 710       for ( ; !job_canceled(jcr); ) {
 711          char *p, *q;
 712          int i;
 713
 714          status  = readdir_r(directory, entry, &result);
 715          if (status != 0 || result == NULL) {
 716 //          Dmsg2(99, "readdir returned stat=%d result=0x%x\n",
 717 //             status, (long)result);
 718             break;
 719          }
 720          ASSERT(name_max+1 > (int)sizeof(struct dirent) + (int)NAMELEN(entry));
 721          p = entry->d_name;
 722          /* Skip `.', `..', and excluded file names.  */
 723          if (p[0] == '\0' || (p[0] == '.' && (p[1] == '\0' ||
 724              (p[1] == '.' && p[2] == '\0')))) {
 725             continue;
 726          }
 727
 728          if ((int)NAMELEN(entry) + len >= link_len) {
 729              link_len = len + NAMELEN(entry) + 1;
 730              link = (char *)brealloc(link, link_len + 1);
 731          }
 732          q = link + len;
 733          for (i=0; i < (int)NAMELEN(entry); i++) {
 734             *q++ = *p++;
 735          }
 736          *q = 0;
 737          if (!file_is_excluded(ff_pkt, link)) {
 738             rtn_stat = find_one_file(jcr, ff_pkt, handle_file, link, our_device, false);
 739             if (ff_pkt->linked) {
 740                ff_pkt->linked->FileIndex = ff_pkt->FileIndex;
 741             }
 742          }
 743       }
 744       closedir(directory);
 745       free(link);
 746       free(entry);
 747
 748       /*
 749        * Now that we have recursed through all the files in the
 750        *  directory, we "save" the directory so that after all
 751        *  the files are restored, this entry will serve to reset
 752        *  the directory modes and dates.  Temp directory values
 753        *  were used without this record.
 754        */
 755       handle_file(jcr, dir_ff_pkt, top_level);       /* handle directory entry */
 756       if (ff_pkt->linked) {
 757          ff_pkt->linked->FileIndex = dir_ff_pkt->FileIndex;
 758       }
 759       free_dir_ff_pkt(dir_ff_pkt);
 760
 761       if (ff_pkt->flags & FO_KEEPATIME) {
 762          utime(fname, &restore_times);
 763       }
 764       ff_pkt->volhas_attrlist = volhas_attrlist;      /* Restore value in case it changed. */
 765       return rtn_stat;
 766    } /* end check for directory */
 767
 768    /*
 769     * If it is explicitly mentioned (i.e. top_level) and is
 770     *  a block device, we do a raw backup of it or if it is
 771     *  a fifo, we simply read it.
 772     */
 773 #ifdef HAVE_FREEBSD_OS
 774    /*
 775     * On FreeBSD, all block devices are character devices, so
 776     *   to be able to read a raw disk, we need the check for
 777     *   a character device.
 778     * crw-r----- 1 root  operator - 116, 0x00040002 Jun 9 19:32 /dev/ad0s3
 779     * crw-r----- 1 root  operator - 116, 0x00040002 Jun 9 19:32 /dev/rad0s3
 780     */
 781    if (top_level && (S_ISBLK(ff_pkt->statp.st_mode) || S_ISCHR(ff_pkt->statp.st_mode))) {
 782 #else
 783    if (top_level && S_ISBLK(ff_pkt->statp.st_mode)) {
 784 #endif
 785       ff_pkt->type = FT_RAW;          /* raw partition */
 786    } else if (top_level && S_ISFIFO(ff_pkt->statp.st_mode) &&
 787               ff_pkt->flags & FO_READFIFO) {
 788       ff_pkt->type = FT_FIFO;
 789    } else {
 790       /* The only remaining types are special (character, ...) files */
 791       ff_pkt->type = FT_SPEC;
 792    }
 793    rtn_stat = handle_file(jcr, ff_pkt, top_level);
 794    if (ff_pkt->linked) {
 795       ff_pkt->linked->FileIndex = ff_pkt->FileIndex;
 796    }
 797    return rtn_stat;
 798 }
 799
 800 int term_find_one(FF_PKT *ff)
 801 {
 802    struct f_link *lp, *lc;
 803    int count = 0;
 804    int i;
 805
 806
 807    if (ff->linkhash == NULL) return 0;
 808
 809    for (i =0 ; i < LINK_HASHTABLE_SIZE; i ++) {
 810    /* Free up list of hard linked files */
 811        lp = ff->linkhash[i];
 812        while (lp) {
 813       lc = lp;
 814       lp = lp->next;
 815       if (lc) {
 816          free(lc);
 817          count++;
 818       }
 819    }
 820        ff->linkhash[i] = NULL;
 821    }
 822    free(ff->linkhash);
 823    ff->linkhash = NULL;
 824    return count;
 825 }