]> arthur.barton.de Git - netatalk.git/commitdiff
Merge 2-1
authorFrank Lahm <franklahm@googlemail.com>
Wed, 20 Apr 2011 13:21:14 +0000 (15:21 +0200)
committerFrank Lahm <franklahm@googlemail.com>
Wed, 20 Apr 2011 13:21:14 +0000 (15:21 +0200)
1  2 
etc/cnid_dbd/cmd_dbd_scanvol.c

index b0af191c26d32345051ddc562a9a17201e1807df,1f6c853aaaca5d2634c6cbe0e2f7ff168af3db09..a91f43716dd196c8a11ba56c8678c501dd8f2c97
  #define ADDIR_OK (addir_ok == 0)
  #define ADFILE_OK (adfile_ok == 0)
  
 -/* These must be accessible for cmd_dbd_* funcs */
 -struct volinfo        *volinfo;
 -char                  cwdbuf[MAXPATHLEN+1];
  
 -/* Some static vars */
 +static struct volinfo *myvolinfo;
 +static char           cwdbuf[MAXPATHLEN+1];
  static DBD            *dbd;
  static DBD            *dbd_rebuild;
  static dbd_flags_t    dbd_flags;
@@@ -83,22 -85,22 +83,22 @@@ static char *utompath(char *upath
      u = upath;
      outlen = strlen(upath);
  
 -    if ((volinfo->v_casefold & AFPVOL_UTOMUPPER))
 +    if ((myvolinfo->v_casefold & AFPVOL_UTOMUPPER))
          flags |= CONV_TOUPPER;
 -    else if ((volinfo->v_casefold & AFPVOL_UTOMLOWER))
 +    else if ((myvolinfo->v_casefold & AFPVOL_UTOMLOWER))
          flags |= CONV_TOLOWER;
  
 -    if ((volinfo->v_flags & AFPVOL_EILSEQ)) {
 +    if ((myvolinfo->v_flags & AFPVOL_EILSEQ)) {
          flags |= CONV__EILSEQ;
      }
  
      /* convert charsets */
 -    if ((size_t)-1 == ( outlen = convert_charset(volinfo->v_volcharset,
 +    if ((size_t)-1 == ( outlen = convert_charset(myvolinfo->v_volcharset,
                                                   CH_UTF8_MAC,
 -                                                 volinfo->v_maccharset,
 +                                                 myvolinfo->v_maccharset,
                                                   u, outlen, mpath, MAXPATHLEN, &flags)) ) {
          dbd_log( LOGSTD, "Conversion from %s to %s for %s failed.",
 -                 volinfo->v_volcodepage, volinfo->v_maccodepage, u);
 +                 myvolinfo->v_volcodepage, myvolinfo->v_maccodepage, u);
          return NULL;
      }
  
@@@ -124,17 -126,17 +124,17 @@@ static char *mtoupath(char *mpath
      }
  
      /* set conversion flags */
 -    if (!(volinfo->v_flags & AFPVOL_NOHEX))
 +    if (!(myvolinfo->v_flags & AFPVOL_NOHEX))
          flags |= CONV_ESCAPEHEX;
 -    if (!(volinfo->v_flags & AFPVOL_USEDOTS))
 +    if (!(myvolinfo->v_flags & AFPVOL_USEDOTS))
          flags |= CONV_ESCAPEDOTS;
  
 -    if ((volinfo->v_casefold & AFPVOL_MTOUUPPER))
 +    if ((myvolinfo->v_casefold & AFPVOL_MTOUUPPER))
          flags |= CONV_TOUPPER;
 -    else if ((volinfo->v_casefold & AFPVOL_MTOULOWER))
 +    else if ((myvolinfo->v_casefold & AFPVOL_MTOULOWER))
          flags |= CONV_TOLOWER;
  
 -    if ((volinfo->v_flags & AFPVOL_EILSEQ)) {
 +    if ((myvolinfo->v_flags & AFPVOL_EILSEQ)) {
          flags |= CONV__EILSEQ;
      }
  
      outlen = MAXPATHLEN;
  
      if ((size_t)-1 == (outlen = convert_charset(CH_UTF8_MAC,
 -                                                volinfo->v_volcharset,
 -                                                volinfo->v_maccharset,
 +                                                myvolinfo->v_volcharset,
 +                                                myvolinfo->v_maccharset,
                                                  m, inplen, u, outlen, &flags)) ) {
          dbd_log( LOGSTD, "conversion from UTF8-MAC to %s for %s failed.",
 -                 volinfo->v_volcodepage, mpath);
 +                 myvolinfo->v_volcodepage, mpath);
          return NULL;
      }
  
@@@ -222,8 -224,8 +222,8 @@@ static int check_symlink(const char *na
        and can compare it with the currents volume path
      */
      int i = 0;
 -    while (volinfo->v_path[i]) {
 -        if ((pathbuf[i] == 0) || (volinfo->v_path[i] != pathbuf[i])) {
 +    while (myvolinfo->v_path[i]) {
 +        if ((pathbuf[i] == 0) || (myvolinfo->v_path[i] != pathbuf[i])) {
              dbd_log( LOGDEBUG, "extra-share symlink '%s/%s', following", cwdbuf, name);
              return 1;
          }
@@@ -304,7 -306,7 +304,7 @@@ static int check_adfile(const char *fna
      else
          adflags = ADFLAGS_DIR;
  
 -    adname = volinfo->ad_path(fname, adflags);
 +    adname = myvolinfo->ad_path(fname, adflags);
  
      if ((ret = access( adname, F_OK)) != 0) {
          if (errno != ENOENT) {
              return -1;
  
          /* Create ad file */
 -        ad_init(&ad, volinfo->v_adouble, volinfo->v_ad_options);
 +        ad_init(&ad, myvolinfo->v_adouble, myvolinfo->v_ad_options);
  
          if ((ret = ad_open_metadata( fname, adflags, O_CREAT, &ad)) != 0) {
              dbd_log( LOGSTD, "Error creating AppleDouble file '%s/%s': %s",
          chmod(adname, st->st_mode);
  #endif
      } else {
 -        ad_init(&ad, volinfo->v_adouble, volinfo->v_ad_options);
 +        ad_init(&ad, myvolinfo->v_adouble, myvolinfo->v_ad_options);
          if (ad_open_metadata( fname, adflags, O_RDONLY, &ad) != 0) {
              dbd_log( LOGSTD, "Error opening AppleDouble file for '%s/%s'", cwdbuf, fname);
              return -1;
@@@ -470,10 -472,10 +470,10 @@@ static int check_addir(int volroot
      }
  
      /* Check for ".Parent" */
 -    if ( (adpar_ok = access(volinfo->ad_path(".", ADFLAGS_DIR), F_OK)) != 0) {
 +    if ( (adpar_ok = access(myvolinfo->ad_path(".", ADFLAGS_DIR), F_OK)) != 0) {
          if (errno != ENOENT) {
              dbd_log(LOGSTD, "Access error on '%s/%s': %s",
 -                    cwdbuf, volinfo->ad_path(".", ADFLAGS_DIR), strerror(errno));
 +                    cwdbuf, myvolinfo->ad_path(".", ADFLAGS_DIR), strerror(errno));
              return -1;
          }
          dbd_log(LOGSTD, "Missing .AppleDouble/.Parent for '%s'", cwdbuf);
          }
  
          /* Create ad dir and set name */
 -        ad_init(&ad, volinfo->v_adouble, volinfo->v_ad_options);
 +        ad_init(&ad, myvolinfo->v_adouble, myvolinfo->v_ad_options);
  
          if (ad_open_metadata( ".", ADFLAGS_DIR, O_CREAT, &ad) != 0) {
              dbd_log( LOGSTD, "Error creating AppleDouble dir in %s: %s", cwdbuf, strerror(errno));
              return -1;
          }
          chown(ADv2_DIRNAME, st.st_uid, st.st_gid);
 -        chown(volinfo->ad_path(".", ADFLAGS_DIR), st.st_uid, st.st_gid);
 +        chown(myvolinfo->ad_path(".", ADFLAGS_DIR), st.st_uid, st.st_gid);
      }
  
      return 0;
@@@ -532,7 -534,7 +532,7 @@@ static int check_eafile_in_adouble(cons
      char *namep, *namedup = NULL;
  
      /* Check if this is an AFPVOL_EA_AD vol */
 -    if (volinfo->v_vfs_ea == AFPVOL_EA_AD) {
 +    if (myvolinfo->v_vfs_ea == AFPVOL_EA_AD) {
          /* Does the filename contain "::EA" ? */
          namedup = strdup(name);
          if ((namep = strstr(namedup, "::EA")) == NULL) {
@@@ -666,8 -668,6 +666,8 @@@ static int read_addir(void
  /*
    Check CNID for a file/dir, both from db and from ad-file.
    For detailed specs see intro.
 +
 +  @return Correct CNID of object or CNID_INVALID (ie 0) on error
  */
  static cnid_t check_cnid(const char *name, cnid_t did, struct stat *st, int adfile_ok, int adflags)
  {
          cnidcount = 0;
          if (dbif_txn_checkpoint(dbd, 0, 0, 0) < 0) {
              dbd_log(LOGSTD, "Error checkpointing!");
 -            return 0;
 +            return CNID_INVALID;
          }
      }
  
      /* Get CNID from ad-file if volume is using AFPVOL_CACHE */
      ad_cnid = 0;
 -    if ( (volinfo->v_flags & AFPVOL_CACHE) && ADFILE_OK) {
 -        ad_init(&ad, volinfo->v_adouble, volinfo->v_ad_options);
 +    if ( (myvolinfo->v_flags & AFPVOL_CACHE) && ADFILE_OK) {
 +        ad_init(&ad, myvolinfo->v_adouble, myvolinfo->v_ad_options);
          if (ad_open_metadata( name, adflags, O_RDWR, &ad) != 0) {
              
              if (dbd_flags & DBD_FLAGS_CLEANUP)
 -                return 0;
 +                return CNID_INVALID;
  
              dbd_log( LOGSTD, "Error opening AppleDouble file for '%s/%s': %s", cwdbuf, name, strerror(errno));
 -            return 0;
 +            return CNID_INVALID;
          }
  
          if (dbd_flags & DBD_FLAGS_FORCE) {
      memset(&rply, 0, sizeof(struct cnid_dbd_rply));
      rqst.did = did;
      rqst.cnid = ad_cnid;
 -    if ( ! (volinfo->v_flags & AFPVOL_NODEV))
 +    if ( ! (myvolinfo->v_flags & AFPVOL_NODEV))
          rqst.dev = st->st_dev;
      rqst.ino = st->st_ino;
      rqst.type = S_ISDIR(st->st_mode)?1:0;
  
      /* Query the database */
      ret = dbd_lookup(dbd, &rqst, &rply, (dbd_flags & DBD_FLAGS_SCAN) ? 1 : 0);
 -    dbif_txn_close(dbd, ret);
 +    if (dbif_txn_close(dbd, ret) != 0)
 +        return CNID_INVALID;
      if (rply.result == CNID_DBD_RES_OK) {
          db_cnid = rply.cnid;
      } else if (rply.result == CNID_DBD_RES_NOTFOUND) {
          if ( ! (dbd_flags & DBD_FLAGS_SCAN)) {
              rqst.cnid = db_cnid;
              ret = dbd_delete(dbd, &rqst, &rply, DBIF_CNID);
 -            dbif_txn_close(dbd, ret);
 +            if (dbif_txn_close(dbd, ret) != 0)
 +                return CNID_INVALID;
  
              rqst.cnid = ad_cnid;
              ret = dbd_delete(dbd, &rqst, &rply, DBIF_CNID);
 -            dbif_txn_close(dbd, ret);
 +            if (dbif_txn_close(dbd, ret) != 0)
 +                return CNID_INVALID;
  
              ret = dbd_rebuild_add(dbd, &rqst, &rply);
 -            dbif_txn_close(dbd, ret);
 +            if (dbif_txn_close(dbd, ret) != 0)
 +                return CNID_INVALID;
          }
          return ad_cnid;
      } else if (ad_cnid && (db_cnid == 0)) {
              if (ret == CNID_DBD_RES_OK) {
                  /* Occupied! Choose another, update ad-file */
                  ret = dbd_add(dbd, &rqst, &rply, 1);
 -                dbif_txn_close(dbd, ret);
 +                if (dbif_txn_close(dbd, ret) != 0)
 +                    return CNID_INVALID;
                  db_cnid = rply.cnid;
                  dbd_log(LOGSTD, "New CNID for '%s/%s': %u", cwdbuf, name, ntohl(db_cnid));
  
 -                if ((volinfo->v_flags & AFPVOL_CACHE)
 +                if ((myvolinfo->v_flags & AFPVOL_CACHE)
                      && ADFILE_OK
                      && ( ! (dbd_flags & DBD_FLAGS_SCAN))) {
                      dbd_log(LOGSTD, "Writing CNID data for '%s/%s' to AppleDouble file",
                              cwdbuf, name, ntohl(db_cnid));
 -                    ad_init(&ad, volinfo->v_adouble, volinfo->v_ad_options);
 +                    ad_init(&ad, myvolinfo->v_adouble, myvolinfo->v_ad_options);
                      if (ad_open_metadata( name, adflags, O_RDWR, &ad) != 0) {
                          dbd_log(LOGSTD, "Error opening AppleDouble file for '%s/%s': %s",
                                  cwdbuf, name, strerror(errno));
 -                        return 0;
 +                        return CNID_INVALID;
                      }
                      ad_setid( &ad, st->st_dev, st->st_ino, db_cnid, did, stamp);
                      ad_flush(&ad);
                      cwdbuf, name, ntohl(ad_cnid));
              rqst.cnid = ad_cnid;
              ret = dbd_rebuild_add(dbd, &rqst, &rply);
 -            dbif_txn_close(dbd, ret);
 +            if (dbif_txn_close(dbd, ret) != 0)
 +                return CNID_INVALID;
          }
          return ad_cnid;
      } else if ((db_cnid == 0) && (ad_cnid == 0)) {
          if ( ! (dbd_flags & DBD_FLAGS_SCAN)) {
              /* add to db */
              ret = dbd_add(dbd, &rqst, &rply, 1);
 -            dbif_txn_close(dbd, ret);
 +            if (dbif_txn_close(dbd, ret) != 0)
 +                return CNID_INVALID;
              db_cnid = rply.cnid;
              dbd_log(LOGSTD, "New CNID for '%s/%s': %u", cwdbuf, name, ntohl(db_cnid));
          }
  
      if ((ad_cnid == 0) && db_cnid) {
          /* in db but zeroID in ad-file, write it to ad-file if AFPVOL_CACHE */
 -        if ((volinfo->v_flags & AFPVOL_CACHE) && ADFILE_OK) {
 +        if ((myvolinfo->v_flags & AFPVOL_CACHE) && ADFILE_OK) {
              if ( ! (dbd_flags & DBD_FLAGS_SCAN)) {
                  dbd_log(LOGSTD, "Writing CNID data for '%s/%s' to AppleDouble file",
                          cwdbuf, name, ntohl(db_cnid));
 -                ad_init(&ad, volinfo->v_adouble, volinfo->v_ad_options);
 +                ad_init(&ad, myvolinfo->v_adouble, myvolinfo->v_ad_options);
                  if (ad_open_metadata( name, adflags, O_RDWR, &ad) != 0) {
                      dbd_log(LOGSTD, "Error opening AppleDouble file for '%s/%s': %s",
                              cwdbuf, name, strerror(errno));
 -                    return 0;
 +                    return CNID_INVALID;
                  }
                  ad_setid( &ad, st->st_dev, st->st_ino, db_cnid, did, stamp);
                  ad_flush(&ad);
          return db_cnid;
      }
  
 -    return 0;
 +    return CNID_INVALID;
  }
  
  /*
@@@ -987,12 -980,11 +987,12 @@@ static int dbd_readdir(int volroot, cni
                  static uint count = 0;
                  rqst.cnid = rply.cnid;
                  ret = dbd_rebuild_add(dbd_rebuild, &rqst, &rply);
 -                dbif_txn_close(dbd_rebuild, ret);
 +                if (dbif_txn_close(dbd_rebuild, ret) != 0)
 +                    return -1;
                  if (rply.result != CNID_DBD_RES_OK) {
 -                    dbd_log( LOGDEBUG, "Fatal error adding CNID: %u for '%s/%s' to in-memory rebuild-db",
 +                    dbd_log( LOGSTD, "Fatal error adding CNID: %u for '%s/%s' to in-memory rebuild-db",
                               cnid, cwdbuf, ep->d_name);
 -                    longjmp(jmp, 1); /* this jumps back to cmd_dbd_scanvol() */
 +                    return -1;
                  }
                  count++;
                  if (count == 10000) {
          }
  
          /* Check EA files */
 -        if (volinfo->v_vfs_ea == AFPVOL_EA_AD)
 +        if (myvolinfo->v_vfs_ea == AFPVOL_EA_AD)
              check_eafiles(ep->d_name);
  
          /**************************************************************************
@@@ -1053,22 -1045,22 +1053,22 @@@ static int scanvol(struct volinfo *vi, 
      }
  
      /* Make this stuff accessible from all funcs easily */
 -    volinfo = vi;
 +    myvolinfo = vi;
      dbd_flags = flags;
  
      /* Init a fake struct vol with just enough so we can call ea_open and friends */
      volume.v_adouble = AD_VERSION2;
 -    volume.v_vfs_ea = volinfo->v_vfs_ea;
 +    volume.v_vfs_ea = myvolinfo->v_vfs_ea;
      initvol_vfs(&volume);
  
      /* Run with umask 0 */
      umask(0);
  
      /* Remove trailing slash from volume, chdir to vol */
 -    if (volinfo->v_path[strlen(volinfo->v_path) - 1] == '/')
 -        volinfo->v_path[strlen(volinfo->v_path) - 1] = 0;
 -    strcpy(cwdbuf, volinfo->v_path);
 -    chdir(volinfo->v_path);
 +    if (myvolinfo->v_path[strlen(myvolinfo->v_path) - 1] == '/')
 +        myvolinfo->v_path[strlen(myvolinfo->v_path) - 1] = 0;
 +    strcpy(cwdbuf, myvolinfo->v_path);
 +    chdir(myvolinfo->v_path);
  
      /* Start recursion */
      if (dbd_readdir(1, htonl(2)) < 0)  /* 2 = volumeroot CNID */
@@@ -1123,14 -1115,8 +1123,14 @@@ static void delete_orphaned_cnids(DBD *
                      dbd_log(LOGSTD, "Orphaned CNID in database: %u", dbd_cnid);
                      if ( ! (dbd_flags & DBD_FLAGS_SCAN)) {
                          rqst.cnid = htonl(dbd_cnid);
 -                        ret = dbd_delete(dbd, &rqst, &rply, DBIF_CNID);
 -                        dbif_txn_close(dbd, ret);
 +                        if ((ret = dbd_delete(dbd, &rqst, &rply, DBIF_CNID)) == -1) {
 +                            dbd_log(LOGSTD, "Error deleting CNID %u", dbd_cnid);
 +                            (void)dbif_txn_abort(dbd);
 +                            goto cleanup;
 +                        }
 +                        
 +                        if (dbif_txn_close(dbd, ret) != 0)
 +                            return;
                          deleted++;
                      }
                      /* Check if we got a termination signal */
  
          if (dbd_cnid < rebuild_cnid) {
              /* CNID is orphaned -> delete */
 -            dbd_log(LOGSTD, "Orphaned CNID in database: %u.", dbd_cnid);
 +            dbd_log(LOGSTD, "One orphaned CNID in database: %u.", dbd_cnid);
              if ( ! (dbd_flags & DBD_FLAGS_SCAN)) {
                  rqst.cnid = htonl(dbd_cnid);
 -                ret = dbd_delete(dbd, &rqst, &rply, DBIF_CNID);
 -                dbif_txn_close(dbd, ret);
 +                if ((ret = dbd_delete(dbd, &rqst, &rply, DBIF_CNID)) == -1) {
 +                    dbd_log(LOGSTD, "Error deleting CNID %u", dbd_cnid);
 +                    (void)dbif_txn_abort(dbd);
 +                    goto cleanup;
 +                }
 +                if (dbif_txn_close(dbd, ret) != 0)
 +                    return;
                  deleted++;
              }
              continue;
          if (dbd_cnid > rebuild_cnid) {
              dbif_idwalk(dbd, NULL, 1); /* Close cursor */
              dbif_idwalk(dbd_rebuild, NULL, 1); /* Close cursor */
 -            dbif_txn_close(dbd, 2);
 -            dbif_txn_close(dbd_rebuild, 2);
 +            (void)dbif_txn_close(dbd, 2);
 +            (void)dbif_txn_close(dbd_rebuild, 2);                
              dbd_log(LOGSTD, "Ghost CNID: %u. This is fatal! Dumping rebuild db:\n", rebuild_cnid);
              dbif_dump(dbd_rebuild, 0);
              dbd_log(LOGSTD, "Send this dump and a `dbd -d ...` dump to the Netatalk Dev team!");
              goto cleanup;
          }
 -    }
 +    } /* while ((dbif_idwalk(dbd, &dbd_cnid, 0)) == 1) */
  
  cleanup:
      dbif_idwalk(dbd, NULL, 1); /* Close cursor */
@@@ -1191,7 -1172,7 +1191,7 @@@ static const char *get_tmpdb_path(void
  /*
    Main func called from cmd_dbd.c
  */
 -int cmd_dbd_scanvol(DBD *dbd_ref, struct volinfo *volinfo, dbd_flags_t flags)
 +int cmd_dbd_scanvol(DBD *dbd_ref, struct volinfo *vi, dbd_flags_t flags)
  {
      int ret = 0;
      struct db_param db_param = { 0 };
  
      /* Set cachesize for in-memory rebuild db */
      db_param.cachesize = 64 * 1024;         /* 64 MB */
 +    db_param.maxlocks = DEFAULT_MAXLOCKS;
 +    db_param.maxlockobjs = DEFAULT_MAXLOCKOBJS;
      db_param.logfile_autoremove = 1;
  
      /* Make it accessible for all funcs */
      dbd = dbd_ref;
  
      /* We only support unicode volumes ! */
 -    if ( volinfo->v_volcharset != CH_UTF8) {
 -        dbd_log( LOGSTD, "Not a Unicode volume: %s, %u != %u", volinfo->v_volcodepage, volinfo->v_volcharset, CH_UTF8);
 +    if ( vi->v_volcharset != CH_UTF8) {
 +        dbd_log( LOGSTD, "Not a Unicode volume: %s, %u != %u", vi->v_volcodepage, vi->v_volcharset, CH_UTF8);
          return -1;
      }
  
+     /* Get volume stamp */
+     dbd_getstamp(dbd, &rqst, &rply);
+     if (rply.result != CNID_DBD_RES_OK) {
+         ret = -1;
+         goto exit;
+     }
+     memcpy(stamp, rply.name, CNID_DEV_LEN);
      /* temporary rebuild db, used with -re rebuild to delete unused CNIDs, not used with -f */
      if (! nocniddb && (flags & DBD_FLAGS_EXCL) && !(flags & DBD_FLAGS_FORCE)) {
-         /* Get volume stamp */
-         dbd_getstamp(dbd, &rqst, &rply);
-         if (rply.result != CNID_DBD_RES_OK)
-             goto exit;
-         memcpy(stamp, rply.name, CNID_DEV_LEN);
-         /* open/create rebuild dbd, copy rootinfo key */
          tmpdb_path = get_tmpdb_path();
          if (NULL == (dbd_rebuild = dbif_init(tmpdb_path, "cnid2.db"))) {
              ret = -1;
      }
  
      /* scanvol */
 -    if ( (scanvol(volinfo, flags)) != 0) {
 +    if ( (scanvol(vi, flags)) != 0) {
          ret = -1;
          goto exit;
      }
  
  exit:
      if (! nocniddb) {
 -        dbif_txn_close(dbd, 1);
 +        if (dbif_txn_close(dbd, ret == 0 ? 1 : 0) != 0)
 +            ret = -1;
          if (dbd_rebuild)
 -            dbif_txn_close(dbd_rebuild, 1);
 -        if ((flags & DBD_FLAGS_EXCL) && !(flags & DBD_FLAGS_FORCE))
 +            if (dbif_txn_close(dbd_rebuild, ret == 0 ? 1 : 0) != 0)
 +                ret = -1;
 +        if ((ret == 0) && dbd_rebuild && (flags & DBD_FLAGS_EXCL) && !(flags & DBD_FLAGS_FORCE))
              /* We can only do this in exclusive mode, otherwise we might delete CNIDs added from
                 other clients in between our pass 1 and 2 */
              delete_orphaned_cnids(dbd, dbd_rebuild, flags);