sys/vfs/ufs/ufs_vnops.c

   1 /*
   2  * Copyright (c) 1982, 1986, 1989, 1993, 1995
   3  *      The Regents of the University of California.  All rights reserved.
   4  * (c) UNIX System Laboratories, Inc.
   5  * All or some portions of this file are derived from material licensed
   6  * to the University of California by American Telephone and Telegraph
   7  * Co. or Unix System Laboratories, Inc. and are reproduced herein with
   8  * the permission of UNIX System Laboratories, Inc.
   9  *
  10  * Redistribution and use in source and binary forms, with or without
  11  * modification, are permitted provided that the following conditions
  12  * are met:
  13  * 1. Redistributions of source code must retain the above copyright
  14  *    notice, this list of conditions and the following disclaimer.
  15  * 2. Redistributions in binary form must reproduce the above copyright
  16  *    notice, this list of conditions and the following disclaimer in the
  17  *    documentation and/or other materials provided with the distribution.
  18  * 3. All advertising materials mentioning features or use of this software
  19  *    must display the following acknowledgement:
  20  *      This product includes software developed by the University of
  21  *      California, Berkeley and its contributors.
  22  * 4. Neither the name of the University nor the names of its contributors
  23  *    may be used to endorse or promote products derived from this software
  24  *    without specific prior written permission.
  25  *
  26  * THIS SOFTWARE IS PROVIDED BY THE REGENTS AND CONTRIBUTORS ``AS IS'' AND
  27  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  28  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  29  * ARE DISCLAIMED.  IN NO EVENT SHALL THE REGENTS OR CONTRIBUTORS BE LIABLE
  30  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  31  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  32  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  33  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  34  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  35  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  36  * SUCH DAMAGE.
  37  *
  38  *      @(#)ufs_vnops.c 8.27 (Berkeley) 5/27/95
  39  * $FreeBSD: src/sys/ufs/ufs/ufs_vnops.c,v 1.131.2.8 2003/01/02 17:26:19 bde Exp $
  40  * $DragonFly: src/sys/vfs/ufs/ufs_vnops.c,v 1.56 2006/09/05 00:55:51 dillon Exp $
  41  */
  42
  43 #include "opt_quota.h"
  44 #include "opt_suiddir.h"
  45 #include "opt_ufs.h"
  46
  47 #include <sys/param.h>
  48 #include <sys/systm.h>
  49 #include <sys/kernel.h>
  50 #include <sys/fcntl.h>
  51 #include <sys/stat.h>
  52 #include <sys/buf.h>
  53 #include <sys/proc.h>
  54 #include <sys/namei.h>
  55 #include <sys/mount.h>
  56 #include <sys/unistd.h>
  57 #include <sys/vnode.h>
  58 #include <sys/malloc.h>
  59 #include <sys/dirent.h>
  60 #include <sys/lockf.h>
  61 #include <sys/event.h>
  62 #include <sys/conf.h>
  63
  64 #include <sys/file.h>           /* XXX */
  65 #include <sys/jail.h>
  66
  67 #include <vm/vm.h>
  68 #include <vm/vm_extern.h>
  69
  70 #include <vfs/fifofs/fifo.h>
  71
  72 #include "quota.h"
  73 #include "inode.h"
  74 #include "dir.h"
  75 #include "ufsmount.h"
  76 #include "ufs_extern.h"
  77 #include "ffs_extern.h"
  78 #ifdef UFS_DIRHASH
  79 #include "dirhash.h"
  80 #endif
  81
  82 static int ufs_access (struct vop_access_args *);
  83 static int ufs_advlock (struct vop_advlock_args *);
  84 static int ufs_chmod (struct vnode *, int, struct ucred *);
  85 static int ufs_chown (struct vnode *, uid_t, gid_t, struct ucred *);
  86 static int ufs_close (struct vop_close_args *);
  87 static int ufs_create (struct vop_old_create_args *);
  88 static int ufs_getattr (struct vop_getattr_args *);
  89 static int ufs_link (struct vop_old_link_args *);
  90 static int ufs_makeinode (int mode, struct vnode *, struct vnode **, struct componentname *);
  91 static int ufs_missingop (struct vop_generic_args *ap);
  92 static int ufs_mkdir (struct vop_old_mkdir_args *);
  93 static int ufs_mknod (struct vop_old_mknod_args *);
  94 static int ufs_mmap (struct vop_mmap_args *);
  95 static int ufs_open (struct vop_open_args *);
  96 static int ufs_pathconf (struct vop_pathconf_args *);
  97 static int ufs_print (struct vop_print_args *);
  98 static int ufs_readdir (struct vop_readdir_args *);
  99 static int ufs_readlink (struct vop_readlink_args *);
 100 static int ufs_remove (struct vop_old_remove_args *);
 101 static int ufs_rename (struct vop_old_rename_args *);
 102 static int ufs_rmdir (struct vop_old_rmdir_args *);
 103 static int ufs_setattr (struct vop_setattr_args *);
 104 static int ufs_strategy (struct vop_strategy_args *);
 105 static int ufs_symlink (struct vop_old_symlink_args *);
 106 static int ufs_whiteout (struct vop_old_whiteout_args *);
 107 static int ufsfifo_close (struct vop_close_args *);
 108 static int ufsfifo_kqfilter (struct vop_kqfilter_args *);
 109 static int ufsfifo_read (struct vop_read_args *);
 110 static int ufsfifo_write (struct vop_write_args *);
 111 static int ufsspec_close (struct vop_close_args *);
 112 static int ufsspec_read (struct vop_read_args *);
 113 static int ufsspec_write (struct vop_write_args *);
 114 static int filt_ufsread (struct knote *kn, long hint);
 115 static int filt_ufswrite (struct knote *kn, long hint);
 116 static int filt_ufsvnode (struct knote *kn, long hint);
 117 static void filt_ufsdetach (struct knote *kn);
 118 static int ufs_kqfilter (struct vop_kqfilter_args *ap);
 119
 120 union _qcvt {
 121         int64_t qcvt;
 122         int32_t val[2];
 123 };
 124 #define SETHIGH(q, h) { \
 125         union _qcvt tmp; \
 126         tmp.qcvt = (q); \
 127         tmp.val[_QUAD_HIGHWORD] = (h); \
 128         (q) = tmp.qcvt; \
 129 }
 130 #define SETLOW(q, l) { \
 131         union _qcvt tmp; \
 132         tmp.qcvt = (q); \
 133         tmp.val[_QUAD_LOWWORD] = (l); \
 134         (q) = tmp.qcvt; \
 135 }
 136 #define VN_KNOTE(vp, b) \
 137         KNOTE(&vp->v_pollinfo.vpi_selinfo.si_note, (b))
 138
 139 #define OFSFMT(vp)              ((vp)->v_mount->mnt_maxsymlinklen <= 0)
 140
 141 /*
 142  * A virgin directory (no blushing please).
 143  */
 144 static struct dirtemplate mastertemplate = {
 145         0, 12, DT_DIR, 1, ".",
 146         0, DIRBLKSIZ - 12, DT_DIR, 2, ".."
 147 };
 148 static struct odirtemplate omastertemplate = {
 149         0, 12, 1, ".",
 150         0, DIRBLKSIZ - 12, 2, ".."
 151 };
 152
 153 void
 154 ufs_itimes(struct vnode *vp)
 155 {
 156         struct inode *ip;
 157         struct timespec ts;
 158
 159         ip = VTOI(vp);
 160         if ((ip->i_flag & (IN_ACCESS | IN_CHANGE | IN_UPDATE)) == 0)
 161                 return;
 162         if ((vp->v_type == VBLK || vp->v_type == VCHR) && !DOINGSOFTDEP(vp))
 163                 ip->i_flag |= IN_LAZYMOD;
 164         else
 165                 ip->i_flag |= IN_MODIFIED;
 166         if ((vp->v_mount->mnt_flag & MNT_RDONLY) == 0) {
 167                 vfs_timestamp(&ts);
 168                 if (ip->i_flag & IN_ACCESS) {
 169                         ip->i_atime = ts.tv_sec;
 170                         ip->i_atimensec = ts.tv_nsec;
 171                 }
 172                 if (ip->i_flag & IN_UPDATE) {
 173                         ip->i_mtime = ts.tv_sec;
 174                         ip->i_mtimensec = ts.tv_nsec;
 175                         ip->i_modrev++;
 176                 }
 177                 if (ip->i_flag & IN_CHANGE) {
 178                         ip->i_ctime = ts.tv_sec;
 179                         ip->i_ctimensec = ts.tv_nsec;
 180                 }
 181         }
 182         ip->i_flag &= ~(IN_ACCESS | IN_CHANGE | IN_UPDATE);
 183 }
 184
 185 /*
 186  * Create a regular file
 187  *
 188  * ufs_create(struct vnode *a_dvp, struct vnode **a_vpp,
 189  *            struct componentname *a_cnp, struct vattr *a_vap)
 190  */
 191 static
 192 int
 193 ufs_create(struct vop_old_create_args *ap)
 194 {
 195         int error;
 196
 197         error =
 198             ufs_makeinode(MAKEIMODE(ap->a_vap->va_type, ap->a_vap->va_mode),
 199             ap->a_dvp, ap->a_vpp, ap->a_cnp);
 200         if (error)
 201                 return (error);
 202         VN_KNOTE(ap->a_dvp, NOTE_WRITE);
 203         return (0);
 204 }
 205
 206 /*
 207  * Mknod vnode call
 208  *
 209  * ufs_mknod(struct vnode *a_dvp, struct vnode **a_vpp,
 210  *           struct componentname *a_cnp, struct vattr *a_vap)
 211  */
 212 /* ARGSUSED */
 213 static
 214 int
 215 ufs_mknod(struct vop_old_mknod_args *ap)
 216 {
 217         struct vattr *vap = ap->a_vap;
 218         struct vnode **vpp = ap->a_vpp;
 219         struct inode *ip;
 220         ino_t ino;
 221         int error;
 222
 223         error = ufs_makeinode(MAKEIMODE(vap->va_type, vap->va_mode),
 224             ap->a_dvp, vpp, ap->a_cnp);
 225         if (error)
 226                 return (error);
 227         VN_KNOTE(ap->a_dvp, NOTE_WRITE);
 228         ip = VTOI(*vpp);
 229         ip->i_flag |= IN_ACCESS | IN_CHANGE | IN_UPDATE;
 230         if (vap->va_rdev != VNOVAL) {
 231                 /*
 232                  * Want to be able to use this to make badblock
 233                  * inodes, so don't truncate the dev number.
 234                  */
 235                 ip->i_rdev = vap->va_rdev;
 236         }
 237         /*
 238          * Remove inode, then reload it through VFS_VGET so it is
 239          * checked to see if it is an alias of an existing entry in
 240          * the inode cache.
 241          */
 242         (*vpp)->v_type = VNON;
 243         ino = ip->i_number;     /* Save this before vgone() invalidates ip. */
 244         vgone(*vpp);
 245         vput(*vpp);
 246         error = VFS_VGET(ap->a_dvp->v_mount, ino, vpp);
 247         if (error) {
 248                 *vpp = NULL;
 249                 return (error);
 250         }
 251         return (0);
 252 }
 253
 254 /*
 255  * Open called.
 256  *
 257  * Nothing to do.
 258  *
 259  * ufs_open(struct vnode *a_vp, int a_mode, struct ucred *a_cred,
 260  *          struct thread *a_td)
 261  */
 262 /* ARGSUSED */
 263 static
 264 int
 265 ufs_open(struct vop_open_args *ap)
 266 {
 267         struct vnode *vp = ap->a_vp;
 268
 269         /*
 270          * Files marked append-only must be opened for appending.
 271          */
 272         if ((VTOI(vp)->i_flags & APPEND) &&
 273             (ap->a_mode & (FWRITE | O_APPEND)) == FWRITE) {
 274                 return (EPERM);
 275         }
 276
 277         return (vop_stdopen(ap));
 278 }
 279
 280 /*
 281  * Close called.
 282  *
 283  * Update the times on the inode.
 284  *
 285  * ufs_close(struct vnode *a_vp, int a_fflag, struct ucred *a_cred,
 286  *           struct thread *a_td)
 287  */
 288 /* ARGSUSED */
 289 static
 290 int
 291 ufs_close(struct vop_close_args *ap)
 292 {
 293         struct vnode *vp = ap->a_vp;
 294
 295         if (vp->v_usecount > 1)
 296                 ufs_itimes(vp);
 297         return (vop_stdclose(ap));
 298 }
 299
 300 /*
 301  * ufs_access(struct vnode *a_vp, int a_mode, struct ucred *a_cred,
 302  *            struct thread *a_td)
 303  */
 304 static
 305 int
 306 ufs_access(struct vop_access_args *ap)
 307 {
 308         struct vnode *vp = ap->a_vp;
 309         struct inode *ip = VTOI(vp);
 310         struct ucred *cred = ap->a_cred;
 311         mode_t mask, mode = ap->a_mode;
 312         gid_t *gp;
 313         int i;
 314 #ifdef QUOTA
 315         int error;
 316 #endif
 317
 318         /*
 319          * Disallow write attempts on read-only filesystems;
 320          * unless the file is a socket, fifo, or a block or
 321          * character device resident on the filesystem.
 322          */
 323         if (mode & VWRITE) {
 324                 switch (vp->v_type) {
 325                 case VDIR:
 326                 case VLNK:
 327                 case VREG:
 328                         if (vp->v_mount->mnt_flag & MNT_RDONLY)
 329                                 return (EROFS);
 330 #ifdef QUOTA
 331                         if ((error = ufs_getinoquota(ip)) != 0)
 332                                 return (error);
 333 #endif
 334                         break;
 335                 default:
 336                         break;
 337                 }
 338         }
 339
 340         /* If immutable bit set, nobody gets to write it. */
 341         if ((mode & VWRITE) && (ip->i_flags & IMMUTABLE))
 342                 return (EPERM);
 343
 344         /* Otherwise, user id 0 always gets access. */
 345         if (cred->cr_uid == 0)
 346                 return (0);
 347
 348         mask = 0;
 349
 350         /* Otherwise, check the owner. */
 351         if (cred->cr_uid == ip->i_uid) {
 352                 if (mode & VEXEC)
 353                         mask |= S_IXUSR;
 354                 if (mode & VREAD)
 355                         mask |= S_IRUSR;
 356                 if (mode & VWRITE)
 357                         mask |= S_IWUSR;
 358                 return ((ip->i_mode & mask) == mask ? 0 : EACCES);
 359         }
 360
 361         /* Otherwise, check the groups. */
 362         for (i = 0, gp = cred->cr_groups; i < cred->cr_ngroups; i++, gp++)
 363                 if (ip->i_gid == *gp) {
 364                         if (mode & VEXEC)
 365                                 mask |= S_IXGRP;
 366                         if (mode & VREAD)
 367                                 mask |= S_IRGRP;
 368                         if (mode & VWRITE)
 369                                 mask |= S_IWGRP;
 370                         return ((ip->i_mode & mask) == mask ? 0 : EACCES);
 371                 }
 372
 373         /* Otherwise, check everyone else. */
 374         if (mode & VEXEC)
 375                 mask |= S_IXOTH;
 376         if (mode & VREAD)
 377                 mask |= S_IROTH;
 378         if (mode & VWRITE)
 379                 mask |= S_IWOTH;
 380         return ((ip->i_mode & mask) == mask ? 0 : EACCES);
 381 }
 382
 383 /*
 384  * ufs_getattr(struct vnode *a_vp, struct vattr *a_vap,
 385  *              struct thread *a_td)
 386  */
 387 /* ARGSUSED */
 388 static
 389 int
 390 ufs_getattr(struct vop_getattr_args *ap)
 391 {
 392         struct vnode *vp = ap->a_vp;
 393         struct inode *ip = VTOI(vp);
 394         struct vattr *vap = ap->a_vap;
 395
 396         /*
 397          * This may cause i_fsmid to be updated even if no change (0)
 398          * is returned, but we should only write out the inode if non-zero
 399          * is returned and if the mount is read-write.
 400          */
 401         if (cache_check_fsmid_vp(vp, &ip->i_fsmid) &&
 402             (vp->v_mount->mnt_flag & MNT_RDONLY) == 0
 403         ) {
 404                 ip->i_flag |= IN_LAZYMOD;
 405         }
 406
 407         ufs_itimes(vp);
 408         /*
 409          * Copy from inode table
 410          */
 411         vap->va_fsid = dev2udev(ip->i_dev);
 412         vap->va_fileid = ip->i_number;
 413         vap->va_mode = ip->i_mode & ~IFMT;
 414         vap->va_nlink = VFSTOUFS(vp->v_mount)->um_i_effnlink_valid ?
 415             ip->i_effnlink : ip->i_nlink;
 416         vap->va_uid = ip->i_uid;
 417         vap->va_gid = ip->i_gid;
 418         vap->va_rdev = ip->i_rdev;
 419         vap->va_size = ip->i_din.di_size;
 420         vap->va_atime.tv_sec = ip->i_atime;
 421         vap->va_atime.tv_nsec = ip->i_atimensec;
 422         vap->va_mtime.tv_sec = ip->i_mtime;
 423         vap->va_mtime.tv_nsec = ip->i_mtimensec;
 424         vap->va_ctime.tv_sec = ip->i_ctime;
 425         vap->va_ctime.tv_nsec = ip->i_ctimensec;
 426         vap->va_flags = ip->i_flags;
 427         vap->va_gen = ip->i_gen;
 428         vap->va_blocksize = vp->v_mount->mnt_stat.f_iosize;
 429         vap->va_bytes = dbtob((u_quad_t)ip->i_blocks);
 430         vap->va_type = IFTOVT(ip->i_mode);
 431         vap->va_filerev = ip->i_modrev;
 432         vap->va_fsmid = ip->i_fsmid;
 433         return (0);
 434 }
 435
 436 /*
 437  * Set attribute vnode op. called from several syscalls
 438  *
 439  * ufs_setattr(struct vnode *a_vp, struct vattr *a_vap,
 440  *              struct ucred *a_cred, struct thread *a_td)
 441  */
 442 static
 443 int
 444 ufs_setattr(struct vop_setattr_args *ap)
 445 {
 446         struct vattr *vap = ap->a_vap;
 447         struct vnode *vp = ap->a_vp;
 448         struct inode *ip = VTOI(vp);
 449         struct ucred *cred = ap->a_cred;
 450         int error;
 451
 452         /*
 453          * Check for unsettable attributes.
 454          */
 455         if ((vap->va_type != VNON) || (vap->va_nlink != VNOVAL) ||
 456             (vap->va_fsid != VNOVAL) || (vap->va_fileid != VNOVAL) ||
 457             (vap->va_blocksize != VNOVAL) || (vap->va_rdev != VNOVAL) ||
 458             ((int)vap->va_bytes != VNOVAL) || (vap->va_gen != VNOVAL)) {
 459                 return (EINVAL);
 460         }
 461         if (vap->va_flags != VNOVAL) {
 462                 if (vp->v_mount->mnt_flag & MNT_RDONLY)
 463                         return (EROFS);
 464                 if (cred->cr_uid != ip->i_uid &&
 465                     (error = suser_cred(cred, PRISON_ROOT)))
 466                         return (error);
 467                 /*
 468                  * Note that a root chflags becomes a user chflags when
 469                  * we are jailed, unless the jail.chflags_allowed sysctl
 470                  * is set.
 471                  */
 472                 if (cred->cr_uid == 0 &&
 473                     (!jailed(cred) || jail_chflags_allowed)) {
 474                         if ((ip->i_flags
 475                             & (SF_NOUNLINK | SF_IMMUTABLE | SF_APPEND)) &&
 476                             securelevel > 0)
 477                                 return (EPERM);
 478                         ip->i_flags = vap->va_flags;
 479                 } else {
 480                         if (ip->i_flags
 481                             & (SF_NOUNLINK | SF_IMMUTABLE | SF_APPEND) ||
 482                             (vap->va_flags & UF_SETTABLE) != vap->va_flags)
 483                                 return (EPERM);
 484                         ip->i_flags &= SF_SETTABLE;
 485                         ip->i_flags |= (vap->va_flags & UF_SETTABLE);
 486                 }
 487                 ip->i_flag |= IN_CHANGE;
 488                 if (vap->va_flags & (IMMUTABLE | APPEND))
 489                         return (0);
 490         }
 491         if (ip->i_flags & (IMMUTABLE | APPEND))
 492                 return (EPERM);
 493         /*
 494          * Go through the fields and update iff not VNOVAL.
 495          */
 496         if (vap->va_uid != (uid_t)VNOVAL || vap->va_gid != (gid_t)VNOVAL) {
 497                 if (vp->v_mount->mnt_flag & MNT_RDONLY)
 498                         return (EROFS);
 499                 if ((error = ufs_chown(vp, vap->va_uid, vap->va_gid, cred)) != 0)
 500                         return (error);
 501         }
 502         if (vap->va_size != VNOVAL) {
 503                 /*
 504                  * Disallow write attempts on read-only filesystems;
 505                  * unless the file is a socket, fifo, or a block or
 506                  * character device resident on the filesystem.
 507                  */
 508                 switch (vp->v_type) {
 509                 case VDIR:
 510                         return (EISDIR);
 511                 case VLNK:
 512                 case VREG:
 513                         if (vp->v_mount->mnt_flag & MNT_RDONLY)
 514                                 return (EROFS);
 515                         break;
 516                 default:
 517                         break;
 518                 }
 519                 if ((error = ffs_truncate(vp, vap->va_size, 0, cred)) != 0)
 520                         return (error);
 521         }
 522         ip = VTOI(vp);
 523         if (vap->va_atime.tv_sec != VNOVAL || vap->va_mtime.tv_sec != VNOVAL) {
 524                 if (vp->v_mount->mnt_flag & MNT_RDONLY)
 525                         return (EROFS);
 526                 if (cred->cr_uid != ip->i_uid &&
 527                     (error = suser_cred(cred, PRISON_ROOT)) &&
 528                     ((vap->va_vaflags & VA_UTIMES_NULL) == 0 ||
 529                     (error = VOP_ACCESS(vp, VWRITE, cred))))
 530                         return (error);
 531                 if (vap->va_atime.tv_sec != VNOVAL)
 532                         ip->i_flag |= IN_ACCESS;
 533                 if (vap->va_mtime.tv_sec != VNOVAL)
 534                         ip->i_flag |= IN_CHANGE | IN_UPDATE;
 535                 ufs_itimes(vp);
 536                 if (vap->va_atime.tv_sec != VNOVAL) {
 537                         ip->i_atime = vap->va_atime.tv_sec;
 538                         ip->i_atimensec = vap->va_atime.tv_nsec;
 539                 }
 540                 if (vap->va_mtime.tv_sec != VNOVAL) {
 541                         ip->i_mtime = vap->va_mtime.tv_sec;
 542                         ip->i_mtimensec = vap->va_mtime.tv_nsec;
 543                 }
 544                 error = ffs_update(vp, 0);
 545                 if (error)
 546                         return (error);
 547         }
 548         error = 0;
 549         if (vap->va_mode != (mode_t)VNOVAL) {
 550                 if (vp->v_mount->mnt_flag & MNT_RDONLY)
 551                         return (EROFS);
 552                 error = ufs_chmod(vp, (int)vap->va_mode, cred);
 553         }
 554         VN_KNOTE(vp, NOTE_ATTRIB);
 555         return (error);
 556 }
 557
 558 /*
 559  * Change the mode on a file.
 560  * Inode must be locked before calling.
 561  */
 562 static int
 563 ufs_chmod(struct vnode *vp, int mode, struct ucred *cred)
 564 {
 565         struct inode *ip = VTOI(vp);
 566         int error;
 567
 568         if (cred->cr_uid != ip->i_uid) {
 569             error = suser_cred(cred, PRISON_ROOT);
 570             if (error)
 571                 return (error);
 572         }
 573         if (cred->cr_uid) {
 574                 if (vp->v_type != VDIR && (mode & S_ISTXT))
 575                         return (EFTYPE);
 576                 if (!groupmember(ip->i_gid, cred) && (mode & ISGID))
 577                         return (EPERM);
 578         }
 579         ip->i_mode &= ~ALLPERMS;
 580         ip->i_mode |= (mode & ALLPERMS);
 581         ip->i_flag |= IN_CHANGE;
 582         return (0);
 583 }
 584
 585 /*
 586  * Perform chown operation on inode ip;
 587  * inode must be locked prior to call.
 588  */
 589 static int
 590 ufs_chown(struct vnode *vp, uid_t uid, gid_t gid, struct ucred *cred)
 591 {
 592         struct inode *ip = VTOI(vp);
 593         uid_t ouid;
 594         gid_t ogid;
 595         int error = 0;
 596 #ifdef QUOTA
 597         int i;
 598         long change;
 599 #endif
 600
 601         if (uid == (uid_t)VNOVAL)
 602                 uid = ip->i_uid;
 603         if (gid == (gid_t)VNOVAL)
 604                 gid = ip->i_gid;
 605         /*
 606          * If we don't own the file, are trying to change the owner
 607          * of the file, or are not a member of the target group,
 608          * the caller must be superuser or the call fails.
 609          */
 610         if ((cred->cr_uid != ip->i_uid || uid != ip->i_uid ||
 611             (gid != ip->i_gid && !(cred->cr_gid == gid ||
 612             groupmember((gid_t)gid, cred)))) &&
 613             (error = suser_cred(cred, PRISON_ROOT)))
 614                 return (error);
 615         ogid = ip->i_gid;
 616         ouid = ip->i_uid;
 617 #ifdef QUOTA
 618         if ((error = ufs_getinoquota(ip)) != 0)
 619                 return (error);
 620         if (ouid == uid) {
 621                 ufs_dqrele(vp, ip->i_dquot[USRQUOTA]);
 622                 ip->i_dquot[USRQUOTA] = NODQUOT;
 623         }
 624         if (ogid == gid) {
 625                 ufs_dqrele(vp, ip->i_dquot[GRPQUOTA]);
 626                 ip->i_dquot[GRPQUOTA] = NODQUOT;
 627         }
 628         change = ip->i_blocks;
 629         (void) ufs_chkdq(ip, -change, cred, CHOWN);
 630         (void) ufs_chkiq(ip, -1, cred, CHOWN);
 631         for (i = 0; i < MAXQUOTAS; i++) {
 632                 ufs_dqrele(vp, ip->i_dquot[i]);
 633                 ip->i_dquot[i] = NODQUOT;
 634         }
 635 #endif
 636         ip->i_gid = gid;
 637         ip->i_uid = uid;
 638 #ifdef QUOTA
 639         if ((error = ufs_getinoquota(ip)) == 0) {
 640                 if (ouid == uid) {
 641                         ufs_dqrele(vp, ip->i_dquot[USRQUOTA]);
 642                         ip->i_dquot[USRQUOTA] = NODQUOT;
 643                 }
 644                 if (ogid == gid) {
 645                         ufs_dqrele(vp, ip->i_dquot[GRPQUOTA]);
 646                         ip->i_dquot[GRPQUOTA] = NODQUOT;
 647                 }
 648                 if ((error = ufs_chkdq(ip, change, cred, CHOWN)) == 0) {
 649                         if ((error = ufs_chkiq(ip, 1, cred, CHOWN)) == 0)
 650                                 goto good;
 651                         else
 652                                 (void)ufs_chkdq(ip, -change, cred, CHOWN|FORCE);
 653                 }
 654                 for (i = 0; i < MAXQUOTAS; i++) {
 655                         ufs_dqrele(vp, ip->i_dquot[i]);
 656                         ip->i_dquot[i] = NODQUOT;
 657                 }
 658         }
 659         ip->i_gid = ogid;
 660         ip->i_uid = ouid;
 661         if (ufs_getinoquota(ip) == 0) {
 662                 if (ouid == uid) {
 663                         ufs_dqrele(vp, ip->i_dquot[USRQUOTA]);
 664                         ip->i_dquot[USRQUOTA] = NODQUOT;
 665                 }
 666                 if (ogid == gid) {
 667                         ufs_dqrele(vp, ip->i_dquot[GRPQUOTA]);
 668                         ip->i_dquot[GRPQUOTA] = NODQUOT;
 669                 }
 670                 (void) ufs_chkdq(ip, change, cred, FORCE|CHOWN);
 671                 (void) ufs_chkiq(ip, 1, cred, FORCE|CHOWN);
 672                 (void) ufs_getinoquota(ip);
 673         }
 674         return (error);
 675 good:
 676         if (ufs_getinoquota(ip))
 677                 panic("ufs_chown: lost quota");
 678 #endif /* QUOTA */
 679         ip->i_flag |= IN_CHANGE;
 680         if (cred->cr_uid != 0 && (ouid != uid || ogid != gid))
 681                 ip->i_mode &= ~(ISUID | ISGID);
 682         return (0);
 683 }
 684
 685 /*
 686  * Mmap a file
 687  *
 688  * NB Currently unsupported.
 689  *
 690  * ufs_mmap(struct vnode *a_vp, int a_fflags, struct ucred *a_cred,
 691  *          struct thread *a_td)
 692  */
 693 /* ARGSUSED */
 694 static
 695 int
 696 ufs_mmap(struct vop_mmap_args *ap)
 697 {
 698         return (EINVAL);
 699 }
 700
 701 /*
 702  * ufs_remove(struct vnode *a_dvp, struct vnode *a_vp,
 703  *            struct componentname *a_cnp)
 704  */
 705 static
 706 int
 707 ufs_remove(struct vop_old_remove_args *ap)
 708 {
 709         struct inode *ip;
 710         struct vnode *vp = ap->a_vp;
 711         struct vnode *dvp = ap->a_dvp;
 712         int error;
 713
 714         ip = VTOI(vp);
 715         if ((ip->i_flags & (NOUNLINK | IMMUTABLE | APPEND)) ||
 716             (VTOI(dvp)->i_flags & APPEND)) {
 717                 error = EPERM;
 718                 goto out;
 719         }
 720         error = ufs_dirremove(dvp, ip, ap->a_cnp->cn_flags, 0);
 721         VN_KNOTE(vp, NOTE_DELETE);
 722         VN_KNOTE(dvp, NOTE_WRITE);
 723 out:
 724         return (error);
 725 }
 726
 727 /*
 728  * link vnode call
 729  *
 730  * ufs_link(struct vnode *a_tdvp, struct vnode *a_vp,
 731  *          struct componentname *a_cnp)
 732  */
 733 static
 734 int
 735 ufs_link(struct vop_old_link_args *ap)
 736 {
 737         struct vnode *vp = ap->a_vp;
 738         struct vnode *tdvp = ap->a_tdvp;
 739         struct componentname *cnp = ap->a_cnp;
 740         struct inode *ip;
 741         struct direct newdir;
 742         int error;
 743
 744         if (tdvp->v_mount != vp->v_mount) {
 745                 error = EXDEV;
 746                 goto out2;
 747         }
 748         if (tdvp != vp && (error = vn_lock(vp, LK_EXCLUSIVE))) {
 749                 goto out2;
 750         }
 751         ip = VTOI(vp);
 752         if ((nlink_t)ip->i_nlink >= LINK_MAX) {
 753                 error = EMLINK;
 754                 goto out1;
 755         }
 756         if (ip->i_flags & (IMMUTABLE | APPEND)) {
 757                 error = EPERM;
 758                 goto out1;
 759         }
 760         ip->i_effnlink++;
 761         ip->i_nlink++;
 762         ip->i_flag |= IN_CHANGE;
 763         if (DOINGSOFTDEP(vp))
 764                 softdep_change_linkcnt(ip);
 765         error = ffs_update(vp, !(DOINGSOFTDEP(vp) | DOINGASYNC(vp)));
 766         if (!error) {
 767                 ufs_makedirentry(ip, cnp, &newdir);
 768                 error = ufs_direnter(tdvp, vp, &newdir, cnp, NULL);
 769         }
 770
 771         if (error) {
 772                 ip->i_effnlink--;
 773                 ip->i_nlink--;
 774                 ip->i_flag |= IN_CHANGE;
 775                 if (DOINGSOFTDEP(vp))
 776                         softdep_change_linkcnt(ip);
 777         }
 778 out1:
 779         if (tdvp != vp)
 780                 vn_unlock(vp);
 781 out2:
 782         VN_KNOTE(vp, NOTE_LINK);
 783         VN_KNOTE(tdvp, NOTE_WRITE);
 784         return (error);
 785 }
 786
 787 /*
 788  * whiteout vnode call
 789  *
 790  * ufs_whiteout(struct vnode *a_dvp, struct componentname *a_cnp, int a_flags)
 791  */
 792 static
 793 int
 794 ufs_whiteout(struct vop_old_whiteout_args *ap)
 795 {
 796         struct vnode *dvp = ap->a_dvp;
 797         struct componentname *cnp = ap->a_cnp;
 798         struct direct newdir;
 799         int error = 0;
 800
 801         switch (ap->a_flags) {
 802         case NAMEI_LOOKUP:
 803                 /* 4.4 format directories support whiteout operations */
 804                 if (dvp->v_mount->mnt_maxsymlinklen > 0)
 805                         return (0);
 806                 return (EOPNOTSUPP);
 807
 808         case NAMEI_CREATE:
 809                 /* create a new directory whiteout */
 810 #ifdef DIAGNOSTIC
 811                 if (dvp->v_mount->mnt_maxsymlinklen <= 0)
 812                         panic("ufs_whiteout: old format filesystem");
 813 #endif
 814
 815                 newdir.d_ino = WINO;
 816                 newdir.d_namlen = cnp->cn_namelen;
 817                 bcopy(cnp->cn_nameptr, newdir.d_name, (unsigned)cnp->cn_namelen + 1);
 818                 newdir.d_type = DT_WHT;
 819                 error = ufs_direnter(dvp, NULL, &newdir, cnp, NULL);
 820                 break;
 821
 822         case NAMEI_DELETE:
 823                 /* remove an existing directory whiteout */
 824 #ifdef DIAGNOSTIC
 825                 if (dvp->v_mount->mnt_maxsymlinklen <= 0)
 826                         panic("ufs_whiteout: old format filesystem");
 827 #endif
 828
 829                 cnp->cn_flags &= ~CNP_DOWHITEOUT;
 830                 error = ufs_dirremove(dvp, NULL, cnp->cn_flags, 0);
 831                 break;
 832         default:
 833                 panic("ufs_whiteout: unknown op");
 834         }
 835         return (error);
 836 }
 837
 838 /*
 839  * Rename system call.
 840  *      rename("foo", "bar");
 841  * is essentially
 842  *      unlink("bar");
 843  *      link("foo", "bar");
 844  *      unlink("foo");
 845  * but ``atomically''.  Can't do full commit without saving state in the
 846  * inode on disk which isn't feasible at this time.  Best we can do is
 847  * always guarantee the target exists.
 848  *
 849  * Basic algorithm is:
 850  *
 851  * 1) Bump link count on source while we're linking it to the
 852  *    target.  This also ensure the inode won't be deleted out
 853  *    from underneath us while we work (it may be truncated by
 854  *    a concurrent `trunc' or `open' for creation).
 855  * 2) Link source to destination.  If destination already exists,
 856  *    delete it first.
 857  * 3) Unlink source reference to inode if still around. If a
 858  *    directory was moved and the parent of the destination
 859  *    is different from the source, patch the ".." entry in the
 860  *    directory.
 861  *
 862  * ufs_rename(struct vnode *a_fdvp, struct vnode *a_fvp,
 863  *            struct componentname *a_fcnp, struct vnode *a_tdvp,
 864  *            struct vnode *a_tvp, struct componentname *a_tcnp)
 865  */
 866 static
 867 int
 868 ufs_rename(struct vop_old_rename_args *ap)
 869 {
 870         struct vnode *tvp = ap->a_tvp;
 871         struct vnode *tdvp = ap->a_tdvp;
 872         struct vnode *fvp = ap->a_fvp;
 873         struct vnode *fdvp = ap->a_fdvp;
 874         struct componentname *tcnp = ap->a_tcnp;
 875         struct componentname *fcnp = ap->a_fcnp;
 876         struct inode *ip, *xp, *dp;
 877         struct direct newdir;
 878         ino_t oldparent = 0, newparent = 0;
 879         int doingdirectory = 0;
 880         int error = 0, ioflag;
 881
 882         /*
 883          * Check for cross-device rename.
 884          */
 885         if ((fvp->v_mount != tdvp->v_mount) ||
 886             (tvp && (fvp->v_mount != tvp->v_mount))) {
 887                 error = EXDEV;
 888 abortit:
 889                 if (tdvp == tvp)
 890                         vrele(tdvp);
 891                 else
 892                         vput(tdvp);
 893                 if (tvp)
 894                         vput(tvp);
 895                 vrele(fdvp);
 896                 vrele(fvp);
 897                 return (error);
 898         }
 899
 900         if (tvp && ((VTOI(tvp)->i_flags & (NOUNLINK | IMMUTABLE | APPEND)) ||
 901             (VTOI(tdvp)->i_flags & APPEND))) {
 902                 error = EPERM;
 903                 goto abortit;
 904         }
 905
 906         /*
 907          * Renaming a file to itself has no effect.  The upper layers should
 908          * not call us in that case.  Temporarily just warn if they do.
 909          */
 910         if (fvp == tvp) {
 911                 printf("ufs_rename: fvp == tvp (can't happen)\n");
 912                 error = 0;
 913                 goto abortit;
 914         }
 915
 916         if ((error = vn_lock(fvp, LK_EXCLUSIVE)) != 0)
 917                 goto abortit;
 918
 919         /*
 920          * Note: now that fvp is locked we have to be sure to unlock it before
 921          * using the 'abortit' target.
 922          */
 923         dp = VTOI(fdvp);
 924         ip = VTOI(fvp);
 925         if (ip->i_nlink >= LINK_MAX) {
 926                 vn_unlock(fvp);
 927                 error = EMLINK;
 928                 goto abortit;
 929         }
 930         if ((ip->i_flags & (NOUNLINK | IMMUTABLE | APPEND))
 931             || (dp->i_flags & APPEND)) {
 932                 vn_unlock(fvp);
 933                 error = EPERM;
 934                 goto abortit;
 935         }
 936         if ((ip->i_mode & IFMT) == IFDIR) {
 937                 /*
 938                  * Avoid ".", "..", and aliases of "." for obvious reasons.
 939                  */
 940                 if ((fcnp->cn_namelen == 1 && fcnp->cn_nameptr[0] == '.') ||
 941                     dp == ip || (fcnp->cn_flags | tcnp->cn_flags) & CNP_ISDOTDOT ||
 942                     (ip->i_flag & IN_RENAME)) {
 943                         vn_unlock(fvp);
 944                         error = EINVAL;
 945                         goto abortit;
 946                 }
 947                 ip->i_flag |= IN_RENAME;
 948                 oldparent = dp->i_number;
 949                 doingdirectory = 1;
 950         }
 951         VN_KNOTE(fdvp, NOTE_WRITE);             /* XXX right place? */
 952
 953         /*
 954          * fvp still locked.  ip->i_flag has IN_RENAME set if doingdirectory.
 955          * Cleanup fvp requirements so we can unlock it.
 956          *
 957          * tvp and tdvp are locked.  tvp may be NULL.  Now that dp and xp
 958          * is setup we can use the 'bad' target if we unlock fvp.  We cannot
 959          * use the abortit target anymore because of IN_RENAME.
 960          */
 961         dp = VTOI(tdvp);
 962         if (tvp)
 963                 xp = VTOI(tvp);
 964         else
 965                 xp = NULL;
 966
 967         /*
 968          * 1) Bump link count while we're moving stuff
 969          *    around.  If we crash somewhere before
 970          *    completing our work, the link count
 971          *    may be wrong, but correctable.
 972          */
 973         ip->i_effnlink++;
 974         ip->i_nlink++;
 975         ip->i_flag |= IN_CHANGE;
 976         if (DOINGSOFTDEP(fvp))
 977                 softdep_change_linkcnt(ip);
 978         if ((error = ffs_update(fvp, !(DOINGSOFTDEP(fvp) |
 979                                        DOINGASYNC(fvp)))) != 0) {
 980                 vn_unlock(fvp);
 981                 goto bad;
 982         }
 983
 984         /*
 985          * If ".." must be changed (ie the directory gets a new
 986          * parent) then the source directory must not be in the
 987          * directory heirarchy above the target, as this would
 988          * orphan everything below the source directory. Also
 989          * the user must have write permission in the source so
 990          * as to be able to change "..". We must repeat the call
 991          * to namei, as the parent directory is unlocked by the
 992          * call to checkpath().
 993          */
 994         error = VOP_ACCESS(fvp, VWRITE, tcnp->cn_cred);
 995         vn_unlock(fvp);
 996
 997         /*
 998          * We are now back to where we were in that fvp, fdvp are unlocked
 999          * and tvp, tdvp are locked.  tvp may be NULL.  IN_RENAME may be
1000          * set.  Only the bad target or, if we clean up tvp and tdvp, the
1001          * out target, may be used.
1002          */
1003         if (oldparent != dp->i_number)
1004                 newparent = dp->i_number;
1005         if (doingdirectory && newparent) {
1006                 if (error)      /* write access check above */
1007                         goto bad;
1008
1009                 /*
1010                  * Once we start messing with tvp and tdvp we cannot use the
1011                  * 'bad' target, only finish cleaning tdvp and tvp up and
1012                  * use the 'out' target.
1013                  *
1014                  * This cleans up tvp.
1015                  */
1016                 if (xp != NULL) {
1017                         vput(tvp);
1018                         xp = NULL;
1019                 }
1020
1021                 /*
1022                  * This is a real mess. ufs_checkpath vput's the target
1023                  * directory so retain an extra ref and note that tdvp will
1024                  * lose its lock on return.  This leaves us with one good
1025                  * ref after ufs_checkpath returns.
1026                  */
1027                 vref(tdvp);
1028                 error = ufs_checkpath(ip, dp, tcnp->cn_cred);
1029                 tcnp->cn_flags |= CNP_PDIRUNLOCK;
1030                 if (error) {
1031                         vrele(tdvp);
1032                         goto out;
1033                 }
1034
1035                 /*
1036                  * relookup no longer messes with tdvp's refs. tdvp must be
1037                  * unlocked on entry and will be locked on a successful
1038                  * return.
1039                  */
1040                 error = relookup(tdvp, &tvp, tcnp);
1041                 if (error) {
1042                         if (tcnp->cn_flags & CNP_PDIRUNLOCK)
1043                                 vrele(tdvp);
1044                         else
1045                                 vput(tdvp);
1046                         goto out;
1047                 }
1048                 KKASSERT((tcnp->cn_flags & CNP_PDIRUNLOCK) == 0);
1049                 dp = VTOI(tdvp);
1050                 if (tvp)
1051                         xp = VTOI(tvp);
1052         }
1053
1054         /*
1055          * We are back to fvp, fdvp unlocked, tvp, tdvp locked.  tvp may
1056          * be NULL (xp will also be NULL in that case), and IN_RENAME will
1057          * be set if doingdirectory.  This means we can use the 'bad' target
1058          * again.
1059          */
1060
1061         /*
1062          * 2) If target doesn't exist, link the target
1063          *    to the source and unlink the source.
1064          *    Otherwise, rewrite the target directory
1065          *    entry to reference the source inode and
1066          *    expunge the original entry's existence.
1067          */
1068         if (xp == NULL) {
1069                 if (dp->i_dev != ip->i_dev)
1070                         panic("ufs_rename: EXDEV");
1071                 /*
1072                  * Account for ".." in new directory.
1073                  * When source and destination have the same
1074                  * parent we don't fool with the link count.
1075                  */
1076                 if (doingdirectory && newparent) {
1077                         if ((nlink_t)dp->i_nlink >= LINK_MAX) {
1078                                 error = EMLINK;
1079                                 goto bad;
1080                         }
1081                         dp->i_effnlink++;
1082                         dp->i_nlink++;
1083                         dp->i_flag |= IN_CHANGE;
1084                         if (DOINGSOFTDEP(tdvp))
1085                                 softdep_change_linkcnt(dp);
1086                         error = ffs_update(tdvp, !(DOINGSOFTDEP(tdvp) |
1087                                                    DOINGASYNC(tdvp)));
1088                         if (error)
1089                                 goto bad;
1090                 }
1091                 ufs_makedirentry(ip, tcnp, &newdir);
1092                 error = ufs_direnter(tdvp, NULL, &newdir, tcnp, NULL);
1093                 if (error) {
1094                         if (doingdirectory && newparent) {
1095                                 dp->i_effnlink--;
1096                                 dp->i_nlink--;
1097                                 dp->i_flag |= IN_CHANGE;
1098                                 if (DOINGSOFTDEP(tdvp))
1099                                         softdep_change_linkcnt(dp);
1100                                 (void)ffs_update(tdvp, 1);
1101                         }
1102                         goto bad;
1103                 }
1104                 VN_KNOTE(tdvp, NOTE_WRITE);
1105                 vput(tdvp);
1106         } else {
1107                 if (xp->i_dev != dp->i_dev || xp->i_dev != ip->i_dev)
1108                         panic("ufs_rename: EXDEV");
1109                 /*
1110                  * Short circuit rename(foo, foo).
1111                  */
1112                 if (xp->i_number == ip->i_number)
1113                         panic("ufs_rename: same file");
1114                 /*
1115                  * If the parent directory is "sticky", then the user must
1116                  * own the parent directory, or the destination of the rename,
1117                  * otherwise the destination may not be changed (except by
1118                  * root). This implements append-only directories.
1119                  */
1120                 if ((dp->i_mode & S_ISTXT) && tcnp->cn_cred->cr_uid != 0 &&
1121                     tcnp->cn_cred->cr_uid != dp->i_uid &&
1122                     xp->i_uid != tcnp->cn_cred->cr_uid) {
1123                         error = EPERM;
1124                         goto bad;
1125                 }
1126                 /*
1127                  * Target must be empty if a directory and have no links
1128                  * to it. Also, ensure source and target are compatible
1129                  * (both directories, or both not directories).
1130                  *
1131                  * Purge the file or directory being replaced from the
1132                  * nameccache.
1133                  */
1134                 if ((xp->i_mode&IFMT) == IFDIR) {
1135                         if ((xp->i_effnlink > 2) ||
1136                             !ufs_dirempty(xp, dp->i_number, tcnp->cn_cred)) {
1137                                 error = ENOTEMPTY;
1138                                 goto bad;
1139                         }
1140                         if (!doingdirectory) {
1141                                 error = ENOTDIR;
1142                                 goto bad;
1143                         }
1144                         /* cache_purge removed - handled by VFS compat layer */
1145                 } else if (doingdirectory == 0) {
1146                         /* cache_purge removed - handled by VFS compat layer */
1147                 } else {
1148                         error = EISDIR;
1149                         goto bad;
1150                 }
1151                 /*
1152                  * note: inode passed to ufs_dirrewrite() is 0 for a
1153                  * non-directory file rename, 1 for a directory rename
1154                  * in the same directory, and > 1 for an inode representing
1155                  * the new directory.
1156                  */
1157                 error = ufs_dirrewrite(dp, xp, ip->i_number,
1158                     IFTODT(ip->i_mode),
1159                     (doingdirectory && newparent) ?
1160                         newparent : (ino_t)doingdirectory);
1161                 if (error)
1162                         goto bad;
1163                 if (doingdirectory) {
1164                         if (!newparent) {
1165                                 dp->i_effnlink--;
1166                                 if (DOINGSOFTDEP(tdvp))
1167                                         softdep_change_linkcnt(dp);
1168                         }
1169                         xp->i_effnlink--;
1170                         if (DOINGSOFTDEP(tvp))
1171                                 softdep_change_linkcnt(xp);
1172                 }
1173                 if (doingdirectory && !DOINGSOFTDEP(tvp)) {
1174                         /*
1175                          * Truncate inode. The only stuff left in the directory
1176                          * is "." and "..". The "." reference is inconsequential
1177                          * since we are quashing it. We have removed the "."
1178                          * reference and the reference in the parent directory,
1179                          * but there may be other hard links. The soft
1180                          * dependency code will arrange to do these operations
1181                          * after the parent directory entry has been deleted on
1182                          * disk, so when running with that code we avoid doing
1183                          * them now.
1184                          */
1185                         if (!newparent) {
1186                                 dp->i_nlink--;
1187                                 dp->i_flag |= IN_CHANGE;
1188                         }
1189                         xp->i_nlink--;
1190                         xp->i_flag |= IN_CHANGE;
1191                         ioflag = DOINGASYNC(tvp) ? 0 : IO_SYNC;
1192                         error = ffs_truncate(tvp, (off_t)0, ioflag,
1193                                              tcnp->cn_cred);
1194                         if (error)
1195                                 goto bad;
1196                 }
1197                 VN_KNOTE(tdvp, NOTE_WRITE);
1198                 vput(tdvp);
1199                 VN_KNOTE(tvp, NOTE_DELETE);
1200                 vput(tvp);
1201                 xp = NULL;
1202         }
1203
1204         /*
1205          * tvp and tdvp have been cleaned up.  only fvp and fdvp (both
1206          * unlocked) remain.  We are about to overwrite fvp but we have to
1207          * keep 'ip' intact so we cannot release the old fvp, which is still
1208          * refd and accessible via ap->a_fvp.
1209          *
1210          * This means we cannot use either 'bad' or 'out' to cleanup any
1211          * more.
1212          */
1213
1214         /*
1215          * 3) Unlink the source.
1216          */
1217         fcnp->cn_flags &= ~CNP_MODMASK;
1218         fcnp->cn_flags |= CNP_LOCKPARENT;
1219         error = relookup(fdvp, &fvp, fcnp);
1220         if (error || fvp == NULL) {
1221                 /*
1222                  * From name has disappeared.  IN_RENAME will not be set if
1223                  * we get past the panic so we don't have to clean it up.
1224                  */
1225                 if (doingdirectory)
1226                         panic("ufs_rename: lost dir entry");
1227                 vrele(ap->a_fvp);
1228                 if (fcnp->cn_flags & CNP_PDIRUNLOCK)
1229                         vrele(fdvp);
1230                 else
1231                         vput(fdvp);
1232                 return(0);
1233         }
1234         KKASSERT((fcnp->cn_flags & CNP_PDIRUNLOCK) == 0);
1235
1236         /*
1237          * fdvp and fvp are locked.
1238          */
1239         xp = VTOI(fvp);
1240         dp = VTOI(fdvp);
1241
1242         /*
1243          * Ensure that the directory entry still exists and has not
1244          * changed while the new name has been entered. If the source is
1245          * a file then the entry may have been unlinked or renamed. In
1246          * either case there is no further work to be done. If the source
1247          * is a directory then it cannot have been rmdir'ed; the IN_RENAME
1248          * flag ensures that it cannot be moved by another rename or removed
1249          * by a rmdir.  Cleanup IN_RENAME.
1250          */
1251         if (xp != ip) {
1252                 if (doingdirectory)
1253                         panic("ufs_rename: lost dir entry");
1254         } else {
1255                 /*
1256                  * If the source is a directory with a
1257                  * new parent, the link count of the old
1258                  * parent directory must be decremented
1259                  * and ".." set to point to the new parent.
1260                  */
1261                 if (doingdirectory && newparent) {
1262                         xp->i_offset = mastertemplate.dot_reclen;
1263                         ufs_dirrewrite(xp, dp, newparent, DT_DIR, 0);
1264                         /* cache_purge removed - handled by VFS compat layer */
1265                 }
1266                 error = ufs_dirremove(fdvp, xp, fcnp->cn_flags, 0);
1267                 xp->i_flag &= ~IN_RENAME;
1268         }
1269
1270         VN_KNOTE(fvp, NOTE_RENAME);
1271         vput(fdvp);
1272         vput(fvp);
1273         vrele(ap->a_fvp);
1274         return (error);
1275
1276 bad:
1277         if (xp)
1278                 vput(ITOV(xp));
1279         vput(ITOV(dp));
1280 out:
1281         if (doingdirectory)
1282                 ip->i_flag &= ~IN_RENAME;
1283         if (vn_lock(fvp, LK_EXCLUSIVE) == 0) {
1284                 ip->i_effnlink--;
1285                 ip->i_nlink--;
1286                 ip->i_flag |= IN_CHANGE;
1287                 ip->i_flag &= ~IN_RENAME;
1288                 if (DOINGSOFTDEP(fvp))
1289                         softdep_change_linkcnt(ip);
1290                 vput(fvp);
1291         } else {
1292                 vrele(fvp);
1293         }
1294         return (error);
1295 }
1296
1297 /*
1298  * Mkdir system call
1299  *
1300  * ufs_mkdir(struct vnode *a_dvp, struct vnode **a_vpp,
1301  *           struct componentname *a_cnp, struct vattr *a_vap)
1302  */
1303 static
1304 int
1305 ufs_mkdir(struct vop_old_mkdir_args *ap)
1306 {
1307         struct vnode *dvp = ap->a_dvp;
1308         struct vattr *vap = ap->a_vap;
1309         struct componentname *cnp = ap->a_cnp;
1310         struct inode *ip, *dp;
1311         struct vnode *tvp;
1312         struct buf *bp;
1313         struct dirtemplate dirtemplate, *dtp;
1314         struct direct newdir;
1315         int error, dmode;
1316         long blkoff;
1317
1318         dp = VTOI(dvp);
1319         if ((nlink_t)dp->i_nlink >= LINK_MAX) {
1320                 error = EMLINK;
1321                 goto out;
1322         }
1323         dmode = vap->va_mode & 0777;
1324         dmode |= IFDIR;
1325         /*
1326          * Must simulate part of ufs_makeinode here to acquire the inode,
1327          * but not have it entered in the parent directory. The entry is
1328          * made later after writing "." and ".." entries.
1329          */
1330         error = ffs_valloc(dvp, dmode, cnp->cn_cred, &tvp);
1331         if (error)
1332                 goto out;
1333         ip = VTOI(tvp);
1334         ip->i_gid = dp->i_gid;
1335 #ifdef SUIDDIR
1336         {
1337 #ifdef QUOTA
1338                 struct ucred ucred, *ucp;
1339                 ucp = cnp->cn_cred;
1340 #endif
1341                 /*
1342                  * If we are hacking owners here, (only do this where told to)
1343                  * and we are not giving it TO root, (would subvert quotas)
1344                  * then go ahead and give it to the other user.
1345                  * The new directory also inherits the SUID bit.
1346                  * If user's UID and dir UID are the same,
1347                  * 'give it away' so that the SUID is still forced on.
1348                  */
1349                 if ((dvp->v_mount->mnt_flag & MNT_SUIDDIR) &&
1350                     (dp->i_mode & ISUID) && dp->i_uid) {
1351                         dmode |= ISUID;
1352                         ip->i_uid = dp->i_uid;
1353 #ifdef QUOTA
1354                         if (dp->i_uid != cnp->cn_cred->cr_uid) {
1355                                 /*
1356                                  * Make sure the correct user gets charged
1357                                  * for the space.
1358                                  * Make a dummy credential for the victim.
1359                                  * XXX This seems to never be accessed out of
1360                                  * our context so a stack variable is ok.
1361                                  */
1362                                 ucred.cr_ref = 1;
1363                                 ucred.cr_uid = ip->i_uid;
1364                                 ucred.cr_ngroups = 1;
1365                                 ucred.cr_groups[0] = dp->i_gid;
1366                                 ucp = &ucred;
1367                         }
1368 #endif
1369                 } else
1370                         ip->i_uid = cnp->cn_cred->cr_uid;
1371 #ifdef QUOTA
1372                 if ((error = ufs_getinoquota(ip)) ||
1373                     (error = ufs_chkiq(ip, 1, ucp, 0))) {
1374                         ffs_vfree(tvp, ip->i_number, dmode);
1375                         vput(tvp);
1376                         return (error);
1377                 }
1378 #endif
1379         }
1380 #else   /* !SUIDDIR */
1381         ip->i_uid = cnp->cn_cred->cr_uid;
1382 #ifdef QUOTA
1383         if ((error = ufs_getinoquota(ip)) ||
1384             (error = ufs_chkiq(ip, 1, cnp->cn_cred, 0))) {
1385                 ffs_vfree(tvp, ip->i_number, dmode);
1386                 vput(tvp);
1387                 return (error);
1388         }
1389 #endif
1390 #endif  /* !SUIDDIR */
1391         ip->i_flag |= IN_ACCESS | IN_CHANGE | IN_UPDATE;
1392         ip->i_mode = dmode;
1393         tvp->v_type = VDIR;     /* Rest init'd in getnewvnode(). */
1394         ip->i_effnlink = 2;
1395         ip->i_nlink = 2;
1396         if (DOINGSOFTDEP(tvp))
1397                 softdep_change_linkcnt(ip);
1398         if (cnp->cn_flags & CNP_ISWHITEOUT)
1399                 ip->i_flags |= UF_OPAQUE;
1400
1401         /*
1402          * Bump link count in parent directory to reflect work done below.
1403          * Should be done before reference is created so cleanup is
1404          * possible if we crash.
1405          */
1406         dp->i_effnlink++;
1407         dp->i_nlink++;
1408         dp->i_flag |= IN_CHANGE;
1409         if (DOINGSOFTDEP(dvp))
1410                 softdep_change_linkcnt(dp);
1411         error = ffs_update(tvp, !(DOINGSOFTDEP(dvp) | DOINGASYNC(dvp)));
1412         if (error)
1413                 goto bad;
1414
1415         /*
1416          * The vnode must have a VM object in order to issue buffer cache
1417          * ops on it.
1418          */
1419         vinitvmio(tvp, DIRBLKSIZ);
1420
1421         /*
1422          * Initialize directory with "." and ".." from static template.
1423          */
1424         if (dvp->v_mount->mnt_maxsymlinklen > 0)
1425                 dtp = &mastertemplate;
1426         else
1427                 dtp = (struct dirtemplate *)&omastertemplate;
1428         dirtemplate = *dtp;
1429         dirtemplate.dot_ino = ip->i_number;
1430         dirtemplate.dotdot_ino = dp->i_number;
1431         vnode_pager_setsize(tvp, DIRBLKSIZ);
1432         error = VOP_BALLOC(tvp, 0LL, DIRBLKSIZ, cnp->cn_cred, B_CLRBUF, &bp);
1433         if (error)
1434                 goto bad;
1435         ip->i_size = DIRBLKSIZ;
1436         ip->i_flag |= IN_CHANGE | IN_UPDATE;
1437         bcopy((caddr_t)&dirtemplate, (caddr_t)bp->b_data, sizeof dirtemplate);
1438         if (DOINGSOFTDEP(tvp)) {
1439                 /*
1440                  * Ensure that the entire newly allocated block is a
1441                  * valid directory so that future growth within the
1442                  * block does not have to ensure that the block is
1443                  * written before the inode.
1444                  */
1445                 blkoff = DIRBLKSIZ;
1446                 while (blkoff < bp->b_bcount) {
1447                         ((struct direct *)
1448                            (bp->b_data + blkoff))->d_reclen = DIRBLKSIZ;
1449                         blkoff += DIRBLKSIZ;
1450                 }
1451         }
1452         if ((error = ffs_update(tvp, !(DOINGSOFTDEP(tvp) |
1453                                        DOINGASYNC(tvp)))) != 0) {
1454                 bwrite(bp);
1455                 goto bad;
1456         }
1457         /*
1458          * Directory set up, now install its entry in the parent directory.
1459          *
1460          * If we are not doing soft dependencies, then we must write out the
1461          * buffer containing the new directory body before entering the new
1462          * name in the parent. If we are doing soft dependencies, then the
1463          * buffer containing the new directory body will be passed to and
1464          * released in the soft dependency code after the code has attached
1465          * an appropriate ordering dependency to the buffer which ensures that
1466          * the buffer is written before the new name is written in the parent.
1467          */
1468         if (DOINGASYNC(dvp))
1469                 bdwrite(bp);
1470         else if (!DOINGSOFTDEP(dvp) && (error = bwrite(bp)) != 0)
1471                 goto bad;
1472         ufs_makedirentry(ip, cnp, &newdir);
1473         error = ufs_direnter(dvp, tvp, &newdir, cnp, bp);
1474
1475 bad:
1476         if (error == 0) {
1477                 VN_KNOTE(dvp, NOTE_WRITE | NOTE_LINK);
1478                 *ap->a_vpp = tvp;
1479         } else {
1480                 dp->i_effnlink--;
1481                 dp->i_nlink--;
1482                 dp->i_flag |= IN_CHANGE;
1483                 if (DOINGSOFTDEP(dvp))
1484                         softdep_change_linkcnt(dp);
1485                 /*
1486                  * No need to do an explicit VOP_TRUNCATE here, vrele will
1487                  * do this for us because we set the link count to 0.
1488                  */
1489                 ip->i_effnlink = 0;
1490                 ip->i_nlink = 0;
1491                 ip->i_flag |= IN_CHANGE;
1492                 if (DOINGSOFTDEP(tvp))
1493                         softdep_change_linkcnt(ip);
1494                 vput(tvp);
1495         }
1496 out:
1497         return (error);
1498 }
1499
1500 /*
1501  * Rmdir system call.
1502  *
1503  * ufs_rmdir(struct vnode *a_dvp, struct vnode *a_vp,
1504  *           struct componentname *a_cnp)
1505  */
1506 static
1507 int
1508 ufs_rmdir(struct vop_old_rmdir_args *ap)
1509 {
1510         struct vnode *vp = ap->a_vp;
1511         struct vnode *dvp = ap->a_dvp;
1512         struct componentname *cnp = ap->a_cnp;
1513         struct inode *ip, *dp;
1514         int error, ioflag;
1515
1516         ip = VTOI(vp);
1517         dp = VTOI(dvp);
1518
1519         /*
1520          * Do not remove a directory that is in the process of being renamed.
1521          * Verify the directory is empty (and valid). Rmdir ".." will not be
1522          * valid since ".." will contain a reference to the current directory
1523          * and thus be non-empty. Do not allow the removal of mounted on
1524          * directories (this can happen when an NFS exported filesystem
1525          * tries to remove a locally mounted on directory).
1526          */
1527         error = 0;
1528         if (ip->i_flag & IN_RENAME) {
1529                 error = EINVAL;
1530                 goto out;
1531         }
1532         if (ip->i_effnlink != 2 ||
1533             !ufs_dirempty(ip, dp->i_number, cnp->cn_cred)) {
1534                 error = ENOTEMPTY;
1535                 goto out;
1536         }
1537         if ((dp->i_flags & APPEND)
1538             || (ip->i_flags & (NOUNLINK | IMMUTABLE | APPEND))) {
1539                 error = EPERM;
1540                 goto out;
1541         }
1542         if (vp->v_mountedhere != 0) {
1543                 error = EINVAL;
1544                 goto out;
1545         }
1546         /*
1547          * Delete reference to directory before purging
1548          * inode.  If we crash in between, the directory
1549          * will be reattached to lost+found,
1550          */
1551         dp->i_effnlink--;
1552         ip->i_effnlink--;
1553         if (DOINGSOFTDEP(vp)) {
1554                 softdep_change_linkcnt(dp);
1555                 softdep_change_linkcnt(ip);
1556         }
1557         error = ufs_dirremove(dvp, ip, cnp->cn_flags, 1);
1558         if (error) {
1559                 dp->i_effnlink++;
1560                 ip->i_effnlink++;
1561                 if (DOINGSOFTDEP(vp)) {
1562                         softdep_change_linkcnt(dp);
1563                         softdep_change_linkcnt(ip);
1564                 }
1565                 goto out;
1566         }
1567         VN_KNOTE(dvp, NOTE_WRITE | NOTE_LINK);
1568         /*
1569          * Truncate inode. The only stuff left in the directory is "." and
1570          * "..". The "." reference is inconsequential since we are quashing
1571          * it. The soft dependency code will arrange to do these operations
1572          * after the parent directory entry has been deleted on disk, so
1573          * when running with that code we avoid doing them now.
1574          */
1575         if (!DOINGSOFTDEP(vp)) {
1576                 dp->i_nlink--;
1577                 dp->i_flag |= IN_CHANGE;
1578                 ip->i_nlink--;
1579                 ip->i_flag |= IN_CHANGE;
1580                 ioflag = DOINGASYNC(vp) ? 0 : IO_SYNC;
1581                 error = ffs_truncate(vp, (off_t)0, ioflag, cnp->cn_cred);
1582         }
1583         /* cache_purge removed - handled by VFS compat layer */
1584 #ifdef UFS_DIRHASH
1585         /* Kill any active hash; i_effnlink == 0, so it will not come back. */
1586         if (ip->i_dirhash != NULL)
1587                 ufsdirhash_free(ip);
1588 #endif
1589 out:
1590         VN_KNOTE(vp, NOTE_DELETE);
1591         return (error);
1592 }
1593
1594 /*
1595  * symlink -- make a symbolic link
1596  *
1597  * ufs_symlink(struct vnode *a_dvp, struct vnode **a_vpp,
1598  *              struct componentname *a_cnp, struct vattr *a_vap,
1599  *              char *a_target)
1600  */
1601 static
1602 int
1603 ufs_symlink(struct vop_old_symlink_args *ap)
1604 {
1605         struct vnode *vp, **vpp = ap->a_vpp;
1606         struct inode *ip;
1607         int len, error;
1608
1609         error = ufs_makeinode(IFLNK | ap->a_vap->va_mode, ap->a_dvp,
1610                               vpp, ap->a_cnp);
1611         if (error)
1612                 return (error);
1613         VN_KNOTE(ap->a_dvp, NOTE_WRITE);
1614         vp = *vpp;
1615         len = strlen(ap->a_target);
1616         if (len < vp->v_mount->mnt_maxsymlinklen) {
1617                 ip = VTOI(vp);
1618                 bcopy(ap->a_target, (char *)ip->i_shortlink, len);
1619                 ip->i_size = len;
1620                 ip->i_flag |= IN_CHANGE | IN_UPDATE;
1621         } else {
1622                 /*
1623                  * Make sure we have a VM object in order to use
1624                  * the buffer cache.
1625                  */
1626                 if (vp->v_object == NULL)
1627                         vinitvmio(vp, 0);
1628                 error = vn_rdwr(UIO_WRITE, vp, ap->a_target, len, (off_t)0,
1629                                 UIO_SYSSPACE, IO_NODELOCKED,
1630                                 ap->a_cnp->cn_cred, NULL);
1631         }
1632         if (error)
1633                 vput(vp);
1634         return (error);
1635 }
1636
1637 /*
1638  * Vnode op for reading directories.
1639  *
1640  * ufs_readdir(struct vnode *a_vp, struct uio *a_uio, struct ucred *a_cred,
1641  *              int *a_eofflag, int *ncookies, u_long **a_cookies)
1642  */
1643 static
1644 int
1645 ufs_readdir(struct vop_readdir_args *ap)
1646 {
1647         struct uio *uio = ap->a_uio;
1648         struct vnode *vp = ap->a_vp;
1649         struct direct *dp;
1650         struct buf *bp;
1651         int retval;
1652         int error;
1653         int offset;     /* offset into buffer cache buffer */
1654         int eoffset;    /* end of buffer clipped to file EOF */
1655         int pickup;     /* pickup point */
1656         int ncookies;
1657         int cookie_index;
1658         u_long *cookies;
1659
1660         if (uio->uio_offset < 0)
1661                 return (EINVAL);
1662         /*
1663          * Guess the number of cookies needed.  Make sure we compute at
1664          * least 1, and no more then a reasonable limit.
1665          */
1666         if (ap->a_ncookies) {
1667                 ncookies = uio->uio_resid / 16 + 1;
1668                 if (ncookies > 1024)
1669                         ncookies = 1024;
1670                 cookies = kmalloc(ncookies * sizeof(u_long), M_TEMP, M_WAITOK);
1671         } else {
1672                 ncookies = -1;  /* force conditionals below */
1673                 cookies = NULL;
1674         }
1675         cookie_index = 0;
1676
1677         if ((error = vn_lock(vp, LK_EXCLUSIVE | LK_RETRY)) != 0)
1678                 return (error);
1679
1680         /*
1681          * Past or at EOF
1682          */
1683         if (uio->uio_offset >= VTOI(vp)->i_size) {
1684                 if (ap->a_eofflag)
1685                         *ap->a_eofflag = 1;
1686                 if (ap->a_ncookies) {
1687                         *ap->a_ncookies = cookie_index;
1688                         *ap->a_cookies = cookies;
1689                 }
1690                 goto done;
1691         }
1692
1693         /*
1694          * Loop until we run out of cookies, we run out of user buffer,
1695          * or we hit the directory EOF.
1696          *
1697          * Always start scans at the beginning of the buffer, don't trust
1698          * the offset supplied by userland.
1699          */
1700         while ((error = ffs_blkatoff_ra(vp, uio->uio_offset, NULL, &bp, 2)) == 0) {
1701                 pickup = (int)(uio->uio_offset - bp->b_loffset);
1702                 offset = 0;
1703                 retval = 0;
1704                 if (bp->b_loffset + bp->b_bcount > VTOI(vp)->i_size)
1705                         eoffset = (int)(VTOI(vp)->i_size - bp->b_loffset);
1706                 else
1707                         eoffset = bp->b_bcount;
1708
1709                 while (offset < eoffset) {
1710                         dp = (struct direct *)(bp->b_data + offset);
1711                         if (dp->d_reclen <= 0 || (dp->d_reclen & 3) ||
1712                             offset + dp->d_reclen > bp->b_bcount) {
1713                                 error = EIO;
1714                                 break;
1715                         }
1716                         if (offsetof(struct direct, d_name[dp->d_namlen]) >                                  dp->d_reclen) {
1717                                 error = EIO;
1718                                 break;
1719                         }
1720                         if (offset < pickup) {
1721                                 offset += dp->d_reclen;
1722                                 continue;
1723                         }
1724 #if BYTE_ORDER == LITTLE_ENDIAN
1725                         if (OFSFMT(vp)) {
1726                                 retval = vop_write_dirent(&error, uio,
1727                                     dp->d_ino, dp->d_namlen, dp->d_type,
1728                                     dp->d_name);
1729                         } else
1730 #endif
1731                         {
1732                                 retval = vop_write_dirent(&error, uio,
1733                                     dp->d_ino, dp->d_type, dp->d_namlen,
1734                                     dp->d_name);
1735                         }
1736                         if (retval)
1737                                 break;
1738                         if (cookies) {
1739                                 cookies[cookie_index] =
1740                                         (u_long)bp->b_loffset + offset;
1741                         }
1742                         ++cookie_index;
1743                         offset += dp->d_reclen;
1744                         if (cookie_index == ncookies)
1745                                 break;
1746                 }
1747
1748                 /*
1749                  * This will align the next loop to the beginning of the
1750                  * next block, and pickup will calculate to 0.
1751                  */
1752                 uio->uio_offset = bp->b_loffset + offset;
1753                 brelse(bp);
1754
1755                 if (retval || error || cookie_index == ncookies ||
1756                     uio->uio_offset >= VTOI(vp)->i_size) {
1757                         break;
1758                 }
1759         }
1760         if (ap->a_eofflag)
1761                 *ap->a_eofflag = VTOI(vp)->i_size <= uio->uio_offset;
1762
1763         /*
1764          * Report errors only if we didn't manage to read anything
1765          */
1766         if (error && cookie_index == 0) {
1767                 if (cookies) {
1768                         kfree(cookies, M_TEMP);
1769                         *ap->a_ncookies = 0;
1770                         *ap->a_cookies = NULL;
1771                 }
1772         } else {
1773                 error = 0;
1774                 if (cookies) {
1775                         *ap->a_ncookies = cookie_index;
1776                         *ap->a_cookies = cookies;
1777                 }
1778         }
1779 done:
1780         vn_unlock(vp);
1781         return (error);
1782 }
1783
1784 /*
1785  * Return target name of a symbolic link
1786  *
1787  * ufs_readlink(struct vnode *a_vp, struct uio *a_uio, struct ucred *a_cred)
1788  */
1789 static
1790 int
1791 ufs_readlink(struct vop_readlink_args *ap)
1792 {
1793         struct vnode *vp = ap->a_vp;
1794         struct inode *ip = VTOI(vp);
1795         int isize;
1796
1797         isize = ip->i_size;
1798         if ((isize < vp->v_mount->mnt_maxsymlinklen) ||
1799             (ip->i_din.di_blocks == 0)) {   /* XXX - for old fastlink support */
1800                 uiomove((char *)ip->i_shortlink, isize, ap->a_uio);
1801                 return (0);
1802         }
1803
1804         /*
1805          * Perform the equivalent of an OPEN on vp so we can issue a
1806          * VOP_READ.
1807          */
1808         return (VOP_READ(vp, ap->a_uio, 0, ap->a_cred));
1809 }
1810
1811 /*
1812  * Calculate the logical to physical mapping if not done already,
1813  * then call the device strategy routine.
1814  *
1815  * In order to be able to swap to a file, the VOP_BMAP operation may not
1816  * deadlock on memory.  See ufs_bmap() for details.
1817  *
1818  * ufs_strategy(struct vnode *a_vp, struct bio *a_bio)
1819  */
1820 static
1821 int
1822 ufs_strategy(struct vop_strategy_args *ap)
1823 {
1824         struct bio *bio = ap->a_bio;
1825         struct bio *nbio;
1826         struct buf *bp = bio->bio_buf;
1827         struct vnode *vp = ap->a_vp;
1828         struct inode *ip;
1829         int error;
1830
1831         ip = VTOI(vp);
1832         if (vp->v_type == VBLK || vp->v_type == VCHR)
1833                 panic("ufs_strategy: spec");
1834         nbio = push_bio(bio);
1835         if (nbio->bio_offset == NOOFFSET) {
1836                 error = VOP_BMAP(vp, bio->bio_offset, NULL, &nbio->bio_offset,
1837                                  NULL, NULL);
1838                 if (error) {
1839                         bp->b_error = error;
1840                         bp->b_flags |= B_ERROR;
1841                         /* I/O was never started on nbio, must biodone(bio) */
1842                         biodone(bio);
1843                         return (error);
1844                 }
1845                 if (nbio->bio_offset == NOOFFSET)
1846                         vfs_bio_clrbuf(bp);
1847         }
1848         if (nbio->bio_offset == NOOFFSET) {
1849                 /*
1850                  * We hit a hole in the file.  The buffer has been zero-filled
1851                  * so just biodone() it.
1852                  */
1853                 biodone(bio);
1854         } else {
1855                 vn_strategy(ip->i_devvp, nbio);
1856         }
1857         return (0);
1858 }
1859
1860 /*
1861  * Print out the contents of an inode.
1862  *
1863  * ufs_print(struct vnode *a_vp)
1864  */
1865 static
1866 int
1867 ufs_print(struct vop_print_args *ap)
1868 {
1869         struct vnode *vp = ap->a_vp;
1870         struct inode *ip = VTOI(vp);
1871
1872         printf("tag VT_UFS, ino %lu, on dev %s (%d, %d)",
1873             (u_long)ip->i_number, devtoname(ip->i_dev), major(ip->i_dev),
1874             minor(ip->i_dev));
1875         if (vp->v_type == VFIFO)
1876                 fifo_printinfo(vp);
1877         lockmgr_printinfo(&vp->v_lock);
1878         printf("\n");
1879         return (0);
1880 }
1881
1882 /*
1883  * Read wrapper for special devices.
1884  *
1885  * ufsspec_read(struct vnode *a_vp, struct uio *a_uio, int a_ioflag,
1886  *              struct ucred *a_cred)
1887  */
1888 static
1889 int
1890 ufsspec_read(struct vop_read_args *ap)
1891 {
1892         int error, resid;
1893         struct inode *ip;
1894         struct uio *uio;
1895
1896         uio = ap->a_uio;
1897         resid = uio->uio_resid;
1898         error = VOCALL(&spec_vnode_vops, &ap->a_head);
1899         /*
1900          * The inode may have been revoked during the call, so it must not
1901          * be accessed blindly here or in the other wrapper functions.
1902          */
1903         ip = VTOI(ap->a_vp);
1904         if (ip != NULL && (uio->uio_resid != resid || (error == 0 && resid != 0)))
1905                 ip->i_flag |= IN_ACCESS;
1906         return (error);
1907 }
1908
1909 /*
1910  * Write wrapper for special devices.
1911  *
1912  * ufsspec_write(struct vnode *a_vp, struct uio *a_uio, int a_ioflag,
1913  *               struct ucred *a_cred)
1914  */
1915 static
1916 int
1917 ufsspec_write(struct vop_write_args *ap)
1918 {
1919         int error, resid;
1920         struct inode *ip;
1921         struct uio *uio;
1922
1923         uio = ap->a_uio;
1924         resid = uio->uio_resid;
1925         error = VOCALL(&spec_vnode_vops, &ap->a_head);
1926         ip = VTOI(ap->a_vp);
1927         if (ip != NULL && (uio->uio_resid != resid || (error == 0 && resid != 0)))
1928                 VTOI(ap->a_vp)->i_flag |= IN_CHANGE | IN_UPDATE;
1929         return (error);
1930 }
1931
1932 /*
1933  * Close wrapper for special devices.
1934  *
1935  * Update the times on the inode then do device close.
1936  *
1937  * ufsspec_close(struct vnode *a_vp, int a_fflag, struct ucred *a_cred,
1938  *               struct thread *a_td)
1939  */
1940 static
1941 int
1942 ufsspec_close(struct vop_close_args *ap)
1943 {
1944         struct vnode *vp = ap->a_vp;
1945
1946         if (vp->v_usecount > 1)
1947                 ufs_itimes(vp);
1948         return (VOCALL(&spec_vnode_vops, &ap->a_head));
1949 }
1950
1951 /*
1952  * Read wrapper for fifos.
1953  *
1954  * ufsfifo_read(struct vnode *a_vp, struct uio *a_uio, int a_ioflag,
1955  *              struct ucred *a_cred)
1956  */
1957 static
1958 int
1959 ufsfifo_read(struct vop_read_args *ap)
1960 {
1961         int error, resid;
1962         struct inode *ip;
1963         struct uio *uio;
1964
1965         uio = ap->a_uio;
1966         resid = uio->uio_resid;
1967         error = VOCALL(&fifo_vnode_vops, &ap->a_head);
1968         ip = VTOI(ap->a_vp);
1969         if ((ap->a_vp->v_mount->mnt_flag & MNT_NOATIME) == 0 && ip != NULL &&
1970             (uio->uio_resid != resid || (error == 0 && resid != 0)))
1971                 VTOI(ap->a_vp)->i_flag |= IN_ACCESS;
1972         return (error);
1973 }
1974
1975 /*
1976  * Write wrapper for fifos.
1977  *
1978  * ufsfifo_write(struct vnode *a_vp, struct uio *a_uio, int a_ioflag,
1979  *               struct ucred *a_cred)
1980  */
1981 static
1982 int
1983 ufsfifo_write(struct vop_write_args *ap)
1984 {
1985         int error, resid;
1986         struct inode *ip;
1987         struct uio *uio;
1988
1989         uio = ap->a_uio;
1990         resid = uio->uio_resid;
1991         error = VOCALL(&fifo_vnode_vops, &ap->a_head);
1992         ip = VTOI(ap->a_vp);
1993         if (ip != NULL && (uio->uio_resid != resid || (error == 0 && resid != 0)))
1994                 VTOI(ap->a_vp)->i_flag |= IN_CHANGE | IN_UPDATE;
1995         return (error);
1996 }
1997
1998 /*
1999  * Close wrapper for fifos.
2000  *
2001  * Update the times on the inode then do device close.
2002  *
2003  * ufsfifo_close(struct vnode *a_vp, int a_fflag, struct ucred *a_cred,
2004  *               struct thread *a_td)
2005  */
2006 static
2007 int
2008 ufsfifo_close(struct vop_close_args *ap)
2009 {
2010         struct vnode *vp = ap->a_vp;
2011
2012         if (vp->v_usecount > 1)
2013                 ufs_itimes(vp);
2014         return (VOCALL(&fifo_vnode_vops, &ap->a_head));
2015 }
2016
2017 /*
2018  * Kqfilter wrapper for fifos.
2019  *
2020  * Fall through to ufs kqfilter routines if needed
2021  */
2022 static
2023 int
2024 ufsfifo_kqfilter(struct vop_kqfilter_args *ap)
2025 {
2026         int error;
2027
2028         error = VOCALL(&fifo_vnode_vops, &ap->a_head);
2029         if (error)
2030                 error = ufs_kqfilter(ap);
2031         return (error);
2032 }
2033
2034 /*
2035  * Return POSIX pathconf information applicable to ufs filesystems.
2036  *
2037  * ufs_pathconf(struct vnode *a_vp, int a_name, int *a_retval)
2038  */
2039 static
2040 int
2041 ufs_pathconf(struct vop_pathconf_args *ap)
2042 {
2043         switch (ap->a_name) {
2044         case _PC_LINK_MAX:
2045                 *ap->a_retval = LINK_MAX;
2046                 return (0);
2047         case _PC_NAME_MAX:
2048                 *ap->a_retval = NAME_MAX;
2049                 return (0);
2050         case _PC_PATH_MAX:
2051                 *ap->a_retval = PATH_MAX;
2052                 return (0);
2053         case _PC_PIPE_BUF:
2054                 *ap->a_retval = PIPE_BUF;
2055                 return (0);
2056         case _PC_CHOWN_RESTRICTED:
2057                 *ap->a_retval = 1;
2058                 return (0);
2059         case _PC_NO_TRUNC:
2060                 *ap->a_retval = 1;
2061                 return (0);
2062         default:
2063                 return (EINVAL);
2064         }
2065         /* NOTREACHED */
2066 }
2067
2068 /*
2069  * Advisory record locking support
2070  *
2071  * ufs_advlock(struct vnode *a_vp, caddr_t a_id, int a_op, struct flock *a_fl,
2072  *             int a_flags)
2073  */
2074 static
2075 int
2076 ufs_advlock(struct vop_advlock_args *ap)
2077 {
2078         struct inode *ip = VTOI(ap->a_vp);
2079
2080         return (lf_advlock(ap, &(ip->i_lockf), ip->i_size));
2081 }
2082
2083 /*
2084  * Initialize the vnode associated with a new inode, handle aliased
2085  * vnodes.
2086  *
2087  * Make sure directories have their VM object now rather then later,
2088  * saving us from having to check on all the myrid directory VOPs
2089  * that might be executed without a VOP_OPEN being performed.
2090  */
2091 int
2092 ufs_vinit(struct mount *mntp, struct vnode **vpp)
2093 {
2094         struct inode *ip;
2095         struct vnode *vp;
2096         struct timeval tv;
2097
2098         vp = *vpp;
2099         ip = VTOI(vp);
2100
2101         vp->v_type = IFTOVT(ip->i_mode);
2102
2103         switch(vp->v_type) {
2104         case VCHR:
2105         case VBLK:
2106                 vp->v_ops = &mntp->mnt_vn_spec_ops;
2107                 addaliasu(vp, ip->i_rdev);
2108                 break;
2109         case VFIFO:
2110                 vp->v_ops = &mntp->mnt_vn_fifo_ops;
2111                 break;
2112         case VDIR:
2113         case VREG:
2114                 vinitvmio(vp, ip->i_size);
2115                 break;
2116         case VLNK:
2117                 if (ip->i_size >= vp->v_mount->mnt_maxsymlinklen)
2118                         vinitvmio(vp, ip->i_size);
2119                 break;
2120         default:
2121                 break;
2122
2123         }
2124
2125         if (ip->i_number == ROOTINO)
2126                 vp->v_flag |= VROOT;
2127         /*
2128          * Initialize modrev times
2129          */
2130         getmicrouptime(&tv);
2131         SETHIGH(ip->i_modrev, tv.tv_sec);
2132         SETLOW(ip->i_modrev, tv.tv_usec * 4294);
2133         *vpp = vp;
2134         return (0);
2135 }
2136
2137 /*
2138  * Allocate a new inode.
2139  */
2140 static
2141 int
2142 ufs_makeinode(int mode, struct vnode *dvp, struct vnode **vpp,
2143               struct componentname *cnp)
2144 {
2145         struct inode *ip, *pdir;
2146         struct direct newdir;
2147         struct vnode *tvp;
2148         int error;
2149
2150         pdir = VTOI(dvp);
2151         *vpp = NULL;
2152         if ((mode & IFMT) == 0)
2153                 mode |= IFREG;
2154
2155         error = ffs_valloc(dvp, mode, cnp->cn_cred, &tvp);
2156         if (error)
2157                 return (error);
2158         ip = VTOI(tvp);
2159         ip->i_gid = pdir->i_gid;
2160 #ifdef SUIDDIR
2161         {
2162 #ifdef QUOTA
2163                 struct ucred ucred, *ucp;
2164                 ucp = cnp->cn_cred;
2165 #endif
2166                 /*
2167                  * If we are not the owner of the directory,
2168                  * and we are hacking owners here, (only do this where told to)
2169                  * and we are not giving it TO root, (would subvert quotas)
2170                  * then go ahead and give it to the other user.
2171                  * Note that this drops off the execute bits for security.
2172                  */
2173                 if ((dvp->v_mount->mnt_flag & MNT_SUIDDIR) &&
2174                     (pdir->i_mode & ISUID) &&
2175                     (pdir->i_uid != cnp->cn_cred->cr_uid) && pdir->i_uid) {
2176                         ip->i_uid = pdir->i_uid;
2177                         mode &= ~07111;
2178 #ifdef QUOTA
2179                         /*
2180                          * Make sure the correct user gets charged
2181                          * for the space.
2182                          * Quickly knock up a dummy credential for the victim.
2183                          * XXX This seems to never be accessed out of our
2184                          * context so a stack variable is ok.
2185                          */
2186                         ucred.cr_ref = 1;
2187                         ucred.cr_uid = ip->i_uid;
2188                         ucred.cr_ngroups = 1;
2189                         ucred.cr_groups[0] = pdir->i_gid;
2190                         ucp = &ucred;
2191 #endif
2192                 } else
2193                         ip->i_uid = cnp->cn_cred->cr_uid;
2194
2195 #ifdef QUOTA
2196                 if ((error = ufs_getinoquota(ip)) ||
2197                     (error = ufs_chkiq(ip, 1, ucp, 0))) {
2198                         ffs_vfree(tvp, ip->i_number, mode);
2199                         vput(tvp);
2200                         return (error);
2201                 }
2202 #endif
2203         }
2204 #else   /* !SUIDDIR */
2205         ip->i_uid = cnp->cn_cred->cr_uid;
2206 #ifdef QUOTA
2207         if ((error = ufs_getinoquota(ip)) ||
2208             (error = ufs_chkiq(ip, 1, cnp->cn_cred, 0))) {
2209                 ffs_vfree(tvp, ip->i_number, mode);
2210                 vput(tvp);
2211                 return (error);
2212         }
2213 #endif
2214 #endif  /* !SUIDDIR */
2215         ip->i_fsmid = cache_getnewfsmid();
2216         ip->i_flag |= IN_ACCESS | IN_CHANGE | IN_UPDATE;
2217         ip->i_mode = mode;
2218         tvp->v_type = IFTOVT(mode);     /* Rest init'd in getnewvnode(). */
2219         ip->i_effnlink = 1;
2220         ip->i_nlink = 1;
2221         if (DOINGSOFTDEP(tvp))
2222                 softdep_change_linkcnt(ip);
2223         if ((ip->i_mode & ISGID) && !groupmember(ip->i_gid, cnp->cn_cred) &&
2224             suser_cred(cnp->cn_cred, 0)) {
2225                 ip->i_mode &= ~ISGID;
2226         }
2227
2228         if (cnp->cn_flags & CNP_ISWHITEOUT)
2229                 ip->i_flags |= UF_OPAQUE;
2230
2231         /*
2232          * Regular files and directories need VM objects.  Softlinks do
2233          * not (not immediately anyway).
2234          */
2235         if (tvp->v_type == VREG || tvp->v_type == VDIR)
2236                 vinitvmio(tvp, 0);
2237
2238         /*
2239          * Make sure inode goes to disk before directory entry.
2240          */
2241         error = ffs_update(tvp, !(DOINGSOFTDEP(tvp) | DOINGASYNC(tvp)));
2242         if (error)
2243                 goto bad;
2244         ufs_makedirentry(ip, cnp, &newdir);
2245         error = ufs_direnter(dvp, tvp, &newdir, cnp, NULL);
2246         if (error)
2247                 goto bad;
2248         *vpp = tvp;
2249         return (0);
2250
2251 bad:
2252         /*
2253          * Write error occurred trying to update the inode
2254          * or the directory so must deallocate the inode.
2255          */
2256         ip->i_effnlink = 0;
2257         ip->i_nlink = 0;
2258         ip->i_flag |= IN_CHANGE;
2259         if (DOINGSOFTDEP(tvp))
2260                 softdep_change_linkcnt(ip);
2261         vput(tvp);
2262         return (error);
2263 }
2264
2265 static int
2266 ufs_missingop(struct vop_generic_args *ap)
2267 {
2268         panic("no vop function for %s in ufs child", ap->a_desc->sd_name);
2269         return (EOPNOTSUPP);
2270 }
2271
2272 static struct filterops ufsread_filtops =
2273         { 1, NULL, filt_ufsdetach, filt_ufsread };
2274 static struct filterops ufswrite_filtops =
2275         { 1, NULL, filt_ufsdetach, filt_ufswrite };
2276 static struct filterops ufsvnode_filtops =
2277         { 1, NULL, filt_ufsdetach, filt_ufsvnode };
2278
2279 /*
2280  * ufs_kqfilter(struct vnode *a_vp, struct knote *a_kn)
2281  */
2282 static int
2283 ufs_kqfilter(struct vop_kqfilter_args *ap)
2284 {
2285         struct vnode *vp = ap->a_vp;
2286         struct knote *kn = ap->a_kn;
2287         lwkt_tokref ilock;
2288
2289         switch (kn->kn_filter) {
2290         case EVFILT_READ:
2291                 kn->kn_fop = &ufsread_filtops;
2292                 break;
2293         case EVFILT_WRITE:
2294                 kn->kn_fop = &ufswrite_filtops;
2295                 break;
2296         case EVFILT_VNODE:
2297                 kn->kn_fop = &ufsvnode_filtops;
2298                 break;
2299         default:
2300                 return (1);
2301         }
2302
2303         kn->kn_hook = (caddr_t)vp;
2304
2305         lwkt_gettoken(&ilock, &vp->v_pollinfo.vpi_token);
2306         SLIST_INSERT_HEAD(&vp->v_pollinfo.vpi_selinfo.si_note, kn, kn_selnext);
2307         lwkt_reltoken(&ilock);
2308
2309         return (0);
2310 }
2311
2312 static void
2313 filt_ufsdetach(struct knote *kn)
2314 {
2315         struct vnode *vp = (struct vnode *)kn->kn_hook;
2316         lwkt_tokref ilock;
2317
2318         lwkt_gettoken(&ilock, &vp->v_pollinfo.vpi_token);
2319         SLIST_REMOVE(&vp->v_pollinfo.vpi_selinfo.si_note,
2320             kn, knote, kn_selnext);
2321         lwkt_reltoken(&ilock);
2322 }
2323
2324 /*ARGSUSED*/
2325 static int
2326 filt_ufsread(struct knote *kn, long hint)
2327 {
2328         struct vnode *vp = (struct vnode *)kn->kn_hook;
2329         struct inode *ip = VTOI(vp);
2330
2331         /*
2332          * filesystem is gone, so set the EOF flag and schedule
2333          * the knote for deletion.
2334          */
2335         if (hint == NOTE_REVOKE) {
2336                 kn->kn_flags |= (EV_EOF | EV_ONESHOT);
2337                 return (1);
2338         }
2339
2340         kn->kn_data = ip->i_size - kn->kn_fp->f_offset;
2341         return (kn->kn_data != 0);
2342 }
2343
2344 /*ARGSUSED*/
2345 static int
2346 filt_ufswrite(struct knote *kn, long hint)
2347 {
2348         /*
2349          * filesystem is gone, so set the EOF flag and schedule
2350          * the knote for deletion.
2351          */
2352         if (hint == NOTE_REVOKE)
2353                 kn->kn_flags |= (EV_EOF | EV_ONESHOT);
2354
2355         kn->kn_data = 0;
2356         return (1);
2357 }
2358
2359 static int
2360 filt_ufsvnode(struct knote *kn, long hint)
2361 {
2362         if (kn->kn_sfflags & hint)
2363                 kn->kn_fflags |= hint;
2364         if (hint == NOTE_REVOKE) {
2365                 kn->kn_flags |= EV_EOF;
2366                 return (1);
2367         }
2368         return (kn->kn_fflags != 0);
2369 }
2370
2371 /* Global vfs data structures for ufs. */
2372 static struct vop_ops ufs_vnode_vops = {
2373         .vop_default =          vop_defaultop,
2374         .vop_fsync =            (void *)ufs_missingop,
2375         .vop_read =             (void *)ufs_missingop,
2376         .vop_reallocblks =      (void *)ufs_missingop,
2377         .vop_write =            (void *)ufs_missingop,
2378         .vop_access =           ufs_access,
2379         .vop_advlock =          ufs_advlock,
2380         .vop_bmap =             ufs_bmap,
2381         .vop_old_lookup =       ufs_lookup,
2382         .vop_close =            ufs_close,
2383         .vop_old_create =       ufs_create,
2384         .vop_getattr =          ufs_getattr,
2385         .vop_inactive =         ufs_inactive,
2386         .vop_old_link =         ufs_link,
2387         .vop_old_mkdir =                ufs_mkdir,
2388         .vop_old_mknod =                ufs_mknod,
2389         .vop_mmap =             ufs_mmap,
2390         .vop_open =             ufs_open,
2391         .vop_pathconf =         ufs_pathconf,
2392         .vop_poll =             vop_stdpoll,
2393         .vop_kqfilter =         ufs_kqfilter,
2394         .vop_print =            ufs_print,
2395         .vop_readdir =          ufs_readdir,
2396         .vop_readlink =         ufs_readlink,
2397         .vop_reclaim =          ufs_reclaim,
2398         .vop_old_remove =       ufs_remove,
2399         .vop_old_rename =       ufs_rename,
2400         .vop_old_rmdir =        ufs_rmdir,
2401         .vop_setattr =          ufs_setattr,
2402         .vop_strategy =         ufs_strategy,
2403         .vop_old_symlink =      ufs_symlink,
2404         .vop_old_whiteout =     ufs_whiteout
2405 };
2406
2407 static struct vop_ops ufs_spec_vops = {
2408         .vop_default =          spec_vnoperate,
2409         .vop_fsync =            (void *)ufs_missingop,
2410         .vop_access =           ufs_access,
2411         .vop_close =            ufsspec_close,
2412         .vop_getattr =          ufs_getattr,
2413         .vop_inactive =         ufs_inactive,
2414         .vop_print =            ufs_print,
2415         .vop_read =             ufsspec_read,
2416         .vop_reclaim =          ufs_reclaim,
2417         .vop_setattr =          ufs_setattr,
2418         .vop_write =            ufsspec_write
2419 };
2420
2421 static struct vop_ops ufs_fifo_vops = {
2422         .vop_default =          fifo_vnoperate,
2423         .vop_fsync =            (void *)ufs_missingop,
2424         .vop_access =           ufs_access,
2425         .vop_close =            ufsfifo_close,
2426         .vop_getattr =          ufs_getattr,
2427         .vop_inactive =         ufs_inactive,
2428         .vop_kqfilter =         ufsfifo_kqfilter,
2429         .vop_print =            ufs_print,
2430         .vop_read =             ufsfifo_read,
2431         .vop_reclaim =          ufs_reclaim,
2432         .vop_setattr =          ufs_setattr,
2433         .vop_write =            ufsfifo_write
2434 };
2435
2436 VNODEOP_SET(ufs_vnode_vops);
2437 VNODEOP_SET(ufs_spec_vops);
2438 VNODEOP_SET(ufs_fifo_vops);
2439
2440 /*
2441  * ufs_vnoperate()
2442  */
2443 int
2444 ufs_vnoperate(struct vop_generic_args *ap)
2445 {
2446         return (VOCALL(&ufs_vnode_vops, ap));
2447 }
2448
2449 /*
2450  * ufs_vnoperatefifo()
2451  */
2452 int
2453 ufs_vnoperatefifo(struct vop_generic_args *ap)
2454 {
2455         return (VOCALL(&ufs_fifo_vops, ap));
2456 }
2457
2458 /*
2459  * ufs_vnoperatespec()
2460  */
2461 int
2462 ufs_vnoperatespec(struct vop_generic_args *ap)
2463 {
2464         return (VOCALL(&ufs_spec_vops, ap));
2465 }