vfs: spread struct mount - mntput_no_expire
[deliverable/linux.git] / fs / namespace.c
index c6384bc39db1cc61bd0adfbd3beba1b86b0a082c..3e95cc26dda6b0d6c34fb6fc99463b23ed768a9d 100644 (file)
@@ -141,7 +141,7 @@ void mnt_release_group_id(struct mount *mnt)
 /*
  * vfsmount lock must be held for read
  */
-static inline void mnt_add_count(struct vfsmount *mnt, int n)
+static inline void mnt_add_count(struct mount *mnt, int n)
 {
 #ifdef CONFIG_SMP
        this_cpu_add(mnt->mnt_pcp->mnt_count, n);
@@ -155,7 +155,7 @@ static inline void mnt_add_count(struct vfsmount *mnt, int n)
 /*
  * vfsmount lock must be held for write
  */
-unsigned int mnt_get_count(struct vfsmount *mnt)
+unsigned int mnt_get_count(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        unsigned int count = 0;
@@ -189,24 +189,24 @@ static struct mount *alloc_vfsmnt(const char *name)
                }
 
 #ifdef CONFIG_SMP
-               mnt->mnt_pcp = alloc_percpu(struct mnt_pcp);
-               if (!mnt->mnt_pcp)
+               p->mnt_pcp = alloc_percpu(struct mnt_pcp);
+               if (!p->mnt_pcp)
                        goto out_free_devname;
 
-               this_cpu_add(mnt->mnt_pcp->mnt_count, 1);
+               this_cpu_add(p->mnt_pcp->mnt_count, 1);
 #else
-               mnt->mnt_count = 1;
-               mnt->mnt_writers = 0;
+               p->mnt_count = 1;
+               p->mnt_writers = 0;
 #endif
 
                INIT_LIST_HEAD(&p->mnt_hash);
-               INIT_LIST_HEAD(&mnt->mnt_child);
-               INIT_LIST_HEAD(&mnt->mnt_mounts);
+               INIT_LIST_HEAD(&p->mnt_child);
+               INIT_LIST_HEAD(&p->mnt_mounts);
                INIT_LIST_HEAD(&mnt->mnt_list);
-               INIT_LIST_HEAD(&mnt->mnt_expire);
-               INIT_LIST_HEAD(&mnt->mnt_share);
-               INIT_LIST_HEAD(&mnt->mnt_slave_list);
-               INIT_LIST_HEAD(&mnt->mnt_slave);
+               INIT_LIST_HEAD(&p->mnt_expire);
+               INIT_LIST_HEAD(&p->mnt_share);
+               INIT_LIST_HEAD(&p->mnt_slave_list);
+               INIT_LIST_HEAD(&p->mnt_slave);
 #ifdef CONFIG_FSNOTIFY
                INIT_HLIST_HEAD(&mnt->mnt_fsnotify_marks);
 #endif
@@ -253,7 +253,7 @@ int __mnt_is_readonly(struct vfsmount *mnt)
 }
 EXPORT_SYMBOL_GPL(__mnt_is_readonly);
 
-static inline void mnt_inc_writers(struct vfsmount *mnt)
+static inline void mnt_inc_writers(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        this_cpu_inc(mnt->mnt_pcp->mnt_writers);
@@ -262,7 +262,7 @@ static inline void mnt_inc_writers(struct vfsmount *mnt)
 #endif
 }
 
-static inline void mnt_dec_writers(struct vfsmount *mnt)
+static inline void mnt_dec_writers(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        this_cpu_dec(mnt->mnt_pcp->mnt_writers);
@@ -271,7 +271,7 @@ static inline void mnt_dec_writers(struct vfsmount *mnt)
 #endif
 }
 
-static unsigned int mnt_get_writers(struct vfsmount *mnt)
+static unsigned int mnt_get_writers(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        unsigned int count = 0;
@@ -297,7 +297,7 @@ static unsigned int mnt_get_writers(struct vfsmount *mnt)
  */
 /**
  * mnt_want_write - get write access to a mount
- * @mnt: the mount on which to take a write
+ * @m: the mount on which to take a write
  *
  * This tells the low-level filesystem that a write is
  * about to be performed to it, and makes sure that
@@ -305,8 +305,9 @@ static unsigned int mnt_get_writers(struct vfsmount *mnt)
  * the write operation is finished, mnt_drop_write()
  * must be called.  This is effectively a refcount.
  */
-int mnt_want_write(struct vfsmount *mnt)
+int mnt_want_write(struct vfsmount *m)
 {
+       struct mount *mnt = real_mount(m);
        int ret = 0;
 
        preempt_disable();
@@ -317,7 +318,7 @@ int mnt_want_write(struct vfsmount *mnt)
         * incremented count after it has set MNT_WRITE_HOLD.
         */
        smp_mb();
-       while (mnt->mnt_flags & MNT_WRITE_HOLD)
+       while (mnt->mnt.mnt_flags & MNT_WRITE_HOLD)
                cpu_relax();
        /*
         * After the slowpath clears MNT_WRITE_HOLD, mnt_is_readonly will
@@ -325,7 +326,7 @@ int mnt_want_write(struct vfsmount *mnt)
         * MNT_WRITE_HOLD is cleared.
         */
        smp_rmb();
-       if (__mnt_is_readonly(mnt)) {
+       if (__mnt_is_readonly(m)) {
                mnt_dec_writers(mnt);
                ret = -EROFS;
                goto out;
@@ -354,7 +355,7 @@ int mnt_clone_write(struct vfsmount *mnt)
        if (__mnt_is_readonly(mnt))
                return -EROFS;
        preempt_disable();
-       mnt_inc_writers(mnt);
+       mnt_inc_writers(real_mount(mnt));
        preempt_enable();
        return 0;
 }
@@ -388,7 +389,7 @@ EXPORT_SYMBOL_GPL(mnt_want_write_file);
 void mnt_drop_write(struct vfsmount *mnt)
 {
        preempt_disable();
-       mnt_dec_writers(mnt);
+       mnt_dec_writers(real_mount(mnt));
        preempt_enable();
 }
 EXPORT_SYMBOL_GPL(mnt_drop_write);
@@ -399,12 +400,12 @@ void mnt_drop_write_file(struct file *file)
 }
 EXPORT_SYMBOL(mnt_drop_write_file);
 
-static int mnt_make_readonly(struct vfsmount *mnt)
+static int mnt_make_readonly(struct mount *mnt)
 {
        int ret = 0;
 
        br_write_lock(vfsmount_lock);
-       mnt->mnt_flags |= MNT_WRITE_HOLD;
+       mnt->mnt.mnt_flags |= MNT_WRITE_HOLD;
        /*
         * After storing MNT_WRITE_HOLD, we'll read the counters. This store
         * should be visible before we do.
@@ -430,21 +431,21 @@ static int mnt_make_readonly(struct vfsmount *mnt)
        if (mnt_get_writers(mnt) > 0)
                ret = -EBUSY;
        else
-               mnt->mnt_flags |= MNT_READONLY;
+               mnt->mnt.mnt_flags |= MNT_READONLY;
        /*
         * MNT_READONLY must become visible before ~MNT_WRITE_HOLD, so writers
         * that become unheld will see MNT_READONLY.
         */
        smp_wmb();
-       mnt->mnt_flags &= ~MNT_WRITE_HOLD;
+       mnt->mnt.mnt_flags &= ~MNT_WRITE_HOLD;
        br_write_unlock(vfsmount_lock);
        return ret;
 }
 
-static void __mnt_unmake_readonly(struct vfsmount *mnt)
+static void __mnt_unmake_readonly(struct mount *mnt)
 {
        br_write_lock(vfsmount_lock);
-       mnt->mnt_flags &= ~MNT_READONLY;
+       mnt->mnt.mnt_flags &= ~MNT_READONLY;
        br_write_unlock(vfsmount_lock);
 }
 
@@ -453,7 +454,7 @@ static void free_vfsmnt(struct mount *mnt)
        kfree(mnt->mnt.mnt_devname);
        mnt_free_id(mnt);
 #ifdef CONFIG_SMP
-       free_percpu(mnt->mnt.mnt_pcp);
+       free_percpu(mnt->mnt_pcp);
 #endif
        kmem_cache_free(mnt_cache, mnt);
 }
@@ -476,7 +477,7 @@ struct mount *__lookup_mnt(struct vfsmount *mnt, struct dentry *dentry,
                if (tmp == head)
                        break;
                p = list_entry(tmp, struct mount, mnt_hash);
-               if (p->mnt_parent == mnt && p->mnt.mnt_mountpoint == dentry) {
+               if (&p->mnt_parent->mnt == mnt && p->mnt_mountpoint == dentry) {
                        found = p;
                        break;
                }
@@ -543,7 +544,7 @@ static void dentry_reset_mounted(struct dentry *dentry)
                struct mount *p;
 
                list_for_each_entry(p, &mount_hashtable[u], mnt_hash) {
-                       if (p->mnt.mnt_mountpoint == dentry)
+                       if (p->mnt_mountpoint == dentry)
                                return;
                }
        }
@@ -557,11 +558,11 @@ static void dentry_reset_mounted(struct dentry *dentry)
  */
 static void detach_mnt(struct mount *mnt, struct path *old_path)
 {
-       old_path->dentry = mnt->mnt.mnt_mountpoint;
-       old_path->mnt = mnt->mnt_parent;
-       mnt->mnt_parent = &mnt->mnt;
-       mnt->mnt.mnt_mountpoint = mnt->mnt.mnt_root;
-       list_del_init(&mnt->mnt.mnt_child);
+       old_path->dentry = mnt->mnt_mountpoint;
+       old_path->mnt = &mnt->mnt_parent->mnt;
+       mnt->mnt_parent = mnt;
+       mnt->mnt_mountpoint = mnt->mnt.mnt_root;
+       list_del_init(&mnt->mnt_child);
        list_del_init(&mnt->mnt_hash);
        dentry_reset_mounted(old_path->dentry);
 }
@@ -569,11 +570,11 @@ static void detach_mnt(struct mount *mnt, struct path *old_path)
 /*
  * vfsmount lock must be held for write
  */
-void mnt_set_mountpoint(struct vfsmount *mnt, struct dentry *dentry,
+void mnt_set_mountpoint(struct mount *mnt, struct dentry *dentry,
                        struct mount *child_mnt)
 {
-       child_mnt->mnt_parent = mntget(mnt);
-       child_mnt->mnt.mnt_mountpoint = dget(dentry);
+       child_mnt->mnt_parent = real_mount(mntget(&mnt->mnt));
+       child_mnt->mnt_mountpoint = dget(dentry);
        spin_lock(&dentry->d_lock);
        dentry->d_flags |= DCACHE_MOUNTED;
        spin_unlock(&dentry->d_lock);
@@ -584,13 +585,13 @@ void mnt_set_mountpoint(struct vfsmount *mnt, struct dentry *dentry,
  */
 static void attach_mnt(struct mount *mnt, struct path *path)
 {
-       mnt_set_mountpoint(path->mnt, path->dentry, mnt);
+       mnt_set_mountpoint(real_mount(path->mnt), path->dentry, mnt);
        list_add_tail(&mnt->mnt_hash, mount_hashtable +
                        hash(path->mnt, path->dentry));
-       list_add_tail(&mnt->mnt.mnt_child, &path->mnt->mnt_mounts);
+       list_add_tail(&mnt->mnt_child, &real_mount(path->mnt)->mnt_mounts);
 }
 
-static inline void __mnt_make_longterm(struct vfsmount *mnt)
+static inline void __mnt_make_longterm(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        atomic_inc(&mnt->mnt_longterm);
@@ -598,7 +599,7 @@ static inline void __mnt_make_longterm(struct vfsmount *mnt)
 }
 
 /* needs vfsmount lock for write */
-static inline void __mnt_make_shortterm(struct vfsmount *mnt)
+static inline void __mnt_make_shortterm(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        atomic_dec(&mnt->mnt_longterm);
@@ -610,49 +611,49 @@ static inline void __mnt_make_shortterm(struct vfsmount *mnt)
  */
 static void commit_tree(struct mount *mnt)
 {
-       struct vfsmount *parent = mnt->mnt_parent;
-       struct vfsmount *m;
+       struct mount *parent = mnt->mnt_parent;
+       struct mount *m;
        LIST_HEAD(head);
-       struct mnt_namespace *n = parent->mnt_ns;
+       struct mnt_namespace *n = parent->mnt.mnt_ns;
 
-       BUG_ON(parent == &mnt->mnt);
+       BUG_ON(parent == mnt);
 
        list_add_tail(&head, &mnt->mnt.mnt_list);
-       list_for_each_entry(m, &head, mnt_list) {
-               m->mnt_ns = n;
+       list_for_each_entry(m, &head, mnt.mnt_list) {
+               m->mnt.mnt_ns = n;
                __mnt_make_longterm(m);
        }
 
        list_splice(&head, n->list.prev);
 
        list_add_tail(&mnt->mnt_hash, mount_hashtable +
-                               hash(parent, mnt->mnt.mnt_mountpoint));
-       list_add_tail(&mnt->mnt.mnt_child, &parent->mnt_mounts);
+                               hash(&parent->mnt, mnt->mnt_mountpoint));
+       list_add_tail(&mnt->mnt_child, &parent->mnt_mounts);
        touch_mnt_namespace(n);
 }
 
 static struct mount *next_mnt(struct mount *p, struct vfsmount *root)
 {
-       struct list_head *next = p->mnt.mnt_mounts.next;
-       if (next == &p->mnt.mnt_mounts) {
+       struct list_head *next = p->mnt_mounts.next;
+       if (next == &p->mnt_mounts) {
                while (1) {
                        if (&p->mnt == root)
                                return NULL;
-                       next = p->mnt.mnt_child.next;
+                       next = p->mnt_child.next;
                        if (next != &p->mnt_parent->mnt_mounts)
                                break;
-                       p = real_mount(p->mnt_parent);
+                       p = p->mnt_parent;
                }
        }
-       return list_entry(next, struct mount, mnt.mnt_child);
+       return list_entry(next, struct mount, mnt_child);
 }
 
 static struct mount *skip_mnt_tree(struct mount *p)
 {
-       struct list_head *prev = p->mnt.mnt_mounts.prev;
-       while (prev != &p->mnt.mnt_mounts) {
-               p = list_entry(prev, struct mount, mnt.mnt_child);
-               prev = p->mnt.mnt_mounts.prev;
+       struct list_head *prev = p->mnt_mounts.prev;
+       while (prev != &p->mnt_mounts) {
+               p = list_entry(prev, struct mount, mnt_child);
+               prev = p->mnt_mounts.prev;
        }
        return p;
 }
@@ -681,8 +682,8 @@ vfs_kern_mount(struct file_system_type *type, int flags, const char *name, void
 
        mnt->mnt.mnt_root = root;
        mnt->mnt.mnt_sb = root->d_sb;
-       mnt->mnt.mnt_mountpoint = mnt->mnt.mnt_root;
-       mnt->mnt_parent = &mnt->mnt;
+       mnt->mnt_mountpoint = mnt->mnt.mnt_root;
+       mnt->mnt_parent = mnt;
        return &mnt->mnt;
 }
 EXPORT_SYMBOL_GPL(vfs_kern_mount);
@@ -709,19 +710,19 @@ static struct mount *clone_mnt(struct mount *old, struct dentry *root,
                atomic_inc(&sb->s_active);
                mnt->mnt.mnt_sb = sb;
                mnt->mnt.mnt_root = dget(root);
-               mnt->mnt.mnt_mountpoint = mnt->mnt.mnt_root;
-               mnt->mnt_parent = &mnt->mnt;
+               mnt->mnt_mountpoint = mnt->mnt.mnt_root;
+               mnt->mnt_parent = mnt;
 
                if (flag & CL_SLAVE) {
-                       list_add(&mnt->mnt.mnt_slave, &old->mnt.mnt_slave_list);
-                       mnt->mnt.mnt_master = &old->mnt;
+                       list_add(&mnt->mnt_slave, &old->mnt_slave_list);
+                       mnt->mnt_master = old;
                        CLEAR_MNT_SHARED(&mnt->mnt);
                } else if (!(flag & CL_PRIVATE)) {
                        if ((flag & CL_MAKE_SHARED) || IS_MNT_SHARED(&old->mnt))
-                               list_add(&mnt->mnt.mnt_share, &old->mnt.mnt_share);
-                       if (IS_MNT_SLAVE(&old->mnt))
-                               list_add(&mnt->mnt.mnt_slave, &old->mnt.mnt_slave);
-                       mnt->mnt.mnt_master = old->mnt.mnt_master;
+                               list_add(&mnt->mnt_share, &old->mnt_share);
+                       if (IS_MNT_SLAVE(old))
+                               list_add(&mnt->mnt_slave, &old->mnt_slave);
+                       mnt->mnt_master = old->mnt_master;
                }
                if (flag & CL_MAKE_SHARED)
                        set_mnt_shared(mnt);
@@ -729,8 +730,8 @@ static struct mount *clone_mnt(struct mount *old, struct dentry *root,
                /* stick the duplicate mount on the same expiry list
                 * as the original if that was on one */
                if (flag & CL_EXPIRE) {
-                       if (!list_empty(&old->mnt.mnt_expire))
-                               list_add(&mnt->mnt.mnt_expire, &old->mnt.mnt_expire);
+                       if (!list_empty(&old->mnt_expire))
+                               list_add(&mnt->mnt_expire, &old->mnt_expire);
                }
        }
        return mnt;
@@ -740,9 +741,10 @@ static struct mount *clone_mnt(struct mount *old, struct dentry *root,
        return NULL;
 }
 
-static inline void mntfree(struct vfsmount *mnt)
+static inline void mntfree(struct mount *mnt)
 {
-       struct super_block *sb = mnt->mnt_sb;
+       struct vfsmount *m = &mnt->mnt;
+       struct super_block *sb = m->mnt_sb;
 
        /*
         * This probably indicates that somebody messed
@@ -755,13 +757,13 @@ static inline void mntfree(struct vfsmount *mnt)
         * so mnt_get_writers() below is safe.
         */
        WARN_ON(mnt_get_writers(mnt));
-       fsnotify_vfsmount_delete(mnt);
-       dput(mnt->mnt_root);
-       free_vfsmnt(real_mount(mnt));
+       fsnotify_vfsmount_delete(m);
+       dput(m->mnt_root);
+       free_vfsmnt(mnt);
        deactivate_super(sb);
 }
 
-static void mntput_no_expire(struct vfsmount *mnt)
+static void mntput_no_expire(struct mount *mnt)
 {
 put_again:
 #ifdef CONFIG_SMP
@@ -785,11 +787,11 @@ put_again:
                return;
        br_write_lock(vfsmount_lock);
 #endif
-       if (unlikely(mnt->mnt_pinned)) {
-               mnt_add_count(mnt, mnt->mnt_pinned + 1);
-               mnt->mnt_pinned = 0;
+       if (unlikely(mnt->mnt.mnt_pinned)) {
+               mnt_add_count(mnt, mnt->mnt.mnt_pinned + 1);
+               mnt->mnt.mnt_pinned = 0;
                br_write_unlock(vfsmount_lock);
-               acct_auto_close_mnt(mnt);
+               acct_auto_close_mnt(&mnt->mnt);
                goto put_again;
        }
        br_write_unlock(vfsmount_lock);
@@ -802,7 +804,7 @@ void mntput(struct vfsmount *mnt)
                /* avoid cacheline pingpong, hope gcc doesn't get "smart" */
                if (unlikely(mnt->mnt_expiry_mark))
                        mnt->mnt_expiry_mark = 0;
-               mntput_no_expire(mnt);
+               mntput_no_expire(real_mount(mnt));
        }
 }
 EXPORT_SYMBOL(mntput);
@@ -810,7 +812,7 @@ EXPORT_SYMBOL(mntput);
 struct vfsmount *mntget(struct vfsmount *mnt)
 {
        if (mnt)
-               mnt_add_count(mnt, 1);
+               mnt_add_count(real_mount(mnt), 1);
        return mnt;
 }
 EXPORT_SYMBOL(mntget);
@@ -827,7 +829,7 @@ void mnt_unpin(struct vfsmount *mnt)
 {
        br_write_lock(vfsmount_lock);
        if (mnt->mnt_pinned) {
-               mnt_add_count(mnt, 1);
+               mnt_add_count(real_mount(mnt), 1);
                mnt->mnt_pinned--;
        }
        br_write_unlock(vfsmount_lock);
@@ -1027,7 +1029,7 @@ static int show_mountinfo(struct seq_file *m, void *v)
        struct path root = p->root;
        int err = 0;
 
-       seq_printf(m, "%i %i %u:%u ", mnt->mnt_id, r->mnt_parent->mnt_id,
+       seq_printf(m, "%i %i %u:%u ", mnt->mnt_id, r->mnt_parent->mnt.mnt_id,
                   MAJOR(sb->s_dev), MINOR(sb->s_dev));
        if (sb->s_op->show_path)
                err = sb->s_op->show_path(m, mnt);
@@ -1048,9 +1050,9 @@ static int show_mountinfo(struct seq_file *m, void *v)
        /* Tagged fields ("foo:X" or "bar") */
        if (IS_MNT_SHARED(mnt))
                seq_printf(m, " shared:%i", mnt->mnt_group_id);
-       if (IS_MNT_SLAVE(mnt)) {
-               int master = mnt->mnt_master->mnt_group_id;
-               int dom = get_dominating_id(mnt, &p->root);
+       if (IS_MNT_SLAVE(r)) {
+               int master = r->mnt_master->mnt.mnt_group_id;
+               int dom = get_dominating_id(r, &p->root);
                seq_printf(m, " master:%i", master);
                if (dom && dom != master)
                        seq_printf(m, " propagate_from:%i", dom);
@@ -1150,7 +1152,7 @@ int may_umount_tree(struct vfsmount *mnt)
        /* write lock needed for mnt_get_count */
        br_write_lock(vfsmount_lock);
        for (p = real_mount(mnt); p; p = next_mnt(p, mnt)) {
-               actual_refs += mnt_get_count(&p->mnt);
+               actual_refs += mnt_get_count(p);
                minimum_refs += 2;
        }
        br_write_unlock(vfsmount_lock);
@@ -1201,10 +1203,10 @@ void release_mounts(struct list_head *head)
                        struct vfsmount *m;
 
                        br_write_lock(vfsmount_lock);
-                       dentry = mnt->mnt.mnt_mountpoint;
-                       m = mnt->mnt_parent;
-                       mnt->mnt.mnt_mountpoint = mnt->mnt.mnt_root;
-                       mnt->mnt_parent = &mnt->mnt;
+                       dentry = mnt->mnt_mountpoint;
+                       m = &mnt->mnt_parent->mnt;
+                       mnt->mnt_mountpoint = mnt->mnt.mnt_root;
+                       mnt->mnt_parent = mnt;
                        m->mnt_ghosts--;
                        br_write_unlock(vfsmount_lock);
                        dput(dentry);
@@ -1230,15 +1232,15 @@ void umount_tree(struct mount *mnt, int propagate, struct list_head *kill)
                propagate_umount(&tmp_list);
 
        list_for_each_entry(p, &tmp_list, mnt_hash) {
-               list_del_init(&p->mnt.mnt_expire);
+               list_del_init(&p->mnt_expire);
                list_del_init(&p->mnt.mnt_list);
                __touch_mnt_namespace(p->mnt.mnt_ns);
                p->mnt.mnt_ns = NULL;
-               __mnt_make_shortterm(&p->mnt);
-               list_del_init(&p->mnt.mnt_child);
+               __mnt_make_shortterm(p);
+               list_del_init(&p->mnt_child);
                if (mnt_has_parent(p)) {
-                       p->mnt_parent->mnt_ghosts++;
-                       dentry_reset_mounted(p->mnt.mnt_mountpoint);
+                       p->mnt_parent->mnt.mnt_ghosts++;
+                       dentry_reset_mounted(p->mnt_mountpoint);
                }
                change_mnt_propagation(p, MS_PRIVATE);
        }
@@ -1273,7 +1275,7 @@ static int do_umount(struct mount *mnt, int flags)
                 * all race cases, but it's a slowpath.
                 */
                br_write_lock(vfsmount_lock);
-               if (mnt_get_count(&mnt->mnt) != 2) {
+               if (mnt_get_count(mnt) != 2) {
                        br_write_unlock(vfsmount_lock);
                        return -EBUSY;
                }
@@ -1348,6 +1350,7 @@ static int do_umount(struct mount *mnt, int flags)
 SYSCALL_DEFINE2(umount, char __user *, name, int, flags)
 {
        struct path path;
+       struct mount *mnt;
        int retval;
        int lookup_flags = 0;
 
@@ -1360,6 +1363,7 @@ SYSCALL_DEFINE2(umount, char __user *, name, int, flags)
        retval = user_path_at(AT_FDCWD, name, lookup_flags, &path);
        if (retval)
                goto out;
+       mnt = real_mount(path.mnt);
        retval = -EINVAL;
        if (path.dentry != path.mnt->mnt_root)
                goto dput_and_out;
@@ -1370,11 +1374,11 @@ SYSCALL_DEFINE2(umount, char __user *, name, int, flags)
        if (!capable(CAP_SYS_ADMIN))
                goto dput_and_out;
 
-       retval = do_umount(real_mount(path.mnt), flags);
+       retval = do_umount(mnt, flags);
 dput_and_out:
        /* we mustn't call path_put() as that would clear mnt_expiry_mark */
        dput(path.dentry);
-       mntput_no_expire(path.mnt);
+       mntput_no_expire(mnt);
 out:
        return retval;
 }
@@ -1412,8 +1416,7 @@ static int mount_is_safe(struct path *path)
 struct mount *copy_tree(struct mount *mnt, struct dentry *dentry,
                                        int flag)
 {
-       struct mount *res, *p, *q;
-       struct vfsmount *r;
+       struct mount *res, *p, *q, *r;
        struct path path;
 
        if (!(flag & CL_COPY_ALL) && IS_MNT_UNBINDABLE(&mnt->mnt))
@@ -1422,26 +1425,26 @@ struct mount *copy_tree(struct mount *mnt, struct dentry *dentry,
        res = q = clone_mnt(mnt, dentry, flag);
        if (!q)
                goto Enomem;
-       q->mnt.mnt_mountpoint = mnt->mnt.mnt_mountpoint;
+       q->mnt_mountpoint = mnt->mnt_mountpoint;
 
        p = mnt;
-       list_for_each_entry(r, &mnt->mnt.mnt_mounts, mnt_child) {
+       list_for_each_entry(r, &mnt->mnt_mounts, mnt_child) {
                struct mount *s;
                if (!is_subdir(r->mnt_mountpoint, dentry))
                        continue;
 
-               for (s = real_mount(r); s; s = next_mnt(s, r)) {
+               for (s = r; s; s = next_mnt(s, &r->mnt)) {
                        if (!(flag & CL_COPY_ALL) && IS_MNT_UNBINDABLE(&s->mnt)) {
                                s = skip_mnt_tree(s);
                                continue;
                        }
-                       while (p != real_mount(s->mnt_parent)) {
-                               p = real_mount(p->mnt_parent);
-                               q = real_mount(q->mnt_parent);
+                       while (p != s->mnt_parent) {
+                               p = p->mnt_parent;
+                               q = q->mnt_parent;
                        }
                        p = s;
                        path.mnt = &q->mnt;
-                       path.dentry = p->mnt.mnt_mountpoint;
+                       path.dentry = p->mnt_mountpoint;
                        q = clone_mnt(p, p->mnt.mnt_root, flag);
                        if (!q)
                                goto Enomem;
@@ -1593,23 +1596,23 @@ static int attach_recursive_mnt(struct mount *source_mnt,
                        struct path *path, struct path *parent_path)
 {
        LIST_HEAD(tree_list);
-       struct vfsmount *dest_mnt = path->mnt;
+       struct mount *dest_mnt = real_mount(path->mnt);
        struct dentry *dest_dentry = path->dentry;
        struct mount *child, *p;
        int err;
 
-       if (IS_MNT_SHARED(dest_mnt)) {
+       if (IS_MNT_SHARED(&dest_mnt->mnt)) {
                err = invent_group_ids(source_mnt, true);
                if (err)
                        goto out;
        }
-       err = propagate_mnt(dest_mnt, dest_dentry, &source_mnt->mnt, &tree_list);
+       err = propagate_mnt(dest_mnt, dest_dentry, source_mnt, &tree_list);
        if (err)
                goto out_cleanup_ids;
 
        br_write_lock(vfsmount_lock);
 
-       if (IS_MNT_SHARED(dest_mnt)) {
+       if (IS_MNT_SHARED(&dest_mnt->mnt)) {
                for (p = source_mnt; p; p = next_mnt(p, &source_mnt->mnt))
                        set_mnt_shared(p);
        }
@@ -1631,7 +1634,7 @@ static int attach_recursive_mnt(struct mount *source_mnt,
        return 0;
 
  out_cleanup_ids:
-       if (IS_MNT_SHARED(dest_mnt))
+       if (IS_MNT_SHARED(&dest_mnt->mnt))
                cleanup_group_ids(source_mnt, NULL);
  out:
        return err;
@@ -1664,19 +1667,19 @@ static void unlock_mount(struct path *path)
        mutex_unlock(&path->dentry->d_inode->i_mutex);
 }
 
-static int graft_tree(struct vfsmount *mnt, struct path *path)
+static int graft_tree(struct mount *mnt, struct path *path)
 {
-       if (mnt->mnt_sb->s_flags & MS_NOUSER)
+       if (mnt->mnt.mnt_sb->s_flags & MS_NOUSER)
                return -EINVAL;
 
        if (S_ISDIR(path->dentry->d_inode->i_mode) !=
-             S_ISDIR(mnt->mnt_root->d_inode->i_mode))
+             S_ISDIR(mnt->mnt.mnt_root->d_inode->i_mode))
                return -ENOTDIR;
 
        if (d_unlinked(path->dentry))
                return -ENOENT;
 
-       return attach_recursive_mnt(real_mount(mnt), path, NULL);
+       return attach_recursive_mnt(mnt, path, NULL);
 }
 
 /*
@@ -1774,7 +1777,7 @@ static int do_loopback(struct path *path, char *old_name,
        if (!mnt)
                goto out2;
 
-       err = graft_tree(&mnt->mnt, path);
+       err = graft_tree(mnt, path);
        if (err) {
                br_write_lock(vfsmount_lock);
                umount_tree(mnt, 0, &umount_list);
@@ -1799,9 +1802,9 @@ static int change_mount_flags(struct vfsmount *mnt, int ms_flags)
                return 0;
 
        if (readonly_request)
-               error = mnt_make_readonly(mnt);
+               error = mnt_make_readonly(real_mount(mnt));
        else
-               __mnt_unmake_readonly(mnt);
+               __mnt_unmake_readonly(real_mount(mnt));
        return error;
 }
 
@@ -1899,7 +1902,7 @@ static int do_move_mount(struct path *path, char *old_name)
        /*
         * Don't move a mount residing in a shared parent.
         */
-       if (IS_MNT_SHARED(old->mnt_parent))
+       if (IS_MNT_SHARED(&old->mnt_parent->mnt))
                goto out1;
        /*
         * Don't move a mount tree containing unbindable mounts to a destination
@@ -1909,7 +1912,7 @@ static int do_move_mount(struct path *path, char *old_name)
            tree_contains_unbindable(old))
                goto out1;
        err = -ELOOP;
-       for (p = real_mount(path->mnt); mnt_has_parent(p); p = real_mount(p->mnt_parent))
+       for (p = real_mount(path->mnt); mnt_has_parent(p); p = p->mnt_parent)
                if (p == old)
                        goto out1;
 
@@ -1919,7 +1922,7 @@ static int do_move_mount(struct path *path, char *old_name)
 
        /* if the mount is moved, it should no longer be expire
         * automatically */
-       list_del_init(&old_path.mnt->mnt_expire);
+       list_del_init(&old->mnt_expire);
 out1:
        unlock_mount(path);
 out:
@@ -1970,7 +1973,7 @@ do_kern_mount(const char *fstype, int flags, const char *name, void *data)
 /*
  * add a mount into a namespace's mount tree
  */
-static int do_add_mount(struct vfsmount *newmnt, struct path *path, int mnt_flags)
+static int do_add_mount(struct mount *newmnt, struct path *path, int mnt_flags)
 {
        int err;
 
@@ -1986,15 +1989,15 @@ static int do_add_mount(struct vfsmount *newmnt, struct path *path, int mnt_flag
 
        /* Refuse the same filesystem on the same mount point */
        err = -EBUSY;
-       if (path->mnt->mnt_sb == newmnt->mnt_sb &&
+       if (path->mnt->mnt_sb == newmnt->mnt.mnt_sb &&
            path->mnt->mnt_root == path->dentry)
                goto unlock;
 
        err = -EINVAL;
-       if (S_ISLNK(newmnt->mnt_root->d_inode->i_mode))
+       if (S_ISLNK(newmnt->mnt.mnt_root->d_inode->i_mode))
                goto unlock;
 
-       newmnt->mnt_flags = mnt_flags;
+       newmnt->mnt.mnt_flags = mnt_flags;
        err = graft_tree(newmnt, path);
 
 unlock:
@@ -2023,7 +2026,7 @@ static int do_new_mount(struct path *path, char *type, int flags,
        if (IS_ERR(mnt))
                return PTR_ERR(mnt);
 
-       err = do_add_mount(mnt, path, mnt_flags);
+       err = do_add_mount(real_mount(mnt), path, mnt_flags);
        if (err)
                mntput(mnt);
        return err;
@@ -2031,11 +2034,12 @@ static int do_new_mount(struct path *path, char *type, int flags,
 
 int finish_automount(struct vfsmount *m, struct path *path)
 {
+       struct mount *mnt = real_mount(m);
        int err;
        /* The new mount record should have at least 2 refs to prevent it being
         * expired before we get a chance to add it
         */
-       BUG_ON(mnt_get_count(m) < 2);
+       BUG_ON(mnt_get_count(mnt) < 2);
 
        if (m->mnt_sb == path->mnt->mnt_sb &&
            m->mnt_root == path->dentry) {
@@ -2043,15 +2047,15 @@ int finish_automount(struct vfsmount *m, struct path *path)
                goto fail;
        }
 
-       err = do_add_mount(m, path, path->mnt->mnt_flags | MNT_SHRINKABLE);
+       err = do_add_mount(mnt, path, path->mnt->mnt_flags | MNT_SHRINKABLE);
        if (!err)
                return 0;
 fail:
        /* remove m from any expiration list it may be on */
-       if (!list_empty(&m->mnt_expire)) {
+       if (!list_empty(&mnt->mnt_expire)) {
                down_write(&namespace_sem);
                br_write_lock(vfsmount_lock);
-               list_del_init(&m->mnt_expire);
+               list_del_init(&mnt->mnt_expire);
                br_write_unlock(vfsmount_lock);
                up_write(&namespace_sem);
        }
@@ -2070,7 +2074,7 @@ void mnt_set_expiry(struct vfsmount *mnt, struct list_head *expiry_list)
        down_write(&namespace_sem);
        br_write_lock(vfsmount_lock);
 
-       list_add_tail(&mnt->mnt_expire, expiry_list);
+       list_add_tail(&real_mount(mnt)->mnt_expire, expiry_list);
 
        br_write_unlock(vfsmount_lock);
        up_write(&namespace_sem);
@@ -2100,14 +2104,14 @@ void mark_mounts_for_expiry(struct list_head *mounts)
         * - still marked for expiry (marked on the last call here; marks are
         *   cleared by mntput())
         */
-       list_for_each_entry_safe(mnt, next, mounts, mnt.mnt_expire) {
+       list_for_each_entry_safe(mnt, next, mounts, mnt_expire) {
                if (!xchg(&mnt->mnt.mnt_expiry_mark, 1) ||
                        propagate_mount_busy(mnt, 1))
                        continue;
-               list_move(&mnt->mnt.mnt_expire, &graveyard);
+               list_move(&mnt->mnt_expire, &graveyard);
        }
        while (!list_empty(&graveyard)) {
-               mnt = list_first_entry(&graveyard, struct mount, mnt.mnt_expire);
+               mnt = list_first_entry(&graveyard, struct mount, mnt_expire);
                touch_mnt_namespace(mnt->mnt.mnt_ns);
                umount_tree(mnt, 1, &umounts);
        }
@@ -2132,11 +2136,11 @@ static int select_submounts(struct mount *parent, struct list_head *graveyard)
        int found = 0;
 
 repeat:
-       next = this_parent->mnt.mnt_mounts.next;
+       next = this_parent->mnt_mounts.next;
 resume:
-       while (next != &this_parent->mnt.mnt_mounts) {
+       while (next != &this_parent->mnt_mounts) {
                struct list_head *tmp = next;
-               struct mount *mnt = list_entry(tmp, struct mount, mnt.mnt_child);
+               struct mount *mnt = list_entry(tmp, struct mount, mnt_child);
 
                next = tmp->next;
                if (!(mnt->mnt.mnt_flags & MNT_SHRINKABLE))
@@ -2144,13 +2148,13 @@ resume:
                /*
                 * Descend a level if the d_mounts list is non-empty.
                 */
-               if (!list_empty(&mnt->mnt.mnt_mounts)) {
+               if (!list_empty(&mnt->mnt_mounts)) {
                        this_parent = mnt;
                        goto repeat;
                }
 
                if (!propagate_mount_busy(mnt, 1)) {
-                       list_move_tail(&mnt->mnt.mnt_expire, graveyard);
+                       list_move_tail(&mnt->mnt_expire, graveyard);
                        found++;
                }
        }
@@ -2158,8 +2162,8 @@ resume:
         * All done at this level ... ascend and resume the search
         */
        if (this_parent != parent) {
-               next = this_parent->mnt.mnt_child.next;
-               this_parent = real_mount(this_parent->mnt_parent);
+               next = this_parent->mnt_child.next;
+               this_parent = this_parent->mnt_parent;
                goto resume;
        }
        return found;
@@ -2180,7 +2184,7 @@ static void shrink_submounts(struct mount *mnt, struct list_head *umounts)
        while (select_submounts(mnt, &graveyard)) {
                while (!list_empty(&graveyard)) {
                        m = list_first_entry(&graveyard, struct mount,
-                                               mnt.mnt_expire);
+                                               mnt_expire);
                        touch_mnt_namespace(m->mnt.mnt_ns);
                        umount_tree(m, 1, umounts);
                }
@@ -2366,12 +2370,13 @@ static struct mnt_namespace *alloc_mnt_ns(void)
 
 void mnt_make_longterm(struct vfsmount *mnt)
 {
-       __mnt_make_longterm(mnt);
+       __mnt_make_longterm(real_mount(mnt));
 }
 
-void mnt_make_shortterm(struct vfsmount *mnt)
+void mnt_make_shortterm(struct vfsmount *m)
 {
 #ifdef CONFIG_SMP
+       struct mount *mnt = real_mount(m);
        if (atomic_add_unless(&mnt->mnt_longterm, -1, 1))
                return;
        br_write_lock(vfsmount_lock);
@@ -2419,17 +2424,17 @@ static struct mnt_namespace *dup_mnt_ns(struct mnt_namespace *mnt_ns,
        q = new;
        while (p) {
                q->mnt.mnt_ns = new_ns;
-               __mnt_make_longterm(&q->mnt);
+               __mnt_make_longterm(q);
                if (fs) {
                        if (&p->mnt == fs->root.mnt) {
                                fs->root.mnt = mntget(&q->mnt);
-                               __mnt_make_longterm(&q->mnt);
+                               __mnt_make_longterm(q);
                                mnt_make_shortterm(&p->mnt);
                                rootmnt = &p->mnt;
                        }
                        if (&p->mnt == fs->pwd.mnt) {
                                fs->pwd.mnt = mntget(&q->mnt);
-                               __mnt_make_longterm(&q->mnt);
+                               __mnt_make_longterm(q);
                                mnt_make_shortterm(&p->mnt);
                                pwdmnt = &p->mnt;
                        }
@@ -2475,7 +2480,7 @@ static struct mnt_namespace *create_mnt_ns(struct vfsmount *mnt)
        new_ns = alloc_mnt_ns();
        if (!IS_ERR(new_ns)) {
                mnt->mnt_ns = new_ns;
-               __mnt_make_longterm(mnt);
+               __mnt_make_longterm(real_mount(mnt));
                new_ns->root = mnt;
                list_add(&new_ns->list, &new_ns->root->mnt_list);
        } else {
@@ -2564,8 +2569,8 @@ bool is_path_reachable(struct mount *mnt, struct dentry *dentry,
                         const struct path *root)
 {
        while (&mnt->mnt != root->mnt && mnt_has_parent(mnt)) {
-               dentry = mnt->mnt.mnt_mountpoint;
-               mnt = real_mount(mnt->mnt_parent);
+               dentry = mnt->mnt_mountpoint;
+               mnt = mnt->mnt_parent;
        }
        return &mnt->mnt == root->mnt && is_subdir(dentry, root->dentry);
 }
@@ -2636,8 +2641,8 @@ SYSCALL_DEFINE2(pivot_root, const char __user *, new_root,
        new_mnt = real_mount(new.mnt);
        root_mnt = real_mount(root.mnt);
        if (IS_MNT_SHARED(old.mnt) ||
-               IS_MNT_SHARED(new_mnt->mnt_parent) ||
-               IS_MNT_SHARED(root_mnt->mnt_parent))
+               IS_MNT_SHARED(&new_mnt->mnt_parent->mnt) ||
+               IS_MNT_SHARED(&root_mnt->mnt_parent->mnt))
                goto out4;
        if (!check_mnt(root.mnt) || !check_mnt(new.mnt))
                goto out4;
This page took 0.046054 seconds and 5 git commands to generate.