fs/fscache/stats.c: fix memory leak
[linux-2.6.git] / fs / namespace.c
index ced3aa5..4e46539 100644 (file)
@@ -9,30 +9,17 @@
  */
 
 #include <linux/syscalls.h>
-#include <linux/slab.h>
-#include <linux/sched.h>
-#include <linux/spinlock.h>
-#include <linux/percpu.h>
-#include <linux/init.h>
-#include <linux/kernel.h>
-#include <linux/acct.h>
+#include <linux/export.h>
 #include <linux/capability.h>
-#include <linux/cpumask.h>
-#include <linux/module.h>
-#include <linux/sysfs.h>
-#include <linux/seq_file.h>
 #include <linux/mnt_namespace.h>
 #include <linux/namei.h>
-#include <linux/nsproxy.h>
 #include <linux/security.h>
-#include <linux/mount.h>
-#include <linux/ramfs.h>
-#include <linux/log2.h>
 #include <linux/idr.h>
-#include <linux/fs_struct.h>
-#include <linux/fsnotify.h>
-#include <asm/uaccess.h>
-#include <asm/unistd.h>
+#include <linux/acct.h>                /* acct_auto_close_mnt */
+#include <linux/ramfs.h>       /* init_rootfs */
+#include <linux/fs_struct.h>   /* get_fs_root et.al. */
+#include <linux/fsnotify.h>    /* fsnotify_vfsmount_delete */
+#include <linux/uaccess.h>
 #include "pnode.h"
 #include "internal.h"
 
@@ -85,9 +72,9 @@ static int mnt_alloc_id(struct mount *mnt)
 retry:
        ida_pre_get(&mnt_id_ida, GFP_KERNEL);
        spin_lock(&mnt_id_lock);
-       res = ida_get_new_above(&mnt_id_ida, mnt_id_start, &mnt->mnt.mnt_id);
+       res = ida_get_new_above(&mnt_id_ida, mnt_id_start, &mnt->mnt_id);
        if (!res)
-               mnt_id_start = mnt->mnt.mnt_id + 1;
+               mnt_id_start = mnt->mnt_id + 1;
        spin_unlock(&mnt_id_lock);
        if (res == -EAGAIN)
                goto retry;
@@ -97,7 +84,7 @@ retry:
 
 static void mnt_free_id(struct mount *mnt)
 {
-       int id = mnt->mnt.mnt_id;
+       int id = mnt->mnt_id;
        spin_lock(&mnt_id_lock);
        ida_remove(&mnt_id_ida, id);
        if (mnt_id_start > id)
@@ -119,9 +106,9 @@ static int mnt_alloc_group_id(struct mount *mnt)
 
        res = ida_get_new_above(&mnt_group_ida,
                                mnt_group_start,
-                               &mnt->mnt.mnt_group_id);
+                               &mnt->mnt_group_id);
        if (!res)
-               mnt_group_start = mnt->mnt.mnt_group_id + 1;
+               mnt_group_start = mnt->mnt_group_id + 1;
 
        return res;
 }
@@ -131,17 +118,17 @@ static int mnt_alloc_group_id(struct mount *mnt)
  */
 void mnt_release_group_id(struct mount *mnt)
 {
-       int id = mnt->mnt.mnt_group_id;
+       int id = mnt->mnt_group_id;
        ida_remove(&mnt_group_ida, id);
        if (mnt_group_start > id)
                mnt_group_start = id;
-       mnt->mnt.mnt_group_id = 0;
+       mnt->mnt_group_id = 0;
 }
 
 /*
  * vfsmount lock must be held for read
  */
-static inline void mnt_add_count(struct vfsmount *mnt, int n)
+static inline void mnt_add_count(struct mount *mnt, int n)
 {
 #ifdef CONFIG_SMP
        this_cpu_add(mnt->mnt_pcp->mnt_count, n);
@@ -155,7 +142,7 @@ static inline void mnt_add_count(struct vfsmount *mnt, int n)
 /*
  * vfsmount lock must be held for write
  */
-unsigned int mnt_get_count(struct vfsmount *mnt)
+unsigned int mnt_get_count(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        unsigned int count = 0;
@@ -173,12 +160,11 @@ unsigned int mnt_get_count(struct vfsmount *mnt)
 
 static struct mount *alloc_vfsmnt(const char *name)
 {
-       struct mount *p = kmem_cache_zalloc(mnt_cache, GFP_KERNEL);
-       if (p) {
-               struct vfsmount *mnt = &p->mnt;
+       struct mount *mnt = kmem_cache_zalloc(mnt_cache, GFP_KERNEL);
+       if (mnt) {
                int err;
 
-               err = mnt_alloc_id(p);
+               err = mnt_alloc_id(mnt);
                if (err)
                        goto out_free_cache;
 
@@ -199,7 +185,7 @@ static struct mount *alloc_vfsmnt(const char *name)
                mnt->mnt_writers = 0;
 #endif
 
-               INIT_LIST_HEAD(&p->mnt_hash);
+               INIT_LIST_HEAD(&mnt->mnt_hash);
                INIT_LIST_HEAD(&mnt->mnt_child);
                INIT_LIST_HEAD(&mnt->mnt_mounts);
                INIT_LIST_HEAD(&mnt->mnt_list);
@@ -211,16 +197,16 @@ static struct mount *alloc_vfsmnt(const char *name)
                INIT_HLIST_HEAD(&mnt->mnt_fsnotify_marks);
 #endif
        }
-       return p;
+       return mnt;
 
 #ifdef CONFIG_SMP
 out_free_devname:
-       kfree(p->mnt.mnt_devname);
+       kfree(mnt->mnt_devname);
 #endif
 out_free_id:
-       mnt_free_id(p);
+       mnt_free_id(mnt);
 out_free_cache:
-       kmem_cache_free(mnt_cache, p);
+       kmem_cache_free(mnt_cache, mnt);
        return NULL;
 }
 
@@ -253,7 +239,7 @@ int __mnt_is_readonly(struct vfsmount *mnt)
 }
 EXPORT_SYMBOL_GPL(__mnt_is_readonly);
 
-static inline void mnt_inc_writers(struct vfsmount *mnt)
+static inline void mnt_inc_writers(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        this_cpu_inc(mnt->mnt_pcp->mnt_writers);
@@ -262,7 +248,7 @@ static inline void mnt_inc_writers(struct vfsmount *mnt)
 #endif
 }
 
-static inline void mnt_dec_writers(struct vfsmount *mnt)
+static inline void mnt_dec_writers(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        this_cpu_dec(mnt->mnt_pcp->mnt_writers);
@@ -271,7 +257,7 @@ static inline void mnt_dec_writers(struct vfsmount *mnt)
 #endif
 }
 
-static unsigned int mnt_get_writers(struct vfsmount *mnt)
+static unsigned int mnt_get_writers(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        unsigned int count = 0;
@@ -287,6 +273,15 @@ static unsigned int mnt_get_writers(struct vfsmount *mnt)
 #endif
 }
 
+static int mnt_is_readonly(struct vfsmount *mnt)
+{
+       if (mnt->mnt_sb->s_readonly_remount)
+               return 1;
+       /* Order wrt setting s_flags/s_readonly_remount in do_remount() */
+       smp_rmb();
+       return __mnt_is_readonly(mnt);
+}
+
 /*
  * Most r/o checks on a fs are for operations that take
  * discrete amounts of time, like a write() or unlink().
@@ -297,7 +292,7 @@ static unsigned int mnt_get_writers(struct vfsmount *mnt)
  */
 /**
  * mnt_want_write - get write access to a mount
- * @mnt: the mount on which to take a write
+ * @m: the mount on which to take a write
  *
  * This tells the low-level filesystem that a write is
  * about to be performed to it, and makes sure that
@@ -305,8 +300,9 @@ static unsigned int mnt_get_writers(struct vfsmount *mnt)
  * the write operation is finished, mnt_drop_write()
  * must be called.  This is effectively a refcount.
  */
-int mnt_want_write(struct vfsmount *mnt)
+int mnt_want_write(struct vfsmount *m)
 {
+       struct mount *mnt = real_mount(m);
        int ret = 0;
 
        preempt_disable();
@@ -317,7 +313,7 @@ int mnt_want_write(struct vfsmount *mnt)
         * incremented count after it has set MNT_WRITE_HOLD.
         */
        smp_mb();
-       while (mnt->mnt_flags & MNT_WRITE_HOLD)
+       while (mnt->mnt.mnt_flags & MNT_WRITE_HOLD)
                cpu_relax();
        /*
         * After the slowpath clears MNT_WRITE_HOLD, mnt_is_readonly will
@@ -325,12 +321,10 @@ int mnt_want_write(struct vfsmount *mnt)
         * MNT_WRITE_HOLD is cleared.
         */
        smp_rmb();
-       if (__mnt_is_readonly(mnt)) {
+       if (mnt_is_readonly(m)) {
                mnt_dec_writers(mnt);
                ret = -EROFS;
-               goto out;
        }
-out:
        preempt_enable();
        return ret;
 }
@@ -354,7 +348,7 @@ int mnt_clone_write(struct vfsmount *mnt)
        if (__mnt_is_readonly(mnt))
                return -EROFS;
        preempt_disable();
-       mnt_inc_writers(mnt);
+       mnt_inc_writers(real_mount(mnt));
        preempt_enable();
        return 0;
 }
@@ -388,7 +382,7 @@ EXPORT_SYMBOL_GPL(mnt_want_write_file);
 void mnt_drop_write(struct vfsmount *mnt)
 {
        preempt_disable();
-       mnt_dec_writers(mnt);
+       mnt_dec_writers(real_mount(mnt));
        preempt_enable();
 }
 EXPORT_SYMBOL_GPL(mnt_drop_write);
@@ -399,12 +393,12 @@ void mnt_drop_write_file(struct file *file)
 }
 EXPORT_SYMBOL(mnt_drop_write_file);
 
-static int mnt_make_readonly(struct vfsmount *mnt)
+static int mnt_make_readonly(struct mount *mnt)
 {
        int ret = 0;
 
        br_write_lock(vfsmount_lock);
-       mnt->mnt_flags |= MNT_WRITE_HOLD;
+       mnt->mnt.mnt_flags |= MNT_WRITE_HOLD;
        /*
         * After storing MNT_WRITE_HOLD, we'll read the counters. This store
         * should be visible before we do.
@@ -430,30 +424,66 @@ static int mnt_make_readonly(struct vfsmount *mnt)
        if (mnt_get_writers(mnt) > 0)
                ret = -EBUSY;
        else
-               mnt->mnt_flags |= MNT_READONLY;
+               mnt->mnt.mnt_flags |= MNT_READONLY;
        /*
         * MNT_READONLY must become visible before ~MNT_WRITE_HOLD, so writers
         * that become unheld will see MNT_READONLY.
         */
        smp_wmb();
-       mnt->mnt_flags &= ~MNT_WRITE_HOLD;
+       mnt->mnt.mnt_flags &= ~MNT_WRITE_HOLD;
        br_write_unlock(vfsmount_lock);
        return ret;
 }
 
-static void __mnt_unmake_readonly(struct vfsmount *mnt)
+static void __mnt_unmake_readonly(struct mount *mnt)
 {
        br_write_lock(vfsmount_lock);
-       mnt->mnt_flags &= ~MNT_READONLY;
+       mnt->mnt.mnt_flags &= ~MNT_READONLY;
        br_write_unlock(vfsmount_lock);
 }
 
+int sb_prepare_remount_readonly(struct super_block *sb)
+{
+       struct mount *mnt;
+       int err = 0;
+
+       /* Racy optimization.  Recheck the counter under MNT_WRITE_HOLD */
+       if (atomic_long_read(&sb->s_remove_count))
+               return -EBUSY;
+
+       br_write_lock(vfsmount_lock);
+       list_for_each_entry(mnt, &sb->s_mounts, mnt_instance) {
+               if (!(mnt->mnt.mnt_flags & MNT_READONLY)) {
+                       mnt->mnt.mnt_flags |= MNT_WRITE_HOLD;
+                       smp_mb();
+                       if (mnt_get_writers(mnt) > 0) {
+                               err = -EBUSY;
+                               break;
+                       }
+               }
+       }
+       if (!err && atomic_long_read(&sb->s_remove_count))
+               err = -EBUSY;
+
+       if (!err) {
+               sb->s_readonly_remount = 1;
+               smp_wmb();
+       }
+       list_for_each_entry(mnt, &sb->s_mounts, mnt_instance) {
+               if (mnt->mnt.mnt_flags & MNT_WRITE_HOLD)
+                       mnt->mnt.mnt_flags &= ~MNT_WRITE_HOLD;
+       }
+       br_write_unlock(vfsmount_lock);
+
+       return err;
+}
+
 static void free_vfsmnt(struct mount *mnt)
 {
-       kfree(mnt->mnt.mnt_devname);
+       kfree(mnt->mnt_devname);
        mnt_free_id(mnt);
 #ifdef CONFIG_SMP
-       free_percpu(mnt->mnt.mnt_pcp);
+       free_percpu(mnt->mnt_pcp);
 #endif
        kmem_cache_free(mnt_cache, mnt);
 }
@@ -476,7 +506,7 @@ struct mount *__lookup_mnt(struct vfsmount *mnt, struct dentry *dentry,
                if (tmp == head)
                        break;
                p = list_entry(tmp, struct mount, mnt_hash);
-               if (p->mnt.mnt_parent == mnt && p->mnt.mnt_mountpoint == dentry) {
+               if (&p->mnt_parent->mnt == mnt && p->mnt_mountpoint == dentry) {
                        found = p;
                        break;
                }
@@ -504,7 +534,7 @@ struct vfsmount *lookup_mnt(struct path *path)
        }
 }
 
-static inline int check_mnt(struct vfsmount *mnt)
+static inline int check_mnt(struct mount *mnt)
 {
        return mnt->mnt_ns == current->nsproxy->mnt_ns;
 }
@@ -543,7 +573,7 @@ static void dentry_reset_mounted(struct dentry *dentry)
                struct mount *p;
 
                list_for_each_entry(p, &mount_hashtable[u], mnt_hash) {
-                       if (p->mnt.mnt_mountpoint == dentry)
+                       if (p->mnt_mountpoint == dentry)
                                return;
                }
        }
@@ -557,11 +587,11 @@ static void dentry_reset_mounted(struct dentry *dentry)
  */
 static void detach_mnt(struct mount *mnt, struct path *old_path)
 {
-       old_path->dentry = mnt->mnt.mnt_mountpoint;
-       old_path->mnt = mnt->mnt.mnt_parent;
-       mnt->mnt.mnt_parent = &mnt->mnt;
-       mnt->mnt.mnt_mountpoint = mnt->mnt.mnt_root;
-       list_del_init(&mnt->mnt.mnt_child);
+       old_path->dentry = mnt->mnt_mountpoint;
+       old_path->mnt = &mnt->mnt_parent->mnt;
+       mnt->mnt_parent = mnt;
+       mnt->mnt_mountpoint = mnt->mnt.mnt_root;
+       list_del_init(&mnt->mnt_child);
        list_del_init(&mnt->mnt_hash);
        dentry_reset_mounted(old_path->dentry);
 }
@@ -569,11 +599,12 @@ static void detach_mnt(struct mount *mnt, struct path *old_path)
 /*
  * vfsmount lock must be held for write
  */
-void mnt_set_mountpoint(struct vfsmount *mnt, struct dentry *dentry,
+void mnt_set_mountpoint(struct mount *mnt, struct dentry *dentry,
                        struct mount *child_mnt)
 {
-       child_mnt->mnt.mnt_parent = mntget(mnt);
-       child_mnt->mnt.mnt_mountpoint = dget(dentry);
+       mnt_add_count(mnt, 1);  /* essentially, that's mntget */
+       child_mnt->mnt_mountpoint = dget(dentry);
+       child_mnt->mnt_parent = mnt;
        spin_lock(&dentry->d_lock);
        dentry->d_flags |= DCACHE_MOUNTED;
        spin_unlock(&dentry->d_lock);
@@ -584,13 +615,13 @@ void mnt_set_mountpoint(struct vfsmount *mnt, struct dentry *dentry,
  */
 static void attach_mnt(struct mount *mnt, struct path *path)
 {
-       mnt_set_mountpoint(path->mnt, path->dentry, mnt);
+       mnt_set_mountpoint(real_mount(path->mnt), path->dentry, mnt);
        list_add_tail(&mnt->mnt_hash, mount_hashtable +
                        hash(path->mnt, path->dentry));
-       list_add_tail(&mnt->mnt.mnt_child, &path->mnt->mnt_mounts);
+       list_add_tail(&mnt->mnt_child, &real_mount(path->mnt)->mnt_mounts);
 }
 
-static inline void __mnt_make_longterm(struct vfsmount *mnt)
+static inline void __mnt_make_longterm(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        atomic_inc(&mnt->mnt_longterm);
@@ -598,7 +629,7 @@ static inline void __mnt_make_longterm(struct vfsmount *mnt)
 }
 
 /* needs vfsmount lock for write */
-static inline void __mnt_make_shortterm(struct vfsmount *mnt)
+static inline void __mnt_make_shortterm(struct mount *mnt)
 {
 #ifdef CONFIG_SMP
        atomic_dec(&mnt->mnt_longterm);
@@ -610,14 +641,14 @@ static inline void __mnt_make_shortterm(struct vfsmount *mnt)
  */
 static void commit_tree(struct mount *mnt)
 {
-       struct vfsmount *parent = mnt->mnt.mnt_parent;
-       struct vfsmount *m;
+       struct mount *parent = mnt->mnt_parent;
+       struct mount *m;
        LIST_HEAD(head);
        struct mnt_namespace *n = parent->mnt_ns;
 
-       BUG_ON(parent == &mnt->mnt);
+       BUG_ON(parent == mnt);
 
-       list_add_tail(&head, &mnt->mnt.mnt_list);
+       list_add_tail(&head, &mnt->mnt_list);
        list_for_each_entry(m, &head, mnt_list) {
                m->mnt_ns = n;
                __mnt_make_longterm(m);
@@ -626,33 +657,33 @@ static void commit_tree(struct mount *mnt)
        list_splice(&head, n->list.prev);
 
        list_add_tail(&mnt->mnt_hash, mount_hashtable +
-                               hash(parent, mnt->mnt.mnt_mountpoint));
-       list_add_tail(&mnt->mnt.mnt_child, &parent->mnt_mounts);
+                               hash(&parent->mnt, mnt->mnt_mountpoint));
+       list_add_tail(&mnt->mnt_child, &parent->mnt_mounts);
        touch_mnt_namespace(n);
 }
 
-static struct mount *next_mnt(struct mount *p, struct vfsmount *root)
+static struct mount *next_mnt(struct mount *p, struct mount *root)
 {
-       struct list_head *next = p->mnt.mnt_mounts.next;
-       if (next == &p->mnt.mnt_mounts) {
+       struct list_head *next = p->mnt_mounts.next;
+       if (next == &p->mnt_mounts) {
                while (1) {
-                       if (&p->mnt == root)
+                       if (p == root)
                                return NULL;
-                       next = p->mnt.mnt_child.next;
-                       if (next != &p->mnt.mnt_parent->mnt_mounts)
+                       next = p->mnt_child.next;
+                       if (next != &p->mnt_parent->mnt_mounts)
                                break;
-                       p = real_mount(p->mnt.mnt_parent);
+                       p = p->mnt_parent;
                }
        }
-       return list_entry(next, struct mount, mnt.mnt_child);
+       return list_entry(next, struct mount, mnt_child);
 }
 
 static struct mount *skip_mnt_tree(struct mount *p)
 {
-       struct list_head *prev = p->mnt.mnt_mounts.prev;
-       while (prev != &p->mnt.mnt_mounts) {
-               p = list_entry(prev, struct mount, mnt.mnt_child);
-               prev = p->mnt.mnt_mounts.prev;
+       struct list_head *prev = p->mnt_mounts.prev;
+       while (prev != &p->mnt_mounts) {
+               p = list_entry(prev, struct mount, mnt_child);
+               prev = p->mnt_mounts.prev;
        }
        return p;
 }
@@ -681,8 +712,11 @@ vfs_kern_mount(struct file_system_type *type, int flags, const char *name, void
 
        mnt->mnt.mnt_root = root;
        mnt->mnt.mnt_sb = root->d_sb;
-       mnt->mnt.mnt_mountpoint = mnt->mnt.mnt_root;
-       mnt->mnt.mnt_parent = &mnt->mnt;
+       mnt->mnt_mountpoint = mnt->mnt.mnt_root;
+       mnt->mnt_parent = mnt;
+       br_write_lock(vfsmount_lock);
+       list_add_tail(&mnt->mnt_instance, &root->d_sb->s_mounts);
+       br_write_unlock(vfsmount_lock);
        return &mnt->mnt;
 }
 EXPORT_SYMBOL_GPL(vfs_kern_mount);
@@ -691,15 +725,15 @@ static struct mount *clone_mnt(struct mount *old, struct dentry *root,
                                        int flag)
 {
        struct super_block *sb = old->mnt.mnt_sb;
-       struct mount *mnt = alloc_vfsmnt(old->mnt.mnt_devname);
+       struct mount *mnt = alloc_vfsmnt(old->mnt_devname);
 
        if (mnt) {
                if (flag & (CL_SLAVE | CL_PRIVATE))
-                       mnt->mnt.mnt_group_id = 0; /* not a peer of original */
+                       mnt->mnt_group_id = 0; /* not a peer of original */
                else
-                       mnt->mnt.mnt_group_id = old->mnt.mnt_group_id;
+                       mnt->mnt_group_id = old->mnt_group_id;
 
-               if ((flag & CL_MAKE_SHARED) && !mnt->mnt.mnt_group_id) {
+               if ((flag & CL_MAKE_SHARED) && !mnt->mnt_group_id) {
                        int err = mnt_alloc_group_id(mnt);
                        if (err)
                                goto out_free;
@@ -709,19 +743,22 @@ static struct mount *clone_mnt(struct mount *old, struct dentry *root,
                atomic_inc(&sb->s_active);
                mnt->mnt.mnt_sb = sb;
                mnt->mnt.mnt_root = dget(root);
-               mnt->mnt.mnt_mountpoint = mnt->mnt.mnt_root;
-               mnt->mnt.mnt_parent = &mnt->mnt;
+               mnt->mnt_mountpoint = mnt->mnt.mnt_root;
+               mnt->mnt_parent = mnt;
+               br_write_lock(vfsmount_lock);
+               list_add_tail(&mnt->mnt_instance, &sb->s_mounts);
+               br_write_unlock(vfsmount_lock);
 
                if (flag & CL_SLAVE) {
-                       list_add(&mnt->mnt.mnt_slave, &old->mnt.mnt_slave_list);
-                       mnt->mnt.mnt_master = &old->mnt;
-                       CLEAR_MNT_SHARED(&mnt->mnt);
+                       list_add(&mnt->mnt_slave, &old->mnt_slave_list);
+                       mnt->mnt_master = old;
+                       CLEAR_MNT_SHARED(mnt);
                } else if (!(flag & CL_PRIVATE)) {
-                       if ((flag & CL_MAKE_SHARED) || IS_MNT_SHARED(&old->mnt))
-                               list_add(&mnt->mnt.mnt_share, &old->mnt.mnt_share);
-                       if (IS_MNT_SLAVE(&old->mnt))
-                               list_add(&mnt->mnt.mnt_slave, &old->mnt.mnt_slave);
-                       mnt->mnt.mnt_master = old->mnt.mnt_master;
+                       if ((flag & CL_MAKE_SHARED) || IS_MNT_SHARED(old))
+                               list_add(&mnt->mnt_share, &old->mnt_share);
+                       if (IS_MNT_SLAVE(old))
+                               list_add(&mnt->mnt_slave, &old->mnt_slave);
+                       mnt->mnt_master = old->mnt_master;
                }
                if (flag & CL_MAKE_SHARED)
                        set_mnt_shared(mnt);
@@ -729,8 +766,8 @@ static struct mount *clone_mnt(struct mount *old, struct dentry *root,
                /* stick the duplicate mount on the same expiry list
                 * as the original if that was on one */
                if (flag & CL_EXPIRE) {
-                       if (!list_empty(&old->mnt.mnt_expire))
-                               list_add(&mnt->mnt.mnt_expire, &old->mnt.mnt_expire);
+                       if (!list_empty(&old->mnt_expire))
+                               list_add(&mnt->mnt_expire, &old->mnt_expire);
                }
        }
        return mnt;
@@ -740,9 +777,10 @@ static struct mount *clone_mnt(struct mount *old, struct dentry *root,
        return NULL;
 }
 
-static inline void mntfree(struct vfsmount *mnt)
+static inline void mntfree(struct mount *mnt)
 {
-       struct super_block *sb = mnt->mnt_sb;
+       struct vfsmount *m = &mnt->mnt;
+       struct super_block *sb = m->mnt_sb;
 
        /*
         * This probably indicates that somebody messed
@@ -755,13 +793,13 @@ static inline void mntfree(struct vfsmount *mnt)
         * so mnt_get_writers() below is safe.
         */
        WARN_ON(mnt_get_writers(mnt));
-       fsnotify_vfsmount_delete(mnt);
-       dput(mnt->mnt_root);
-       free_vfsmnt(real_mount(mnt));
+       fsnotify_vfsmount_delete(m);
+       dput(m->mnt_root);
+       free_vfsmnt(mnt);
        deactivate_super(sb);
 }
 
-static void mntput_no_expire(struct vfsmount *mnt)
+static void mntput_no_expire(struct mount *mnt)
 {
 put_again:
 #ifdef CONFIG_SMP
@@ -789,9 +827,10 @@ put_again:
                mnt_add_count(mnt, mnt->mnt_pinned + 1);
                mnt->mnt_pinned = 0;
                br_write_unlock(vfsmount_lock);
-               acct_auto_close_mnt(mnt);
+               acct_auto_close_mnt(&mnt->mnt);
                goto put_again;
        }
+       list_del(&mnt->mnt_instance);
        br_write_unlock(vfsmount_lock);
        mntfree(mnt);
 }
@@ -799,10 +838,11 @@ put_again:
 void mntput(struct vfsmount *mnt)
 {
        if (mnt) {
+               struct mount *m = real_mount(mnt);
                /* avoid cacheline pingpong, hope gcc doesn't get "smart" */
-               if (unlikely(mnt->mnt_expiry_mark))
-                       mnt->mnt_expiry_mark = 0;
-               mntput_no_expire(mnt);
+               if (unlikely(m->mnt_expiry_mark))
+                       m->mnt_expiry_mark = 0;
+               mntput_no_expire(m);
        }
 }
 EXPORT_SYMBOL(mntput);
@@ -810,7 +850,7 @@ EXPORT_SYMBOL(mntput);
 struct vfsmount *mntget(struct vfsmount *mnt)
 {
        if (mnt)
-               mnt_add_count(mnt, 1);
+               mnt_add_count(real_mount(mnt), 1);
        return mnt;
 }
 EXPORT_SYMBOL(mntget);
@@ -818,13 +858,14 @@ EXPORT_SYMBOL(mntget);
 void mnt_pin(struct vfsmount *mnt)
 {
        br_write_lock(vfsmount_lock);
-       mnt->mnt_pinned++;
+       real_mount(mnt)->mnt_pinned++;
        br_write_unlock(vfsmount_lock);
 }
 EXPORT_SYMBOL(mnt_pin);
 
-void mnt_unpin(struct vfsmount *mnt)
+void mnt_unpin(struct vfsmount *m)
 {
+       struct mount *mnt = real_mount(m);
        br_write_lock(vfsmount_lock);
        if (mnt->mnt_pinned) {
                mnt_add_count(mnt, 1);
@@ -845,12 +886,12 @@ static inline void mangle(struct seq_file *m, const char *s)
  *
  * See also save_mount_options().
  */
-int generic_show_options(struct seq_file *m, struct vfsmount *mnt)
+int generic_show_options(struct seq_file *m, struct dentry *root)
 {
        const char *options;
 
        rcu_read_lock();
-       options = rcu_dereference(mnt->mnt_sb->s_options);
+       options = rcu_dereference(root->d_sb->s_options);
 
        if (options != NULL && options[0]) {
                seq_putc(m, ',');
@@ -894,10 +935,10 @@ void replace_mount_options(struct super_block *sb, char *options)
 EXPORT_SYMBOL(replace_mount_options);
 
 #ifdef CONFIG_PROC_FS
-/* iterator */
+/* iterator; we want it to have access to namespace_sem, thus here... */
 static void *m_start(struct seq_file *m, loff_t *pos)
 {
-       struct proc_mounts *p = m->private;
+       struct proc_mounts *p = container_of(m, struct proc_mounts, m);
 
        down_read(&namespace_sem);
        return seq_list_start(&p->ns->list, *pos);
@@ -905,7 +946,7 @@ static void *m_start(struct seq_file *m, loff_t *pos)
 
 static void *m_next(struct seq_file *m, void *v, loff_t *pos)
 {
-       struct proc_mounts *p = m->private;
+       struct proc_mounts *p = container_of(m, struct proc_mounts, m);
 
        return seq_list_next(v, &p->ns->list, pos);
 }
@@ -915,219 +956,18 @@ static void m_stop(struct seq_file *m, void *v)
        up_read(&namespace_sem);
 }
 
-int mnt_had_events(struct proc_mounts *p)
-{
-       struct mnt_namespace *ns = p->ns;
-       int res = 0;
-
-       br_read_lock(vfsmount_lock);
-       if (p->m.poll_event != ns->event) {
-               p->m.poll_event = ns->event;
-               res = 1;
-       }
-       br_read_unlock(vfsmount_lock);
-
-       return res;
-}
-
-struct proc_fs_info {
-       int flag;
-       const char *str;
-};
-
-static int show_sb_opts(struct seq_file *m, struct super_block *sb)
-{
-       static const struct proc_fs_info fs_info[] = {
-               { MS_SYNCHRONOUS, ",sync" },
-               { MS_DIRSYNC, ",dirsync" },
-               { MS_MANDLOCK, ",mand" },
-               { 0, NULL }
-       };
-       const struct proc_fs_info *fs_infop;
-
-       for (fs_infop = fs_info; fs_infop->flag; fs_infop++) {
-               if (sb->s_flags & fs_infop->flag)
-                       seq_puts(m, fs_infop->str);
-       }
-
-       return security_sb_show_options(m, sb);
-}
-
-static void show_mnt_opts(struct seq_file *m, struct vfsmount *mnt)
+static int m_show(struct seq_file *m, void *v)
 {
-       static const struct proc_fs_info mnt_info[] = {
-               { MNT_NOSUID, ",nosuid" },
-               { MNT_NODEV, ",nodev" },
-               { MNT_NOEXEC, ",noexec" },
-               { MNT_NOATIME, ",noatime" },
-               { MNT_NODIRATIME, ",nodiratime" },
-               { MNT_RELATIME, ",relatime" },
-               { 0, NULL }
-       };
-       const struct proc_fs_info *fs_infop;
-
-       for (fs_infop = mnt_info; fs_infop->flag; fs_infop++) {
-               if (mnt->mnt_flags & fs_infop->flag)
-                       seq_puts(m, fs_infop->str);
-       }
-}
-
-static void show_type(struct seq_file *m, struct super_block *sb)
-{
-       mangle(m, sb->s_type->name);
-       if (sb->s_subtype && sb->s_subtype[0]) {
-               seq_putc(m, '.');
-               mangle(m, sb->s_subtype);
-       }
-}
-
-static int show_vfsmnt(struct seq_file *m, void *v)
-{
-       struct vfsmount *mnt = list_entry(v, struct vfsmount, mnt_list);
-       int err = 0;
-       struct path mnt_path = { .dentry = mnt->mnt_root, .mnt = mnt };
-
-       if (mnt->mnt_sb->s_op->show_devname) {
-               err = mnt->mnt_sb->s_op->show_devname(m, mnt);
-               if (err)
-                       goto out;
-       } else {
-               mangle(m, mnt->mnt_devname ? mnt->mnt_devname : "none");
-       }
-       seq_putc(m, ' ');
-       seq_path(m, &mnt_path, " \t\n\\");
-       seq_putc(m, ' ');
-       show_type(m, mnt->mnt_sb);
-       seq_puts(m, __mnt_is_readonly(mnt) ? " ro" : " rw");
-       err = show_sb_opts(m, mnt->mnt_sb);
-       if (err)
-               goto out;
-       show_mnt_opts(m, mnt);
-       if (mnt->mnt_sb->s_op->show_options)
-               err = mnt->mnt_sb->s_op->show_options(m, mnt);
-       seq_puts(m, " 0 0\n");
-out:
-       return err;
+       struct proc_mounts *p = container_of(m, struct proc_mounts, m);
+       struct mount *r = list_entry(v, struct mount, mnt_list);
+       return p->show(m, &r->mnt);
 }
 
 const struct seq_operations mounts_op = {
        .start  = m_start,
        .next   = m_next,
        .stop   = m_stop,
-       .show   = show_vfsmnt
-};
-
-static int show_mountinfo(struct seq_file *m, void *v)
-{
-       struct proc_mounts *p = m->private;
-       struct vfsmount *mnt = list_entry(v, struct vfsmount, mnt_list);
-       struct super_block *sb = mnt->mnt_sb;
-       struct path mnt_path = { .dentry = mnt->mnt_root, .mnt = mnt };
-       struct path root = p->root;
-       int err = 0;
-
-       seq_printf(m, "%i %i %u:%u ", mnt->mnt_id, mnt->mnt_parent->mnt_id,
-                  MAJOR(sb->s_dev), MINOR(sb->s_dev));
-       if (sb->s_op->show_path)
-               err = sb->s_op->show_path(m, mnt);
-       else
-               seq_dentry(m, mnt->mnt_root, " \t\n\\");
-       if (err)
-               goto out;
-       seq_putc(m, ' ');
-
-       /* mountpoints outside of chroot jail will give SEQ_SKIP on this */
-       err = seq_path_root(m, &mnt_path, &root, " \t\n\\");
-       if (err)
-               goto out;
-
-       seq_puts(m, mnt->mnt_flags & MNT_READONLY ? " ro" : " rw");
-       show_mnt_opts(m, mnt);
-
-       /* Tagged fields ("foo:X" or "bar") */
-       if (IS_MNT_SHARED(mnt))
-               seq_printf(m, " shared:%i", mnt->mnt_group_id);
-       if (IS_MNT_SLAVE(mnt)) {
-               int master = mnt->mnt_master->mnt_group_id;
-               int dom = get_dominating_id(mnt, &p->root);
-               seq_printf(m, " master:%i", master);
-               if (dom && dom != master)
-                       seq_printf(m, " propagate_from:%i", dom);
-       }
-       if (IS_MNT_UNBINDABLE(mnt))
-               seq_puts(m, " unbindable");
-
-       /* Filesystem specific data */
-       seq_puts(m, " - ");
-       show_type(m, sb);
-       seq_putc(m, ' ');
-       if (sb->s_op->show_devname)
-               err = sb->s_op->show_devname(m, mnt);
-       else
-               mangle(m, mnt->mnt_devname ? mnt->mnt_devname : "none");
-       if (err)
-               goto out;
-       seq_puts(m, sb->s_flags & MS_RDONLY ? " ro" : " rw");
-       err = show_sb_opts(m, sb);
-       if (err)
-               goto out;
-       if (sb->s_op->show_options)
-               err = sb->s_op->show_options(m, mnt);
-       seq_putc(m, '\n');
-out:
-       return err;
-}
-
-const struct seq_operations mountinfo_op = {
-       .start  = m_start,
-       .next   = m_next,
-       .stop   = m_stop,
-       .show   = show_mountinfo,
-};
-
-static int show_vfsstat(struct seq_file *m, void *v)
-{
-       struct vfsmount *mnt = list_entry(v, struct vfsmount, mnt_list);
-       struct path mnt_path = { .dentry = mnt->mnt_root, .mnt = mnt };
-       int err = 0;
-
-       /* device */
-       if (mnt->mnt_sb->s_op->show_devname) {
-               seq_puts(m, "device ");
-               err = mnt->mnt_sb->s_op->show_devname(m, mnt);
-       } else {
-               if (mnt->mnt_devname) {
-                       seq_puts(m, "device ");
-                       mangle(m, mnt->mnt_devname);
-               } else
-                       seq_puts(m, "no device");
-       }
-
-       /* mount point */
-       seq_puts(m, " mounted on ");
-       seq_path(m, &mnt_path, " \t\n\\");
-       seq_putc(m, ' ');
-
-       /* file system type */
-       seq_puts(m, "with fstype ");
-       show_type(m, mnt->mnt_sb);
-
-       /* optional statistics */
-       if (mnt->mnt_sb->s_op->show_stats) {
-               seq_putc(m, ' ');
-               if (!err)
-                       err = mnt->mnt_sb->s_op->show_stats(m, mnt);
-       }
-
-       seq_putc(m, '\n');
-       return err;
-}
-
-const struct seq_operations mountstats_op = {
-       .start  = m_start,
-       .next   = m_next,
-       .stop   = m_stop,
-       .show   = show_vfsstat,
+       .show   = m_show,
 };
 #endif  /* CONFIG_PROC_FS */
 
@@ -1139,17 +979,18 @@ const struct seq_operations mountstats_op = {
  * open files, pwds, chroots or sub mounts that are
  * busy.
  */
-int may_umount_tree(struct vfsmount *mnt)
+int may_umount_tree(struct vfsmount *m)
 {
+       struct mount *mnt = real_mount(m);
        int actual_refs = 0;
        int minimum_refs = 0;
        struct mount *p;
-       BUG_ON(!mnt);
+       BUG_ON(!m);
 
        /* write lock needed for mnt_get_count */
        br_write_lock(vfsmount_lock);
-       for (p = real_mount(mnt); p; p = next_mnt(p, mnt)) {
-               actual_refs += mnt_get_count(&p->mnt);
+       for (p = mnt; p; p = next_mnt(p, mnt)) {
+               actual_refs += mnt_get_count(p);
                minimum_refs += 2;
        }
        br_write_unlock(vfsmount_lock);
@@ -1197,17 +1038,17 @@ void release_mounts(struct list_head *head)
                list_del_init(&mnt->mnt_hash);
                if (mnt_has_parent(mnt)) {
                        struct dentry *dentry;
-                       struct vfsmount *m;
+                       struct mount *m;
 
                        br_write_lock(vfsmount_lock);
-                       dentry = mnt->mnt.mnt_mountpoint;
-                       m = mnt->mnt.mnt_parent;
-                       mnt->mnt.mnt_mountpoint = mnt->mnt.mnt_root;
-                       mnt->mnt.mnt_parent = &mnt->mnt;
+                       dentry = mnt->mnt_mountpoint;
+                       m = mnt->mnt_parent;
+                       mnt->mnt_mountpoint = mnt->mnt.mnt_root;
+                       mnt->mnt_parent = mnt;
                        m->mnt_ghosts--;
                        br_write_unlock(vfsmount_lock);
                        dput(dentry);
-                       mntput(m);
+                       mntput(&m->mnt);
                }
                mntput(&mnt->mnt);
        }
@@ -1222,22 +1063,23 @@ void umount_tree(struct mount *mnt, int propagate, struct list_head *kill)
        LIST_HEAD(tmp_list);
        struct mount *p;
 
-       for (p = mnt; p; p = next_mnt(p, &mnt->mnt))
+       for (p = mnt; p; p = next_mnt(p, mnt))
                list_move(&p->mnt_hash, &tmp_list);
 
        if (propagate)
                propagate_umount(&tmp_list);
 
        list_for_each_entry(p, &tmp_list, mnt_hash) {
-               list_del_init(&p->mnt.mnt_expire);
-               list_del_init(&p->mnt.mnt_list);
-               __touch_mnt_namespace(p->mnt.mnt_ns);
-               p->mnt.mnt_ns = NULL;
-               __mnt_make_shortterm(&p->mnt);
-               list_del_init(&p->mnt.mnt_child);
+               list_del_init(&p->mnt_expire);
+               list_del_init(&p->mnt_list);
+               __touch_mnt_namespace(p->mnt_ns);
+               if (p->mnt_ns)
+                       __mnt_make_shortterm(p);
+               p->mnt_ns = NULL;
+               list_del_init(&p->mnt_child);
                if (mnt_has_parent(p)) {
-                       p->mnt.mnt_parent->mnt_ghosts++;
-                       dentry_reset_mounted(p->mnt.mnt_mountpoint);
+                       p->mnt_parent->mnt_ghosts++;
+                       dentry_reset_mounted(p->mnt_mountpoint);
                }
                change_mnt_propagation(p, MS_PRIVATE);
        }
@@ -1272,13 +1114,13 @@ static int do_umount(struct mount *mnt, int flags)
                 * all race cases, but it's a slowpath.
                 */
                br_write_lock(vfsmount_lock);
-               if (mnt_get_count(&mnt->mnt) != 2) {
+               if (mnt_get_count(mnt) != 2) {
                        br_write_unlock(vfsmount_lock);
                        return -EBUSY;
                }
                br_write_unlock(vfsmount_lock);
 
-               if (!xchg(&mnt->mnt.mnt_expiry_mark, 1))
+               if (!xchg(&mnt->mnt_expiry_mark, 1))
                        return -EAGAIN;
        }
 
@@ -1326,7 +1168,7 @@ static int do_umount(struct mount *mnt, int flags)
 
        retval = -EBUSY;
        if (flags & MNT_DETACH || !propagate_mount_busy(mnt, 2)) {
-               if (!list_empty(&mnt->mnt.mnt_list))
+               if (!list_empty(&mnt->mnt_list))
                        umount_tree(mnt, 1, &umount_list);
                retval = 0;
        }
@@ -1347,6 +1189,7 @@ static int do_umount(struct mount *mnt, int flags)
 SYSCALL_DEFINE2(umount, char __user *, name, int, flags)
 {
        struct path path;
+       struct mount *mnt;
        int retval;
        int lookup_flags = 0;
 
@@ -1359,21 +1202,22 @@ SYSCALL_DEFINE2(umount, char __user *, name, int, flags)
        retval = user_path_at(AT_FDCWD, name, lookup_flags, &path);
        if (retval)
                goto out;
+       mnt = real_mount(path.mnt);
        retval = -EINVAL;
        if (path.dentry != path.mnt->mnt_root)
                goto dput_and_out;
-       if (!check_mnt(path.mnt))
+       if (!check_mnt(mnt))
                goto dput_and_out;
 
        retval = -EPERM;
        if (!capable(CAP_SYS_ADMIN))
                goto dput_and_out;
 
-       retval = do_umount(real_mount(path.mnt), flags);
+       retval = do_umount(mnt, flags);
 dput_and_out:
        /* we mustn't call path_put() as that would clear mnt_expiry_mark */
        dput(path.dentry);
-       mntput_no_expire(path.mnt);
+       mntput_no_expire(mnt);
 out:
        return retval;
 }
@@ -1411,41 +1255,40 @@ static int mount_is_safe(struct path *path)
 struct mount *copy_tree(struct mount *mnt, struct dentry *dentry,
                                        int flag)
 {
-       struct mount *res, *p, *q;
-       struct vfsmount *r;
+       struct mount *res, *p, *q, *r;
        struct path path;
 
-       if (!(flag & CL_COPY_ALL) && IS_MNT_UNBINDABLE(&mnt->mnt))
+       if (!(flag & CL_COPY_ALL) && IS_MNT_UNBINDABLE(mnt))
                return NULL;
 
        res = q = clone_mnt(mnt, dentry, flag);
        if (!q)
                goto Enomem;
-       q->mnt.mnt_mountpoint = mnt->mnt.mnt_mountpoint;
+       q->mnt_mountpoint = mnt->mnt_mountpoint;
 
        p = mnt;
-       list_for_each_entry(r, &mnt->mnt.mnt_mounts, mnt_child) {
+       list_for_each_entry(r, &mnt->mnt_mounts, mnt_child) {
                struct mount *s;
                if (!is_subdir(r->mnt_mountpoint, dentry))
                        continue;
 
-               for (s = real_mount(r); s; s = next_mnt(s, r)) {
-                       if (!(flag & CL_COPY_ALL) && IS_MNT_UNBINDABLE(&s->mnt)) {
+               for (s = r; s; s = next_mnt(s, r)) {
+                       if (!(flag & CL_COPY_ALL) && IS_MNT_UNBINDABLE(s)) {
                                s = skip_mnt_tree(s);
                                continue;
                        }
-                       while (p != real_mount(s->mnt.mnt_parent)) {
-                               p = real_mount(p->mnt.mnt_parent);
-                               q = real_mount(q->mnt.mnt_parent);
+                       while (p != s->mnt_parent) {
+                               p = p->mnt_parent;
+                               q = q->mnt_parent;
                        }
                        p = s;
                        path.mnt = &q->mnt;
-                       path.dentry = p->mnt.mnt_mountpoint;
+                       path.dentry = p->mnt_mountpoint;
                        q = clone_mnt(p, p->mnt.mnt_root, flag);
                        if (!q)
                                goto Enomem;
                        br_write_lock(vfsmount_lock);
-                       list_add_tail(&q->mnt.mnt_list, &res->mnt.mnt_list);
+                       list_add_tail(&q->mnt_list, &res->mnt_list);
                        attach_mnt(q, &path);
                        br_write_unlock(vfsmount_lock);
                }
@@ -1486,12 +1329,12 @@ void drop_collected_mounts(struct vfsmount *mnt)
 int iterate_mounts(int (*f)(struct vfsmount *, void *), void *arg,
                   struct vfsmount *root)
 {
-       struct vfsmount *mnt;
+       struct mount *mnt;
        int res = f(root, arg);
        if (res)
                return res;
-       list_for_each_entry(mnt, &root->mnt_list, mnt_list) {
-               res = f(mnt, arg);
+       list_for_each_entry(mnt, &real_mount(root)->mnt_list, mnt_list) {
+               res = f(&mnt->mnt, arg);
                if (res)
                        return res;
        }
@@ -1502,8 +1345,8 @@ static void cleanup_group_ids(struct mount *mnt, struct mount *end)
 {
        struct mount *p;
 
-       for (p = mnt; p != end; p = next_mnt(p, &mnt->mnt)) {
-               if (p->mnt.mnt_group_id && !IS_MNT_SHARED(&p->mnt))
+       for (p = mnt; p != end; p = next_mnt(p, mnt)) {
+               if (p->mnt_group_id && !IS_MNT_SHARED(p))
                        mnt_release_group_id(p);
        }
 }
@@ -1512,8 +1355,8 @@ static int invent_group_ids(struct mount *mnt, bool recurse)
 {
        struct mount *p;
 
-       for (p = mnt; p; p = recurse ? next_mnt(p, &mnt->mnt) : NULL) {
-               if (!p->mnt.mnt_group_id && !IS_MNT_SHARED(&p->mnt)) {
+       for (p = mnt; p; p = recurse ? next_mnt(p, mnt) : NULL) {
+               if (!p->mnt_group_id && !IS_MNT_SHARED(p)) {
                        int err = mnt_alloc_group_id(p);
                        if (err) {
                                cleanup_group_ids(mnt, p);
@@ -1592,7 +1435,7 @@ static int attach_recursive_mnt(struct mount *source_mnt,
                        struct path *path, struct path *parent_path)
 {
        LIST_HEAD(tree_list);
-       struct vfsmount *dest_mnt = path->mnt;
+       struct mount *dest_mnt = real_mount(path->mnt);
        struct dentry *dest_dentry = path->dentry;
        struct mount *child, *p;
        int err;
@@ -1602,20 +1445,20 @@ static int attach_recursive_mnt(struct mount *source_mnt,
                if (err)
                        goto out;
        }
-       err = propagate_mnt(dest_mnt, dest_dentry, &source_mnt->mnt, &tree_list);
+       err = propagate_mnt(dest_mnt, dest_dentry, source_mnt, &tree_list);
        if (err)
                goto out_cleanup_ids;
 
        br_write_lock(vfsmount_lock);
 
        if (IS_MNT_SHARED(dest_mnt)) {
-               for (p = source_mnt; p; p = next_mnt(p, &source_mnt->mnt))
+               for (p = source_mnt; p; p = next_mnt(p, source_mnt))
                        set_mnt_shared(p);
        }
        if (parent_path) {
                detach_mnt(source_mnt, parent_path);
                attach_mnt(source_mnt, path);
-               touch_mnt_namespace(parent_path->mnt->mnt_ns);
+               touch_mnt_namespace(source_mnt->mnt_ns);
        } else {
                mnt_set_mountpoint(dest_mnt, dest_dentry, source_mnt);
                commit_tree(source_mnt);
@@ -1663,19 +1506,19 @@ static void unlock_mount(struct path *path)
        mutex_unlock(&path->dentry->d_inode->i_mutex);
 }
 
-static int graft_tree(struct vfsmount *mnt, struct path *path)
+static int graft_tree(struct mount *mnt, struct path *path)
 {
-       if (mnt->mnt_sb->s_flags & MS_NOUSER)
+       if (mnt->mnt.mnt_sb->s_flags & MS_NOUSER)
                return -EINVAL;
 
        if (S_ISDIR(path->dentry->d_inode->i_mode) !=
-             S_ISDIR(mnt->mnt_root->d_inode->i_mode))
+             S_ISDIR(mnt->mnt.mnt_root->d_inode->i_mode))
                return -ENOTDIR;
 
        if (d_unlinked(path->dentry))
                return -ENOENT;
 
-       return attach_recursive_mnt(real_mount(mnt), path, NULL);
+       return attach_recursive_mnt(mnt, path, NULL);
 }
 
 /*
@@ -1724,7 +1567,7 @@ static int do_change_type(struct path *path, int flag)
        }
 
        br_write_lock(vfsmount_lock);
-       for (m = mnt; m; m = (recurse ? next_mnt(m, &mnt->mnt) : NULL))
+       for (m = mnt; m; m = (recurse ? next_mnt(m, mnt) : NULL))
                change_mnt_propagation(m, type);
        br_write_unlock(vfsmount_lock);
 
@@ -1758,10 +1601,10 @@ static int do_loopback(struct path *path, char *old_name,
        old = real_mount(old_path.mnt);
 
        err = -EINVAL;
-       if (IS_MNT_UNBINDABLE(old_path.mnt))
+       if (IS_MNT_UNBINDABLE(old))
                goto out2;
 
-       if (!check_mnt(path->mnt) || !check_mnt(old_path.mnt))
+       if (!check_mnt(real_mount(path->mnt)) || !check_mnt(old))
                goto out2;
 
        err = -ENOMEM;
@@ -1773,7 +1616,7 @@ static int do_loopback(struct path *path, char *old_name,
        if (!mnt)
                goto out2;
 
-       err = graft_tree(&mnt->mnt, path);
+       err = graft_tree(mnt, path);
        if (err) {
                br_write_lock(vfsmount_lock);
                umount_tree(mnt, 0, &umount_list);
@@ -1798,9 +1641,9 @@ static int change_mount_flags(struct vfsmount *mnt, int ms_flags)
                return 0;
 
        if (readonly_request)
-               error = mnt_make_readonly(mnt);
+               error = mnt_make_readonly(real_mount(mnt));
        else
-               __mnt_unmake_readonly(mnt);
+               __mnt_unmake_readonly(real_mount(mnt));
        return error;
 }
 
@@ -1814,11 +1657,12 @@ static int do_remount(struct path *path, int flags, int mnt_flags,
 {
        int err;
        struct super_block *sb = path->mnt->mnt_sb;
+       struct mount *mnt = real_mount(path->mnt);
 
        if (!capable(CAP_SYS_ADMIN))
                return -EPERM;
 
-       if (!check_mnt(path->mnt))
+       if (!check_mnt(mnt))
                return -EINVAL;
 
        if (path->dentry != path->mnt->mnt_root)
@@ -1835,14 +1679,14 @@ static int do_remount(struct path *path, int flags, int mnt_flags,
                err = do_remount_sb(sb, flags, data, 0);
        if (!err) {
                br_write_lock(vfsmount_lock);
-               mnt_flags |= path->mnt->mnt_flags & MNT_PROPAGATION_MASK;
-               path->mnt->mnt_flags = mnt_flags;
+               mnt_flags |= mnt->mnt.mnt_flags & MNT_PROPAGATION_MASK;
+               mnt->mnt.mnt_flags = mnt_flags;
                br_write_unlock(vfsmount_lock);
        }
        up_write(&sb->s_umount);
        if (!err) {
                br_write_lock(vfsmount_lock);
-               touch_mnt_namespace(path->mnt->mnt_ns);
+               touch_mnt_namespace(mnt->mnt_ns);
                br_write_unlock(vfsmount_lock);
        }
        return err;
@@ -1851,8 +1695,8 @@ static int do_remount(struct path *path, int flags, int mnt_flags,
 static inline int tree_contains_unbindable(struct mount *mnt)
 {
        struct mount *p;
-       for (p = mnt; p; p = next_mnt(p, &mnt->mnt)) {
-               if (IS_MNT_UNBINDABLE(&p->mnt))
+       for (p = mnt; p; p = next_mnt(p, mnt)) {
+               if (IS_MNT_UNBINDABLE(p))
                        return 1;
        }
        return 0;
@@ -1876,8 +1720,11 @@ static int do_move_mount(struct path *path, char *old_name)
        if (err < 0)
                goto out;
 
+       old = real_mount(old_path.mnt);
+       p = real_mount(path->mnt);
+
        err = -EINVAL;
-       if (!check_mnt(path->mnt) || !check_mnt(old_path.mnt))
+       if (!check_mnt(p) || !check_mnt(old))
                goto out1;
 
        if (d_unlinked(path->dentry))
@@ -1887,8 +1734,6 @@ static int do_move_mount(struct path *path, char *old_name)
        if (old_path.dentry != old_path.mnt->mnt_root)
                goto out1;
 
-       old = real_mount(old_path.mnt);
-
        if (!mnt_has_parent(old))
                goto out1;
 
@@ -1898,17 +1743,16 @@ static int do_move_mount(struct path *path, char *old_name)
        /*
         * Don't move a mount residing in a shared parent.
         */
-       if (IS_MNT_SHARED(old_path.mnt->mnt_parent))
+       if (IS_MNT_SHARED(old->mnt_parent))
                goto out1;
        /*
         * Don't move a mount tree containing unbindable mounts to a destination
         * mount which is shared.
         */
-       if (IS_MNT_SHARED(path->mnt) &&
-           tree_contains_unbindable(old))
+       if (IS_MNT_SHARED(p) && tree_contains_unbindable(old))
                goto out1;
        err = -ELOOP;
-       for (p = real_mount(path->mnt); mnt_has_parent(p); p = real_mount(p->mnt.mnt_parent))
+       for (; mnt_has_parent(p); p = p->mnt_parent)
                if (p == old)
                        goto out1;
 
@@ -1918,7 +1762,7 @@ static int do_move_mount(struct path *path, char *old_name)
 
        /* if the mount is moved, it should no longer be expire
         * automatically */
-       list_del_init(&old_path.mnt->mnt_expire);
+       list_del_init(&old->mnt_expire);
 out1:
        unlock_mount(path);
 out:
@@ -1969,7 +1813,7 @@ do_kern_mount(const char *fstype, int flags, const char *name, void *data)
 /*
  * add a mount into a namespace's mount tree
  */
-static int do_add_mount(struct vfsmount *newmnt, struct path *path, int mnt_flags)
+static int do_add_mount(struct mount *newmnt, struct path *path, int mnt_flags)
 {
        int err;
 
@@ -1980,20 +1824,20 @@ static int do_add_mount(struct vfsmount *newmnt, struct path *path, int mnt_flag
                return err;
 
        err = -EINVAL;
-       if (!(mnt_flags & MNT_SHRINKABLE) && !check_mnt(path->mnt))
+       if (!(mnt_flags & MNT_SHRINKABLE) && !check_mnt(real_mount(path->mnt)))
                goto unlock;
 
        /* Refuse the same filesystem on the same mount point */
        err = -EBUSY;
-       if (path->mnt->mnt_sb == newmnt->mnt_sb &&
+       if (path->mnt->mnt_sb == newmnt->mnt.mnt_sb &&
            path->mnt->mnt_root == path->dentry)
                goto unlock;
 
        err = -EINVAL;
-       if (S_ISLNK(newmnt->mnt_root->d_inode->i_mode))
+       if (S_ISLNK(newmnt->mnt.mnt_root->d_inode->i_mode))
                goto unlock;
 
-       newmnt->mnt_flags = mnt_flags;
+       newmnt->mnt.mnt_flags = mnt_flags;
        err = graft_tree(newmnt, path);
 
 unlock:
@@ -2022,7 +1866,7 @@ static int do_new_mount(struct path *path, char *type, int flags,
        if (IS_ERR(mnt))
                return PTR_ERR(mnt);
 
-       err = do_add_mount(mnt, path, mnt_flags);
+       err = do_add_mount(real_mount(mnt), path, mnt_flags);
        if (err)
                mntput(mnt);
        return err;
@@ -2030,11 +1874,12 @@ static int do_new_mount(struct path *path, char *type, int flags,
 
 int finish_automount(struct vfsmount *m, struct path *path)
 {
+       struct mount *mnt = real_mount(m);
        int err;
        /* The new mount record should have at least 2 refs to prevent it being
         * expired before we get a chance to add it
         */
-       BUG_ON(mnt_get_count(m) < 2);
+       BUG_ON(mnt_get_count(mnt) < 2);
 
        if (m->mnt_sb == path->mnt->mnt_sb &&
            m->mnt_root == path->dentry) {
@@ -2042,15 +1887,15 @@ int finish_automount(struct vfsmount *m, struct path *path)
                goto fail;
        }
 
-       err = do_add_mount(m, path, path->mnt->mnt_flags | MNT_SHRINKABLE);
+       err = do_add_mount(mnt, path, path->mnt->mnt_flags | MNT_SHRINKABLE);
        if (!err)
                return 0;
 fail:
        /* remove m from any expiration list it may be on */
-       if (!list_empty(&m->mnt_expire)) {
+       if (!list_empty(&mnt->mnt_expire)) {
                down_write(&namespace_sem);
                br_write_lock(vfsmount_lock);
-               list_del_init(&m->mnt_expire);
+               list_del_init(&mnt->mnt_expire);
                br_write_unlock(vfsmount_lock);
                up_write(&namespace_sem);
        }
@@ -2069,7 +1914,7 @@ void mnt_set_expiry(struct vfsmount *mnt, struct list_head *expiry_list)
        down_write(&namespace_sem);
        br_write_lock(vfsmount_lock);
 
-       list_add_tail(&mnt->mnt_expire, expiry_list);
+       list_add_tail(&real_mount(mnt)->mnt_expire, expiry_list);
 
        br_write_unlock(vfsmount_lock);
        up_write(&namespace_sem);
@@ -2099,15 +1944,15 @@ void mark_mounts_for_expiry(struct list_head *mounts)
         * - still marked for expiry (marked on the last call here; marks are
         *   cleared by mntput())
         */
-       list_for_each_entry_safe(mnt, next, mounts, mnt.mnt_expire) {
-               if (!xchg(&mnt->mnt.mnt_expiry_mark, 1) ||
+       list_for_each_entry_safe(mnt, next, mounts, mnt_expire) {
+               if (!xchg(&mnt->mnt_expiry_mark, 1) ||
                        propagate_mount_busy(mnt, 1))
                        continue;
-               list_move(&mnt->mnt.mnt_expire, &graveyard);
+               list_move(&mnt->mnt_expire, &graveyard);
        }
        while (!list_empty(&graveyard)) {
-               mnt = list_first_entry(&graveyard, struct mount, mnt.mnt_expire);
-               touch_mnt_namespace(mnt->mnt.mnt_ns);
+               mnt = list_first_entry(&graveyard, struct mount, mnt_expire);
+               touch_mnt_namespace(mnt->mnt_ns);
                umount_tree(mnt, 1, &umounts);
        }
        br_write_unlock(vfsmount_lock);
@@ -2131,11 +1976,11 @@ static int select_submounts(struct mount *parent, struct list_head *graveyard)
        int found = 0;
 
 repeat:
-       next = this_parent->mnt.mnt_mounts.next;
+       next = this_parent->mnt_mounts.next;
 resume:
-       while (next != &this_parent->mnt.mnt_mounts) {
+       while (next != &this_parent->mnt_mounts) {
                struct list_head *tmp = next;
-               struct mount *mnt = list_entry(tmp, struct mount, mnt.mnt_child);
+               struct mount *mnt = list_entry(tmp, struct mount, mnt_child);
 
                next = tmp->next;
                if (!(mnt->mnt.mnt_flags & MNT_SHRINKABLE))
@@ -2143,13 +1988,13 @@ resume:
                /*
                 * Descend a level if the d_mounts list is non-empty.
                 */
-               if (!list_empty(&mnt->mnt.mnt_mounts)) {
+               if (!list_empty(&mnt->mnt_mounts)) {
                        this_parent = mnt;
                        goto repeat;
                }
 
                if (!propagate_mount_busy(mnt, 1)) {
-                       list_move_tail(&mnt->mnt.mnt_expire, graveyard);
+                       list_move_tail(&mnt->mnt_expire, graveyard);
                        found++;
                }
        }
@@ -2157,8 +2002,8 @@ resume:
         * All done at this level ... ascend and resume the search
         */
        if (this_parent != parent) {
-               next = this_parent->mnt.mnt_child.next;
-               this_parent = real_mount(this_parent->mnt.mnt_parent);
+               next = this_parent->mnt_child.next;
+               this_parent = this_parent->mnt_parent;
                goto resume;
        }
        return found;
@@ -2179,8 +2024,8 @@ static void shrink_submounts(struct mount *mnt, struct list_head *umounts)
        while (select_submounts(mnt, &graveyard)) {
                while (!list_empty(&graveyard)) {
                        m = list_first_entry(&graveyard, struct mount,
-                                               mnt.mnt_expire);
-                       touch_mnt_namespace(m->mnt.mnt_ns);
+                                               mnt_expire);
+                       touch_mnt_namespace(m->mnt_ns);
                        umount_tree(m, 1, umounts);
                }
        }
@@ -2365,12 +2210,13 @@ static struct mnt_namespace *alloc_mnt_ns(void)
 
 void mnt_make_longterm(struct vfsmount *mnt)
 {
-       __mnt_make_longterm(mnt);
+       __mnt_make_longterm(real_mount(mnt));
 }
 
-void mnt_make_shortterm(struct vfsmount *mnt)
+void mnt_make_shortterm(struct vfsmount *m)
 {
 #ifdef CONFIG_SMP
+       struct mount *mnt = real_mount(m);
        if (atomic_add_unless(&mnt->mnt_longterm, -1, 1))
                return;
        br_write_lock(vfsmount_lock);
@@ -2389,6 +2235,7 @@ static struct mnt_namespace *dup_mnt_ns(struct mnt_namespace *mnt_ns,
        struct mnt_namespace *new_ns;
        struct vfsmount *rootmnt = NULL, *pwdmnt = NULL;
        struct mount *p, *q;
+       struct mount *old = mnt_ns->root;
        struct mount *new;
 
        new_ns = alloc_mnt_ns();
@@ -2397,16 +2244,15 @@ static struct mnt_namespace *dup_mnt_ns(struct mnt_namespace *mnt_ns,
 
        down_write(&namespace_sem);
        /* First pass: copy the tree topology */
-       new = copy_tree(real_mount(mnt_ns->root), mnt_ns->root->mnt_root,
-                                       CL_COPY_ALL | CL_EXPIRE);
+       new = copy_tree(old, old->mnt.mnt_root, CL_COPY_ALL | CL_EXPIRE);
        if (!new) {
                up_write(&namespace_sem);
                kfree(new_ns);
                return ERR_PTR(-ENOMEM);
        }
-       new_ns->root = &new->mnt;
+       new_ns->root = new;
        br_write_lock(vfsmount_lock);
-       list_add_tail(&new_ns->list, &new_ns->root->mnt_list);
+       list_add_tail(&new_ns->list, &new->mnt_list);
        br_write_unlock(vfsmount_lock);
 
        /*
@@ -2414,27 +2260,27 @@ static struct mnt_namespace *dup_mnt_ns(struct mnt_namespace *mnt_ns,
         * as belonging to new namespace.  We have already acquired a private
         * fs_struct, so tsk->fs->lock is not needed.
         */
-       p = real_mount(mnt_ns->root);
+       p = old;
        q = new;
        while (p) {
-               q->mnt.mnt_ns = new_ns;
-               __mnt_make_longterm(&q->mnt);
+               q->mnt_ns = new_ns;
+               __mnt_make_longterm(q);
                if (fs) {
                        if (&p->mnt == fs->root.mnt) {
                                fs->root.mnt = mntget(&q->mnt);
-                               __mnt_make_longterm(&q->mnt);
+                               __mnt_make_longterm(q);
                                mnt_make_shortterm(&p->mnt);
                                rootmnt = &p->mnt;
                        }
                        if (&p->mnt == fs->pwd.mnt) {
                                fs->pwd.mnt = mntget(&q->mnt);
-                               __mnt_make_longterm(&q->mnt);
+                               __mnt_make_longterm(q);
                                mnt_make_shortterm(&p->mnt);
                                pwdmnt = &p->mnt;
                        }
                }
-               p = next_mnt(p, mnt_ns->root);
-               q = next_mnt(q, new_ns->root);
+               p = next_mnt(p, old);
+               q = next_mnt(q, new);
        }
        up_write(&namespace_sem);
 
@@ -2467,18 +2313,17 @@ struct mnt_namespace *copy_mnt_ns(unsigned long flags, struct mnt_namespace *ns,
  * create_mnt_ns - creates a private namespace and adds a root filesystem
  * @mnt: pointer to the new root filesystem mountpoint
  */
-static struct mnt_namespace *create_mnt_ns(struct vfsmount *mnt)
+static struct mnt_namespace *create_mnt_ns(struct vfsmount *m)
 {
-       struct mnt_namespace *new_ns;
-
-       new_ns = alloc_mnt_ns();
+       struct mnt_namespace *new_ns = alloc_mnt_ns();
        if (!IS_ERR(new_ns)) {
+               struct mount *mnt = real_mount(m);
                mnt->mnt_ns = new_ns;
                __mnt_make_longterm(mnt);
                new_ns->root = mnt;
-               list_add(&new_ns->list, &new_ns->root->mnt_list);
+               list_add(&new_ns->list, &mnt->mnt_list);
        } else {
-               mntput(mnt);
+               mntput(m);
        }
        return new_ns;
 }
@@ -2559,21 +2404,21 @@ out_type:
  *
  * namespace_sem or vfsmount_lock is held
  */
-bool is_path_reachable(struct vfsmount *mnt, struct dentry *dentry,
+bool is_path_reachable(struct mount *mnt, struct dentry *dentry,
                         const struct path *root)
 {
-       while (mnt != root->mnt && mnt_has_parent(real_mount(mnt))) {
+       while (&mnt->mnt != root->mnt && mnt_has_parent(mnt)) {
                dentry = mnt->mnt_mountpoint;
                mnt = mnt->mnt_parent;
        }
-       return mnt == root->mnt && is_subdir(dentry, root->dentry);
+       return &mnt->mnt == root->mnt && is_subdir(dentry, root->dentry);
 }
 
 int path_is_under(struct path *path1, struct path *path2)
 {
        int res;
        br_read_lock(vfsmount_lock);
-       res = is_path_reachable(path1->mnt, path1->dentry, path2);
+       res = is_path_reachable(real_mount(path1->mnt), path1->dentry, path2);
        br_read_unlock(vfsmount_lock);
        return res;
 }
@@ -2634,11 +2479,11 @@ SYSCALL_DEFINE2(pivot_root, const char __user *, new_root,
        error = -EINVAL;
        new_mnt = real_mount(new.mnt);
        root_mnt = real_mount(root.mnt);
-       if (IS_MNT_SHARED(old.mnt) ||
-               IS_MNT_SHARED(new.mnt->mnt_parent) ||
-               IS_MNT_SHARED(root.mnt->mnt_parent))
+       if (IS_MNT_SHARED(real_mount(old.mnt)) ||
+               IS_MNT_SHARED(new_mnt->mnt_parent) ||
+               IS_MNT_SHARED(root_mnt->mnt_parent))
                goto out4;
-       if (!check_mnt(root.mnt) || !check_mnt(new.mnt))
+       if (!check_mnt(root_mnt) || !check_mnt(new_mnt))
                goto out4;
        error = -ENOENT;
        if (d_unlinked(new.dentry))
@@ -2659,7 +2504,7 @@ SYSCALL_DEFINE2(pivot_root, const char __user *, new_root,
        if (!mnt_has_parent(new_mnt))
                goto out4; /* not attached */
        /* make sure we can reach put_old from new_root */
-       if (!is_path_reachable(old.mnt, old.dentry, &new))
+       if (!is_path_reachable(real_mount(old.mnt), old.dentry, &new))
                goto out4;
        br_write_lock(vfsmount_lock);
        detach_mnt(new_mnt, &parent_path);
@@ -2705,8 +2550,8 @@ static void __init init_mount_tree(void)
        init_task.nsproxy->mnt_ns = ns;
        get_mnt_ns(ns);
 
-       root.mnt = ns->root;
-       root.dentry = ns->root->mnt_root;
+       root.mnt = mnt;
+       root.dentry = mnt->mnt_root;
 
        set_fs_pwd(current->fs, &root);
        set_fs_root(current->fs, &root);
@@ -2753,7 +2598,7 @@ void put_mnt_ns(struct mnt_namespace *ns)
                return;
        down_write(&namespace_sem);
        br_write_lock(vfsmount_lock);
-       umount_tree(real_mount(ns->root), 0, &umount_list);
+       umount_tree(ns->root, 0, &umount_list);
        br_write_unlock(vfsmount_lock);
        up_write(&namespace_sem);
        release_mounts(&umount_list);
@@ -2787,5 +2632,5 @@ EXPORT_SYMBOL(kern_unmount);
 
 bool our_mnt(struct vfsmount *mnt)
 {
-       return check_mnt(mnt);
+       return check_mnt(real_mount(mnt));
 }