Merge tag 'libnvdimm-for-4.19_dax-memory-failure' of gitolite.kernel.org:pub/scm...
[platform/kernel/linux-rpi.git] / fs / xfs / xfs_iops.c
1 // SPDX-License-Identifier: GPL-2.0
2 /*
3  * Copyright (c) 2000-2005 Silicon Graphics, Inc.
4  * All Rights Reserved.
5  */
6 #include "xfs.h"
7 #include "xfs_fs.h"
8 #include "xfs_shared.h"
9 #include "xfs_format.h"
10 #include "xfs_log_format.h"
11 #include "xfs_trans_resv.h"
12 #include "xfs_mount.h"
13 #include "xfs_da_format.h"
14 #include "xfs_inode.h"
15 #include "xfs_bmap.h"
16 #include "xfs_bmap_util.h"
17 #include "xfs_acl.h"
18 #include "xfs_quota.h"
19 #include "xfs_error.h"
20 #include "xfs_attr.h"
21 #include "xfs_trans.h"
22 #include "xfs_trace.h"
23 #include "xfs_icache.h"
24 #include "xfs_symlink.h"
25 #include "xfs_da_btree.h"
26 #include "xfs_dir2.h"
27 #include "xfs_trans_space.h"
28 #include "xfs_iomap.h"
29 #include "xfs_defer.h"
30
31 #include <linux/capability.h>
32 #include <linux/xattr.h>
33 #include <linux/posix_acl.h>
34 #include <linux/security.h>
35 #include <linux/iomap.h>
36 #include <linux/slab.h>
37 #include <linux/iversion.h>
38
39 /*
40  * Directories have different lock order w.r.t. mmap_sem compared to regular
41  * files. This is due to readdir potentially triggering page faults on a user
42  * buffer inside filldir(), and this happens with the ilock on the directory
43  * held. For regular files, the lock order is the other way around - the
44  * mmap_sem is taken during the page fault, and then we lock the ilock to do
45  * block mapping. Hence we need a different class for the directory ilock so
46  * that lockdep can tell them apart.
47  */
48 static struct lock_class_key xfs_nondir_ilock_class;
49 static struct lock_class_key xfs_dir_ilock_class;
50
51 static int
52 xfs_initxattrs(
53         struct inode            *inode,
54         const struct xattr      *xattr_array,
55         void                    *fs_info)
56 {
57         const struct xattr      *xattr;
58         struct xfs_inode        *ip = XFS_I(inode);
59         int                     error = 0;
60
61         for (xattr = xattr_array; xattr->name != NULL; xattr++) {
62                 error = xfs_attr_set(ip, xattr->name, xattr->value,
63                                       xattr->value_len, ATTR_SECURE);
64                 if (error < 0)
65                         break;
66         }
67         return error;
68 }
69
70 /*
71  * Hook in SELinux.  This is not quite correct yet, what we really need
72  * here (as we do for default ACLs) is a mechanism by which creation of
73  * these attrs can be journalled at inode creation time (along with the
74  * inode, of course, such that log replay can't cause these to be lost).
75  */
76
77 STATIC int
78 xfs_init_security(
79         struct inode    *inode,
80         struct inode    *dir,
81         const struct qstr *qstr)
82 {
83         return security_inode_init_security(inode, dir, qstr,
84                                              &xfs_initxattrs, NULL);
85 }
86
87 static void
88 xfs_dentry_to_name(
89         struct xfs_name *namep,
90         struct dentry   *dentry)
91 {
92         namep->name = dentry->d_name.name;
93         namep->len = dentry->d_name.len;
94         namep->type = XFS_DIR3_FT_UNKNOWN;
95 }
96
97 static int
98 xfs_dentry_mode_to_name(
99         struct xfs_name *namep,
100         struct dentry   *dentry,
101         int             mode)
102 {
103         namep->name = dentry->d_name.name;
104         namep->len = dentry->d_name.len;
105         namep->type = xfs_mode_to_ftype(mode);
106
107         if (unlikely(namep->type == XFS_DIR3_FT_UNKNOWN))
108                 return -EFSCORRUPTED;
109
110         return 0;
111 }
112
113 STATIC void
114 xfs_cleanup_inode(
115         struct inode    *dir,
116         struct inode    *inode,
117         struct dentry   *dentry)
118 {
119         struct xfs_name teardown;
120
121         /* Oh, the horror.
122          * If we can't add the ACL or we fail in
123          * xfs_init_security we must back out.
124          * ENOSPC can hit here, among other things.
125          */
126         xfs_dentry_to_name(&teardown, dentry);
127
128         xfs_remove(XFS_I(dir), &teardown, XFS_I(inode));
129 }
130
131 STATIC int
132 xfs_generic_create(
133         struct inode    *dir,
134         struct dentry   *dentry,
135         umode_t         mode,
136         dev_t           rdev,
137         bool            tmpfile)        /* unnamed file */
138 {
139         struct inode    *inode;
140         struct xfs_inode *ip = NULL;
141         struct posix_acl *default_acl, *acl;
142         struct xfs_name name;
143         int             error;
144
145         /*
146          * Irix uses Missed'em'V split, but doesn't want to see
147          * the upper 5 bits of (14bit) major.
148          */
149         if (S_ISCHR(mode) || S_ISBLK(mode)) {
150                 if (unlikely(!sysv_valid_dev(rdev) || MAJOR(rdev) & ~0x1ff))
151                         return -EINVAL;
152         } else {
153                 rdev = 0;
154         }
155
156         error = posix_acl_create(dir, &mode, &default_acl, &acl);
157         if (error)
158                 return error;
159
160         /* Verify mode is valid also for tmpfile case */
161         error = xfs_dentry_mode_to_name(&name, dentry, mode);
162         if (unlikely(error))
163                 goto out_free_acl;
164
165         if (!tmpfile) {
166                 error = xfs_create(XFS_I(dir), &name, mode, rdev, &ip);
167         } else {
168                 error = xfs_create_tmpfile(XFS_I(dir), mode, &ip);
169         }
170         if (unlikely(error))
171                 goto out_free_acl;
172
173         inode = VFS_I(ip);
174
175         error = xfs_init_security(inode, dir, &dentry->d_name);
176         if (unlikely(error))
177                 goto out_cleanup_inode;
178
179 #ifdef CONFIG_XFS_POSIX_ACL
180         if (default_acl) {
181                 error = __xfs_set_acl(inode, default_acl, ACL_TYPE_DEFAULT);
182                 if (error)
183                         goto out_cleanup_inode;
184         }
185         if (acl) {
186                 error = __xfs_set_acl(inode, acl, ACL_TYPE_ACCESS);
187                 if (error)
188                         goto out_cleanup_inode;
189         }
190 #endif
191
192         xfs_setup_iops(ip);
193
194         if (tmpfile)
195                 d_tmpfile(dentry, inode);
196         else
197                 d_instantiate(dentry, inode);
198
199         xfs_finish_inode_setup(ip);
200
201  out_free_acl:
202         if (default_acl)
203                 posix_acl_release(default_acl);
204         if (acl)
205                 posix_acl_release(acl);
206         return error;
207
208  out_cleanup_inode:
209         xfs_finish_inode_setup(ip);
210         if (!tmpfile)
211                 xfs_cleanup_inode(dir, inode, dentry);
212         xfs_irele(ip);
213         goto out_free_acl;
214 }
215
216 STATIC int
217 xfs_vn_mknod(
218         struct inode    *dir,
219         struct dentry   *dentry,
220         umode_t         mode,
221         dev_t           rdev)
222 {
223         return xfs_generic_create(dir, dentry, mode, rdev, false);
224 }
225
226 STATIC int
227 xfs_vn_create(
228         struct inode    *dir,
229         struct dentry   *dentry,
230         umode_t         mode,
231         bool            flags)
232 {
233         return xfs_vn_mknod(dir, dentry, mode, 0);
234 }
235
236 STATIC int
237 xfs_vn_mkdir(
238         struct inode    *dir,
239         struct dentry   *dentry,
240         umode_t         mode)
241 {
242         return xfs_vn_mknod(dir, dentry, mode|S_IFDIR, 0);
243 }
244
245 STATIC struct dentry *
246 xfs_vn_lookup(
247         struct inode    *dir,
248         struct dentry   *dentry,
249         unsigned int flags)
250 {
251         struct inode *inode;
252         struct xfs_inode *cip;
253         struct xfs_name name;
254         int             error;
255
256         if (dentry->d_name.len >= MAXNAMELEN)
257                 return ERR_PTR(-ENAMETOOLONG);
258
259         xfs_dentry_to_name(&name, dentry);
260         error = xfs_lookup(XFS_I(dir), &name, &cip, NULL);
261         if (likely(!error))
262                 inode = VFS_I(cip);
263         else if (likely(error == -ENOENT))
264                 inode = NULL;
265         else
266                 inode = ERR_PTR(error);
267         return d_splice_alias(inode, dentry);
268 }
269
270 STATIC struct dentry *
271 xfs_vn_ci_lookup(
272         struct inode    *dir,
273         struct dentry   *dentry,
274         unsigned int flags)
275 {
276         struct xfs_inode *ip;
277         struct xfs_name xname;
278         struct xfs_name ci_name;
279         struct qstr     dname;
280         int             error;
281
282         if (dentry->d_name.len >= MAXNAMELEN)
283                 return ERR_PTR(-ENAMETOOLONG);
284
285         xfs_dentry_to_name(&xname, dentry);
286         error = xfs_lookup(XFS_I(dir), &xname, &ip, &ci_name);
287         if (unlikely(error)) {
288                 if (unlikely(error != -ENOENT))
289                         return ERR_PTR(error);
290                 /*
291                  * call d_add(dentry, NULL) here when d_drop_negative_children
292                  * is called in xfs_vn_mknod (ie. allow negative dentries
293                  * with CI filesystems).
294                  */
295                 return NULL;
296         }
297
298         /* if exact match, just splice and exit */
299         if (!ci_name.name)
300                 return d_splice_alias(VFS_I(ip), dentry);
301
302         /* else case-insensitive match... */
303         dname.name = ci_name.name;
304         dname.len = ci_name.len;
305         dentry = d_add_ci(dentry, VFS_I(ip), &dname);
306         kmem_free(ci_name.name);
307         return dentry;
308 }
309
310 STATIC int
311 xfs_vn_link(
312         struct dentry   *old_dentry,
313         struct inode    *dir,
314         struct dentry   *dentry)
315 {
316         struct inode    *inode = d_inode(old_dentry);
317         struct xfs_name name;
318         int             error;
319
320         error = xfs_dentry_mode_to_name(&name, dentry, inode->i_mode);
321         if (unlikely(error))
322                 return error;
323
324         error = xfs_link(XFS_I(dir), XFS_I(inode), &name);
325         if (unlikely(error))
326                 return error;
327
328         ihold(inode);
329         d_instantiate(dentry, inode);
330         return 0;
331 }
332
333 STATIC int
334 xfs_vn_unlink(
335         struct inode    *dir,
336         struct dentry   *dentry)
337 {
338         struct xfs_name name;
339         int             error;
340
341         xfs_dentry_to_name(&name, dentry);
342
343         error = xfs_remove(XFS_I(dir), &name, XFS_I(d_inode(dentry)));
344         if (error)
345                 return error;
346
347         /*
348          * With unlink, the VFS makes the dentry "negative": no inode,
349          * but still hashed. This is incompatible with case-insensitive
350          * mode, so invalidate (unhash) the dentry in CI-mode.
351          */
352         if (xfs_sb_version_hasasciici(&XFS_M(dir->i_sb)->m_sb))
353                 d_invalidate(dentry);
354         return 0;
355 }
356
357 STATIC int
358 xfs_vn_symlink(
359         struct inode    *dir,
360         struct dentry   *dentry,
361         const char      *symname)
362 {
363         struct inode    *inode;
364         struct xfs_inode *cip = NULL;
365         struct xfs_name name;
366         int             error;
367         umode_t         mode;
368
369         mode = S_IFLNK |
370                 (irix_symlink_mode ? 0777 & ~current_umask() : S_IRWXUGO);
371         error = xfs_dentry_mode_to_name(&name, dentry, mode);
372         if (unlikely(error))
373                 goto out;
374
375         error = xfs_symlink(XFS_I(dir), &name, symname, mode, &cip);
376         if (unlikely(error))
377                 goto out;
378
379         inode = VFS_I(cip);
380
381         error = xfs_init_security(inode, dir, &dentry->d_name);
382         if (unlikely(error))
383                 goto out_cleanup_inode;
384
385         xfs_setup_iops(cip);
386
387         d_instantiate(dentry, inode);
388         xfs_finish_inode_setup(cip);
389         return 0;
390
391  out_cleanup_inode:
392         xfs_finish_inode_setup(cip);
393         xfs_cleanup_inode(dir, inode, dentry);
394         xfs_irele(cip);
395  out:
396         return error;
397 }
398
399 STATIC int
400 xfs_vn_rename(
401         struct inode    *odir,
402         struct dentry   *odentry,
403         struct inode    *ndir,
404         struct dentry   *ndentry,
405         unsigned int    flags)
406 {
407         struct inode    *new_inode = d_inode(ndentry);
408         int             omode = 0;
409         int             error;
410         struct xfs_name oname;
411         struct xfs_name nname;
412
413         if (flags & ~(RENAME_NOREPLACE | RENAME_EXCHANGE | RENAME_WHITEOUT))
414                 return -EINVAL;
415
416         /* if we are exchanging files, we need to set i_mode of both files */
417         if (flags & RENAME_EXCHANGE)
418                 omode = d_inode(ndentry)->i_mode;
419
420         error = xfs_dentry_mode_to_name(&oname, odentry, omode);
421         if (omode && unlikely(error))
422                 return error;
423
424         error = xfs_dentry_mode_to_name(&nname, ndentry,
425                                         d_inode(odentry)->i_mode);
426         if (unlikely(error))
427                 return error;
428
429         return xfs_rename(XFS_I(odir), &oname, XFS_I(d_inode(odentry)),
430                           XFS_I(ndir), &nname,
431                           new_inode ? XFS_I(new_inode) : NULL, flags);
432 }
433
434 /*
435  * careful here - this function can get called recursively, so
436  * we need to be very careful about how much stack we use.
437  * uio is kmalloced for this reason...
438  */
439 STATIC const char *
440 xfs_vn_get_link(
441         struct dentry           *dentry,
442         struct inode            *inode,
443         struct delayed_call     *done)
444 {
445         char                    *link;
446         int                     error = -ENOMEM;
447
448         if (!dentry)
449                 return ERR_PTR(-ECHILD);
450
451         link = kmalloc(XFS_SYMLINK_MAXLEN+1, GFP_KERNEL);
452         if (!link)
453                 goto out_err;
454
455         error = xfs_readlink(XFS_I(d_inode(dentry)), link);
456         if (unlikely(error))
457                 goto out_kfree;
458
459         set_delayed_call(done, kfree_link, link);
460         return link;
461
462  out_kfree:
463         kfree(link);
464  out_err:
465         return ERR_PTR(error);
466 }
467
468 STATIC const char *
469 xfs_vn_get_link_inline(
470         struct dentry           *dentry,
471         struct inode            *inode,
472         struct delayed_call     *done)
473 {
474         ASSERT(XFS_I(inode)->i_df.if_flags & XFS_IFINLINE);
475         return XFS_I(inode)->i_df.if_u1.if_data;
476 }
477
478 STATIC int
479 xfs_vn_getattr(
480         const struct path       *path,
481         struct kstat            *stat,
482         u32                     request_mask,
483         unsigned int            query_flags)
484 {
485         struct inode            *inode = d_inode(path->dentry);
486         struct xfs_inode        *ip = XFS_I(inode);
487         struct xfs_mount        *mp = ip->i_mount;
488
489         trace_xfs_getattr(ip);
490
491         if (XFS_FORCED_SHUTDOWN(mp))
492                 return -EIO;
493
494         stat->size = XFS_ISIZE(ip);
495         stat->dev = inode->i_sb->s_dev;
496         stat->mode = inode->i_mode;
497         stat->nlink = inode->i_nlink;
498         stat->uid = inode->i_uid;
499         stat->gid = inode->i_gid;
500         stat->ino = ip->i_ino;
501         stat->atime = inode->i_atime;
502         stat->mtime = inode->i_mtime;
503         stat->ctime = inode->i_ctime;
504         stat->blocks =
505                 XFS_FSB_TO_BB(mp, ip->i_d.di_nblocks + ip->i_delayed_blks);
506
507         if (ip->i_d.di_version == 3) {
508                 if (request_mask & STATX_BTIME) {
509                         stat->result_mask |= STATX_BTIME;
510                         stat->btime.tv_sec = ip->i_d.di_crtime.t_sec;
511                         stat->btime.tv_nsec = ip->i_d.di_crtime.t_nsec;
512                 }
513         }
514
515         if (ip->i_d.di_flags & XFS_DIFLAG_IMMUTABLE)
516                 stat->attributes |= STATX_ATTR_IMMUTABLE;
517         if (ip->i_d.di_flags & XFS_DIFLAG_APPEND)
518                 stat->attributes |= STATX_ATTR_APPEND;
519         if (ip->i_d.di_flags & XFS_DIFLAG_NODUMP)
520                 stat->attributes |= STATX_ATTR_NODUMP;
521
522         switch (inode->i_mode & S_IFMT) {
523         case S_IFBLK:
524         case S_IFCHR:
525                 stat->blksize = BLKDEV_IOSIZE;
526                 stat->rdev = inode->i_rdev;
527                 break;
528         default:
529                 if (XFS_IS_REALTIME_INODE(ip)) {
530                         /*
531                          * If the file blocks are being allocated from a
532                          * realtime volume, then return the inode's realtime
533                          * extent size or the realtime volume's extent size.
534                          */
535                         stat->blksize =
536                                 xfs_get_extsz_hint(ip) << mp->m_sb.sb_blocklog;
537                 } else
538                         stat->blksize = xfs_preferred_iosize(mp);
539                 stat->rdev = 0;
540                 break;
541         }
542
543         return 0;
544 }
545
546 static void
547 xfs_setattr_mode(
548         struct xfs_inode        *ip,
549         struct iattr            *iattr)
550 {
551         struct inode            *inode = VFS_I(ip);
552         umode_t                 mode = iattr->ia_mode;
553
554         ASSERT(xfs_isilocked(ip, XFS_ILOCK_EXCL));
555
556         inode->i_mode &= S_IFMT;
557         inode->i_mode |= mode & ~S_IFMT;
558 }
559
560 void
561 xfs_setattr_time(
562         struct xfs_inode        *ip,
563         struct iattr            *iattr)
564 {
565         struct inode            *inode = VFS_I(ip);
566
567         ASSERT(xfs_isilocked(ip, XFS_ILOCK_EXCL));
568
569         if (iattr->ia_valid & ATTR_ATIME)
570                 inode->i_atime = iattr->ia_atime;
571         if (iattr->ia_valid & ATTR_CTIME)
572                 inode->i_ctime = iattr->ia_ctime;
573         if (iattr->ia_valid & ATTR_MTIME)
574                 inode->i_mtime = iattr->ia_mtime;
575 }
576
577 static int
578 xfs_vn_change_ok(
579         struct dentry   *dentry,
580         struct iattr    *iattr)
581 {
582         struct xfs_mount        *mp = XFS_I(d_inode(dentry))->i_mount;
583
584         if (mp->m_flags & XFS_MOUNT_RDONLY)
585                 return -EROFS;
586
587         if (XFS_FORCED_SHUTDOWN(mp))
588                 return -EIO;
589
590         return setattr_prepare(dentry, iattr);
591 }
592
593 /*
594  * Set non-size attributes of an inode.
595  *
596  * Caution: The caller of this function is responsible for calling
597  * setattr_prepare() or otherwise verifying the change is fine.
598  */
599 int
600 xfs_setattr_nonsize(
601         struct xfs_inode        *ip,
602         struct iattr            *iattr,
603         int                     flags)
604 {
605         xfs_mount_t             *mp = ip->i_mount;
606         struct inode            *inode = VFS_I(ip);
607         int                     mask = iattr->ia_valid;
608         xfs_trans_t             *tp;
609         int                     error;
610         kuid_t                  uid = GLOBAL_ROOT_UID, iuid = GLOBAL_ROOT_UID;
611         kgid_t                  gid = GLOBAL_ROOT_GID, igid = GLOBAL_ROOT_GID;
612         struct xfs_dquot        *udqp = NULL, *gdqp = NULL;
613         struct xfs_dquot        *olddquot1 = NULL, *olddquot2 = NULL;
614
615         ASSERT((mask & ATTR_SIZE) == 0);
616
617         /*
618          * If disk quotas is on, we make sure that the dquots do exist on disk,
619          * before we start any other transactions. Trying to do this later
620          * is messy. We don't care to take a readlock to look at the ids
621          * in inode here, because we can't hold it across the trans_reserve.
622          * If the IDs do change before we take the ilock, we're covered
623          * because the i_*dquot fields will get updated anyway.
624          */
625         if (XFS_IS_QUOTA_ON(mp) && (mask & (ATTR_UID|ATTR_GID))) {
626                 uint    qflags = 0;
627
628                 if ((mask & ATTR_UID) && XFS_IS_UQUOTA_ON(mp)) {
629                         uid = iattr->ia_uid;
630                         qflags |= XFS_QMOPT_UQUOTA;
631                 } else {
632                         uid = inode->i_uid;
633                 }
634                 if ((mask & ATTR_GID) && XFS_IS_GQUOTA_ON(mp)) {
635                         gid = iattr->ia_gid;
636                         qflags |= XFS_QMOPT_GQUOTA;
637                 }  else {
638                         gid = inode->i_gid;
639                 }
640
641                 /*
642                  * We take a reference when we initialize udqp and gdqp,
643                  * so it is important that we never blindly double trip on
644                  * the same variable. See xfs_create() for an example.
645                  */
646                 ASSERT(udqp == NULL);
647                 ASSERT(gdqp == NULL);
648                 error = xfs_qm_vop_dqalloc(ip, xfs_kuid_to_uid(uid),
649                                            xfs_kgid_to_gid(gid),
650                                            xfs_get_projid(ip),
651                                            qflags, &udqp, &gdqp, NULL);
652                 if (error)
653                         return error;
654         }
655
656         error = xfs_trans_alloc(mp, &M_RES(mp)->tr_ichange, 0, 0, 0, &tp);
657         if (error)
658                 goto out_dqrele;
659
660         xfs_ilock(ip, XFS_ILOCK_EXCL);
661         xfs_trans_ijoin(tp, ip, 0);
662
663         /*
664          * Change file ownership.  Must be the owner or privileged.
665          */
666         if (mask & (ATTR_UID|ATTR_GID)) {
667                 /*
668                  * These IDs could have changed since we last looked at them.
669                  * But, we're assured that if the ownership did change
670                  * while we didn't have the inode locked, inode's dquot(s)
671                  * would have changed also.
672                  */
673                 iuid = inode->i_uid;
674                 igid = inode->i_gid;
675                 gid = (mask & ATTR_GID) ? iattr->ia_gid : igid;
676                 uid = (mask & ATTR_UID) ? iattr->ia_uid : iuid;
677
678                 /*
679                  * Do a quota reservation only if uid/gid is actually
680                  * going to change.
681                  */
682                 if (XFS_IS_QUOTA_RUNNING(mp) &&
683                     ((XFS_IS_UQUOTA_ON(mp) && !uid_eq(iuid, uid)) ||
684                      (XFS_IS_GQUOTA_ON(mp) && !gid_eq(igid, gid)))) {
685                         ASSERT(tp);
686                         error = xfs_qm_vop_chown_reserve(tp, ip, udqp, gdqp,
687                                                 NULL, capable(CAP_FOWNER) ?
688                                                 XFS_QMOPT_FORCE_RES : 0);
689                         if (error)      /* out of quota */
690                                 goto out_cancel;
691                 }
692         }
693
694         /*
695          * Change file ownership.  Must be the owner or privileged.
696          */
697         if (mask & (ATTR_UID|ATTR_GID)) {
698                 /*
699                  * CAP_FSETID overrides the following restrictions:
700                  *
701                  * The set-user-ID and set-group-ID bits of a file will be
702                  * cleared upon successful return from chown()
703                  */
704                 if ((inode->i_mode & (S_ISUID|S_ISGID)) &&
705                     !capable(CAP_FSETID))
706                         inode->i_mode &= ~(S_ISUID|S_ISGID);
707
708                 /*
709                  * Change the ownerships and register quota modifications
710                  * in the transaction.
711                  */
712                 if (!uid_eq(iuid, uid)) {
713                         if (XFS_IS_QUOTA_RUNNING(mp) && XFS_IS_UQUOTA_ON(mp)) {
714                                 ASSERT(mask & ATTR_UID);
715                                 ASSERT(udqp);
716                                 olddquot1 = xfs_qm_vop_chown(tp, ip,
717                                                         &ip->i_udquot, udqp);
718                         }
719                         ip->i_d.di_uid = xfs_kuid_to_uid(uid);
720                         inode->i_uid = uid;
721                 }
722                 if (!gid_eq(igid, gid)) {
723                         if (XFS_IS_QUOTA_RUNNING(mp) && XFS_IS_GQUOTA_ON(mp)) {
724                                 ASSERT(xfs_sb_version_has_pquotino(&mp->m_sb) ||
725                                        !XFS_IS_PQUOTA_ON(mp));
726                                 ASSERT(mask & ATTR_GID);
727                                 ASSERT(gdqp);
728                                 olddquot2 = xfs_qm_vop_chown(tp, ip,
729                                                         &ip->i_gdquot, gdqp);
730                         }
731                         ip->i_d.di_gid = xfs_kgid_to_gid(gid);
732                         inode->i_gid = gid;
733                 }
734         }
735
736         if (mask & ATTR_MODE)
737                 xfs_setattr_mode(ip, iattr);
738         if (mask & (ATTR_ATIME|ATTR_CTIME|ATTR_MTIME))
739                 xfs_setattr_time(ip, iattr);
740
741         xfs_trans_log_inode(tp, ip, XFS_ILOG_CORE);
742
743         XFS_STATS_INC(mp, xs_ig_attrchg);
744
745         if (mp->m_flags & XFS_MOUNT_WSYNC)
746                 xfs_trans_set_sync(tp);
747         error = xfs_trans_commit(tp);
748
749         xfs_iunlock(ip, XFS_ILOCK_EXCL);
750
751         /*
752          * Release any dquot(s) the inode had kept before chown.
753          */
754         xfs_qm_dqrele(olddquot1);
755         xfs_qm_dqrele(olddquot2);
756         xfs_qm_dqrele(udqp);
757         xfs_qm_dqrele(gdqp);
758
759         if (error)
760                 return error;
761
762         /*
763          * XXX(hch): Updating the ACL entries is not atomic vs the i_mode
764          *           update.  We could avoid this with linked transactions
765          *           and passing down the transaction pointer all the way
766          *           to attr_set.  No previous user of the generic
767          *           Posix ACL code seems to care about this issue either.
768          */
769         if ((mask & ATTR_MODE) && !(flags & XFS_ATTR_NOACL)) {
770                 error = posix_acl_chmod(inode, inode->i_mode);
771                 if (error)
772                         return error;
773         }
774
775         return 0;
776
777 out_cancel:
778         xfs_trans_cancel(tp);
779 out_dqrele:
780         xfs_qm_dqrele(udqp);
781         xfs_qm_dqrele(gdqp);
782         return error;
783 }
784
785 int
786 xfs_vn_setattr_nonsize(
787         struct dentry           *dentry,
788         struct iattr            *iattr)
789 {
790         struct xfs_inode        *ip = XFS_I(d_inode(dentry));
791         int error;
792
793         trace_xfs_setattr(ip);
794
795         error = xfs_vn_change_ok(dentry, iattr);
796         if (error)
797                 return error;
798         return xfs_setattr_nonsize(ip, iattr, 0);
799 }
800
801 /*
802  * Truncate file.  Must have write permission and not be a directory.
803  *
804  * Caution: The caller of this function is responsible for calling
805  * setattr_prepare() or otherwise verifying the change is fine.
806  */
807 STATIC int
808 xfs_setattr_size(
809         struct xfs_inode        *ip,
810         struct iattr            *iattr)
811 {
812         struct xfs_mount        *mp = ip->i_mount;
813         struct inode            *inode = VFS_I(ip);
814         xfs_off_t               oldsize, newsize;
815         struct xfs_trans        *tp;
816         int                     error;
817         uint                    lock_flags = 0;
818         bool                    did_zeroing = false;
819
820         ASSERT(xfs_isilocked(ip, XFS_IOLOCK_EXCL));
821         ASSERT(xfs_isilocked(ip, XFS_MMAPLOCK_EXCL));
822         ASSERT(S_ISREG(inode->i_mode));
823         ASSERT((iattr->ia_valid & (ATTR_UID|ATTR_GID|ATTR_ATIME|ATTR_ATIME_SET|
824                 ATTR_MTIME_SET|ATTR_KILL_PRIV|ATTR_TIMES_SET)) == 0);
825
826         oldsize = inode->i_size;
827         newsize = iattr->ia_size;
828
829         /*
830          * Short circuit the truncate case for zero length files.
831          */
832         if (newsize == 0 && oldsize == 0 && ip->i_d.di_nextents == 0) {
833                 if (!(iattr->ia_valid & (ATTR_CTIME|ATTR_MTIME)))
834                         return 0;
835
836                 /*
837                  * Use the regular setattr path to update the timestamps.
838                  */
839                 iattr->ia_valid &= ~ATTR_SIZE;
840                 return xfs_setattr_nonsize(ip, iattr, 0);
841         }
842
843         /*
844          * Make sure that the dquots are attached to the inode.
845          */
846         error = xfs_qm_dqattach(ip);
847         if (error)
848                 return error;
849
850         /*
851          * Wait for all direct I/O to complete.
852          */
853         inode_dio_wait(inode);
854
855         /*
856          * File data changes must be complete before we start the transaction to
857          * modify the inode.  This needs to be done before joining the inode to
858          * the transaction because the inode cannot be unlocked once it is a
859          * part of the transaction.
860          *
861          * Start with zeroing any data beyond EOF that we may expose on file
862          * extension, or zeroing out the rest of the block on a downward
863          * truncate.
864          */
865         if (newsize > oldsize) {
866                 trace_xfs_zero_eof(ip, oldsize, newsize - oldsize);
867                 error = iomap_zero_range(inode, oldsize, newsize - oldsize,
868                                 &did_zeroing, &xfs_iomap_ops);
869         } else {
870                 error = iomap_truncate_page(inode, newsize, &did_zeroing,
871                                 &xfs_iomap_ops);
872         }
873
874         if (error)
875                 return error;
876
877         /*
878          * We've already locked out new page faults, so now we can safely remove
879          * pages from the page cache knowing they won't get refaulted until we
880          * drop the XFS_MMAP_EXCL lock after the extent manipulations are
881          * complete. The truncate_setsize() call also cleans partial EOF page
882          * PTEs on extending truncates and hence ensures sub-page block size
883          * filesystems are correctly handled, too.
884          *
885          * We have to do all the page cache truncate work outside the
886          * transaction context as the "lock" order is page lock->log space
887          * reservation as defined by extent allocation in the writeback path.
888          * Hence a truncate can fail with ENOMEM from xfs_trans_alloc(), but
889          * having already truncated the in-memory version of the file (i.e. made
890          * user visible changes). There's not much we can do about this, except
891          * to hope that the caller sees ENOMEM and retries the truncate
892          * operation.
893          *
894          * And we update in-core i_size and truncate page cache beyond newsize
895          * before writeback the [di_size, newsize] range, so we're guaranteed
896          * not to write stale data past the new EOF on truncate down.
897          */
898         truncate_setsize(inode, newsize);
899
900         /*
901          * We are going to log the inode size change in this transaction so
902          * any previous writes that are beyond the on disk EOF and the new
903          * EOF that have not been written out need to be written here.  If we
904          * do not write the data out, we expose ourselves to the null files
905          * problem. Note that this includes any block zeroing we did above;
906          * otherwise those blocks may not be zeroed after a crash.
907          */
908         if (did_zeroing ||
909             (newsize > ip->i_d.di_size && oldsize != ip->i_d.di_size)) {
910                 error = filemap_write_and_wait_range(VFS_I(ip)->i_mapping,
911                                                 ip->i_d.di_size, newsize - 1);
912                 if (error)
913                         return error;
914         }
915
916         error = xfs_trans_alloc(mp, &M_RES(mp)->tr_itruncate, 0, 0, 0, &tp);
917         if (error)
918                 return error;
919
920         lock_flags |= XFS_ILOCK_EXCL;
921         xfs_ilock(ip, XFS_ILOCK_EXCL);
922         xfs_trans_ijoin(tp, ip, 0);
923
924         /*
925          * Only change the c/mtime if we are changing the size or we are
926          * explicitly asked to change it.  This handles the semantic difference
927          * between truncate() and ftruncate() as implemented in the VFS.
928          *
929          * The regular truncate() case without ATTR_CTIME and ATTR_MTIME is a
930          * special case where we need to update the times despite not having
931          * these flags set.  For all other operations the VFS set these flags
932          * explicitly if it wants a timestamp update.
933          */
934         if (newsize != oldsize &&
935             !(iattr->ia_valid & (ATTR_CTIME | ATTR_MTIME))) {
936                 iattr->ia_ctime = iattr->ia_mtime =
937                         current_time(inode);
938                 iattr->ia_valid |= ATTR_CTIME | ATTR_MTIME;
939         }
940
941         /*
942          * The first thing we do is set the size to new_size permanently on
943          * disk.  This way we don't have to worry about anyone ever being able
944          * to look at the data being freed even in the face of a crash.
945          * What we're getting around here is the case where we free a block, it
946          * is allocated to another file, it is written to, and then we crash.
947          * If the new data gets written to the file but the log buffers
948          * containing the free and reallocation don't, then we'd end up with
949          * garbage in the blocks being freed.  As long as we make the new size
950          * permanent before actually freeing any blocks it doesn't matter if
951          * they get written to.
952          */
953         ip->i_d.di_size = newsize;
954         xfs_trans_log_inode(tp, ip, XFS_ILOG_CORE);
955
956         if (newsize <= oldsize) {
957                 error = xfs_itruncate_extents(&tp, ip, XFS_DATA_FORK, newsize);
958                 if (error)
959                         goto out_trans_cancel;
960
961                 /*
962                  * Truncated "down", so we're removing references to old data
963                  * here - if we delay flushing for a long time, we expose
964                  * ourselves unduly to the notorious NULL files problem.  So,
965                  * we mark this inode and flush it when the file is closed,
966                  * and do not wait the usual (long) time for writeout.
967                  */
968                 xfs_iflags_set(ip, XFS_ITRUNCATED);
969
970                 /* A truncate down always removes post-EOF blocks. */
971                 xfs_inode_clear_eofblocks_tag(ip);
972         }
973
974         if (iattr->ia_valid & ATTR_MODE)
975                 xfs_setattr_mode(ip, iattr);
976         if (iattr->ia_valid & (ATTR_ATIME|ATTR_CTIME|ATTR_MTIME))
977                 xfs_setattr_time(ip, iattr);
978
979         xfs_trans_log_inode(tp, ip, XFS_ILOG_CORE);
980
981         XFS_STATS_INC(mp, xs_ig_attrchg);
982
983         if (mp->m_flags & XFS_MOUNT_WSYNC)
984                 xfs_trans_set_sync(tp);
985
986         error = xfs_trans_commit(tp);
987 out_unlock:
988         if (lock_flags)
989                 xfs_iunlock(ip, lock_flags);
990         return error;
991
992 out_trans_cancel:
993         xfs_trans_cancel(tp);
994         goto out_unlock;
995 }
996
997 int
998 xfs_vn_setattr_size(
999         struct dentry           *dentry,
1000         struct iattr            *iattr)
1001 {
1002         struct xfs_inode        *ip = XFS_I(d_inode(dentry));
1003         int error;
1004
1005         trace_xfs_setattr(ip);
1006
1007         error = xfs_vn_change_ok(dentry, iattr);
1008         if (error)
1009                 return error;
1010         return xfs_setattr_size(ip, iattr);
1011 }
1012
1013 STATIC int
1014 xfs_vn_setattr(
1015         struct dentry           *dentry,
1016         struct iattr            *iattr)
1017 {
1018         int                     error;
1019
1020         if (iattr->ia_valid & ATTR_SIZE) {
1021                 struct inode            *inode = d_inode(dentry);
1022                 struct xfs_inode        *ip = XFS_I(inode);
1023                 uint                    iolock;
1024
1025                 xfs_ilock(ip, XFS_MMAPLOCK_EXCL);
1026                 iolock = XFS_IOLOCK_EXCL | XFS_MMAPLOCK_EXCL;
1027
1028                 error = xfs_break_layouts(inode, &iolock, BREAK_UNMAP);
1029                 if (error) {
1030                         xfs_iunlock(ip, XFS_MMAPLOCK_EXCL);
1031                         return error;
1032                 }
1033
1034                 error = xfs_vn_setattr_size(dentry, iattr);
1035                 xfs_iunlock(ip, XFS_MMAPLOCK_EXCL);
1036         } else {
1037                 error = xfs_vn_setattr_nonsize(dentry, iattr);
1038         }
1039
1040         return error;
1041 }
1042
1043 STATIC int
1044 xfs_vn_update_time(
1045         struct inode            *inode,
1046         struct timespec64       *now,
1047         int                     flags)
1048 {
1049         struct xfs_inode        *ip = XFS_I(inode);
1050         struct xfs_mount        *mp = ip->i_mount;
1051         int                     log_flags = XFS_ILOG_TIMESTAMP;
1052         struct xfs_trans        *tp;
1053         int                     error;
1054
1055         trace_xfs_update_time(ip);
1056
1057         if (inode->i_sb->s_flags & SB_LAZYTIME) {
1058                 if (!((flags & S_VERSION) &&
1059                       inode_maybe_inc_iversion(inode, false)))
1060                         return generic_update_time(inode, now, flags);
1061
1062                 /* Capture the iversion update that just occurred */
1063                 log_flags |= XFS_ILOG_CORE;
1064         }
1065
1066         error = xfs_trans_alloc(mp, &M_RES(mp)->tr_fsyncts, 0, 0, 0, &tp);
1067         if (error)
1068                 return error;
1069
1070         xfs_ilock(ip, XFS_ILOCK_EXCL);
1071         if (flags & S_CTIME)
1072                 inode->i_ctime = *now;
1073         if (flags & S_MTIME)
1074                 inode->i_mtime = *now;
1075         if (flags & S_ATIME)
1076                 inode->i_atime = *now;
1077
1078         xfs_trans_ijoin(tp, ip, XFS_ILOCK_EXCL);
1079         xfs_trans_log_inode(tp, ip, log_flags);
1080         return xfs_trans_commit(tp);
1081 }
1082
1083 STATIC int
1084 xfs_vn_fiemap(
1085         struct inode            *inode,
1086         struct fiemap_extent_info *fieinfo,
1087         u64                     start,
1088         u64                     length)
1089 {
1090         int                     error;
1091
1092         xfs_ilock(XFS_I(inode), XFS_IOLOCK_SHARED);
1093         if (fieinfo->fi_flags & FIEMAP_FLAG_XATTR) {
1094                 fieinfo->fi_flags &= ~FIEMAP_FLAG_XATTR;
1095                 error = iomap_fiemap(inode, fieinfo, start, length,
1096                                 &xfs_xattr_iomap_ops);
1097         } else {
1098                 error = iomap_fiemap(inode, fieinfo, start, length,
1099                                 &xfs_iomap_ops);
1100         }
1101         xfs_iunlock(XFS_I(inode), XFS_IOLOCK_SHARED);
1102
1103         return error;
1104 }
1105
1106 STATIC int
1107 xfs_vn_tmpfile(
1108         struct inode    *dir,
1109         struct dentry   *dentry,
1110         umode_t         mode)
1111 {
1112         return xfs_generic_create(dir, dentry, mode, 0, true);
1113 }
1114
1115 static const struct inode_operations xfs_inode_operations = {
1116         .get_acl                = xfs_get_acl,
1117         .set_acl                = xfs_set_acl,
1118         .getattr                = xfs_vn_getattr,
1119         .setattr                = xfs_vn_setattr,
1120         .listxattr              = xfs_vn_listxattr,
1121         .fiemap                 = xfs_vn_fiemap,
1122         .update_time            = xfs_vn_update_time,
1123 };
1124
1125 static const struct inode_operations xfs_dir_inode_operations = {
1126         .create                 = xfs_vn_create,
1127         .lookup                 = xfs_vn_lookup,
1128         .link                   = xfs_vn_link,
1129         .unlink                 = xfs_vn_unlink,
1130         .symlink                = xfs_vn_symlink,
1131         .mkdir                  = xfs_vn_mkdir,
1132         /*
1133          * Yes, XFS uses the same method for rmdir and unlink.
1134          *
1135          * There are some subtile differences deeper in the code,
1136          * but we use S_ISDIR to check for those.
1137          */
1138         .rmdir                  = xfs_vn_unlink,
1139         .mknod                  = xfs_vn_mknod,
1140         .rename                 = xfs_vn_rename,
1141         .get_acl                = xfs_get_acl,
1142         .set_acl                = xfs_set_acl,
1143         .getattr                = xfs_vn_getattr,
1144         .setattr                = xfs_vn_setattr,
1145         .listxattr              = xfs_vn_listxattr,
1146         .update_time            = xfs_vn_update_time,
1147         .tmpfile                = xfs_vn_tmpfile,
1148 };
1149
1150 static const struct inode_operations xfs_dir_ci_inode_operations = {
1151         .create                 = xfs_vn_create,
1152         .lookup                 = xfs_vn_ci_lookup,
1153         .link                   = xfs_vn_link,
1154         .unlink                 = xfs_vn_unlink,
1155         .symlink                = xfs_vn_symlink,
1156         .mkdir                  = xfs_vn_mkdir,
1157         /*
1158          * Yes, XFS uses the same method for rmdir and unlink.
1159          *
1160          * There are some subtile differences deeper in the code,
1161          * but we use S_ISDIR to check for those.
1162          */
1163         .rmdir                  = xfs_vn_unlink,
1164         .mknod                  = xfs_vn_mknod,
1165         .rename                 = xfs_vn_rename,
1166         .get_acl                = xfs_get_acl,
1167         .set_acl                = xfs_set_acl,
1168         .getattr                = xfs_vn_getattr,
1169         .setattr                = xfs_vn_setattr,
1170         .listxattr              = xfs_vn_listxattr,
1171         .update_time            = xfs_vn_update_time,
1172         .tmpfile                = xfs_vn_tmpfile,
1173 };
1174
1175 static const struct inode_operations xfs_symlink_inode_operations = {
1176         .get_link               = xfs_vn_get_link,
1177         .getattr                = xfs_vn_getattr,
1178         .setattr                = xfs_vn_setattr,
1179         .listxattr              = xfs_vn_listxattr,
1180         .update_time            = xfs_vn_update_time,
1181 };
1182
1183 static const struct inode_operations xfs_inline_symlink_inode_operations = {
1184         .get_link               = xfs_vn_get_link_inline,
1185         .getattr                = xfs_vn_getattr,
1186         .setattr                = xfs_vn_setattr,
1187         .listxattr              = xfs_vn_listxattr,
1188         .update_time            = xfs_vn_update_time,
1189 };
1190
1191 /* Figure out if this file actually supports DAX. */
1192 static bool
1193 xfs_inode_supports_dax(
1194         struct xfs_inode        *ip)
1195 {
1196         struct xfs_mount        *mp = ip->i_mount;
1197
1198         /* Only supported on non-reflinked files. */
1199         if (!S_ISREG(VFS_I(ip)->i_mode) || xfs_is_reflink_inode(ip))
1200                 return false;
1201
1202         /* DAX mount option or DAX iflag must be set. */
1203         if (!(mp->m_flags & XFS_MOUNT_DAX) &&
1204             !(ip->i_d.di_flags2 & XFS_DIFLAG2_DAX))
1205                 return false;
1206
1207         /* Block size must match page size */
1208         if (mp->m_sb.sb_blocksize != PAGE_SIZE)
1209                 return false;
1210
1211         /* Device has to support DAX too. */
1212         return xfs_find_daxdev_for_inode(VFS_I(ip)) != NULL;
1213 }
1214
1215 STATIC void
1216 xfs_diflags_to_iflags(
1217         struct inode            *inode,
1218         struct xfs_inode        *ip)
1219 {
1220         uint16_t                flags = ip->i_d.di_flags;
1221
1222         inode->i_flags &= ~(S_IMMUTABLE | S_APPEND | S_SYNC |
1223                             S_NOATIME | S_DAX);
1224
1225         if (flags & XFS_DIFLAG_IMMUTABLE)
1226                 inode->i_flags |= S_IMMUTABLE;
1227         if (flags & XFS_DIFLAG_APPEND)
1228                 inode->i_flags |= S_APPEND;
1229         if (flags & XFS_DIFLAG_SYNC)
1230                 inode->i_flags |= S_SYNC;
1231         if (flags & XFS_DIFLAG_NOATIME)
1232                 inode->i_flags |= S_NOATIME;
1233         if (xfs_inode_supports_dax(ip))
1234                 inode->i_flags |= S_DAX;
1235 }
1236
1237 /*
1238  * Initialize the Linux inode.
1239  *
1240  * When reading existing inodes from disk this is called directly from xfs_iget,
1241  * when creating a new inode it is called from xfs_ialloc after setting up the
1242  * inode. These callers have different criteria for clearing XFS_INEW, so leave
1243  * it up to the caller to deal with unlocking the inode appropriately.
1244  */
1245 void
1246 xfs_setup_inode(
1247         struct xfs_inode        *ip)
1248 {
1249         struct inode            *inode = &ip->i_vnode;
1250         gfp_t                   gfp_mask;
1251
1252         inode->i_ino = ip->i_ino;
1253         inode->i_state = I_NEW;
1254
1255         inode_sb_list_add(inode);
1256         /* make the inode look hashed for the writeback code */
1257         inode_fake_hash(inode);
1258
1259         inode->i_uid    = xfs_uid_to_kuid(ip->i_d.di_uid);
1260         inode->i_gid    = xfs_gid_to_kgid(ip->i_d.di_gid);
1261
1262         i_size_write(inode, ip->i_d.di_size);
1263         xfs_diflags_to_iflags(inode, ip);
1264
1265         if (S_ISDIR(inode->i_mode)) {
1266                 /*
1267                  * We set the i_rwsem class here to avoid potential races with
1268                  * lockdep_annotate_inode_mutex_key() reinitialising the lock
1269                  * after a filehandle lookup has already found the inode in
1270                  * cache before it has been unlocked via unlock_new_inode().
1271                  */
1272                 lockdep_set_class(&inode->i_rwsem,
1273                                   &inode->i_sb->s_type->i_mutex_dir_key);
1274                 lockdep_set_class(&ip->i_lock.mr_lock, &xfs_dir_ilock_class);
1275                 ip->d_ops = ip->i_mount->m_dir_inode_ops;
1276         } else {
1277                 ip->d_ops = ip->i_mount->m_nondir_inode_ops;
1278                 lockdep_set_class(&ip->i_lock.mr_lock, &xfs_nondir_ilock_class);
1279         }
1280
1281         /*
1282          * Ensure all page cache allocations are done from GFP_NOFS context to
1283          * prevent direct reclaim recursion back into the filesystem and blowing
1284          * stacks or deadlocking.
1285          */
1286         gfp_mask = mapping_gfp_mask(inode->i_mapping);
1287         mapping_set_gfp_mask(inode->i_mapping, (gfp_mask & ~(__GFP_FS)));
1288
1289         /*
1290          * If there is no attribute fork no ACL can exist on this inode,
1291          * and it can't have any file capabilities attached to it either.
1292          */
1293         if (!XFS_IFORK_Q(ip)) {
1294                 inode_has_no_xattr(inode);
1295                 cache_no_acl(inode);
1296         }
1297 }
1298
1299 void
1300 xfs_setup_iops(
1301         struct xfs_inode        *ip)
1302 {
1303         struct inode            *inode = &ip->i_vnode;
1304
1305         switch (inode->i_mode & S_IFMT) {
1306         case S_IFREG:
1307                 inode->i_op = &xfs_inode_operations;
1308                 inode->i_fop = &xfs_file_operations;
1309                 if (IS_DAX(inode))
1310                         inode->i_mapping->a_ops = &xfs_dax_aops;
1311                 else
1312                         inode->i_mapping->a_ops = &xfs_address_space_operations;
1313                 break;
1314         case S_IFDIR:
1315                 if (xfs_sb_version_hasasciici(&XFS_M(inode->i_sb)->m_sb))
1316                         inode->i_op = &xfs_dir_ci_inode_operations;
1317                 else
1318                         inode->i_op = &xfs_dir_inode_operations;
1319                 inode->i_fop = &xfs_dir_file_operations;
1320                 break;
1321         case S_IFLNK:
1322                 if (ip->i_df.if_flags & XFS_IFINLINE)
1323                         inode->i_op = &xfs_inline_symlink_inode_operations;
1324                 else
1325                         inode->i_op = &xfs_symlink_inode_operations;
1326                 break;
1327         default:
1328                 inode->i_op = &xfs_inode_operations;
1329                 init_special_inode(inode, inode->i_mode, inode->i_rdev);
1330                 break;
1331         }
1332 }