io_uring/notif.h

   1 // SPDX-License-Identifier: GPL-2.0
   2
   3 #include <linux/net.h>
   4 #include <linux/uio.h>
   5 #include <net/sock.h>
   6 #include <linux/nospec.h>
   7
   8 #include "rsrc.h"
   9
  10 #define IO_NOTIF_SPLICE_BATCH   32
  11
  12 struct io_notif_data {
  13         struct file             *file;
  14         struct ubuf_info        uarg;
  15         unsigned long           account_pages;
  16         bool                    zc_report;
  17         bool                    zc_used;
  18         bool                    zc_copied;
  19 };
  20
  21 struct io_kiocb *io_alloc_notif(struct io_ring_ctx *ctx);
  22
  23 static inline struct io_notif_data *io_notif_to_data(struct io_kiocb *notif)
  24 {
  25         return io_kiocb_to_cmd(notif, struct io_notif_data);
  26 }
  27
  28 static inline void io_notif_flush(struct io_kiocb *notif)
  29         __must_hold(&notif->ctx->uring_lock)
  30 {
  31         struct io_notif_data *nd = io_notif_to_data(notif);
  32
  33         /* drop slot's master ref */
  34         if (refcount_dec_and_test(&nd->uarg.refcnt))
  35                 io_req_task_work_add(notif);
  36 }
  37
  38 static inline int io_notif_account_mem(struct io_kiocb *notif, unsigned len)
  39 {
  40         struct io_ring_ctx *ctx = notif->ctx;
  41         struct io_notif_data *nd = io_notif_to_data(notif);
  42         unsigned nr_pages = (len >> PAGE_SHIFT) + 2;
  43         int ret;
  44
  45         if (ctx->user) {
  46                 ret = __io_account_mem(ctx->user, nr_pages);
  47                 if (ret)
  48                         return ret;
  49                 nd->account_pages += nr_pages;
  50         }
  51         return 0;
  52 }