Merge patch series "RISC-V: Align the shadow stack"
[platform/kernel/linux-rpi.git] / mm / cma_debug.c
1 // SPDX-License-Identifier: GPL-2.0
2 /*
3  * CMA DebugFS Interface
4  *
5  * Copyright (c) 2015 Sasha Levin <sasha.levin@oracle.com>
6  */
7
8
9 #include <linux/debugfs.h>
10 #include <linux/cma.h>
11 #include <linux/list.h>
12 #include <linux/kernel.h>
13 #include <linux/slab.h>
14 #include <linux/mm_types.h>
15
16 #include "cma.h"
17
18 struct cma_mem {
19         struct hlist_node node;
20         struct page *p;
21         unsigned long n;
22 };
23
24 static int cma_debugfs_get(void *data, u64 *val)
25 {
26         unsigned long *p = data;
27
28         *val = *p;
29
30         return 0;
31 }
32 DEFINE_DEBUGFS_ATTRIBUTE(cma_debugfs_fops, cma_debugfs_get, NULL, "%llu\n");
33
34 static int cma_used_get(void *data, u64 *val)
35 {
36         struct cma *cma = data;
37         unsigned long used;
38
39         spin_lock_irq(&cma->lock);
40         /* pages counter is smaller than sizeof(int) */
41         used = bitmap_weight(cma->bitmap, (int)cma_bitmap_maxno(cma));
42         spin_unlock_irq(&cma->lock);
43         *val = (u64)used << cma->order_per_bit;
44
45         return 0;
46 }
47 DEFINE_DEBUGFS_ATTRIBUTE(cma_used_fops, cma_used_get, NULL, "%llu\n");
48
49 static int cma_maxchunk_get(void *data, u64 *val)
50 {
51         struct cma *cma = data;
52         unsigned long maxchunk = 0;
53         unsigned long start, end = 0;
54         unsigned long bitmap_maxno = cma_bitmap_maxno(cma);
55
56         spin_lock_irq(&cma->lock);
57         for (;;) {
58                 start = find_next_zero_bit(cma->bitmap, bitmap_maxno, end);
59                 if (start >= bitmap_maxno)
60                         break;
61                 end = find_next_bit(cma->bitmap, bitmap_maxno, start);
62                 maxchunk = max(end - start, maxchunk);
63         }
64         spin_unlock_irq(&cma->lock);
65         *val = (u64)maxchunk << cma->order_per_bit;
66
67         return 0;
68 }
69 DEFINE_DEBUGFS_ATTRIBUTE(cma_maxchunk_fops, cma_maxchunk_get, NULL, "%llu\n");
70
71 static void cma_add_to_cma_mem_list(struct cma *cma, struct cma_mem *mem)
72 {
73         spin_lock(&cma->mem_head_lock);
74         hlist_add_head(&mem->node, &cma->mem_head);
75         spin_unlock(&cma->mem_head_lock);
76 }
77
78 static struct cma_mem *cma_get_entry_from_list(struct cma *cma)
79 {
80         struct cma_mem *mem = NULL;
81
82         spin_lock(&cma->mem_head_lock);
83         if (!hlist_empty(&cma->mem_head)) {
84                 mem = hlist_entry(cma->mem_head.first, struct cma_mem, node);
85                 hlist_del_init(&mem->node);
86         }
87         spin_unlock(&cma->mem_head_lock);
88
89         return mem;
90 }
91
92 static int cma_free_mem(struct cma *cma, int count)
93 {
94         struct cma_mem *mem = NULL;
95
96         while (count) {
97                 mem = cma_get_entry_from_list(cma);
98                 if (mem == NULL)
99                         return 0;
100
101                 if (mem->n <= count) {
102                         cma_release(cma, mem->p, mem->n);
103                         count -= mem->n;
104                         kfree(mem);
105                 } else if (cma->order_per_bit == 0) {
106                         cma_release(cma, mem->p, count);
107                         mem->p += count;
108                         mem->n -= count;
109                         count = 0;
110                         cma_add_to_cma_mem_list(cma, mem);
111                 } else {
112                         pr_debug("cma: cannot release partial block when order_per_bit != 0\n");
113                         cma_add_to_cma_mem_list(cma, mem);
114                         break;
115                 }
116         }
117
118         return 0;
119
120 }
121
122 static int cma_free_write(void *data, u64 val)
123 {
124         int pages = val;
125         struct cma *cma = data;
126
127         return cma_free_mem(cma, pages);
128 }
129 DEFINE_DEBUGFS_ATTRIBUTE(cma_free_fops, NULL, cma_free_write, "%llu\n");
130
131 static int cma_alloc_mem(struct cma *cma, int count)
132 {
133         struct cma_mem *mem;
134         struct page *p;
135
136         mem = kzalloc(sizeof(*mem), GFP_KERNEL);
137         if (!mem)
138                 return -ENOMEM;
139
140         p = cma_alloc(cma, count, 0, false);
141         if (!p) {
142                 kfree(mem);
143                 return -ENOMEM;
144         }
145
146         mem->p = p;
147         mem->n = count;
148
149         cma_add_to_cma_mem_list(cma, mem);
150
151         return 0;
152 }
153
154 static int cma_alloc_write(void *data, u64 val)
155 {
156         int pages = val;
157         struct cma *cma = data;
158
159         return cma_alloc_mem(cma, pages);
160 }
161 DEFINE_DEBUGFS_ATTRIBUTE(cma_alloc_fops, NULL, cma_alloc_write, "%llu\n");
162
163 static void cma_debugfs_add_one(struct cma *cma, struct dentry *root_dentry)
164 {
165         struct dentry *tmp;
166
167         tmp = debugfs_create_dir(cma->name, root_dentry);
168
169         debugfs_create_file("alloc", 0200, tmp, cma, &cma_alloc_fops);
170         debugfs_create_file("free", 0200, tmp, cma, &cma_free_fops);
171         debugfs_create_file("base_pfn", 0444, tmp,
172                             &cma->base_pfn, &cma_debugfs_fops);
173         debugfs_create_file("count", 0444, tmp, &cma->count, &cma_debugfs_fops);
174         debugfs_create_file("order_per_bit", 0444, tmp,
175                             &cma->order_per_bit, &cma_debugfs_fops);
176         debugfs_create_file("used", 0444, tmp, cma, &cma_used_fops);
177         debugfs_create_file("maxchunk", 0444, tmp, cma, &cma_maxchunk_fops);
178
179         cma->dfs_bitmap.array = (u32 *)cma->bitmap;
180         cma->dfs_bitmap.n_elements = DIV_ROUND_UP(cma_bitmap_maxno(cma),
181                                                   BITS_PER_BYTE * sizeof(u32));
182         debugfs_create_u32_array("bitmap", 0444, tmp, &cma->dfs_bitmap);
183 }
184
185 static int __init cma_debugfs_init(void)
186 {
187         struct dentry *cma_debugfs_root;
188         int i;
189
190         cma_debugfs_root = debugfs_create_dir("cma", NULL);
191
192         for (i = 0; i < cma_area_count; i++)
193                 cma_debugfs_add_one(&cma_areas[i], cma_debugfs_root);
194
195         return 0;
196 }
197 late_initcall(cma_debugfs_init);