mm/slab_common: cleanup kmalloc_large()
authorHyeonggon Yoo <42.hyeyoo@gmail.com>
Wed, 17 Aug 2022 10:18:18 +0000 (19:18 +0900)
committerVlastimil Babka <vbabka@suse.cz>
Wed, 24 Aug 2022 14:11:41 +0000 (16:11 +0200)
Now that kmalloc_large() and kmalloc_large_node() do mostly same job,
make kmalloc_large() wrapper of kmalloc_large_node_notrace().

In the meantime, add missing flag fix code in
kmalloc_large_node_notrace().

Signed-off-by: Hyeonggon Yoo <42.hyeyoo@gmail.com>
Reviewed-by: Vlastimil Babka <vbabka@suse.cz>
Signed-off-by: Vlastimil Babka <vbabka@suse.cz>
mm/slab_common.c

index 7a0942d..51ccd05 100644 (file)
@@ -905,28 +905,6 @@ gfp_t kmalloc_fix_flags(gfp_t flags)
  * directly to the page allocator. We use __GFP_COMP, because we will need to
  * know the allocation order to free the pages properly in kfree.
  */
-void *kmalloc_large(size_t size, gfp_t flags)
-{
-       void *ret = NULL;
-       struct page *page;
-       unsigned int order = get_order(size);
-
-       if (unlikely(flags & GFP_SLAB_BUG_MASK))
-               flags = kmalloc_fix_flags(flags);
-
-       page = alloc_pages(flags | __GFP_COMP, order);
-       if (likely(page)) {
-               ret = page_address(page);
-               mod_lruvec_page_state(page, NR_SLAB_UNRECLAIMABLE_B,
-                                     PAGE_SIZE << order);
-       }
-       ret = kasan_kmalloc_large(ret, size, flags);
-       /* As ret might get tagged, call kmemleak hook after KASAN. */
-       kmemleak_alloc(ret, size, 1, flags);
-       trace_kmalloc(_RET_IP_, ret, NULL, size, PAGE_SIZE << order, flags);
-       return ret;
-}
-EXPORT_SYMBOL(kmalloc_large);
 
 void *kmalloc_large_node_notrace(size_t size, gfp_t flags, int node)
 {
@@ -934,6 +912,9 @@ void *kmalloc_large_node_notrace(size_t size, gfp_t flags, int node)
        void *ptr = NULL;
        unsigned int order = get_order(size);
 
+       if (unlikely(flags & GFP_SLAB_BUG_MASK))
+               flags = kmalloc_fix_flags(flags);
+
        flags |= __GFP_COMP;
        page = alloc_pages_node(node, flags, order);
        if (page) {
@@ -949,6 +930,16 @@ void *kmalloc_large_node_notrace(size_t size, gfp_t flags, int node)
        return ptr;
 }
 
+void *kmalloc_large(size_t size, gfp_t flags)
+{
+       void *ret = kmalloc_large_node_notrace(size, flags, NUMA_NO_NODE);
+
+       trace_kmalloc(_RET_IP_, ret, NULL, size,
+                     PAGE_SIZE << get_order(size), flags);
+       return ret;
+}
+EXPORT_SYMBOL(kmalloc_large);
+
 void *kmalloc_large_node(size_t size, gfp_t flags, int node)
 {
        void *ret = kmalloc_large_node_notrace(size, flags, node);