malloc: Add Huge Page support for mmap
authorAdhemerval Zanella <adhemerval.zanella@linaro.org>
Mon, 16 Aug 2021 18:08:27 +0000 (15:08 -0300)
committerAdhemerval Zanella <adhemerval.zanella@linaro.org>
Wed, 15 Dec 2021 20:35:38 +0000 (17:35 -0300)
commit98d5fcb8d099a1a868e032c89891c395a2f365c5
tree13b1a0a98165f832a5ae394b958cb749709dad1d
parent6cc3ccc67e0dda654fc839377af2818a296f0007
malloc: Add Huge Page support for mmap

With the morecore hook removed, there is not easy way to provide huge
pages support on with glibc allocator without resorting to transparent
huge pages.  And some users and programs do prefer to use the huge pages
directly instead of THP for multiple reasons: no splitting, re-merging
by the VM, no TLB shootdowns for running processes, fast allocation
from the reserve pool, no competition with the rest of the processes
unlike THP, no swapping all, etc.

This patch extends the 'glibc.malloc.hugetlb' tunable: the value
'2' means to use huge pages directly with the system default size,
while a positive value means and specific page size that is matched
against the supported ones by the system.

Currently only memory allocated on sysmalloc() is handled, the arenas
still uses the default system page size.

To test is a new rule is added tests-malloc-hugetlb2, which run the
addes tests with the required GLIBC_TUNABLE setting.  On systems without
a reserved huge pages pool, is just stress the mmap(MAP_HUGETLB)
allocation failure.  To improve test coverage it is required to create
a pool with some allocated pages.

Checked on x86_64-linux-gnu.

Reviewed-by: DJ Delorie <dj@redhat.com>
NEWS
Rules
elf/dl-tunables.list
elf/tst-rtld-list-tunables.exp
malloc/Makefile
malloc/arena.c
malloc/malloc.c
manual/tunables.texi
sysdeps/generic/malloc-hugepages.c
sysdeps/generic/malloc-hugepages.h
sysdeps/unix/sysv/linux/malloc-hugepages.c