x86/amd: Cache debug register values in percpu variables
authorAlexey Kardashevskiy <aik@amd.com>
Fri, 20 Jan 2023 03:10:45 +0000 (14:10 +1100)
committerBorislav Petkov (AMD) <bp@alien8.de>
Tue, 31 Jan 2023 19:09:26 +0000 (20:09 +0100)
commit7914695743d598b189d549f2f57af24aa5633705
tree801a28c227627f0d97a408d65a0f195fa2648137
parent8c19b6f257fa71ed3a7a9df6ce466c6be31ca04c
x86/amd: Cache debug register values in percpu variables

Reading DR[0-3]_ADDR_MASK MSRs takes about 250 cycles which is going to
be noticeable with the AMD KVM SEV-ES DebugSwap feature enabled.  KVM is
going to store host's DR[0-3] and DR[0-3]_ADDR_MASK before switching to
a guest; the hardware is going to swap these on VMRUN and VMEXIT.

Store MSR values passed to set_dr_addr_mask() in percpu variables
(when changed) and return them via new amd_get_dr_addr_mask().
The gain here is about 10x.

As set_dr_addr_mask() uses the array too, change the @dr type to
unsigned to avoid checking for <0. And give it the amd_ prefix to match
the new helper as the whole DR_ADDR_MASK feature is AMD-specific anyway.

While at it, replace deprecated boot_cpu_has() with cpu_feature_enabled()
in set_dr_addr_mask().

Signed-off-by: Alexey Kardashevskiy <aik@amd.com>
Signed-off-by: Borislav Petkov (AMD) <bp@alien8.de>
Link: https://lore.kernel.org/r/20230120031047.628097-2-aik@amd.com
arch/x86/include/asm/debugreg.h
arch/x86/kernel/cpu/amd.c
arch/x86/kernel/hw_breakpoint.c