spi-mux: Fix false-positive lockdep splats