ALSA: usb-audio: assume valid clock