ダメ元でpulseaudioをbusterのバージョンにしたらALSA出力後にdummy outputになる現象はなくなりました。
webを検索したところ、pulseaudioでファイルのサンプリング周波数に応じて出力サンプリング周波数を変えるのは
44.1KHzと48KHz以外では無理っぽいです。
どうもご迷惑おかけしました。