耳を塞いでしまうほどであればストレス由来のようにも思えるけど、現状の把握をしないと適切な科を受診できないので、まずは聴力検査をしてみるといいのでは。
その時にパニックになってしまう経緯も話してみればいいんじゃないかな。一度の受診では医者も把握しきれないかもしれないし、受診時の緊張でうまく検査に対応できない場合もあるので2、3度かかってみてはどうだろう。