最新スペックではないけど少なくとも静的ページで応答滞るようなことはないと思うけどなあ

他のwebサーバ(apacheとか)をポート変えてつかってみればIISの問題かどうかは
切り分けられるんじゃなかろうか。思いつくのは逆引き、IPv4/IPv6問題ぐらい。