大抵の場合はネットワークインストールで済ませられるだろうから、光学ドライブはなくても
FDDがあればいいだろう。
HDDなしはさすがにちょっと極論だろう。（そのための別鯖がいるわけだし）
キーボードはあったほうがいいかもしれないが、マウスはなくてもいいだろう。
（インストール時のみ他からもってくればキーボードなしでもいいけど、トラブった時につけるのが面倒）

というわけで
・ケース＋電源
・マザーボード
・CPU
・メモリ
・HDD
・FDD
・キーボード
が最低必要なパーツだろう。