兄の言い分が最もだと思う。生前に親が何しようが自由。

考えられるのは「あなたが家賃相応分の贈与を受けている」としてマイナスされます。