質問です。
前提として料理はいつも私が作ってます。

昨日、グラタンを作ろうと思い牛乳を買いました。
下の子達には料理に使うから飲むなと伝えましたが上の子はバイトだった為に伝えていません。

本日牛乳が飲まれていて妻に相談したら言ってないのが悪い冷蔵庫にあるなら飲まれても仕方がないと言われました。
私の中では自分が購入した物ではない場合は飲み食いしてよいか聞くのが当たり前だし当然と考えていますが妻に言わすとそれは厳しすぎる、(私が)発達障害じゃないのか？と言われています。

以前から自分用に用意していたラーメンやらが食べられており飲み食いするなとは言わないけど一言言ってほしいと子供達には伝えてあります。

これは私がおかしいのでしょうか？