高1女子です。私の家はおじいちゃんとおばあちゃんも一緒に住んでいます。 今日おばあちゃんに「お父さん、昨日何時に帰って来たの？」 と聞かれて私は覚えていなか

あなたの母親の世代です。中学生と高校生の子がいます。

ウチは一緒には住んでないけど、すぐそばに旦那の母親（子ども達から見たらおばあちゃん）がいて半分一緒に住んでいるようなものです。
そのウチのおばあちゃんは、子ども達が赤ん坊からそばにいるのと、元々ちょっと口悪い人なので、主さんの祖父母さんに近い感じですよ。

普段会えない、私の両親であるおじいちゃんおばあちゃんは、孫にかなり優しいです。

主さんも、一緒に住んでいるのだから遠慮せずガンガン言ったらどうかな。
お年寄りなんてボケるのと病気が一番怖いから、「わ～、そんなに怒ると血圧上がるよ～」「怒ってばかりだけどボケちゃったの？」（←実は意外と間違ってない）なんて言ってみてはどうですか。
煽る言い方が嫌なら、
「おばあちゃんは記憶力いいもんねぇ」とか‘自分と違って凄いね’的な誉め方をするといいと思います。

真っ正面からぶつからず「ああ、またキャンキャン吠えているなあ」位に思っておくと楽です。