僕と妻、妻の連れ子の娘7歳の３人家族です。 娘が3歳の時に僕らは一緒になりましたが、しばらくしてから共働きになったため、妻の両親に娘の面倒を頼れる環境がいいだろ

お礼拝見致しました。

さすがに不在時に家に入られてるのは辛いですね。
よく旦那の母が勝手に家に入っていて嫁さん悩む…的な相談をみますが逆バージョンですね。

一つ言えるのは、うちの母が言っていたことですが…
離婚して娘に可哀想な思いをさせて更に継父と暮らすという環境だから心配と母は口癖のように言っています。恐らく主さんの奥様のご両親も同じ気持ちだと思いますよ。
近すぎるのも良くないですけどね。
遠すぎても奥様が大変でしょうし。
子ども預けて夫婦でデートをたくさんしたら良いのですよ。
使えるものがあるのだから使おう精神で乗り越えて下さい。