複雑な家庭のため、時系列で箇条書きで書きたいと思います。 当時４歳で両親離婚、原因は父の浮気と聞いていた。弟妹あり。また、異父弟が１人いますが、母は×２です。

匿名２様、レスありがとうございます。
助け合ってるではなく、甘えてるが正しいと思います。また、私の性格上、お節介をしてしまうところはあります。
言い訳がましいと思いますが、共有しているつもりではないんです。弟の件に関しては、父の前に母に相談してたので、成り行きでそうなった感じです。
妹の件は、ポロッと言ってしまった感じです。
私や子供が父と連絡取るときは、ベランダで電話したりしますが、小学低学年の2人に祖母の前で祖父の話をするなと言うのも、負の感情を植え付けるみたいで言うこと自体がおかしいと思ったりし、話が出て母が顔をしかめると、しまった！(私が)って思い、話を変えるようにしてます。母の前では、父の話じたい、私自身はタブーの認識なので、父方祖父母が入院したなどの余程の事がない限り、話を出さないようにしてるんですが。
弟妹に関しては匿名２様おっしゃる通り、大人なんだから‼️で今後はスルーしてはいきたいと思います。
問題は子への対応といいますか、私の子からみた父と、母からみた父を今後も一緒にされるなら、別々に暮らすことが１番楽なのかなと考えてます。
また、私自身が受けたように、元夫や父の悪口を子に今後言わないかが心配でもあったりします。