性格の不一致で妻と裁判離婚しました。 妻が裁判中に私の会社での浮気をバラすまでは 子供のために、できるだけのことをする、家賃も取らないと言っていまし

浮気をばらした奥様が悪いのではなく、まずは浮気したご自身が悪いと思ったほうが良いですよ。
何故ばらされたから家賃を取ることにした！と仕返しのような発想になっているのでしょうか？

世間の人が知ったら「最初は子供のためにできるだけのことをする、家賃もいらないと言っていたのに、浮気をばらされたから子供にも会わないし家賃請求もする、約束を守れない男」じゃないでしょうか？

会社に連絡されて困るなら、どうして家賃取るのかという質問に答えてあげたら良いのではないでしょうか。
逆に何故答えてあげないんですか？

細かいことは分かりませんが、投稿を読ませて頂いて個人的に抱いた印象は上記のようなものでした。