社内不倫をしているのではと噂されている事務の先輩（独身）と上司（既婚・子あり）がいます。その噂を聞いてから、浮気の類がすごく嫌いな私は、一緒に働いているのも嫌で

コンプライアンス部があるんなら
匿名で通報すればいいんじゃないでしょうか。

「匿名ではいかなそうだし」と仰るけど
問題の人物の姓名の他、あなたがここで仰ってる二人の行動のように
ある程度具体的なことを書いておけば
匿名でも説得力を持たせることは可能でしょう。

勿論匿名とは言えど
告発者があなただとバレる可能性はゼロではありません。
しかしストレスを解消するにも正義を通すにもコストやリスクはかかりますね。

問題はあなたがどれだけのコストやリスクを受け入れる用意があるのか、という話だと思います。
完全に安全でいたいなら何もせずじっとしているしかない。