どうして不倫はいけないことなんですか？

仰ることよくわかりました。
ポイントとなるのはお互いの価値観の一致・不一致だということですね。

そこで、もしお付き合いいただけるようなら、次のようなことについてはどのようにお考えになりますか？

まず、不倫あるいは浮気を了承するような2人以上の人がいます。彼ら彼女らの間では価値が一致しており、不和は起きません。
そこに、彼ら彼女らのその関係を見た・知った他者(知人やあかの他人)が、それでも彼らの関係はいけないことだと批判したとします。

このようなことはなぜ起こると思いますか？　つまり、いわゆる世間がこのような関係を批判するのはなぜかということです。

1人対1人が婚姻あるいは恋愛関係を結ぶことが良いというう価値観が多数派だからでしょうか？

これに限らず、持論がありましたらお考えを聞かせてもらえたら幸いです。