気が合って、喧嘩もしたことなく、話しも合うし、趣味も共感できる、なにより一緒にいて楽しい。。。 顔も悪くないし、自分と性格なども似てるから、分かり合えることも

まず離婚してから、彼という人を見直す必要がありますね。
主さんはその彼の友人や家族に会い、
一緒に食事したり、遊びにいったりしていますか？
とても優しく世話好きで人を大事にしている人間だということは、
自分以外の人間に対しての接し方を見ないとわからないですから。

ちなみに私の友人は、堂々と公の場に不倫相手を連れてきます。
不倫しています！と宣言しているわけではありませんが、
２人でよく旅行にも行っているし、彼が彼女の仕事（自営）のフォローもしています。
なので不倫関係なのは周知の事実ですが、どちらも人としては素晴らしく、
その彼は私たちへの気づかいもよくできて、とても優しく献身的です。
地方局ですがTVにも２人で写ってましたし、配偶者も知っていることでしょう。
離婚しない理由はわかりかねるのですが、
あれぐらい公にできるのであれば、本物かもしれないな～とは思います。