１年前に不倫していました。 相手とも１年間一緒に生活を共にしています。 別れたのは、私が白黒はっきりさせたかったからです。 中途半端な自分の立場が嫌になり

少なくとも、既にタイミングを逸してしまったのでは無いでしょうか。
一緒になるのならば、同居していた際に奥様にキチンと誠意を示し、慰謝料、養育費を提示、謝罪すべきだった。
それでも納得いただけない場合は、年月を費やし別居の実績を積み重ね、婚姻関係の破綻を証明する…手間を惜しみ、覚悟も無く、誠意を示す事が出来なかった時点で貴女方の以後の関係性は決定付けられたのではないでしょうか。
ところで、現在の喪失感は彼に対しての思慕と云うよりは、背徳感やゲレンデ効果等々、不倫と云うシチュエーションへの渇望ではないでしょうか。
ドラッグと同じく、普通では得られない、インパクトを経験したのですから、通常の恋愛では物足りないでしょう。
しかしながら、周りに公言出来、祝福される平凡な恋愛は刺激は有りませんが、本当の幸せはそこに有ると私は思います。
過去に執着せず新たな出会いを求める方が良いのではないでしょうか。