人格に難ありな妻を見捨てても人として許されますか？

百戦錬磨というか、荒んだ家系、家庭環境で育っているからそうなってしまったのだと私は睨んでいます。

様々なメリット、デメリットを予測して、損得勘定の算盤を弾けば逃げるが勝ちという文意は察しますし、
私もそう思うから妻が「収入に余裕がある家持ちのサラリーマン」云々と口にした瞬間に（誰かこの女を世話してくれる俺みたいなの他にいるなら、その人には悪いが、見捨てて逃げてもギリギリ人として許されるかな。俺助かるな）と頭に浮かび「いいよ。高収入なサラリーマンだっけ？そういう人いてそうしたいならそうしなよ。」と返したんです。

自分が悩んでいるのは、
離婚した時に頭によぎったのと同様、
自分の伴侶として結ばれた人に難があり、自分の忍耐や許しが切れたとして、それを理由に伴侶を捨ててしまうことは、人として許されるのだろうか。
それはそれで自分が妻を裏切る不誠実なことなんじゃないか、等の後ろめたさを感じるんです。