厳しいお言葉をいただくことになる事を覚悟しています。最近既婚の方から連絡が来るのですが、暇だから返信しています。2人でご飯行ったりとかは全く考えていないし、

既婚の方に対して「暇だから返す」のを辞めたらいいのでは？
そういう人と連絡取るのを辞めれば悩みの根源も無くなりますよ。
それとも本当は連絡来るのが嬉しくて返信してるの？

所詮不倫。
本命を探してるわけじゃあるまいし、主さん以外に何人にも可愛いとか２人で会いたいとか言ってるんじゃない？
普通、既婚者から２人で会いたいとか言われた時点で危ないと思って連絡取るの辞めるでしょ。それをスルーしつつも連絡取ってるから不倫候補者として見られるんじゃない？