母親の言動で、その言動を図り兼ねることが続き、 とうとう母と関わることが出来なくなってしまいました。 こんなこと、皆さんもありますか？

あると思います。
私の母も噂話が好きなのですが、家を出て、母のそういった部分が苦手だったことに気が付きました。今は適度な距離感で付き合えています。
家族といっても所詮は他人。合わなければ距離をとってもいいと思います。
あなたは自立できる年齢なのでしょうか。
もしそうでないのなら、大変だとは思いますが、自立できるようになるまで、つかず離れずの距離感で付き合っていけばいいと思います。