離婚するべきか悩んでいます

離婚することはないと思います。
義母や義姉の理不尽さと共に、旦那さんの優柔不断さに腹がたちます。
何故、旦那さんに言われて主さんが逃げるように離婚をしなければいけないのか。
旦那さんに夫として父としとの自覚が欠落しているから、その時々によって言動がブレるのでしょう。
子供さんを守るのは父と母しかいません。
子供さんの障害をいまだに責めるような義実家に対し、主さん自身の毅然とした態度が必要です。