夫婦喧嘩をしたとき、いつも妻にここは俺の家だから出ていけ！ と言ったら、妻はここは私の家でもあるから、あんたが出ていけ！ と言われます。 家の名義も私

2人共おかしいと思う。
誰の家？家族の家でしょう。
法律では主さん名義だけど、結婚したからには家族の家だと思います。
ローン払ってるのが苦しいならば話し合って協力してもらったほうが良いと思います。
奥さんにも働けるならば短時間パートに出てもらうとか、ローンおり半で２人で頑張っていくとか…

法律では、結婚したら財産は家族に使う義務があります。
大口叩けば良いって問題でもないと思います。