近所トラブル

うちの家はアパートで三階建てなんですが、私が住んでいる所は一階なのですが二階の方が私を気に食わないらしくイチャモンをつけてくるんです。私は、夜中騒いだりしていないのに『笑い声とか騒ぎ声が夜中うるさい』と大家に度々苦情をいっていて大家もその方側につき、『これで注意するのは何度目ですかね～？今度苦情がきたら警察呼びますよ』などと、あられもない言葉や只のストレス解消みたいな感じで言われます。そして今日、二階の方と口喧嘩しました。二階の方は、『この馬鹿っ！！』などの暴言も吐き本当に許せません。二階の方の方こそ、子供の泣き声や足音が凄いのに…私は一度も大家に苦情したりもしていないのに。本当に許せません。挨拶しても返してこないし礼儀がありません。どうしたらいいんでしょう？