以前の部署関連で少人数（6,7人）の飲み会に誘われているのですが、 参加する人の中に一人嫌いな人がいます。 その人から度々嫌味を言われたりすることがあります

どういう飲み会なのかと、その会社の飲み会に関しての意識がどうなのかによる。

自由参加で行かない人がいても変に思われないのなら行かない。
行かないと今後の仕事内容や昇格に悪影響が出そうなら行く。
主さんが会社からどう思われてどんなそんな扱いされても別にいいって考えの人なら行かなくていいと思うけどね。

もういっそのこと、飲み会でも仕事中でもその人にまた嫌味言われたタイミングで「◯◯さんっていっつもそういう嫌味言ってきますよね、なんでですか？」と半笑いでストレートに聞いてみるとかは？