友達と食事していると私と会話している最中なのに周りの事が気になるのかキョロキョロ目が泳いでいる事があるんですが、なぜでしょうか？ とても不快に感じました。

いますね。そういう人。
私も以前、ちょっとした知り合いでしたが、一緒に食事をしていた時に、話を聞いているのかいないのかわかりませんでしたが、周りをキョロキョロと見ていて、何だか不快でした。笑
なんとなく、空気が読めない感じの人慣れしていないような人でしたね。
そういう人に多いんだと思います。
私は不快でしたから、次に食事に誘われた時はキッパリ断わりました。笑