恋愛対象として特に意識はしてなくても、人としては好きだし話しやすいからと言う理由で、職場の異性の人と２人で食事に行くのは失礼なことですか？友達感覚なので、食事代

自分は今の関係で居心地よいですが、相手はどう思ってるかわかりません。。。
ただ、○○さん(私のこと)といると楽しい！ってメールされたことはあります。楽しいのは自分も同じですが、楽しいにも種類がありますからね。
別に告白されたわけではないですが、もしかして気があるのかななんて感じることは何度もあります。でも、自分は勘違いしやすいところがあるので、実際のところわかりません。
ただ、以前その女性と他に友達数人で食事してた時こんな会話があったんです。男グループはみな口をそろえて、多少なりとも気がある人とでないと２人では会わないって話してたんです。でも、その女性はそのことに驚いた様子で、別に気がなくても２人で会うことは普通にあるって話をしてたんです。
その件もあって自分は気軽にその女性に誘っていたんですが、もしかして気があるのかな？と感じることが何度かあるので、相手も期待してたり待ってる部分もあるのかなって。なのに何もしないのでそれが失礼になってるんじゃないかと思ったわけです。