彼氏が職場のある女の子のプライベートな話しをよく私に話してくるのですが、私は聞いていて良い気はしません。 それを伝えると、まだ入社して数年だから放っておけ

信じないでお互いの仲が平和に行くとは到底思えないですよ。
好きであるなら主さんは信じてあげてください。その結果、何事も無ければそれでいいですし何か起こればそれ相応の対応をすればいいだけのことですし。

ただ、彼が単にデリカシーが無くそういう発言をしたのか分かりませんが、好意を持ってなければ頻繁に話をすることはまず無いと思います。
心配と気なるではニュアンスが違うので仕事に付け込んで好意が発展しないとも限らないですので警戒はしておいた方がいいかもしれないです。