元彼の友達を好きに

初めての質問です

私は今元彼の友達に恋をしています。
元彼とは一年半前に別れていますが
今でも仲良い友達です
でも最近元彼に戻ろうと言われ
でも私はお断りしました
そして今年に入り元彼の友達と久しぶりに出会い
それから毎日連絡をとっています
２人で遊ぶ事が増えていつの間にか
気になっていました
そして最近元彼の友達に告白されました
私も、と言いたかったのですが
どうしても元彼の友達って事と
元彼に申し訳ない気持ちがあり
まだ返事を出していません
元彼とその彼はとても仲良い２人だし
元彼に言うのがとても気まずいからです
元彼に告白されて断った事は
その彼に言っていませんし
元彼と気まずつくなるよ、と
言っても大丈夫と言ってきます
私はその彼と付き合いたいですが
どうしても元彼に申し訳なくて…
それに、元彼とは二年付き合ったので
元彼の友達は色んな人知っているし
イコールその彼も元彼と共通の仲良い友達なので
もし、その彼と付き合っても
周りの友達から何か言われたりや
気まずくならないかなど
色々気になってしまって…
なかなかうまくいきません

こんな場合どうすればいいでしょうか？
皆さんの考えやアドバイス
教えてください！