彼氏が元カノとしてる映像が頭をよぎります

こんにちは。20代半ばの女です。

彼氏は34歳で、付き合って３ヵ月経ちました。
付き合う前や付き合った当初は、彼氏から今までの元カノの人数や
付き合った年数など聞いてもこの間までなんとも思わなかったんですが、最近になってある出来事をきっかけに猛烈に気になるようになってきました。もしよろしければ聞いてください。。

先日、ドライブしていて、向かっている車中に彼氏がある場所を通ったとき「あ、ここさぁ・・・なんでもない」って言葉を濁らせたんです。

私は言葉を詰まらせた時点で、彼氏がなにかを思い出してその人と乗ってると勘違いしてるなって瞬時に思い、なんでもないを聞いたあとに、「はは。なに？ｗ」ってちょっと冗談ぽく言って終わらせました。
なんかデリカシーがないのかわからないけど、おっちょこちょいな人なんだなと。
そしてそのあとも、きっと元彼女と行った場所であろう観光地に行って楽しみましたが、やっぱり心の奥ではなにかモヤモヤ。
でも自分にも過去はあるし、いろんな場所に行ったし、お互い様と思い気にしてませんでした。
ですがつい先日、彼氏とごはん食べて歩いて帰っている途中、急にコンドームの話になりました。たまになにかを話題にして自分の考えを熱く語る人なので、始まったなと思い普通に聞いて、私も自分の考えを述べたりして楽しんでました。
そしたら私に、「さちは付き合った初めからゴムつけてって言うし、前の彼氏がしっかりした人だったんだろうね」って言ってきました。
私は過去の彼氏について聞かれたり答えたりするのが嫌なんです。
あまりいい恋愛してません。それに前の付き合った人を聞いて何になるんだろう？マイナスな印象しかありません。
なので、「あまり（前の彼氏とのこと）聞かれるの嫌なんだよね。」って言うと、「ただ聞いてるだけなんだけど・・」って返ってきたので、
ちょっと意地悪く、「じゃあ前の彼女とはどうだったの？」って聞くと、当然のことかのように普通にしゃべりだしました。
「ゴムはつけたり付けなかったり。ゴム付けると、長くできるってこともあって付けたりしてたかな～」と。
は？？？？？と思いました。特にその時はアレの日真っ只中だったんで、精神的に内にこもって考え込んでしまうというか、通常の日とは全然違う精神状態になります。女性の方ならおわかりいただけると思います。
でもそう言われた後に、やり返しになっちゃいますが、元カレとの事をちょっと言いました。
「まあ遠距離だったから（元カレと遠距離だった事は彼氏も知ってます。）、二カ月に１回ぐらいだったけど、私がアレの日だったら、デリケートな時だから無しにしようと言ってくれたり、疲れてたら寝るだけとか全然あったよ」って言いました。
そしたら彼氏は、私が生理の時にしたものだから「えっ、まじで？ギクッ；」と言って笑ってましたが・・

彼氏の元カノとのゴム付けた付けないの話が、もう考えられなくて、どんな人かもわからないのに嫉妬で頭が痛くなり狂いそうでした。
架空の元カノを想像して、二人がしてる最中が嫌でも脳裏に浮かんで、今でも苦しいです。

時間が解決してくれるでしょうか。どんな気持ちでいればいいのかわかりません。
彼氏とそんな雰囲気になってもできないです。なんか気持ち悪くなってきて・・・
彼氏の体にも触れたくないし、会いたくないと思ってます。
でも自分も、前の彼氏と付き合ってたときはすごく仲良かったり、彼氏には伝えていないけどいろんな思い出あるのに、最初にも言ったようにお互い様で片付けたらいいのかな、と・・・
悩んでいます。