今困ってます。

今彼氏がいます。とても幸せな毎日でした。彼に問い詰められるまでは。私は過去には興味がありません。過去に戻れる訳でもない、忘れてしまいたい事などもあります。過去の話を今の彼氏にするまでもないし、話したくもないので触れてきませんでした。ある日彼が帰ってくると怒っていました。話を聞くと私の過去についてでした。話したこともないのに何故知っているのか分からず怖くなりました。私の過去について知っている人が全く関係のない他人に話をしたらしく彼の耳に入ってしまいました。
私は怒鳴られると震えてしまい頭の中が真っ白になり言いたい事も言えません。まして過去の話何かできません。今大切なのは彼なのに過去の話のせいで二人の中は壊れかけています。どうしたらいいのでしょうか。