元カレと完全に縁を切るか、仕事をするか

現在転職活動中なのですが、いい感じに面接が進んでいる企業が
前職と一部つながりがあることがわかりました。
もし合格と言われたら、断るか受け入れるかで悩んでいます。
というのも私は前職とは完全に縁を切りたかったのです。

前職の仕事で悪いことをしたというわけではないのですが
前職の出入りの業者の人に元カレがおり
これがまたストーカー気質でどうしようもない男だったのです。

束縛する、酒を飲むと暴れる、勝手に私のものを捨てる、泣く
女の仕事をばかにする、のに貯金がほとんどない
待ち伏せ、不当に金の請求、と思ったら一転謝罪・・・・
終いには仕事の件で私に電話してきた上司に怒鳴る始末。
とにかく冷たくし、これ以上付きまとったら警察を呼ぶと宣言して
やっと別れたのです。

元の会社とつながりがあれば私がどこで何をしているか伝わると思います。
暴力はなかったですが、私以外に暴力をふるうのはOKみたなわかわからんことを言っていたこともあって
なにがどうしてスイッチが入りどこに飛び火するのかわかりません
私が強迫神経症を患っていることもあって、頭に不安がぐるぐる回り
さすがにつらいです

どうしたらいいか・・・どうすべきか・・・
私としてはもっとふてぶてしく前に進み、毅然としていたいのに
おびえている自分も情けないです。悪いことをしたわけではないのに
男の人と付き合うことも初めてだったので、こういうことがよくあることかもわからず、誰にも相談もできず。精神的に追いつめられています。
アドバイスをお願いします