自分はどうするべきでしょうか？

自分は既婚者の４３歳です。
妻とは結婚５年目です。
結婚寸前の妻のウソがばれて「態度を改めれば信じる」と言う条件で結婚しましたが状況は変わらずにお互いが離婚を意識しだしていました。
そんな時に一人の女性と出会いました。
バツイチ子持ちの方でしたが。性格が合うのかよく会うようになりました。
いろいろと話し聞いていると不倫をしていて悩んでいるようでした。
お互いの私生活が上手く行ってなかったこともあり、その後男女の関係を持ちました。
お互い遊びのつもりでしたが徐々に気持ちが入っていき、相談して双方の身辺の整理をして新しい人生を歩もうと約束しました。
私は離婚をし改めてその女性と付き合いを始めましたが、とある事から元の不倫相手と切れていないのが発覚しました。
僕は離婚までしたのに信じれないと思い、別れを切り出しましたが、目の前で絶縁をしたので思いとどまりました。

ですが信頼できずに苦しいです。
どうしたらいいのでしょう。