会いに行くべきでしょうか？

25歳、女です。

私には４ヶ月前まで３年半の間、同棲していた彼がいます。
お互いに働いており、労働時間は私の方が長かったのですが彼は仕事を理由に家事、掃除、全てを私に任せていました。
彼が脱ぎ散らかしたものを拾い集めて洗濯したり、食べ終わって放置された食器を洗ったりという生活に自分が彼の母親代わりのように思えてきてとても苦痛でした。

そして何より苦痛だったのは、お金のことです。彼が遊びに行くためのお金、彼が携帯料金を払うためのお金、途中からメモしていくと現在約60万円になりました。
貸さなければいいのですが、貸さなければ彼は怒りました。物を投げ、ドアを蹴り、罵倒されました。前の彼女が浮気をしたときに、相手の男性を、呼び出してバットで殴ったという話を聞いていたので怒ると何をするか分からない人だと思っているので怖くて断り切れませんでした。一度、iPhoneを膝に投げつけられたことがありますが、液晶が曲がって浮いて、私の膝の痣も数週間治りませんでした。当たった直後、膝を抱えて痛みに耐えようとした私に彼は「悲劇のヒロイン気取りやがって」と言い放ちました。

そして４ヶ月前、実家に帰ることを理由に私はその部屋を出ました。彼の顔色を伺い怯えていた生活からの解放感でいっぱいでした。

離れて過ごしていくうちに別れたいという気持ちがどんどん大きくなり３ヶ月前から伝えていましたが、俺が納得できる理由じゃない、と言われ中々思うようにはいきませんでした。
しかし、昨夜ようやく伝わりました。
４時間の電話の末、「お前みたいなクズと付き合ってたのか俺は。無駄な時間だった。」と言われ、とても円満とは言えませんが別れることになっただけで私はホッとしました。

とても長くなったのですが、みなさんにお伺いしたいのは最後に彼が出した条件です。

「そんなに別れたいなら、夜中に呼び出してやるから俺が指定した場所まで来て顔みて話せ。」

夜中の何時になるかわからない、日付も気分次第だそうです。わざと私が嫌がる夜中にすると言われました。昼間は絶対に駄目だそうです。

昼間ならまだしも、夜中の３時に家を出て車で移動するなんて家族にも不審に思われるし、免許を取って数日なので夜に運転したことが無くそれも不安です。

貸している60万円、夜中に会いに行けば少しずつ返してくれるけど
会わないなら１円も返してくれないそうです。

ただ、過去のことを思うと本当に返してくれるかは分かりません。
みなさんならどちらを選びますか？

長々とした文章を読んでくださってありがとうございました。