告白を断っても普通の関係を続けてきたら…。

仲良くしていた男性に告白されて断りました。
その後も相手が変わらずに接してくれていたので気まずくなることなく連絡を取り合ったりの見に行ったりしてました。
二人で仕事終わりにご飯とかもしていたため相手が付き合ってると変わらなくない？と言われました。
キスができなかったりすることできないだけで一緒にいれるならこのままでいいと言われましたが私には付き合うきがありません。連絡を絶つべきでしょうか？