諦めるべき？

この恋は諦めるべき？最近同じサークルで好きな人ができました。その人とは毎日のように電話をし、3回ふたりだけで遊びに行き、手を握られたりもしました。彼は私の好意も知っているし、周りからは「絶対付き合えるよ」と言われていましたが、デートのあとからなんとなくLINEが冷たくなったり、誘いをやんわりと断られたりして、どんどん悪い方向に向かって行ってしまいました。
それでも電話をしたいと言うといつも応じてくれて、先日電話をしたのですがたまたま恋愛の話になり、彼は「元カノに浮気されてふられて、信頼するのが怖くなってすっかり懲りたし、今は彼女はいらないや。女の子とふたりで遊ぶのもいいけど、それより友達と遊んでたい気分かな」と言っていて、わたしは恋愛対象で見られていないんだな、とショックで、少しだけ返事をして、すぐに電話を切ってしまいました。
そのあとすぐ10分後にLINEで「さっきはごめん。何度もデートしてるのに彼女いらないとか失礼なこと言って。ただ、今は彼女を作って幸せに出来る自信がないから、あんなことを言ってしまってごめんね。実際君のことはすごく好きだしもっと仲良くなりたいな」と言われました。
これは告白もしていないのに、友達としか思えないよ、と遠回しにふられたということですか？諦めるべきですか？
私は彼のことがまだ好きですが、どんな行動を取るのが正しいのかがわかりません。