玉砕覚悟で告白するべきか…

こんばんは。大学4年生の女です。今、サークルが同じの同い年の男の子に恋してます。２年前に人伝に｢○○(わたし)と話してみたい｣と言っていたことを聞き、その時は興味がなかったのですが意識するようになり、複数人で遊んでるうちに惚れてしまいました。
今まで２回わたしから誘って一日デートしました。一回目はすごく楽しかったのですが、２回目は不完全燃焼と言った感じです…。
それから３回目に誘ったのですが忙しいからと断られ、一ヶ月程空けてもう一度夕食を一緒に食べようと誘ったところ、OKをもらえ喜んでいたのですが、返事があまり乗り気でなくすごく凹んでいます…。
端から見ても脈なしなのは重々承知なのですが、今までにないくらい好きになってしまったので、やらなかった後悔よりやった後悔の方がマシだと思い告白を考えています。ですが、好きでもない人からの告白なんて男性からしたらやっぱり迷惑ですよね…？
デートの帰り際に｢楽しかった、また遊ぼう｣と言ってくれたり、上記のこともあり、正直わたしの中でいけるんじゃないかっていう気持ちもあり期待と不安が半々です…。
友だちに話しても気を使っていけるよ、がんばれとしか言われないので皆さんの率直な意見をお聞きしたいです。どんな厳しい意見も受け止めます。