これ大丈夫？

私は先週、保育園実習にむけて事前オリに行っていました。
他県に進学でいるので行く保育園も自分がでた場所でもなく行ったことがない場所でした。
自転車でいくつもりが雨だったので歩いて行くことになり、iPhoneたよりに保育園探ししてたんですよ。
そしたら前から原付にのった小太りのオッサンがきて、バイク音がしたからiPhoneと睨めっこを辞めて顔あげたらオッサンと目が合って「何撮っとるんじゃガキが」とワザワザ私の横に原付を停車させて怒鳴ってきました。
iPhoneのナビを見ていただけだったのに突然怒鳴られたもんだからイラッとしてしまい、「は？」と相手をさらに刺激してしまうような言葉と睨みつけてしまいました。
そしたら私のiPhoneをオッサンにとられて、壊されるのも嫌だからオッサンが画面見たのを確認して「気が済みましたか？」ときいたらiPhoneを返され「人の顔をジロジロみやがって、いい度胸してるな」と見事話をすり替えられて意味不明なことをずっと怒鳴られ続けられました。
時間もおしてるしイライラがずっとあって、
「失礼ですげど私は好きこのんで、オッサンの写真をとったりジロジロ見たりするような趣味はないし、たまたま顔をあげたらあなたと目が合っただけでそれをあなたは勝手に写真撮るなとかジロジロみやがってとかどんだけ自意識過剰なんですか？」
と言ったら掴みかかられて水路に落とされそうになり、たまたま近くにいた土方の若いお兄さんとその上司らしい人が見ていたらしく間一髪止めてくれてオッサンは何か文句をいいながら消えました。
その後、お礼と道をきいて帰り、事前オリが終わったあとにまた帰り道に土方の前を通ると若いお兄さんのほうが走ってきてLINEのidが書かれた紙を渡されて、助けてもらったしとお礼のLINEだけしたら、所謂お食事の誘いがありました。内容は、少しフェイクもいれますがお礼LINEをしたら「いえいえ。水路に落ちなくてよかったです（笑）よかったら今度飯でも食べにいきませんか？て、いきなり怪しいですよね」
友達に相談したら「それ絶対気がある」と言われ返事に悩んでいます。
私は昔から、男の人が苦手というか異性に対し人見知りなんです。
告白は小学校ぬきにして、中高合わせて2回ありますが人見知りすぎて告白され逃げ出したのが一回、返事をしないまま卒業が一回でした。自分の気持ちを上手く伝えるのが異性に対して得意じゃなかったです。
だから20年彼氏なんていたことも恋をしたこともないです。

例外は、バイトや実習先にいる男性にたいしては話せますし、お礼などの挨拶ならできます。

たぶんご飯にいっても、話せないし逃げ出してしまいそうです。
助けていただいたので失礼のないようにしたいため、一度くらい食事に頑張って行こうかと思ってますし逃げ癖をなんとかしたいです。

どうしたら良いですか？