控えめな男性に告白しても返事をくれない。どうしたら良い？(36歳・女性）

街コンでマッチングし数回デートを重ねた男性がいます。私と男性は共に36歳です。

初回デート：平日夜に居酒屋
2回目デート：休日に映画→居酒屋、バーなど3軒はしご
3回目デート：クラッシックコンサート→ 居酒屋、バーなど3軒はしご

デート内容は上記の通りです。
話やフィーリングが合い、わたしは初期の段階でお相手男性にとても心を奪われていました。
シャイで控えめで奥手な男性ですが、思いやりがあり優しい方です。

2回目のデートの帰り際に初めて手を繋ぎました。
3回目のデートではハグをお願いしたらたどたどしくも軽くハグしてくれ、その後に相手から手を繋いでくれました。
3回目のデートの帰り際に、またご飯行きましょうというお話になったので、思い切って関係を聞いてみました。
『またお食事行きたいと思ってます。でもこのまま曖昧な関係は寂しいなと思ってて…』
お相手はビックリした様子で『え…！ど、どういうことですか？』と慌てていたので、『好きです。』と正直に打ち明けました。
『すみません…突然でビックリしてしまって…！勿論素敵だし優しくて可愛いなと思ってるんですけど…自分は恋愛経験が少なすぎて…。次回でもいいですか？』と言われました。
私は『もしここでYESが聞けないならもう2度と会わないと言っても、後悔しないですか？』と聞いたら、『それは後悔します』と言われました。
しかしお相手がどうしても次回まで待ってほしいとのことだったので、『分かりました。あなたの気持ちを尊重します。考えてみてください。』と言い、翌週に会う約束をしました。

そしていざ4回目のデートですが、いつものように食事やバーを3軒はしごしましたが、告白の返事はありませんでした。
デートの途中で手を差し出したら軽く握ってはくれましたが、手を繋ぐことに後ろ向きな姿勢を感じました。(繋ぎ方からそう感じました)
相手からの好意も感じず返事の催促はできませんでしたが、このままフェードアウトは嫌だと思い『来週はどうですか？』と聞いたら『来週土曜日は予定があって…。日曜日も仕事なんです』とのことで、再来週にお会いすることになりました。

お相手は恋愛経験が少なく好きになる速度もゆっくりらしく、前回の恋人も2年前で、1年くらいデートしてから付き合ったとのことです。

このようなお相手に自分が今後どう動くべきなのか悩んでいます。