ご相談させてください。

私には気になる彼がいます。お互い24歳です。
彼とはいろいろあったのですが、関係をなかなか進められずに悩んでいます。
アドバイスなど率直にいただけると嬉しいです。

出会いは高校の同級生です。
ですが、高校の時には1、2回話したことがあるくらいです。
大学に入りSNSが流行りそこで繋がり、大学2年生の時にメールをやり始めたのがきっかけです。そこから月日が流れ、初めてしっかり話したのが4年生の秋頃でした。
当時私は1年半くらい付き合っている彼氏がいましたが、彼の浮気がひどく病んでいる時でした。その時はそんな私を楽しませてくれるために彼がドライブに連れて行ってくれました。その後、2人で飲みに行き、私は潰れてしまい、ホテルに行って関係を持ってしまいました。そこから彼とは頻繁に会うようになり、私の家でお泊りもしていました。彼は彼氏と別れなよ、2番目でもいいよ、俺のこと良いように使ってくれて良いよ、と不器用ながらに告白もしてくれたりはしていました。しかし私はそれでも彼氏が好きだから…と言って良いように曖昧な関係を続けていました。
大学を卒業して私も彼も就職で同じ地で働くことになりました。私は彼氏とは遠距離になってすぐに別れました。そんな中、彼からは食事のお誘いを何度か食事に行ったりしました。そこでも彼は一緒にいると楽しいとずっと言ってくれ、気持ちを伝え続けていてくれたのにたまにドタキャンしたりもしてました。その頃、私は別の男性を好きになってしまい、遊ばれてるのも知っていながらその男性との付き合うようになりました。当時彼の気持ちに気付いていたのにも関わらず私は「別の人が好き」だとか、「新しい彼氏ができた」とか酷いことを言い続け、それを機に彼と連絡を取らなくなりました。

そして会わない、連絡も取らない日が1年も続いてました。
再び連絡を取るようになったのが昨年の彼の誕生日です。今から半年程前の話です。そこから今は彼と頻繁にご飯に行くようになり、月に1、2回遊びに行ったりご飯に行ったりしています。たまに私の家で泊まったり、関係も持っています。彼は私が楽しければ良い、と今も言ってくれていますが、昔のように好きとは伝えてくれません。いろいろありましたが、優しさと雰囲気、私の全てを知ってくれている彼に惹かれています。酷いことをたくさんしてしまったので引け目があり、私も自分の気持ちを伝えることができません。この土日も少し遠出をして花火大会にも連れて行ってくれました。またいろんなとこに行こうとも言ってくれています。でも彼がどういう気持ちでそれを言ってくれているのかわかりません。彼が不器用で気持ちを伝えることが苦手なのも知っていますが、こんなことをしてきた私に今も気持ちを持ってくれてるってことはあるのでしょうか。
告白したいのですが今の楽しい関係を壊したくなくて勇気が持てません。
率直に思ったことを教えてもらえれば嬉しいです。よろしくお願いします。