彼女との交際どうしていくべき？(23歳・男性）

こんにちは！春から大学4年生になるRです。僕には付き合って半年になる一つ下の大学生の彼女がいます。そんな僕の悩みが彼女との関係性です。(長文になりますごめんなさい)
まず最初に僕が彼女のことを好きになり告白しました。そして彼女からは付き合う前に言われたのが、私は付き合っていても男友達と遊ぶし旅行に行ったりもする。それをあなたは許せますか？と言われました。前の彼氏に男関係で束縛されて嫌だったらしいです。正直動揺してこの人と付き合っても不安で幸せにはなれないかもと思ったのですが、せっかく今まで恋愛経験ゼロの僕が自分には勿体無いくらい可愛い子と付き合えるチャンスが来たのだから恋愛経験を積むという意味でも付き合うべきだと思い交際を始めました。交際中も楽しい事はたくさんあるのですがやっぱり他の男と遊びに行って告白されていたり、この前の旅行誰と行ったのー？と聞いても内緒と言われたり、分かっていたけど心が苦しくなる事が多いです。男友達に告白されたと聞いたときは僕かその人どっちか選んでと彼女に言って僕を選んでくれたのですが、告白を断る際にまたこれからも遊ぼうねと言ったらしいです。そんな彼女はデート中に明るいときも多いのですが、最近何してたのと話題を振ってもいろいろ、内緒しか言わないし、帰り際も駅の改札まで近いし一緒に帰ろ？と言ってもいや大丈夫と言い無言で帰ることがあったりLINEもなかなか返信したりしなかったりと楽しいときと冷たいときがあります。自分は本当にこの人と付き合っていて幸せになれるのかと不安で押し潰されそうになります。でもせっかくできた大好きな彼女だからこれからも付き合いたいと思う気持ちと自分が心の底から幸せになれない恋愛は続ける意味があるのかという気持ちを持ちながら交際を続けていて苦しいです。手放したら相当引きずってしまう大好きな彼女です。だから別れるのは難しいです。曖昧な関係性だけど大好きだからこれからも付き合い続けようと思うのですが僕は本当の幸せを手に入れるためにどうしたらいいのでしょうか？自分が彼女に執着しすぎなのでしょうか？もうどうしたらいいのか分かりません。苦しいです。