彼氏と完全に釣り合ってなく心苦しいです(34歳・女性）

こんにちは。お互い34歳で街コンで出会いお付き合いをすることになりました。
もうすぐ付き合って一カ月とまだ付き合いたてなのですが、付き合った後から彼との格差？が発覚し気負いしてしまっています。
私は人柄を好きになったので家庭環境やお仕事などは気にしていなかったのですが、彼氏のことを兄弟に話したところハイスペじゃん！！！と言われて意識をし始めました。
お家柄やお仕事、そこからもう私とはレベルが違うかも？とは思いつつも、私自身家族には愛され仲も良い方だと思うので当初はそこまで気にしておらず、あえて私と付き合うなんて奇特な人だなぁという風に呑気に考えていました。
ところが昨日彼氏から元カノさんはモデルだと聞き驚きと共に本当に世界が違う人なんだと実感しました。（彼氏がお酒に酔った勢いで発言し発覚しました。）
10年お付き合いし、ご家族やご友人も公認だったけど彼氏から別れを切り出し別れてしまったようです。
その後3年程フリー期間を経て私とお付き合いしている、ということになります。
私はお世辞にも見た目は可愛い方ではなく、よく言って普通だと思います。
仕事も勤めていた職場が閉まることになり今転職活動中で、年齢だって若くはないし、一般的に見ても劣っていると思います。
仕事が決まれば大丈夫！と悠長に構えていましたが元カノさんがモデルと聞き埋まらない差に愕然としています。レベルが違いすぎてヤキモチを妬く気にすらならないです。
彼は気にしないで、頑張らなくてそのままでいいよと言ってくれててとにかく優しいのですが、彼はよくても彼氏のご家族、ご友人はどう思うんだろうと思うと申し訳ない気持ちでいっぱいです。
次の彼女が私って、え？！なんでこれ？！なんか脅されてるの？！と思うレベルに差があると思います。
一般人にしてももっと可愛い子はたくさんいるのになぜ敢えての私なんだろうと本当に思います。
ただ申し訳ないですが彼のことは大好きなので別れる選択肢はないし、もう自分自身の問題ということも分かっています。
元カノさんのことを気にしても良い方向に進まないのも分かっています。
でも、どうしても、申し訳なさと自分でいいのかな？という気持ちが消えません。
彼の周りの方の目や評価も気になります…
私はこれからどのようにこの気持ちと向き合っていけばいいかアドバイスをいただきたいです。
よろしくお願い致します。