私を好きではない彼の言動にどう対応していいのかわからない。(34歳・女性）

体の関係はないものの、恋人なのか友達なのか、彼の気持ちがわからない状態なのですね。
曖昧な関係が続くと、質問者さんとしては当然モヤモヤしてしまうでしょう。
私が過去に経験したことと少し似ているように思い、回答させていただきますね。
少しでも参考になれば嬉しいです。

私が過去に好きになった人は、大好きだった人に手ひどく振られ、恋愛に臆病になっていました。
知り合ってすぐ、質問者さんと同じように恋人なのか？そうではないのか？と微妙な関係になりました。
付き合いたかったので、私からそのように伝えたところ「好きだけど、付き合うという形にはしたくない」と言われました。
要は過去に振られた傷がまだ癒えていなくて、特定の人を作って本気になってしまうとまた失うのが怖くなるからということかなと思います。
結局彼と付き合うことはなく、なんだか自然と疎遠になりました。
彼の傷が癒えるまで私が辛抱強く待ち、曖昧な関係を受け入れていればよかったのかもしれませんが、私の精神衛生上それもできませんでした。

質問者さんのお相手の彼が同じとは限りませんが、こういう理由で「好きだけど付き合えない」という人もいるようですよ。
文面から、彼はそれなりにあなたのことは好きだろうと思います。
普段接している質問者さんが彼のことを信じられるなら、そして絶対に彼を振り向かせたい！と覚悟を持てるなら、しばらく様子を見てもいいかもしれません。
ただ、質問者さんご自身がつらいのなら無理する必要はありませんよ。
どちらかが無理をする関係は、あまり長続きしないと思います。

彼といい恋愛が始まるといいですね。
応援しています。