「旅行の楽しさの一部を見逃している」という表現は、"I'm missing out on some of the joys of traveling" と表現できます。
「missing out on」は「（何らかの機会や体験を）見逃してしまう、逃す」を意味するフレーズで、「joys」は「楽しみ」、「traveling」は「旅行」を意味します。
また、質問者が具体的に旅行中に体験できない要素について述べているので、それらの文脈を示す詳しい英文も一緒に示すことが役立つでしょう。
"I can't drink alcohol because it makes me sick, I can't swim or drive because I'm not good at it... I love traveling but I'm missing out on some of the fun that's supposed to be had!"
アメリカ合衆国 
