この場合、次のような言い方ができますよ。
ーI think there is a heaven.
「天国はあると思うよ」
heaven「天国」
ーI think heaven exists.
「天国は存在すると思うよ」
to exist で「存在する」
ーI think there is such a place.
「そのような場所はあると思うよ」
ご参考まで!
「天国はあると思う?」と聞くときは、believe in(〜の存在を信じる)を使って、 Do you believe in heaven? (天国を信じている?=天国ってあると思う?) と言うのが一般的です。
「存在する」という言葉を使いたい場合は、 Do you think heaven exists? (天国は存在すると思う?) と表現できます。exist は「存在する」という少し専門的な響きがある言葉ですが、日常会話でもよく使われます。