この場合、次のような言い方ができますよ。
ーIt's right above us on the second floor.
「2階のこの真上です」
right above us「私たちの真上」
ーIt's just upstairs from here.
「ここのちょうど階上です」
just upstairs「ちょうど階上」
ご参考まで!
The restroom is just above, in the direction of where I'm pointing to.
ご質問ありがとうございます。
トイレの場所をお客様に質問された場面で「2階のこの上の辺りに[トイレ](https://eikaiwa.dmm.com/uknow/questions/31265/)はあります」は英語で「The restroom is just above, in the direction of where I'm pointing to.」という風に言えます。
ご参考になれば幸いです。