この場合、次のような言い方ができますよ。
A: What do you do with your house in Japan while you're away?
「（日本から）離れている間、日本の家はどうしているの？」
B: I've been renting my house since I left Japan.
「日本を離れてから、家はずっと貸している」
または次のようにも言えます。
ーSomeone has been renting from me the whole time I have been overseas.
「海外にいる間ずっと、ある人が私の家を借りている」
ご参考まで！
カナダ 
