I'm sorry if it's not a good time. I won't stay long.
これを言えます:
I'm sorry to trouble you, I won't stay long!
ご迷惑をかけて・気を使わせて 申し訳ない、すぐ帰るよ。(ここに長い間にいるつもりない)
友人にこの言葉を使えます:
I'm sorry to cause trouble for your mother, I won't stay long!
あなたのお母さんに ご迷惑をかけて・気を使わせて 申し訳ない、すぐ帰るよ。
この表現も自然で良く言われています:
I'm sorry if it's not a good time.
忙しいところで申し訳ない・合わない時で申し訳ない
(今が良くない時だったら申し訳ない)