「その時間」は「that time」ですので、「Can I go from that time?」を提案しました。
しかしながら質問者様のシチュエーションでは、以下の英語を提案します：
- I have something to do until 〇〇o'clock, so can I go after that?
"Can I visit you at XXXX?"
「XXXX時に会いに行ってもいい？」
"Can I visit you after XXXX?"
「XXXX時以降に会いに行ってもいい？」
XXXXには時間を入れてください。例えば 3:30 なら three thirty 、6時なら six o'clock となります。「〜〜の後に会いに行く」と言う意味の場合は、
”I finish work at five thirty, can I come see you after that?"
「5時半に仕事が終わるんだけど、その後に会いに行ってもいい？」
といった文になります。ご参考になれば幸いです。
イギリス 
日本 
