こちらから連絡しても全く連絡もよこさない友人が、突然久しぶりに会いたくなったと僕を訪ねてきました。そんな彼に、サヨナラの際に冗談っぽく言ってあげたいです。
Let's meet when you forget me (again).
あなたが(また)私を忘れた時に会いましょう。
まずは直訳しましたが、個人的にはこの状況では、以下の言い回しの方がオシャレだと思います。伝えたいニュアンスと違うかもしれませんが、参考までにどうぞ。
Next time, let's meet before you forget me again.
次は、あなたがまた私を忘れてしまう前に会いましょう。