I wish I had a day where I could just do whatever I wanted.
この場合、次のような言い方ができますよ。
to while away「ぶらぶら過ごす」を使った言い方:
ーI wish I had just one day I could while away.
「1日だけでもぶらぶら過ごせる日があったらなあ」
ーI wish I had a day where I could just do whatever I wanted.
「ただ好きなことをできる日が一日あったらなあ」
to do whatever I want を使っても表現できます。
ご参考まで!