It doesn't matter what hat I wear, none of them suit me, but at least I know this.
この場合、次のような言い方ができますよ。
ーIt doesn't matter what hat I wear, none of them suit me, but at least I know this.
「どの帽子を被ろうが関係ない、どれも私に似合わない。でも少なくとも自分でわかっている」
None of them suit me. で「どれも私に似合わない」と言えます。
ご参考まで!