"Pervert"、もしくは"sexual pervert"は変質者、性的な異常者のこと
"lunatic"と"psychopath"は狂人、精神的な異常者のことです。
「パンツ何色」と聞く人が精神的に病んでいるのであればlunaticやpsychopathもありえると思います。
ちなみに、どの単語も幅広く会話で使われています。
女子が男性にからかい半分で "You're so perverted!" 「やらしいー!」と言ったり
"How could you do that? You're so lunatic!"
「なんでそんなことができたの?ほんとばかげてるよ」
というような感じで使うことができます。