I'm setting up temporary tents for the disaster victims who can't go home to stay in overnight.
I'm putting up tents so the victims of the disaster who can't go home can stay in them overnight.
「被災者」は、disaster victims または victims of the disaster が一般的な言い方です。
「自宅に戻れない」は、can’t go home でOK。
「夜を過ごす」は spend the night または stay overnight を使います。後者なら、テントの中で過ごすので in をはさみます。
「仮設テント」は 複数でしょうから temporary tents。「たてる」には、set up や put up を使います。
もし、何人かのグループで作業をしているなら、主語を we にしてください。