祭り会館って英語でなんて言うの？

ご質問ありがとうございます。

お祭りミュージアム/festival museumは、いかがでしょうか？
もし地域のみの小さい会館でしたら、local festival museumなどでもいいと思いますよ！

他にもミュージアムを使わずに、もっと会館を強調したいのであれば、 hallを使ってもいいです。
ちなみに市役所などは、よくtown hallなどと呼ばれます。

ご参考になりましたら幸いです。