It doesn't mean that we have to go there by all means.
There is no need to go there no matter what.
「〜しなければならい」を表す英語表現には “have to” “must” “need to” になります。
「なければならないわけではない」は下記の様に表現があります。
it is not the case that we must...
it does not mean that we have to/ must/ need to...