このシチュエーションだと、例えば日本人同士で話しているとしても、同じ場で日本語がわからない人が居たら英語で喋る必要があると言う解釈です。
でしたら、「Even if the conversation is between Japanese people, if there is at least one person there who doesn't understand Japanese, we should speak English」が適切な表現かと思います。
上記だと、「一人でも日本語がわからない人がいれば、英語を喋らなければならない」ことを書きました。