This tea is too strong, can I have some ice to make it weaker?
This tea is very strong, may I get some ice to water it down a little?
お茶やコーヒーが濃い時には strong と言います。その反対で「薄い」は weak になります。
This tea is too strong / This tea is very strong などというと「このお茶は濃すぎる」となります。ちなみにここでは普通に tea と訳していますが「麦茶」は英語で barley tea です。
Can I have some ice to make it weaker? というと「薄めるために氷をいただけますか?」です。「薄める」を別の言い方すると water it down ともいえます。May I get some ice to water it down a little? となります。
どうぞご参考に!