[思い通りにいかない](https://eikaiwa.dmm.com/uknow/questions/17095/)もどかしい[気持ち](https://eikaiwa.dmm.com/uknow/questions/38645/)はfrustratingという言葉で表せます。
It's frustrating that I can't talk to you as much as I want.
あなたともっと話したいのに話せないのはもどかしい。
このようにthat節で繋げて詳しく説明することもできます。
「あなたと[もっと](https://eikaiwa.dmm.com/uknow/questions/46573/)話がしたい」という気持ちを表現すれば
もどかしさが出ます。
例えば以下のような言い方はいかがでしょうか？
I wish I could speak more fluently in English...
もっと[流暢に](https://eikaiwa.dmm.com/uknow/questions/56303/)英語で話せたらいいのに…
frustrating は「もどかしい」「イライラする」という意味の英語表現です。
例：
It's frustrating when I can't express myself in English.
英語で自分が言いたいことを伝えることができないともどかしいです。
お役に立ちましたでしょうか？
英語学習応援しています！
日本 
アメリカ合衆国 
