”話が違う”と表現したい場合は、以下の表現がおススメです。
1. That is not what we talked about.
「話したことと違うよね」という意味になります。
2. That is not what we promised.
「約束したことと違うよね」という意味になります。
是非参考にしてみてください。
こんにちは！
ご質問ありがとうございます。
ご質問について、いくつか言い方が考えられますが、例えば、
That's not what we agreed on.
とすると、「そんな[約束](https://eikaiwa.dmm.com/uknow/questions/26551/)だったはずじゃないです。」となります。
You keep changing the story.
とすると、「話の内容がいつも変わってしまいますね。」となります。
役に立ちそうな単語とフレーズ
agree on 合意する
change the story 話を変える
go back on one's word 約束を破る
keep changing 何度も変わる
参考になれば幸いです。
チリ 
日本 
