この場合、次のように簡単に言うことができますよ。
ーYou're the person I talked to the most this week.
「あなたは今週私が最も多く話した人です」
person I talked to the most「私が最もたくさん話した人」
ーI talked to you more than anybody else this week.
「今週、私は他の誰よりもあなたと一番たくさん話しました」
to talk to you more than anybody else「他の誰よりもあなたとたくさん話す」
ご参考まで！
This week, you're one of the people with whom I've talked to the most.
ご質問ありがとうございます。
この場合、「今週私が[最も](https://eikaiwa.dmm.com/uknow/questions/77185/)話した人はあなたです」と言いたいなら、英語で「This week, you're one of the people with whom I've talked to the most.」という風に言えます。
ご参考になれば幸いです。
カナダ 
アメリカ合衆国 
