Close the window at the top of the stairs on the right.
「階段あがってすぐ」は英語で言うとat the top of the stairsになります。
こちらのtopは「一番上」という意味になります。
on the rightは日本語で言うと「右側にある」という意味で、
at the top of the stairs on the rightは「階段あがってすぐ右にある」という意味になります。
「窓を閉めて」は英語で言うとclose the windowになります。
pleaseを使うと、文頭か文末どちらでも大丈夫です。
例えばPlease close the window at the top of the stairs on the right.になります。