the picture leaning against the window in the stairwell
この場合、次のような言い方ができると思います。
ーthe picture on the windowsill by the staircase
「階段の窓際に置いてある絵」
ーthe picture leaning against the window in the stairwell
「階段の窓に立てかけてある絵」
例:
The picture on the windowsill by the staircase is pretty.
「階段の窓辺にある絵は可愛いですね」
もし「階段の壁にかかっている絵」というなら次のように言えます。
ーthe picture hanging on the wall in the staircase
ご参考まで!