丁寧な言い方をするなら、「This shop doesn't look very popular」が良いと思います。
下町とか、住宅街にあるようなボロいお店は一見繁盛していないからまずいと思われるかもしれませんが、中にはすごく美味しいところもあります。隠れてお客さんが利用しているのでしょう。
ちょっとスラングっぽく言うなら、「This shop is dead」と言えます。
廃れているように見えるなら、死んでる（終わっている？）と英語でも言います。
例文：
- The Yakitori restaurant Kei（慶) looks dead but it's actually one of the best in Yanaka. I recommend it highly.
イギリス 
