Yalı 1910 yılında devrin önemli ticaret adamlarında Ziya Paşa için yapılmıştır. Yusuf Paşa Yalısı halk arasında Perili Köşk olarak da bilinir. 1. Dünya Savaşı sırasında Yusuf Ziya Paşa Mısır’a gitmiş, savaş bittikten sonra geri dönmüş ve ömrünün geri kalan bölümünü burda geçirmiştir.
Uzun yıllar bazı katlarının boş kalması sebebi ile halk arasında Perili Köşk olarak kalmıştır. Daha sonra Gümüşhaneli Basri Erdoğan tarafından alınmış ve restore edilmiştir. Borusan Holding Genel Merkezi olarak halen kullanılmakta olan yalı 25 yıllığına Borusan Holding tarafından kiralanmıştır. Yalı haftanın bazı günleri müze olarak hizmet vermektedir. Yalı çok sayıda sanat eserine de ev sahipilği yapmaktadır.