Binanın net bir tarihi bilgisi olmamakla birlikte 1904-1906 binanın yerinde Fransız "Credet Lyonnais" bankasına ait bir yapı olduğu bilinmektedir.Bugün ki binanın ise Wiener Bank Verein adıyla Viyana bankası için inşa edildiği düşünmektedir.(Resim 1'de isimmn açıkça okunmaktadır.) 1918'den sonra bina Banque Française Des Pays DOrient tarafından kullanılmış 1944 yılında da Ziraat bankası mülkiyetine geçmektedir.
Mimar Nezih Eldem tarafından 1971 yılında binanın deniz cephesine eklemeler yapılmış,1975te binaya ilaveten çatı katı inşa edilmiştir.
Binanın bir diğer özelliği tam olarak ne ifade ettiği bilinmeyen armaları ve deniz cephesinde bulunan heykelleridir.
Bahsedilen binanın eskiden arkasında bulunan bir de karaköy cami bulunmaktaydı. (bkz: karaöy cami) Bu cami 1958 yılında meydan genişletme çalışmaları sırasında yıkılmıştır.
