Bangunan ini dibangun pada pertengahan abad ke-16 di lokasi istana sebelumnya, yang ditugaskan oleh keluarga bangsawan Bernardo dari Alessandro Vittoria. Awalnya, fasad utama istana menghadap ke situs Ca' Rezzonico, yang sebelumnya merupakan sebuah taman. Fasad tersebut dulunya dilukis dengan lukisan dinding. Fasad kanal ditambahkan pada abad ke-17. Istana ini dimiliki secara pribadi dan disewakan untuk acara-acara atau sebagai apartemen.[1]