Palác je mimořádnou stavbou typ připomínající italskou vilu. Palác dal postavit Albrecht z Valdštejna postupně jak získával pozemky, první v roce 1621-1623. Stavba probíhala (1623-1629), autorem projektu byl pravděpodobně Giovannim Pieroni, stavbu vedl Andrea Spezza, jako stavitelé jsou uváděni dále Vincenzo Boccaci; Giovanni Battista Marini, N. Sebregondi. Na dveřích sala terreny je datum 1629, což znamená, že tehdy již stála. Po smti Valdštejna (6.3.1634) byl sepsán inventář paláce. Švédové palác v roce 1648 obsadili a část inventáře odvezli do královských sbírek ve Stockholmu. Po celou dobu až do roku 1945 palác v držení rodu. Po roce 1856 četné novodobé úpravy. V letech 1910-13 provedeno odlití soch A. de Vriese podle originálů ve Švédsku. V této stavbě poprvé v Praze jízdárna a sala terrena (v monumentální podobě). Inspirace patrně Sebastiano Serlio, VII. kniha 4. kap. (okna, římsy); východiskem rozboru dispozice je plán ve florentských Uffiziích (1630), zejména koncept rozvržení vnitřního prostoru, sled a funkce místností (viz plány v archivu SÚPP)., Fučíková - Čepička 2007#, and První monumentální městský palác-vila a sala terrena v českých zemích.