ok. 1477 – wybudowanie pałacu dla kardynała Girolamo Riario, kuzyna papieża Sykstusa IV 1484 – podczas powstania ludowego, które wybuchło po śmierci papieża Sykstusa IV, pałac został zajęty przez lud rzymski 1568 – pałac zakupiony przez kardynała Marco Sittico Altemps, który zlecił jego przebudowę architektowi Martino Longhi. Od tego czasu zaczęła powstawać kolekcja rzeźb oraz biblioteka. Po odsprzedaniu pałacu Stolicy Apostolskiej na użytek seminarium duchownego budynek zaczął popadać w ruinę a kolekcja rozproszyła się po świecie 1982 – rząd włoski odkupuje od Watykanu budynek i rozpoczyna jego restaurację.