Het barokke gebouw, gelegen op een van de meest bezochte plaatsen van het oude Praag - naast de Karelsbrug - groeide op de fundamenten van een romaanse en gotische bebouwing en een renaissancehuis. Onder de eigenaars bevonden zich tal van interessante persoonlijkheden, van graaf Joachim Andreas von Schlick, die werd terechtgesteld wegens zijn deelname aan de opstand van de Praagse Landgoederen, de jezuïetenorde en de keurvorst van Saksen, de wrede graaf van Breda, tot prins Heinrich Paul von Mansfeld-Fondi.
Tussen 1736 en 1737 nodigde de prins Franz Ignatius Pree uit om het oorspronkelijke paleis, waarschijnlijk ontworpen door Giovanni Battista Alliprandi, te verbouwen in de stijl van de hoogbarok. De interieurs van het paleis kregen hun definitieve neorococostijl in de jaren 1860 dankzij de familie Auersperg, die rond 1900 ook een groot deel van het paleis tot een luxueus huurhuis verbouwde. De mooiste en misschien best bewaarde ruimte van het paleis is de danszaal, waarvan de decoratie waarschijnlijk tussen 1736 en 1737 werd voltooid. Het plafondfresco met de verzamelde Olympische goden werd gemaakt door Pietro Scotti en Giovanni Battista Zeist.Het paleis is niet alleen verbonden met voorname adellijke families, maar ook met vele culturele en historische gebeurtenissen, waaronder de laatste zitting van de koninklijke raad van de "Winterkoning" Frederik V., keurvorst Palts, na de Slag op de Witte Berg in 1620.
In de periode na de Tweede Wereldoorlog werd het paleis gebruikt door de Tsjechoslowaakse Academie van Wetenschappen, en tegenwoordig wordt het beheerd door de Stadsgalerij van Praag, die bezig is met de voorbereiding van de waardige reconstructie en het in haar activiteiten zal opnemen.