În 1541, patru case medievale de pe locul actualului palat au fost avariate în timpul incendiului de la Hradčany. Una dintre ele adăpostea atelierul maestrului Teoderic, pictorul curții lui Carol al IV-lea, în secolul al XIV-lea. Ulterior, Johann IV Popel de Lobkowicz a cumpărat parcelele și a construit o reședință renascentistă în stil nord-italian, care a fost finalizată în 1567. În deceniile următoare, palatul a avut mai mulți proprietari și, în cele din urmă, a fost moștenit de familia Schwarzenberg la începutul secolului al XVIII-lea.
În anii 1870 -1874, a primit decorul său iconic sgraffito, bazat pe proiectul lui Josef Schulz. În 1909, a fost deschis pentru public ca Muzeu Național Tehnic. În timpul celui de-al Doilea Război Mondial, Wehrmacht-ul l-a transformat în muzeu militar, iar după confiscarea de către statul cehoslovac a devenit sediul Muzeului de Istorie Militară. Galeria Națională din Praga a achiziționat palatul în 2002.
Expoziție permanentă: Maeștri vechi
Astăzi, palatul Schwarzenberg este unul dintre cele mai bine conservate palate renascentiste datate la sfârșitul secolului al XVI-lea. Acesta găzduiește o expoziție permanentă, care prezintă opere de artă cheie selectate din Colecția Vechilor Maeștri (Hans von Aachen, Petr Brandl, Lucas Cranach, Albrecht Dürer, El Greco, Francisco José Goya, Hans Holbein și alții).
