El castillo de Troja es un edificio notable y excepcional. De hecho, sería mejor llamarlo villa en lugar de castillo, porque recuerda a las opulentas villas suburbanas romanas que su constructor, el conde Wenzel Adalbert de Sternberg, encontró en su largo viaje. Las espectaculares casas en medio de interminables jardines le hipnotizaron hasta tal punto que decidió trasladar un trozo de la "Ciudad Eterna" a su país natal. El joven conde tuvo suerte a la hora de elegir tanto el lugar como los artistas que iban a hacer realidad su sueño.
La construcción del castillo barroco temprano comenzó en 1679, ejecutada por un arquitecto de origen francés, Jean Baptiste Mathey, cuyo diseño aprovechó sus experiencias de su estancia en Italia y se inspiró en una típica villa suburbana romana. La característica central y dominante de toda la masa de la construcción es un gran vestíbulo con un pasillo que corre a ambos lados y con una enfilada de salones contiguos. En los laterales, el edificio está cerrado vertical y horizontalmente por miradores de dos pisos.
Al llegar al jardín, se observa una maravillosa decoración escultórica de la escalera de dos brazos, que fue encargada a los artistas de Dresde Georg y Paul Hermanns. Las esculturas monumentales de la escalera simbolizan a los titanes que luchan contra los dioses clásicos, mientras que las esculturas individuales a lo largo de su perímetro representan a los dioses clásicos, alegorías de los continentes, así como períodos del día y del año.
La mayoría de las pinturas que se encuentran en la planta baja del castillo fueron creadas por Carpoforo Tencalla, mientras que Francesco Marchetti y su hijo Giovanni Francesco trabajaron en la primera planta. Los pintores flamencos Abraham e Isk Godyns fueron llamados por el constructor para ejecutar la ilusoria decoración del gran salón principal - Gran Salón de los Emperadores.