Das Schloss wurde von Zdeněk von Valdštejn gegründet und den Bau hat im Jahre 1582 Maria von Martinice beendet. Im Jahre 1606 wurde dieser Geschlechtsbesitz von Valdštejns an Záruba von Hustířany verkauft. Zu seiner Zeit hat sich da im Jahre 1628 vor seinem Abgang ins Exil Jan Amos Komenský versteckt. Das Schloss wurde während dem Dreißigjährigen Krieg ausgebrannt und verwüstet. Heutiges Antlitz hat es nach der Rekonstruktion im Jahre 1868 gewonnen, wann der Graf Jan von Harrach alten Anwurf runterziehen ließ und die Restauratoren die Reste der ursprünglichen Ausschmückung gerettet haben. Seit 1989 gehört das Schloss unter die Gemeinde Horní Branná.