Von ihnen erbte dann die Herrschaft die Adelsfamilie Harantové z Polžic a Bezdružic und 1701 wurde das Schloss vom fortschrittlichen Geschlecht Harrach gekauft, das es 1714 und 1895 in die heutige Gestalt zu erweitern ließ. Während des 2. Weltkrieges wurde ihr Vermögen konfisziert und nach dem Krieg fielen das Gebäude sowie der Boden dem tschechoslowakischen Staat anheim. Im Schloss ist gegenwärtig das Riesengebirgsmuseum untergebracht, das dank dem Direktor der Mädchenschule Jáchym Metelka und dem Lehrer Jan Buchar aus Sammlungen für die Národopisná výstava československá im Jahre 1891 entstand.

Von Interesse ist die einzigartige mechanische vertonte Weihnachtskrippe von Metelka aus den Jahren 1883–1913 oder das feinste Leinengarn der Welt. Im Schlosspark befindet sich eine Reihe von hochgewachsenen Bäumen, darunter auch eine mächtige Linde, die mit ihrem Alter von 250 Jahren der älteste Baum der Stadt ist. Dem Eingangstor gegenüber steht ein Denkmal des weltbekannten Geologen František Pošepný. Der Haupteingang in den Schlosspark erfolgt von der Straße Kostelní.

Exposition: Historisch-etnographische Exposition, Geschichte des tschechischen Skilaufens, Andenken an das Adelsgeschlecht Harrach, Sammlung der Weihnachtskrippen, Sammlung der Bestattungszunftschilder, Kaván-Gallerie.