Trotz der Tatsache, dass bis heute nur Teile der einst prächtigen Residenz erhalten geblieben sind, ist klar, dass sie Eigentum einer sehr bedeutenden Person war. Der Kern bestand aus drei Gebäuden – einer Rotunde, einem Bergfried und einem Palas – um 1300 wurde der Komplex um zwei Innenhöfe und Nebengebäude erweitert und von Burgmauern umgeben. Die jüngere Entwicklung des Gebäudes wurde durch den Aufschwung der Keramikproduktion zur Zeit der Wende vom 18. zum 19. Jahrhundert beeinflusst. Die erste auf diese Waren spezialisierte Manufaktur wurde vom Grafen František Josef von Vrtba gegründet und befand sich direkt im Schloss. Das Haus neben dem Turm beherbergt heute das Stadtmuseum, in dem Sammlungen von Keramikprodukten und archäologischen Funden aus der Region ausgestellt sind.