Albrecht Krajíř z Krajku zámek vystavěl s manželkou Magdalenou z Vřesovic v letech 1572 – 1579. Vnější vzhled zámku zůstal vzácně neporušený – dvoupatrová budova je zdobena sgrafitovým kvádrováním, je zakončena atikou pokrytou prejzy a opatřena cimbuřím. V roce 1939 byl zámek upraven pro potřeby radnice, v přízemí bylo vlevo v klenutých prostorách umístěno městské muzeum, vpravo policejní strážnice, byt domovníka, v prvním patře byly kanceláře radnice a ve druhém patře byty. V roce 1960 byla radnice (MNV) přestěhována do bývalého dělnického domu v Komenského ulici. Od roku 1991 je starý zámek opět sídlem městského úřadu. V současné době zde má kanceláře odbor dopravy, obecní stavební úřad, odbor dotací a investic a odbor životního prostředí.

Zajímavost: Chodba v prvním patře objektu slouží jako výstavní prostor především pro expozice moderní fotografie a v přízemí se nachází obřadní síň.