Zámek byl postaven v letech 1856 – 1863 na místě původního starého zámku. V novogotickém tudorovském slohu ho postavil vídeňský stavitel H. Ferstell na požadavek hraběte Nostitze. Jedná se o členitou jedno až dvoupatrovou stavbu s hranolovou věží s cimbuřím, balkonem a předloženým schodištěm. V mramorovém sále v přízemí se zachovalo několik obrazů od Aloise Bubáka z roku 1863. V roce 1919 koupil zámek ústecký továrník Wolfrum, který jej později prodal městu Ústí nad Labem. V roce 1994 byly prostory nově zrekonstruovány a od té doby je objekt přístupný i pro veřejnost.
V současné době je využíván jako reprezentační kulturní centrum. V interiéru se nachází obřadní síň, koncertní síň, v několika sálech je instalována stálá muzejní expozice z dějin regionálního průmyslu a hornictví. Dále se zde nachází muzeum modelové železnice.