Původní gotický hrad byl vybudován v 15. století, koncem 16. století přestavěl italský architekt Baltazar Maggi de Ronio hrad na prostorné renesanční sídlo. Východní palácové křídlo bylo přistavěno do výšky gotického paláce a k němu na západní straně připojeno severní křídlo s patrovou lodžií. Fasády byly vyzdobeny sgrafitovou rustikou. Barokní kašna z roku 1670 byla na třetí nádvoří přenesena z aleje v roce 1935. Dnešní podobu získal zámek na konci 18. století.
V prvním patře paláce se nachází sál s bohatou štukovou výzdobou. Jeho stěny pokryl v letech 1723 až 1724 malíř K. F. Tepper rozměrnými plátny, která zachycují návštěvy habsburských císařů v Brtnici.
Zámek je veřejnosti nepřístupný z důvodů soudního řízení.
Poloha : ve stejnojmenné obci mezi Jihlavou a Třebíčí. Město má autobusové spojení. Nejbližší vlaková stanice Dolní Smrčné.