Svojšínští vlastnili ve 13. století na Stříbrsku značné majetky a založili také hrady Třebel a Volfštejn. Během husitských válek tvrz patřila kladrubskému klášteru a roku 1421 byla dobyta Janem Žižkou z Trocnova. V roce 1723 byl
na místě starší stavby dokončen barokní zámek. Zámek stojí ve svahu na okraji vsi. Jedná se o podlouhlou patrovou budovu zastřešenou mansardovou střechou.
Objekt je zvýrazněn charakteristickým středovým rizalitem, jenž převyšuje samotnou budovu o jedno patro a přechází tím do tzv. pavilonu.