Předchůdkyní dnešního zámku byla tvrz Leptáč, o které jsou první písemné zmínky z roku 1401. Od roku 1569 byla tvrz v držení Jakuba Krčína z Jelčan, který ji dal přestavět a vymalovat loveckými motivy. Po výměně tvrze s Vilémem z Rožmberka za město Sedlčany zde byla postavena bohatě vyzdobená vila. Posléze se zde jako majitelé ještě vystřídali Eggenberkové a Schwarzenberkové.
(Kratochvíle je uprostřed)