Již v roce 1176 zde stála vodní tvrz, která patřila Oldřichovi ze Žinkov z rodu Drslaviců. Jeho rod vystavěl na vrchu také hrad Potštejn. Od roku 1433 patřilo panství pánům z Klenové, kteří tvrz přestavěli na raně barokní zámek. Od roku 1712 zde vládli páni z Vrtby a od roku 1830 Lobkowiczové. V roce 1897 zámek koupil arch. Karl von Wessely a přestavěl jej do pseudorenesanční podoby. V letech 1916 – 1945 patřil průmyslnické rodině Škodů.
(Žinkovy je uprostřed)
