První zmínka o původní gotické tvrzi je z roku 1383 a jejími vlastníky byli rytíři ze Smojna. Na konci 14. stol. je vystřídali Vartenberkové a počátkem 16. stol. Berkové z Dubé, kteří v roce 1541 zahájili výstavbu renesančního zámku. V roce 1612 získávají panství Novohradští z Kolovrat a v roce 1632 vévodové Sasko – Lauenburští. Počátkem 19. stol. bylo panství ve vlastnictví Habsburků a František I. jej v roce 1818 daroval vnukovi, synovi Napoleona Bonaparte.
(Zákupy je uprostřed)