Hrad založil v roce 1456 král Karel IV. na ochranu zemské hranice, ale i na ochranu místních zlatých dolů. Hrad byl často v zástavě, prvním zástavním držitelem byl první český kardinál Jan Očko z Vlašimi, v letech 1411 - 1454 pak Zmrzlíkové ze Svojšína a Orlíka. V pol. 15. stol. zde hospodařili Šternberkové, později např. tajemník Ferdinanda I. Jiří z Lokšan. V roce 1616 koupilo již zpustlý hrad město.
(Kašperk je uprostřed)