Městys původně sestával z několika osad, první písemná zmínka o nejstarší z nich, Nové Vsi, pochází z roku 1489. Leními pány v té době byli páni z Vrchlabí. V roce 1506 panství koupil Jan Kordule ze Sloupna, v roce 1518 je dědičně získali Tetourové z Tetova a v roce 1533 Gendorfové. V roce 1564 byl Černý Důl povýšen na městečko s hornickými svobodami. Od roku 1602 byl majitelem panství Vilém Miřkovský z Tropčic. V roce 1624 je koupil Albrecht z Valdštejna a po jeho smrti Rudolf z Morzinu. Morzinové pak drželi vrchlabské panství až do roku 1881.
(Černý Důl je uprostřed)