Seinen Namen erhielt der Berg bereits 1832, als hier eine optische Telegrafenstation (Zeigertelegrafen) der Strecke Berlin-Koblenz errichtet wurde. In den 1870er Jahren wurde hier das erste astrophysikalische Forschungsinstitut der Welt gegründet. Zu den herausragendsten Gebäuden gehören der Große Refraktor (1899) und der berühmte Einsteinturm von 1921/23 des Architekten Erich Mendelsohn.