Im Kahlenbergerdorf wurde wenige Jahrzehnte lang auch Bergbau betrieben; urkundlich belegt ist er von 1547 bis 1618. Anfangs war in den Quellen nur allgemein von Erz die Rede, später von Silber. Das Vorkommen auf dem heutigen Leopoldsberg war aber so bescheiden, dass es bald als erschöpft galt.

Die 1256 erstmals als eigenständige Pfarre erwähnte Kirche des Kahlenbergerdorfs wurde 1529 bei der ersten Wiener Türkenbelagerung zerstört und in der Folge wiedererrichtet. Bei der zweiten Türkenbelagerung 1683 wurde der fertiggestellte Bauteil der Kirche auf dem heutigen Leopoldsberg zerstört. 1693 erhielt der bis dahin Kahlenberg oder Kalenberg genannte Berg den Namen Leopoldsberg, der benachbarte Sauberg wurde zum neuen Kahlenberg.

Nachdem die Einsiedelei der Kamaldulenser auf dem Kahlenberg 1782 aufgelassen worden war, entstand dort eine kleine Ansiedlung, die 1784 den Namen Josefsdorf erhielt.