Das erste Observatorium wurde auf dem Nordostturm des Schlosses im Jahr 1752 erbaut. Es war aber nicht mehr zeitgemäß, deshalb wurde im Schlossgarten, auf der Ostbastion, eine neue Beobachtungskuppel, welche mit modernen Geräten ausgestattet war, erstellt. Erbauer war der Astronom, Landvermesser und Mathematiker Johann G. F. Bohnenberger. Es gilt bis heute als das älteste Bodenobservatorium der Welt. In letzter Zeit wurde es grundlegend restauriert.