Das Arboretum war ein privater Teil des Schlossgartens, der ummauert und in sich abgeschlossen war. Nur der Kurfürst und ausgewählte Personen hatten Zutritt. Der Eingang ist ein prachtvolles Tor hinter dem der Gartenbaumeister Zeyher eine Anlage mit exotischen Gewächsen aus aller Welt anlegte. Ebenfalls befand sich hier eine Fasanerie mit Tiergehege.