Graf Bertram von Nesselrode- Reichenstein ließ 1725 nach französischem Vorbild gegenüber der Nordseite des Schlosses in ca.170 m Abstand eine Orangerie errichten.
Mit den Maßen von 35 m Länge, 10 m Breite und 8,50 m Höhe sollte sie nicht nur eine der größten Orangerien in der Region werden, sondern verziert durch eine Dachballustrade aus Baumberger Sandstein mit 12 fast lebensgroßen Figuren aus der  griechischen Mythologie auch eine der prächtigsten.

Die Figuren waren schon vorher von dem berühmten Münsteraner Bildhauer Johann Mauritz Gröninger - Ursprünglich für die Ausstellung im Barockgarten - angefertigt worden.

Darstellungen des flämischen Hofmalers Renier Roidkin haben das Gegenüber von Schloss und Orangerie in zahlreichen Stichen den einflussreichen Herrschern der damaligen Zeit und der Nachwelt bekannt gemacht.

Nach 1815 war hier eine der bedeutendsten Kameliensammlungen Europas zur Überwinterung eingestellt.

Der Zerfall der Orangerie begann Anfang der zwanziger Jahre des letzten Jahrhunderts. Während der Besetzung des Ruhrgebiets durch die Franzosen wurde die Orangerie durch die Soldaten zweckentfremdet und verwüstet.

Starke Bergsenkungen ab den vierziger Jahren und der natürliche Verfall beschleunigten die Zerstörung des Gebäudes. Im Zuge der Schlosssanierung 1974 flossen ca. 150.000 DM in die Orangerie. Diese reichten aber nur für die Sanierung der Südmauer und einer neuen Betonbodenplatte aus. Aufgrund mangelnder Nutzungsmöglichkeiten wurden die Sanierungsmaßnahmen kurzerhand eingestellt.

Vom einstigen Glanz des Gebäudes ist heute jedoch nur noch eine Ruine vorhanden.

Die Figuren wurden Mitte der 70er Jahre gesichert und untersucht. Dabei stellte sich heraus, dass es sich um Abgüsse und nicht mehr um die Originalfiguren handelte. Diese wurden vom LWL in Kisten verpackt zum Europäischen Klostermuseum Dalheim  gebracht und dort eingelagert.