Baupläne für das Schloss entwarf der Krainer Gebäudemeister Matija Persky, Grazer Architekt Joseph Hueber entwarf ein neues Portal im Schlosspark. Bei der Ausstattung des Schlosses hat sich eine Reihe von Künstlern, unter ihnen der Maler Anton Lerhinger aus Rogatec und der Bildhauer Veit Königer aus Graz beteiligt.
Familie Gaisruck besaß das Schloss bis zum Jahr 1825, als das gesamte Anwesen unter den Hammer kam und es wurde von Anton Čokl pl. Ruhetal gekauft. 1835 wurde der neue Eigentümer des Besitzes Jožef Ludvik Hausmann, Vater der ersten slowenischen Dichterin Fany Hausmann, die mit ihm im Schloss lebte. Hausmann vergrößerte den Besitz und modernisierte die Wirtschaft, wobei er sich in Schulden stürzte, so dass er das Schloss im Jahre 1849 dem Karl Prinz zu Salm verkaufte.
Im Jahr 1919 kaufte das Schloss Baron Turkovič und verkauft das Schloss 1930 der Drau-Banschaft, die das Schloss in eine psychiatrische Klinik umgestaltete. Die barocken Statuen vom Treppenhaus, handgemalte Tapeten - Chinoserien, Teil der Einrichtung und die Archivreste wurden zu diesem Zeitpunkt in das Nationalmuseum Ljubljana gebracht, der größte Teil des Inventars lies der Besitzer schon zuvor verkauften. Für die Bedürfisse der neuen Nutzung erlebt das Schloss während dieser Zeit eine Vielzahl an Umbauarbeiten und verlor dadurch zahlreiche künstlerisch-monumentale Eigenschaften. Für neue Zwecke wurden ebenso auch die Parkflächen massiv verändert und degradiert.
Während des zweiten Weltkriegs verwandelten die Deutschen Novo Celje in ein Lazarett, die zu jener Zeit Erkrankten wurden nach Hartheim bei Linz abgeführt, wo sie hingerichtet wurden.
Nach 1945 war im Schloss eine Klinik für Lungenerkrankungen, während den 70er und 80er Jahren ein Seniorenheim, im Jahr 1983 übernahm das Schloss das Unternehmen Hmezad Agrina Žalec, seit 1995 ist das Schloss im Besitz der Gemeinde Žalec. Im Jahr 2001 wurde eine Projektdokumentation für die Schloss- und Parkrestaurierung erarbeitet, nach der die Renovierungsarbeiten schrittweise verlaufen. Obwohl das Schloss leer ist und keine richtige Funktion hat, finden hier einige bereits traditionelle Veranstaltungen statt: