W czasie wojny znajdowała się tu hitlerowska szkoła Oddziałów Szturmowych NSDAP. Kiedy do Stolca na Dolnym Śląsku weszła Armia Czerwona, żołnierze przez miesiąc palili wszystko, co znaleźli w pałacu. A potem rezydencja stała się znakomitym źródłem materiałów budowlanych.