W XVIII w. pałac należał do rodziny Męcińskich, którzy zmienili wystrój wnętrz, nadając im wygląd klasycystyczny. W tym samym stuleciu, a dokładnie 12 marca 1734 r. nocował tu król August III Sas. W wieku XIX przeszedł w ręce rodziny Poleskich. Michał Antoni Kazimierz Poleski, przyrodnik, uczestnik powstania styczniowego, który osiadł we Włodowicach ok. 1870 r., utworzył tu wyższą szkołę agronomiczną z laboratorium chemicznym i fizycznym, obszerną biblioteką oraz kolekcją minerałów i okazów flory jurajskiej. Najprawdopodobniej na przełomie XIX i XX wieku dokonano przebudowy, która nadała budowli cechy neogotyckie. Na skutek pożarów z 1924 i 1956 r. (ten drugi trwał 6 dni) oraz wieloletnich późniejszych zaniedbań pałac znajduje się w stanie ruiny. Obecnie obiekt jest własnością skarbu państwa.