W 1715 r. właścicielem zamku w Brodach został Józef Potocki, a po jego śmierci w 1751 r. zamek objął w posiadanie Stanisław Potocki (1698 –1760)https://www.arch.pw.edu.pl/content/download/10179/58430/file/Studia%202024%20Tom%207%20OOkonchonko%20MBevz%20IOkonchenko.pdf.
Pałac Forteca zdewastowana przez wojska rosyjskie i saskie straciła swoje znaczenie obronne i w połowie XVIII wieku została przez Stanisława Potockiego przebudowana na późnobarokową rezydencję - przy północnej kurtynie powstał pałac, a od strony miasta wieża z zegarem. W 1755 w pałacu miało miejsce wesele córki Potockiego, Teofili, która wyszła za mąż za Fryderyka Moszyńskiego.
W 1772 Brody po I rozbiorze Polski znalazły się w zaborze austriackim. Po 1809 z polecenia władz austriackich Wincenty Potocki nakazał rozbiórkę umocnień cytadeli od strony miasta. W 1833 nowym właścicielem został Jan Kazimierz Młodecki (zm. 1854), w którego rodzinie pałac pozostał aż do 1939. Po zniszczeniach w latach 1915 i 1920 pałac był odbudowywany, jednak dewastacji dokonało wojsko stacjonujące tu po 1945 r.