Iki tol klestėjęs Paliesiaus dvaras nuo XIX a. antros pusės išgyveno nuopuolį, ėjo iš rankų į rankas. Apie 1900 metus dvaro administratoriumi tapo Romualdas Brzezinskis (Brazinskis), o 1921 m. tapo ir jo savininku. Pagal jo laiškus, jis įnešė nemažai investicijų į dvarą ir reprezentaciją. Deja, atėjus sovietmečiui jis su šeima buvo ištremtas į Sibirą, o dvaras buvo nacionalizuotas, išgrobstytas, beveik sunaikintas.
Tačiau dvaras buvo restauruotas ir vėl atgimė. Iš Krokuvos atvykęs Romualdo sūnus Rajmundas Brzezinskis teigė, kad vaizdas gerokai pranoko jo lūkesčius, nes dvaras jam mažam buvo užsifiksavęs kaip ūkis: su gyvuliais, daržais, malūnu, sportiniais žirgais.