Sunkiausias metas Paliesiaus dvarui buvo sovietinė okupacija. Tada sunyko vandens malūnas ir kiti dvaro pastatai, turtas buvo išgrobstytas. Dvaro rūmai, kurie 1956 m., nors ir prastos būklės, bet dar stovėjo, 1974 m. Kolūkio sprendimu buvo nugriauti. 2008 m. išlikę dvaro pastatai buvo avarinės būklės.
Tačiau dabar Paliesiaus dvaras kruopščiai restauruotas, kiekvienas akmuo naujam gyvenimui prikeltas naudojant specialius kaltukus ir distiliuotą vandenį, čia vėl klesti menas ir kultūra.