År 1667 köptes byggnaden av Cyprian Paweł Brzostowski ( litauisk translitteration : Kiprijonas Povilas Bžostovskis). Slottets nuvarande utseende går tillbaka till 1748 när en första restaurering slutfördes.
År 1772 köptes palatset av Jokūbas Ignotas Nagurskis.
1957 och 1982 anpassades palatset för bostäder i lägenheter. Här finns idag ett apotek och enskilda lägenheter.
