W 1667 r. budynek nabył Cyprian Paweł Brzostowski ( transliteracja litewska : Kiprijonas Povilas Bžostovskis). Obecny wygląd pałacu datuje się na rok 1748, kiedy to zakończono wstępną renowację.
W 1772 roku pałac nabył Jokūbas Ignotas Nagurskis.
W latach 1957 i 1982 pałac zaadaptowano na mieszkania. Obecnie mieści się w nim apteka oraz pojedyncze mieszkania.
