Fundatorem tutejszego klasztoru kamedułów był jeden z najpotężniejszych ówczesnych magnatów, kanclerz wielki litewski, Krzysztof Zygmunt Pac. Kościół w tym klasztorze miał stać się rodową nekropolią, a zarazem symbolem bogactwa i potęgi Paców.
Największy klasztor, jaki kiedykolwiek powstał na Litwie imponuje rozmiarem. Teraz z jednej strony podpełzło do niego miasto, z drugiej oblały go wod sztucznego zbiornika wodnego na Niemnie.