Głaz pierwotnie znajdował się na skraju wsi, tam gdzie stało obozowisko negocjatorów. Dopiero w 2012 roku podczas prac rewitalizacyjnych we wsi przeniesiono go do centrum miejscowości.
Od strony Wisły, w przypałacowym ogrodzie znajdował sie zwierzyniec, w którym właściciel trzymał między innymi małpy. Zwierzęta trafiły do... literatury. Henryk Sienkiewicz umieścił je w Potopie.