Powyżej zamku znajduje się wieża strażnicza. Pochodzi z XIII w. i jest najstarszą budowlą Kazimierza Dolnego.
Baszta oddalona jest o 200 metrów od obecnego zamku, zbudowana na planie koła o średnicy około 10m, wysokości 20 m, a grubość jej murów osiąga 4m. Usytuowana jest w jednym z najlepszych punktów widokowych miasteczka. Pełniła funkcję warowni, a według niektórych badaczy także latarni rzecznej, strażnicy celnej dla flisaków, a nawet więzienia. Na jej szczyt prowadzą drewniane schody.