A római kori Pannonia provincia határának északkeleti védfala, a limes a mai Visegrád környékén húzódott. az ehhez tartozó római tábor maradványai a Sibrik-dombon találhatók. A deltoid alaprajzú, 11 toronnyal körbevett erődöt I. Konstantin uralkodásának idején, a 320-as években építették.

Évszázadokkal később Szent István építtetett itt ispánsági központot, mellette pedig a város első templomát. Emiatt egészen a tatárjárásig itt volt a város központja.

A domb több korszakból származó, gazdag történeti leleteit az 1970-es évektől kezdték el feltárni Szőke Mátyás vezetésével.