Risalgono presumibilmente all’XI secolo le origini della fortezza, edificata con il proposito di difendere l’area dalle incursioni bizantine. In origine, il Castello Normanno di Zungoli era fornito di quattro torri cilindriche poste agli angoli, ma ne rimangono solo tre perché una venne distrutta da un forte terremoto nel 1456. La facciata dell’edificio è possente, lunga 30 metri e alta 14; nel tempo la costruzione è andata soggetta a mutamenti con lo scopo di trasformarla in abitazione civile, e oggi è abitata dai marchesi Susanna di Sant’Eligio.