Op de grote rots die de twee stranden van elkaar afscheidt staat het fort, dat de functie had om de stad te verdedigen tegen de invallen door Algerijnse en Berberse piraten in de 14de, 15de en 16deeeuw. Later werd het Kasteel verlaten en tegenwoordig staan er alleen nog enkele resten van muren op de rotsen van het uitkijkpunt, dat ook bekend is als het "Balkon van de Middellandse Zee ".