Castellabate è una zona abitata fin dall'epoca preistorica (paleolitico superiore).Dopo la caduta dell'Impero romano d'Occidente iniziò il lungo periodo delle dominazioni barbariche, caratterizzato da una certa instabilità fino all'avvento dei Goti di Teodorico e più tardi dei Bizantini. Il paese si sviluppa intorno alle mura del "Castello dell'abate", che fu fondato nel 1123 dall'abate Costabile e completato dal suo successore Simeone, con lo scopo di proteggere la popolazione locale dedita a fiorenti traffici via mare da eventuali attacchi da parte dei Saraceni.