Zamek Jajeczny stoi na malutkiej wysepce, na której w VI wieku p.n.e. osiedlili się koloniści z Cumae i założyli pierwsze historyczne centrum miasta. W I wieku p.n.e. rzymski patrycjusz Lucjusz Licyniusz Lukullus wybudował na wyspie wspaniałą willę - Castellum Lucullanum. W V wieku n.e. została ona ufortyfikowana przez Walentyniana III. W 476 stała się zaś miejscem wygnania ostatniego cesarza Romulusa Augustusa - wygnanego przez Odoacera. Po 492 Eugippiusz ufundował w tym miejscu klasztor.