Costruito nel 1470, ma recenti scoperte fanno risalire la presenza di una fortificazione già in epoca normanna e la forma delle sue torri fa supporre che fosse addirittura di origine angioina. Il castello attuale è quello fatto erigere da Bernardino de Bernaudo segretario di re Alfonso II di Napoli. Dal nome del feudatario prenderà il nome l'intera città. Nel 1735 vi dimorò Carlo III di Borbone, il castello ha una forma quadrangolare e ha tre torri angolari. Questa tipologia architettonica è propria dei castelli costruiti alla fine del Quattrocento. Le torri hanno una forma cilindrica con la base più larga in confronto alla sommità. Originariamente la struttura era molto più grande e comprendeva altre torri. Ma con il tempo e con continui aggiustamenti il castello fu molto rimaneggiato nelle dimensioni. Le tre torri rimaste hanno delle fortificazioni rivolte sia all'esterno della struttura che all'interno del castello. Attualmente è in fase di completamento il suo restauro.