Il Castello Ducale, situato in posizione preminente, è parte integrante del tessuto urbano del centro storico. Fu costruito nel 1073, per volontà di Roberto il Guiscardo, con funzione iniziale di fortezza militare. Nel XIV secolo, venne rifatto dalla famiglia Sanseverino e, nel XV secolo, per un breve periodo ne divenne proprietario Ferdinando I d'Aragona, che ne rafforzò il sistema difensivo con la costruzione del mastio e del ponte levatoio. Nel XVI secolo, sempre i proprietari Sanseverino, lo trasformarono in residenza. L’aspetto attuale mostra un edificio in pietrame misto, a pianta quadrata con tre torri tronco-coniche e un mastio circolare aggiunto alla fine del 1400, contemporaneamente al ponte levatoio. La torre ha subito un intervento di trasformazione a meta ‘800, con la sovrapposizione di una torretta ottagona in funzione di belvedere.