Il castello, ha uno sviluppo planimetrico di circa 600 metri quadrati ed abbraccia la torre ed il contiguo cortile interno per una altezza massima di circa 20 metri per un totale di tre piani e un sottotetto. Il perimetro superiore del secondo piano e del sottotetto sono provvisti di merli e agli angoli sorgevano cinque torrette, crollate e demolite a seguito dei danni causati dal sisma del 1980. La Torre, denominata da alcune fonti Torre Normanna, è addossata al lato nord del Palazzo e rappresenta la preesistenza più antica del complesso.