Il castello è costruito direttamente su un banco roccioso, in molti punti affiorante, ed è universalmente noto per la sua forma ottagonale. Su ognuno degli otto spigoli si innestano otto torri della stessa forma nelle cortine murarie in pietra calcarea locale, segnate da una cornice marcapiano, si aprono otto monòfore nel piano inferiore, sette bifore ed una sola trifora, rivolta verso Andria, in quello superiore.
Ho avuto la fortuna di salire sul faro di San Cataldo di Bari un giorno in cui la giornata era tersa. Il guardiano del faro ci mostró che si distingueva nettamente, ad occhio nudo, la sagoma del monte con su il castello. Fu emozionante 😊.