Clásica fortaleza excavada en roca, fue plaza protagonista en el asedio de San Fernando. Este todavía conserva los restos de un palacio de sillería de estilo renacentista, obra de Hernán Ruiz.

El castillo ocupa una espectacular posición sobre un enorme risco. El conjunto defensivo que se conserva está dominado por una alta torre cuadrada, reforzada con baluartes que cabalgan en los salientes de la roca. Identificado por algunos con el castillo de Al Benzarade, o del buen aire, se inició a fines del siglo IX, siendo posteriormente reconstruido por los Ziríes en el siglo XI y, de nuevo, en el XII. A estas obras hay que sumar las que llevarían a cabo los cristianos después de la conquista. Frente al núcleo militar de la torre y plaza de armas, los señores de Zuheros edificaron en el siglo XVI una residencia palaciega de corte renacentista, de la que subsisten fragmentos de sus muros de sillares y detalles de cantería.