Fue fortaleza árabe, pero se reformó entre los siglos XIII y XIV. Su carácter militar le da una apariencia austera. Está formado por un perímetro amurallado con torres cuadrangulares y una cilíndrica. Su acceso se hace a través de dos arcos de herradura apuntados, enmarcados en un alfiz. La Torre del Homenaje fue declarada Monumento Histórico-Artístico Nacional en 1943. Situada en el patio de armas, de planta cuadrada, consta de tres plantas cubiertas con bóvedas de cañón. La Torre del Homenaje está fechada en el siglo XIII, cuando Priego era una encomienda de la Orden de Calatrava.