En pleno centro de Orce, frente a la iglesia de Santa María de la Anunciación, se levanta la única fortaleza nazarí de carácter fronterizo que se conserva en pie: la Alcazaba de las Siete Torres, también conocida como Castillo de Orce. Su origen se remonta al siglo XI, cuando se construyó como punto defensivo durante el desmembramiento del Califato de Córdoba, y formaba parte de una primera línea de castillos roqueros (junto a Huéscar, Baza, Guadix, Benamaurel, Castilléjar y Galera) que protegía la frontera oriental del reino nazarí frente a Castilla y Murcia.
Levantada en tapial y sillería, su planta irregular se adapta a un pequeño promontorio natural y está rodeada por siete torres troncopiramidales de origen africano, con treinta y dos almenas y una puerta de acceso con arco de herradura.
Una de sus siete torres se transformó en el siglo XVI en la actual Torre del Homenaje, ganando altura hasta los cincuenta metros con un tramo de sillares. Durante años, esta torre albergó el Museo de Prehistoria de Orce Josep Gibert, con los restos del célebre Hombre de Orce, antes de que la colección se trasladara al edificio que hoy ocupa el Museo de los Primeros Pobladores de Europa. Declarada Bien de Interés Cultural en 1985, la Alcazaba pasó a titularidad municipal en los años setenta, cuando se derribaron las viviendas que se habían ido adosando a sus muros con el paso de los siglos.
