Los escasos restos de la fortaleza que aún perduran se encuentran en la cresta del cerro rocoso a cuyos pies está situada la población actual; se trata de restos de paredes y torres de mampostería unidos con argamasa con un trazado irregular que se adapta a las rocas que les sirven de base. Su origen es incierto, posiblemente árabe; la información más remota que se conoce data de 1.187, cuando el rey Alfonso II de Aragón  entregó la fortaleza y sus tierras a la Orden de Alfambra, pasando más tarde a manos templarias tras la absorción de la Orden de Alfambra por la Orden del Temple en el año 1.196, tras lo cual los templarios crearon la Encomienda de Villel. En el año 1.610 pertenecía al Conde de Fuentes. Es de acceso libre pero peligroso el tránsito por sus ruinas.