Se trata de una fortaleza cristiana del  S.XI y XII, construida donde  hubo un asentamiento islámico anterior,  que se sitúa dentro de la población, en su parte más elevada. Este enclave dominaba el camino real de Madrid, en la zona de frontera entre los reinos de Castilla y Valencia y la Hoya de Buñol.

D. Jaime I se lo conquistó a los árabes en 1238, aunque permanecieron con sus casas y tierras, hasta la expulsión y donado a don Rodrigo de Lizana, que en 1241 lo entrega a la Orden de San Juan de Jerusalén.

Posteriormente el Rey don Jaime quitó estos lugares a la Orden,  pasando por distintos dueños por venta, cesión o herencia. Siendo  su dueño don Jaime, hijo primogénito de don Pedro Conde de Urgel  se  remodeló el castillo a la manera gótica que es la preponderante actualmente.

Fué utilizado  como cuartel en la Guerra de la Independencia, en la de Sucesión y en las guerras  carlistas.

A finales del siglo XIX, es ocupado por la población civil más desfavorecida del lugar, convirtiéndose en un barrio más de la misma. Con la creación de la Asociación de amigos del castillo, dirigida por Facundo Tomás Martía a principios de la década de los 60, se inicia su restauración. 

​