Se trata de una fortaleza medieval en forma de torre de homenaje situado en lo alto de la población. Se construyó  con anterioridad a 1180 (existen referencias sobre una reconstrucción de Fernando I en ese año) sobre los restos de un antiguo emplazamiento de la edad del bronce.

Con el tiempo pasó por distintas manos y debido a las rencillas existentes fue derribado en el siglo XV. En el mismo siglo es de nuevo reedificado a cargo de D. Rodrigo Alonso Pimentel quién coloca el escudo heráldico que hoy vemos.

Se conservan la torre gótica del homenaje, la puerta de entrada al Patio de Armas y la puerta del Patio de Honor.