El edificio del siglo XVII tiene planta cuadrada que se estructura  en torno a un patio interior con corredores de madera.

La fachada principal, orientada al sur, repite el esquema de estas grandes construcciones al disponer de un tramo central entre dos grandes torres; el cuerpo central consta de dos pisos y las dos torres de cuatro. Se observan  escudos de armas incrustados en el tercer piso de cada torre. Adosada a la torre izquierda hay una  la capilla.

En el siglo XIX era propiedad del marqués de San Esteban del Mar, pasando luego a la familia del conde de Revillagigedo.