Para defender la isla de Tenerife de los ataques de los piratas y del contrabando se construyeron en los siglos XVII y XVIII un conjunto de fortificaciones, una de ellas fue la Torre circular o Castillo situado en San Andrés aprovechando una pequeña ensenada,  que formaban los barrancos del Cercado y las Huertas, por encontrarse en un  paso obligado para la mayor parte de la navegación que se acercaba a Santa Cruz. La Torre fue destruida por las avenidas del barranco en diversas ocasiones

Cuando se produce el frustrado ataque de Nelson en 1797, el “Castillo de San Andrés” juega un papel importante. 

Desde 1894, permanece en el estado actual a causa de una avenida de aguas torrenciales.