Fue construido en el siglo XVI, por orden de Felipe II, para  la defensa del puerto de Ferrol apoyado por los castillos de Nuestra Señora de La Palma y el de San Martín, que se encontraban en la orilla opuesta (orilla sur).  En caso de ataque enemigo para evitar la entrada de sus navíos en la ría se desplegaba una cadena entre el castillo de San Felipe y el de San Martin.

 Cuando la armada inglesa el 25 de agosto de 1800  intenta  apoderarse de Ferrol y destruir los astilleros  durante la batalla de Brión con más de cien barcos y 15.000 hombres, mandados por Warren, fueron sucesivamente vencidas gracias al apoyo dado desde del fuerte de La Palma y de las cañoneras situadas en la ría lo que obligó a las tropas británicas a reembarcar. Esta victoria demostro lo eficaz de la defensa compartida entre las fortificaciones de la ria.

En el  siglo XIX se construyó a ras de agua, una batería en el frente que daba al mar.

Los detenidos  durante la Guerra Civil, fueron concentrados y juzgados en consejo de guerra. Realizando las  ejecuciones  en sus fosos.