Esta moderna infraestructura cultural es el resultado de la rehabilitación y transformación del antiguo edificio de Acuartelamiento de Carlos III.
La Torre Tavira forma parte de la Casa Palacio de los Marqueses de Recaño. Este edificio, levantado en la primera mitad del S.XVIII responde en su esquema compositivo a la tipología característica de la arquitectura civil gaditana del Barroco.
Conforman un semibaluarte , construido a finales del siglo XVIII, dentro de una ambicioso plan de remodelación de las instalaciones portuarias y edificaciones de la zona.