El comienzo de la
construcción de la Fortaleza
y la introducción de la guarnición en la isla en 1630, sugiere otra función que el antiguo caseron pudo haber tenido. Juzgando por la geometría del lugar, así como también por el sitio en el que esta situado, "O Casarão" parece haber sido parte integrante de la Fortaleza, el portal, la rampa y finalmente las construcciones en la segunda colina, así también toda el

área comprendida entre el puerto y la segunda playa. Algunos registros indican que durante la construcción de la fortaleza y también después de su finalización, las casas ubicadas a lo largo de la calle que va de la plaza hasta la primera playa, fueron usadas para albergar a los soldados de la guarnición, y el personal de alto rango fue albergados en
"O Casarão".