También se les concedió un terreno en la zona conocida en la época como La Turba, donde vivía la gente más pobre de Gibraltar.
La entrada estaba en la parte de atrás (lo que hoy es Gobernador Lane).
Se extendía hasta el área que está ocupada hoy por el John Mackintosh Hall.
Después de la toma de Gibraltar por una flota anglo-holandesa en el nombre del archiduque Carlos, los frailes franciscanos no siguieron el éxodo de la población española y permanecieron en Gibraltar, por lo menos durante algunos años (su presencia se registró en 1712).
El edificio fue reconstruido en gran medida durante los siglos XVIII y XIX en estilo georgiano con elementos victorianos.