Pour faire face aux attaques répétées de la Compagnie des Indes Orientales Néerlandaises entre 1603 et 1622, les Jésuites décidèrent de faire ériger une série de fortifications sur la colline dominant le collège et l'église Saint-Paul. Elles furent achevées vers 1606.