Tuy nhiên, trong vòng 26 năm sau khi di chuyển, St. Ignatius sẽ bị phá hủy hoàn toàn. Mặc dù trường đã sống sót sau trận động đất năm 1906
Chỉ với thiệt hại vừa phải, những vụ hỏa hoạn tiếp theo đã phá hủy trường học và nhà thờ, buộc SI phải tìm một địa điểm mới gần Công viên Cổng Vàng, một tòa nhà bằng gỗ "tạm thời" được xây dựng vội vã, được biết đến với cái tên "Xưởng sản xuất áo sơ mi", nơi đặt trường học trong hơn 20 năm, từ năm 1906 đến năm 1929.