O edificio ha teniu quantos usos diferents mientres a suya vida—primero y mas important como residencia d'os quatre timonels d'o gubierno (dende 1816 dica 1845), dimpués como quartel cheneral d'a Guardia Costera de Sydney (dende 1845 dica 1864) y a la fin como aloxamiento ta mariners (dende 1865 dica 1970).