In 1674 werden door Lambert Schepper drie tuinen aan de Weesperzijde gekocht en samengevoegd tot een groot terrein. Schepper liet er ook een huisje bouwen, dat volgens een verkoopakte uit 1688 de naam Het Lijmvat kreeg. De volgende eigenaar, Harmen Brand, breidde het terrein naar het zuiden uit. Waarschijnlijk gaf hij ook de naam Brandwijk aan de buitenplaats. Via Harmen Brands dochter Margaretha kwam het terrein aan haar tweede echtgenoot Daniel Marsenier.
In 1738 verkocht Daniel de buitenplaats. Het herenhuis van de buitenplaats wordt in 1796 gesloopt. Aan J.H. Kröger werd in 1843 de vergunning afgegeven om een nieuw huis te laten bouwen op het terrein van de buitenplaats.