Nació'l 15 de xunetu de 1793 en Berlin (Connecticut). Foi la menor de la so familia, creciendo en mediu intelectual y relixosu, anque llibrepensador. Una de les mayores inspiraciones de la so vida foi la so hermana mayor, Emma Hart Willard. Mientres vivió cola so hermana, foi tamién alumna de John Willard y trés de los sos compañeros, quien tamién habitaben na residencia de los Willard. Almira estudió matemátiques y filosofía.