Nacida en Chicago, Illinois, el so verdaderu nome yera Sylvia Dolores Finkelstein (o Sylvia Dolores Vernon). Los padres de Gray yeren Barbara Marguerite Gray y Harry Vernon Finkelstein (col nome artísticu de Harry Vernon), dambos actores de vodevil, y que se dixebraron cuando ella yera neña. Tenía un hermanu mayor, Richard Gray, que tamién fixo carrera en Hollywood.