Osatu esaldi hau: Madison Square Gardenek izena hartu zuen izen hori zuen lehen eraikinaren lekutik, Madison hiribidearen ipar-ekialdeko izkinan dagoena, Parkearen aurrean. Lehenengo lorategia Park Avenue lineako trenbide-terminal ohia izan zen, P. T. Barnumek 1871n aire zabaleko zirku-lekua bihurtu zuena eta 1879an "Madison Square Garden" izena hartu zuena. (New Yorkeko bizi-aseguruen eraikinak hiriko bloke osoa hartzen du orain.) Jatorrizko lorategia 1889an eraitsi zen eta
Stanford White-ek diseinatutako areto berria, hurrengo urtean inauguratua. Bigarren lorategiak Diana jainkosa erromatarraren brontzezko estatua zuen kiroldegiaren dorrean. 1925ean 50. kalearen eta 8. hiribidearen arteko eraikin berrira aldatu zenean, lehengo izena mantendu zuen. Madison Square Garden orain Eighth Avenue-n dago, 31. eta 33. kalearen artean; hala ere, oraindik ere izena mantentzen du.