Viết một phần tiếp theo cho đoạn này - Babers tiếp tục cải thiện nhanh chóng của mình vào năm 1984. Tại Trận thử nghiệm Olympic cuối cùng của Hoa Kỳ ở Los Angeles, anh đã giành chiến thắng trong bán kết của mình với một kỷ lục cá nhân là 44,95. Sau đó, trong trận chung kết, anh đã chạy một kỷ lục cá nhân khác là 44,86 để đủ điều kiện vào đội Olympic. Tại Thế vận hội Olympic Los Angeles, anh đã hạ thấp kỷ lục cá nhân của mình xuống còn 44,75 khi anh giành chiến thắng ở tứ kết. Trong trận chung kết Olympic, Babers chạy 44,27 để giành huy chương vàng. Trong 4 × 400 m relay
, Hoa Kỳ (Babers chạy vòng ba) đã giành huy chương vàng dễ dàng trong 2:57.91.