La croissance rapide de Visalia peut être attribuée en partie à la ruée vers l'or le long de la rivière Kern. De nombreux mineurs de transit se sont installés à Visalia lorsque l'or n'était pas au rendez-vous.