Scrivi una continuazione per questo paragrafo - Gossage si e' arrabbiato con il proprietario degli Yankees, George Steinbrenner, per essersi intromesso nella squadra. Nel 1982, chiamò Steinbrenner "l'uomo grasso di sopra", e disapprovò il modo in cui il manager degli Yankees Billy Martin lo usò. Gossage divenne un free agent dopo la stagione 1983 e insisteva che non si sarebbe dimesso con New York. Ha firmato con i San Diego Padres. Nel 1984, Gossage conquistò un altro titolo, guadagnando il salvataggio nella partita 5 della NL Championship Series
e mandando i Padres alla loro prima World Series; dopo che San Diego aveva segnato quattro punti nel settimo inning per prendere un vantaggio di 6 a 3 contro i Chicago Cubs, Gossage lanciò gli ultimi due inning, facendo colpire Jody Davis in un gioco di forza per l'out finale. Durante la partita 5 della World Series del 1984 contro i Detroit Tigers, Gossage, dopo aver ricevuto segnali dagli allenatori sulla panchina dei Padres e una visita al monte da parte del manager dei Padres Dick Williams, si rifiutò intenzionalmente di camminare sul campo destro Kirk Gibson. Al secondo lancio, Gossage e i Padres si pentirono di quella decisione, mentre Gibson fece un fuoricampo nel campo destro che portò ai Detroit Tigers alla vittoria delle World Series. Il 17 agosto, Gossage mise fuori Pete Rose nell'ultima battuta di Rose in Major League.