Scrivi una continuazione per questo paragrafo - Brabham ha abbandonato Fabi per il 1985 e inizialmente ha faticato a trovare una squadra. Il suo profilo in Italia gli ha permesso di rientrare in Toleman (ora fortemente sponsorizzato dal Gruppo Benetton) quando si sono uniti tardi al campionato al Gran Premio di Monaco. Fabi ha guidato la Toleman TG185-Hart 415T del Toleman Motorsports Group n. 19. La stagione iniziò tardi perché Toleman aveva perso la fornitura di pneumatici quando Michelin si ritirò dalla F1 alla fine del 1984. Non avevano accesso ai pneumatici Goodyear e Pirelli non li forniva, poiché avevano rotto un contratto con l'azienda italiana a metà del 1984 e erano andati con Michelin. Benetton acquistò sia Toleman che il team Spirit e trasferì il contratto Pirelli di Spirit a Toleman. La partenza tardiva ha fatto sì che la TG185 non sia mai stata veramente affidabile, ma la velocità di Fabi ha portato all'unica pole position della marca, al Gran Premio di Germania
, al nuovo Nürburgring. La gara di Fabi e' stata rovinata quando una frizione scivolata gli ha fatto finire in fondo all'ordine alla fine del primo giro. La squadra non riuscì a segnare punti e Fabi terminò solo due volte (anche queste gare furono interrotte da problemi meccanici). Nel 1980, il campione del mondo Alan Jones, che ha anche usato un motore Hart nella sua Haas Lola, alla fine della stagione lo ha descritto come "inviare un ragazzo a fare il lavoro di un uomo" in F1 contro Renault, Ferrari, BMW, Honda e TAG-Porsche. Il miglior risultato di Fabi è stato il dodicesimo posto al Gran Premio d'Italia e non sarebbe stato classificato per non aver segnato punti.