Fabi es va traslladar a la Fórmula 1 el 1982, conduint el número 36 Candy Toleman TG181C-Hart 415T. L'any anterior, l'equip només s'havia classificat dues vegades, i la temporada va començar amb dificultats quan el Gran Premi de Sud-àfrica va ser interromput per una vaga de pilots. Sota la pressió del manager de Toleman, Alex Hawkinge, Fabi va ser l'únic pilot a trencar la vaga (Jochen Mass no va participar des de l'inici). El seu lloc va ser posat en perill quan Candy va canviar el suport a Tyrrell, però va veure la temporada. El TG181C no era competitiu i l'equip es va centrar en gran part en el pilot principal Derek Warwick. Això va resultar en que Fabi només es va classificar per a sis de les 14 carreres possibles. Es va classificar per al Gran Premi de San Marino, a causa de la guerra FISA<unk>FOCA que va significar que només 14 cotxes van intentar classificar-se per a la cursa. A la cursa, Fabi va acabar setè, amb vuit voltes de retard. Fabi es va classificar per al Gran Premi de Bèlgica, començant i acabant vint-i-unè. Després no va poder classificar-se al Gran Premi de Mònaco.
abans de saltar tant el Gran Premi de Detroit com el Gran Premi del Canadà. No va poder classificar-se al Gran Premi d'Alemanya i al Gran Premi de Caesars Palace. El seu millor resultat en les curses restants va ser el vintè en el Gran Premi d'Àustria, i va deixar la Fórmula 1 al final de la temporada.