Nestačí tedy aby se auta naučila značky a princip křižovatek či semaforů.
Autonomní auto potřebuje stejně jako běžný řidič znát pravidla silničního provozu, mimo to však musí také rozpoznávat všechny objekty, které mu přijdou do cesty. Nestačí tedy aby se auta naučila značky a princip křižovatek či semaforů. Musí bezproblémově rozpoznat jednotlivé objekty na trase (chodce, další auta, kola a podobně). K tomuto účelu je nezbytně nutné obsáhnout obrovské množství dat, které by strojové učení již nezvládlo pojmout.