Riferirsi al passaggio seguente e rispondere alla domanda successiva nella stessa lingua del passaggio:  Passaggio: i token sono spesso definiti da espressioni regolari, che sono comprese da un generatore di analizzatori lessicali come lex. L'analizzatore lessicale (generato automaticamente da uno strumento come lex, o artigianale) legge in un flusso di caratteri, identifica i lessici nel flusso e li categorizza in token. Questo si chiama tokenizzazione. Se il lexer trova un token non valido, segnalarà un errore.  Domanda: Cosa troverà se segnala un errore?
un token non valido