Përshkruani dy metoda të përdorura zakonisht për pastrimin e të dhënave të tekstit
Metoda e zakonshme për pastrimin e të dhënave të tekstit janë zëvendësimi i shtresës, tokenizimi, rrjedhja dhe lematizimi dhe shprehjet e rregullta. Zëvendësimi i shtresës përfshin zëvendësimin e disa fjalëve ose frazave me të tjera, siç janë shkurtimet me fjalë të plota. Tokenizimi është procesi i thyerjes së një shtrije të madhe teksti në fjalë individuale, fraza dhe simbole.