Quiero entender el proceso de tokenización. ¿Por qué es más caro tokenizar en inglés que en hindi? ¿Tokenizas oraciones completas o solo palabras?
spam lang_mismatch pii not_appropriate hate_speech sexual_content quality toxicity humor creativity violence