Usando la biblioteca NLTK de Python:

```python
import nltk

# Definicion de la funcion:
def tokenizar_texto(texto):
    return nltk.word_tokenize(texto)

# Ejemplo de uso:
texto = "Este es un ejemplo de tokenización."
print(tokenizar_texto(texto))
```
spam fails_task lang_mismatch pii not_appropriate hate_speech sexual_content quality toxicity humor helpfulness creativity violence