Procesamiento de Lenguaje Natural con Aprendizaje Profundo

_____________________________________________________________________________________

5.4. Tokenización en transformers

5.5. Wordpiece tokenization

5.6. Tokenizador de BERT: el campo input_ids

5.7. Tokenizador de BERT: el campo token_input_ids

5.8. Padding y truncation. Parte 1: tokenizar una colección de textos

5.9. Padding y truncation. Parte 2