# El equipo de Hugging Face propone acelerar la tokenización BERT

> Las mejoras varían según el idioma y el tamaño de entrada; los cambios seguían en revisión.

- URL canónica: https://newsverum.com/es/news/hugging-face-tokenizers-proposes-bert-normalization-speedups-2026
- Publicación: Newsverum
- Sección: Tecnología
- País: Estados Unidos
- Publicado: 2026-10-15T18:13:43+00:00
- Actualizado: 2026-10-15T18:13:43+00:00
- Período del evento / de los datos: 2026-10-15
- Otras ediciones: [Türkçe](https://newsverum.com/tr/news/hugging-face-tokenizers-proposes-bert-normalization-speedups-2026.md), [English](https://newsverum.com/en/news/hugging-face-tokenizers-proposes-bert-normalization-speedups-2026.md), [العربية](https://newsverum.com/ar/news/hugging-face-tokenizers-proposes-bert-normalization-speedups-2026.md), [Français](https://newsverum.com/fr/news/hugging-face-tokenizers-proposes-bert-normalization-speedups-2026.md), [Deutsch](https://newsverum.com/de/news/hugging-face-tokenizers-proposes-bert-normalization-speedups-2026.md), [Português](https://newsverum.com/pt/news/hugging-face-tokenizers-proposes-bert-normalization-speedups-2026.md)

Una publicación del equipo Tokenizers de Hugging Face, fechada el 15 de octubre, describió cambios propuestos para acelerar la normalización de texto de tipo BERT. El método omite trabajo en secuencias ASCII, almacena en caché decisiones Unicode en páginas de 256 puntos de código y evita crear una cadena nueva si el texto no cambia. El perfil del equipo atribuyó el 88% del tiempo de codificación en inglés, tras el calentamiento, a la normalización, frente al 8% a la selección de tokens de WordPiece.

La publicación afirma que una rama de desarrollo codificó bert-base-uncased hasta unas 50 veces más rápido que Tokenizers 0.23 en las entradas probadas, con identificadores de tokens idénticos en los corpus comunicados. Las mayores mejoras se dieron en inglés y código; árabe, griego y ruso lograron entre 2,2 y 3,2 veces, mientras que el chino mejoró poco o nada. Las entradas pequeñas podían ser más lentas y los cambios seguían en fase de solicitud de incorporación, por lo que la cifra no garantiza el rendimiento general en producción.

## Datos

### Resumen del anuncio

Metodología: Este registro resume el anuncio de la fuente sin añadir verificación independiente ni generalizaciones.

| date | label | description | status |
|---|---|---|---|
| 2026-10-15 | El equipo de Hugging Face propone acelerar la tokenización BERT | Las mejoras varían según el idioma y el tamaño de entrada; los cambios seguían en revisión. | occurred |

Fuentes: <https://huggingface.co/blog/huggingface/tokenmaxxing-bert> · Descargar datos: [JSON](https://newsverum.com/api/v1/articles/hugging-face-tokenizers-proposes-bert-normalization-speedups-2026/data/announcement-record?lang=es&format=json) · [CSV](https://newsverum.com/api/v1/articles/hugging-face-tokenizers-proposes-bert-normalization-speedups-2026/data/announcement-record?lang=es&format=csv)

## Fuentes

- [Hugging Face Tokenizers team](<https://huggingface.co/blog/huggingface/tokenmaxxing-bert>) (Fuente comprobada: 2026-10-15; Publicado: 2026-10-15)

---

Cite la URL canónica indicada arriba. [Principios editoriales y correcciones](https://newsverum.com/es/editorial)