- Veröffentlicht
- 04.09.2026 16:32
- Zuletzt geändert
- 05.11.2026
- EPSS (30 Tage)
- 0.5 %
- CVSS-Vektor
- CVSS:3.1/AV:N/AC:L/PR:N/UI:R/S:U/C:L/I:L/A:H
Beschreibung
Originaltext der Quelle, nicht übersetzt.
tokenizers (Hugging Face) is affected by an out-of-bounds buffer access in BpeBuilder::build (tokenizers/src/models/bpe/model.rs). When loading a tokenizer.json via Tokenizer::from_file/from_str, the builder sizes a scratch buffer to the longest vocabulary key, then writes each concatenated merge rule into it. A merge whose concatenated token exceeds the longest vocabulary key overruns the buffer, which Rust turns into a panic that aborts the process in Rust and FFI embeddings. This occurs at load time with no encoding required, so an attacker who supplies a crafted tokenizer.json can cause a denial of service. A secondary defect at the same location can cause a usize underflow (panic in debug, potential memory corruption in release) when continuing_subword_prefix is set and a merge token is shorter than the prefix. Observed in version 0.23.1.
Status beim Hersteller
Red Hat stuft seine Produktlinien ein: 1 nicht betroffen.
Nicht betroffen (1)
All currently supported Red Hat productsNicht betroffenverwundbarer Code nicht enthalten
Betroffene Pakete im beobachteten Stack
Red Hat Lightwell:PyPItokenizers0.23.1+rhlw.1RHLW-2026-b11abda52745af4c
Weitere betroffene Pakete (1)
CVEhuggingface/tokenizerskein Fix bekanntCVE-2026-85670
Empfohlene Prüfung
- Feststellen, ob und in welcher Version die betroffenen Pakete in Ihren Systemen, Images und Abhängigkeiten vorkommen.
- Wo eine Fix-Version genannt ist: aktualisieren. Wo nicht: Hersteller-Advisory und Referenzen auf Workarounds prüfen.
- Erreichbarkeit beachten: Der Angriffsweg (Netzwerk · ohne Login · Nutzerinteraktion) ist aus dem CVSS-Vektor abgeleitet.
Diese Seite sagt nichts darüber, ob Ihre Systeme betroffen sind. Das klärt erst eine Prüfung Ihrer Versionen.
Referenzen
- github.com/huggingface/tokenizers/issues/2094
- github.com/huggingface/tokenizers
- github.com/huggingface/tokenizers/blob/v0.23.2/tokenizers/src/models/bpe/model.rs
- www.vulncheck.com/advisories/tokenizers-bpebuilder-buffer-overflow-via-merge-token
- github.com/CVEProject/cvelistV5/tree/main/cves/2026/85xxx/CVE-2026-85670.json
- nvd.nist.gov/vuln/detail/CVE-2026-85670
- security.access.redhat.com/data/csaf/v2/vex/2026/cve-2026-85670.json
- access.redhat.com/security/cve/CVE-2026-85670
- www.cve.org/CVERecord