Hugging Face 官方博客2026-09-21tokenizers v1: 測定される符号化、デコードおよびスケーリングtokenizers v1: 測定される符号化、デコードおよびスケーリング経緯と関連報道
