2026年、Transformers v5でトークナイザーが革新されました。設計と学習済みボキャブラリーの完全分離により、カスタマイズが劇的に簡単に。初心者でもわかる徹底解説で、日本語NLP活用の新時代を紐解きます。