トークナイゼーション(BPE/WordPiece/SentencePiece)を解説 2026年2月25日 NLP 自然言語処理(NLP)において、テキストをモデルに入力するための最初のステップが... BPENLPSentencePieceWordPieceサブワードトークナイゼーション