大規模自然モデル(LLM)で適切なトークナイザーを利用することの影響について

~interop2024に参加してきました!~

PenteraCon2024レポート(前編)