OpenAI GPTにおいて、モデルごとにトークン量が変動するのはなぜ? 最近ちょっと気になっていること これまで2種類のチャットボットを作ってきたのですが、その中でGPT-3で作成したポンコツダ・ヴィンチをもう少しなんとかしようと、Zero-shotで質問させるようなロジ… とみ(とみーとも言う) 2023年03月27日 月曜日 トークナイズ処理tiktokenトークン数GPTチャットボットAIOpenAIai-excavation