大模型

大模型中的 token 是将文本拆分成的最小处理单位，可以是单词、子词或字符，是模型理解和生成语言的基础