在自然语言处理（NLP）和人工智能领域，Token是大模型（如GPT、BERT、Transformer等）处理文本数据的基础单元。与区块链中的Token（代币）不同，大模型中的Token是数据表征的最小单位，是模型理解、生成和处理语言的核心