官方定调：Token 中文译名确认为“词元”
OSCHINA-AI 社区发布消息，正式将 AI 领域核心术语 Token 的中文名称定为“词元”。这一命名旨在统一行业表述，解决此前“令牌”、“标记”等译法混乱的问题。该决定标志着大模型技术生态在术语标准化方面迈出了关键一步。
事件概述
开源与 AI 开发者生态社区 OSCHINA 正式发布通知，对人工智能领域的通用术语 Token 进行中文定名。
核心信息
- 确认译名：Token 的官方中文译名为 “词元”。
- 背景意义：在大语言模型（LLM）及自然语言处理（NLP）领域，Token 是文本处理的基本单位。此前行业内存在“令牌”、“标记”、“字元”等多种译法，导致沟通成本增加。
- 影响范围：该定名适用于所有涉及 AI 技术文档、学术交流及工程实践的场景，有助于提升中文技术社区的表达一致性与专业性。