# 人工智能的所有文章

在 HTX 新闻中心浏览与「人工智能」相关的最新资讯与深度分析。潘盖市场趋势、项目动态、技术进展及监管政策,提供权威的加密行业洞察。

从“词元”到“符元”:Token 中文名背后的 AI 底层认知之争

近期,全国科学技术名词审定委员会推荐将AI领域的“Token”译为“词元”,引发广泛讨论。尽管专家认为“词元”符合单义性、简明性等原则,且易于传播,但这一译名在多模态AI发展的背景下存在长期适配性问题。文章提出“符元”作为替代方案,并从多个维度展开分析: 首先,Token虽起源于自然语言处理,但本质是跨模态的“离散符号单元”,而非仅限于语言的“词”。以初始应用场景定义概念,易造成认知局限。 其次,“词元”依赖“词”的类比扩展(如“词云”),但类比不应替代定义。术语需严格区分解释性隐喻与本体性定义,避免语义漂移。 第三,“词”具有强语义锚定效应,易使公众误解Token仅涉及文本,而忽略其图像、语音等多模态应用,增加长期解释成本。 第四,“词元”在语言学中已对应“Lemma”(词的原形),造成一词多义冲突,违背术语单义性原则。 第五,从信息论和计算理论看,Token本质是符号层的离散单元,而非语义层的语言单位。“符元”更贴合其计算本体。 第六,“词元”回译英文时易歧义(如对应word unit或morpheme),而“符元”可稳定对应“symbolic unit”,保障国际学术交流的清晰性。 最后,术语统一应基于“概念同构”而非“语言同形”。“词元”与“嵌入”“注意力”等机制性术语并列时,会造成结构层级混乱。 综上,术语选择关乎AI领域的认知基石。“符元”更符合Token的符号本质,具备跨模态稳定性和回译一致性,利于构建长期自洽的概念体系。

marsbit04/10 10:43

从“词元”到“符元”:Token 中文名背后的 AI 底层认知之争

marsbit04/10 10:43

活动图片