词元
(词元经济)
下载爱思想APP，推送实时更新
词元（Token）是人工智能大模型处理自然语言的最小离散符号单元，2026 年 3 月由中国官方定为标准中文译名。它是文本经切分或编码后不可再分的基本信息载体，中文常为单字或词语、英文可为单词或子词，标点、数字、空格也可作为独立词元。词元是模型理解、生成与计算语言的基础 “积木”，既是上下文长度的计量单位，也是 AI 服务的计费与定价基准，堪称智能时代的 “信息原子” 与价值锚点。
最新文章
- 2026-07-15 22:58
- 2026-07-14 23:55
- 2026-07-04 23:36
- 2026-07-02 16:06
- 2026-07-02 16:02
- 2026-06-26 16:25
- 2026-06-23 15:31
- 2026-06-23 15:27
- 2026-06-23 15:26
- 2026-06-23 15:24
- 2026-06-22 10:27
- 2026-06-22 10:26
- 2026-06-22 10:23
- 2026-06-22 10:21
- 2026-06-21 10:22
- 2026-06-14 22:14
- 2026-06-13 22:19
- 2026-06-13 22:17
- 2026-06-13 22:16
- 2026-06-13 22:14
- 2026-06-13 22:12
- 2026-06-13 22:11
- 2026-06-11 13:09
- 2026-06-08 10:53
- 2026-06-08 10:51
- 2026-06-08 10:49
- 2026-06-08 10:47
- 2026-06-08 10:04
- 2026-06-08 10:02
- 2026-06-08 10:00