国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁(yè) > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

AI 詞元 (Token) 是什么意思?一文看懂詞元消耗與省錢技巧

0
分享至

3 月 23 日,中國(guó)發(fā)展高層論壇 2026 年年會(huì)上,國(guó)家數(shù)據(jù)局局長(zhǎng)劉烈宏正式官宣:AI 領(lǐng)域核心術(shù)語(yǔ) Token 的中文標(biāo)準(zhǔn)譯名確定為“詞元”。這一官方定名,結(jié)束了之前 “令牌”“代幣”“詞塊” 等譯法混用的行業(yè)亂象,為中國(guó) AI 產(chǎn)業(yè)構(gòu)建了統(tǒng)一的技術(shù)話語(yǔ)體系,也讓智能時(shí)代的 “算力貨幣” 有了清晰的中國(guó)定義。至于token為什么叫詞元?我們一起來(lái)了解背后的原因!



01、從“Token”到“詞元”:指的到底是什么?

“Token”并不是新詞。早在編譯原理、網(wǎng)絡(luò)安全、區(qū)塊鏈,再到大模型時(shí)代,它一直存在——只是從未被統(tǒng)一命名。問(wèn)題在于,它太“模糊”。

在大模型語(yǔ)境中,Token指的是模型處理文本的最小單位,可以是一個(gè)字、一個(gè)詞,甚至一個(gè)子詞片段。換言之,Token是模型處理信息的最小計(jì)量單位,無(wú)論是用戶的提問(wèn),還是AI生成的一段代碼,最終都要被拆解成Token來(lái)完成運(yùn)算。正因如此,Token調(diào)用量成為衡量AI模型活躍度和產(chǎn)業(yè)價(jià)值的關(guān)鍵指標(biāo),Token調(diào)用量越高,意味模型被用得越多,創(chuàng)造的實(shí)際價(jià)值也就越大。

但不同系統(tǒng)的Token切分方式各異,語(yǔ)義邊界也并不穩(wěn)定,統(tǒng)一命名的需求日益迫切,“詞元”這一標(biāo)準(zhǔn)譯名便應(yīng)運(yùn)而生。

官方給出的詞元定義:詞元(Token)是大模型處理信息的最小信息單元,具有智能時(shí)代可計(jì)量、可定價(jià)、可交易的特征。

作為“詞元”的Token,不僅是智能時(shí)代的價(jià)值錨點(diǎn),更是連接技術(shù)供給與商業(yè)需求的“結(jié)算單位”,為AI商業(yè)模式的落地提供了可量化的支撐。

02、真正推動(dòng)定名的,不是語(yǔ)言,而是產(chǎn)業(yè)

若將時(shí)間線拉近便會(huì)發(fā)現(xiàn),“詞元”并非突然出現(xiàn)——它早在2021年前后就已被提出,卻始終局限于技術(shù)圈。真正推動(dòng)它“出圈”、成為官方標(biāo)準(zhǔn)的,源于兩件關(guān)鍵事件:

1)Token從技術(shù)指標(biāo),變成了“計(jì)費(fèi)單位”

今天,大模型廠商不再只賣能力,而是賣“用量”。

輸入多少Token;

輸出多少Token;

每千Token多少錢。

Token由此第一次像“電力”“帶寬”一樣,被量化、計(jì)價(jià)、結(jié)算,官方更明確將其定義為“連接技術(shù)供給與商業(yè)需求的結(jié)算單位”。

2)規(guī)模爆炸,迫使統(tǒng)一口徑

會(huì)上披露的一組數(shù)據(jù)極具象征意義:據(jù)國(guó)家數(shù)據(jù)局統(tǒng)計(jì),2024年初,中國(guó)日均詞元(Token)調(diào)用量?jī)H為1000億;到2025年底,這一數(shù)字躍升至100萬(wàn)億;截至今年3月,更是突破140萬(wàn)億,兩年間增長(zhǎng)超千倍。



劉烈宏指出,今年1月底以來(lái),部分模型企業(yè)創(chuàng)下20天收入超越2025年全年總收入的業(yè)績(jī)紀(jì)錄,這組亮眼數(shù)據(jù)的背后,正是一套以Token計(jì)費(fèi)為基礎(chǔ)的新型商業(yè)邏輯在加速演進(jìn)。

當(dāng)一個(gè)單位被用來(lái)描述國(guó)家級(jí)產(chǎn)業(yè)規(guī)模時(shí),它就必須實(shí)現(xiàn)標(biāo)準(zhǔn)化——語(yǔ)言在這里,服從的是統(tǒng)計(jì)、監(jiān)管與商業(yè)需求,而非單純的語(yǔ)義邏輯。

03、一個(gè)被忽視的變化:話語(yǔ)權(quán)正在轉(zhuǎn)移

仔細(xì)觀察這次命名過(guò)程,會(huì)發(fā)現(xiàn)一個(gè)耐人尋味的變化:過(guò)去,技術(shù)術(shù)語(yǔ)的命名往往源于學(xué)術(shù)界或社區(qū)共識(shí),而這一次,“詞元”的定名由官方語(yǔ)境直接“定錨”。

這意味著,AI時(shí)代的基礎(chǔ)概念正從“技術(shù)語(yǔ)言”轉(zhuǎn)向“基礎(chǔ)設(shè)施語(yǔ)言”。當(dāng)“詞元調(diào)用量”出現(xiàn)在宏觀經(jīng)濟(jì)描述中,它便不再只是單純的工程指標(biāo),更類似于電力消耗、數(shù)據(jù)吞吐、工業(yè)產(chǎn)量,成為衡量“算力經(jīng)濟(jì)”的新核心單位。

04、產(chǎn)業(yè)側(cè)的另一種競(jìng)爭(zhēng):誰(shuí)更“省詞元”?

隨著“詞元”成為計(jì)費(fèi)與衡量核心,一個(gè)新的競(jìng)爭(zhēng)維度正在浮現(xiàn):誰(shuí)能用更少的詞元,完成同樣的任務(wù)?

這不僅關(guān)乎模型能力,也關(guān)乎產(chǎn)品設(shè)計(jì)與工程優(yōu)化。在近期的國(guó)產(chǎn)AI產(chǎn)品中,“詞元效率”已成為重要亮點(diǎn):作為國(guó)內(nèi)首個(gè)中文版OpenClaw,當(dāng)貝Molili molili.com.cn 在詞元消耗控制上實(shí)現(xiàn)重大突破,其詞元消耗相較OpenClaw原版節(jié)省一半,有效解決了原版產(chǎn)品“詞元消耗過(guò)高”的行業(yè)痛點(diǎn)。



據(jù)當(dāng)貝Molili研發(fā)團(tuán)隊(duì)介紹,這一成本優(yōu)勢(shì)并非簡(jiǎn)單的漢化適配,而是基于底層技術(shù)的深度優(yōu)化:通過(guò)動(dòng)態(tài)調(diào)整上下文窗口,避免小任務(wù)無(wú)效詞元消耗;精簡(jiǎn)非必要通用信息,提升詞元利用效率;優(yōu)化提示詞工程,提高緩存命中率,最終在不影響任務(wù)處理質(zhì)量的前提下,實(shí)現(xiàn)了詞元消耗的大幅降低。

從“更聰明”到“更省詞元”,AI競(jìng)爭(zhēng)的重心正在發(fā)生轉(zhuǎn)移。

05、token定名詞元:這不是翻譯,是一次“命名權(quán)確認(rèn)”

回看“詞元”定名這一事件,其背后至少蘊(yùn)含著三層核心意義:

1)語(yǔ)言層

中文世界第一次為AI核心單位建立起統(tǒng)一、規(guī)范的表達(dá),終結(jié)了長(zhǎng)期以來(lái)的譯法亂象。

2)產(chǎn)業(yè)層

“詞元”正式成為AI時(shí)代的基礎(chǔ)計(jì)量單位,為產(chǎn)業(yè)發(fā)展、商業(yè)計(jì)費(fèi)提供了統(tǒng)一參照。

3)權(quán)力層

技術(shù)術(shù)語(yǔ)的命名權(quán),從過(guò)去的技術(shù)社區(qū),正式轉(zhuǎn)向國(guó)家與產(chǎn)業(yè)體系,彰顯了中國(guó)AI產(chǎn)業(yè)的自主話語(yǔ)權(quán)。

綜上,token為什么叫詞元?其原因遠(yuǎn)不止于術(shù)語(yǔ)規(guī)范,更將推動(dòng)AI產(chǎn)業(yè)商業(yè)化進(jìn)程走向標(biāo)準(zhǔn)化、規(guī)范化。統(tǒng)一的詞元標(biāo)準(zhǔn),讓算力成本核算、AI服務(wù)定價(jià)、產(chǎn)業(yè)價(jià)值量化有了統(tǒng)一參照;而當(dāng)貝Molili等本土產(chǎn)品的技術(shù)突破,也凸顯了我國(guó)AI本土化創(chuàng)新的實(shí)力,為中小企業(yè)和普通用戶降低AI使用成本、推動(dòng)AI普惠化提供了可能。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
日產(chǎn)本田快頂不住了!英媒發(fā)文警告:日本汽車正被“速度”拖死!

日產(chǎn)本田快頂不住了!英媒發(fā)文警告:日本汽車正被“速度”拖死!

阿芒娛樂(lè)說(shuō)
2026-04-29 16:27:44
蘇提達(dá)王后穿無(wú)袖,真實(shí)手臂狀態(tài)曝光,膚白到發(fā)光,保安眼神亮了

蘇提達(dá)王后穿無(wú)袖,真實(shí)手臂狀態(tài)曝光,膚白到發(fā)光,保安眼神亮了

草莓信箱
2026-04-30 12:49:13
我給他做了五年情人,年老色衰后,他拿300萬(wàn)打發(fā)我走,我真后悔

我給他做了五年情人,年老色衰后,他拿300萬(wàn)打發(fā)我走,我真后悔

千秋文化
2026-04-29 19:12:55
零跑汽車4月交付71387輛 再創(chuàng)單月歷史新高

零跑汽車4月交付71387輛 再創(chuàng)單月歷史新高

CNMO科技
2026-05-01 12:20:07
親日辱華、知三當(dāng)三?這一次,57歲的陳紅被兒子丈夫“害”慘了

親日辱華、知三當(dāng)三?這一次,57歲的陳紅被兒子丈夫“害”慘了

凡知
2026-04-08 14:09:55
尼克斯一場(chǎng)球打崩NBA三十年數(shù)據(jù)庫(kù)

尼克斯一場(chǎng)球打崩NBA三十年數(shù)據(jù)庫(kù)

綠茵狂熱者
2026-05-01 11:57:59
2020年,燒餅背師父郭德綱出行的照片,這樣一看,老郭的腿確實(shí)短

2020年,燒餅背師父郭德綱出行的照片,這樣一看,老郭的腿確實(shí)短

喜文多見(jiàn)01
2026-04-29 10:49:13
30多家法院集體引用一部“空氣法”:這不是荒唐劇,是恐怖片

30多家法院集體引用一部“空氣法”:這不是荒唐劇,是恐怖片

迷世書童H9527
2026-04-25 14:15:25
蘇州一對(duì)情侶,談了7年,女子提了18次分手,分手后在街頭痛哭!

蘇州一對(duì)情侶,談了7年,女子提了18次分手,分手后在街頭痛哭!

川渝視覺(jué)
2026-04-17 22:13:14
離譜!臺(tái)灣網(wǎng)友操心大陸用紙?zhí)?,怕全球紙張不夠用,遭全網(wǎng)嘲諷

離譜!臺(tái)灣網(wǎng)友操心大陸用紙?zhí)啵氯蚣垙埐粔蛴?,遭全網(wǎng)嘲諷

譚談社會(huì)
2026-04-30 23:27:30
打得太糟!世乒賽世界冠軍爆冷慘敗,王楚欽霸氣放狠話

打得太糟!世乒賽世界冠軍爆冷慘敗,王楚欽霸氣放狠話

小娛樂(lè)悠悠
2026-05-01 12:25:41
杜鋒若下課,誰(shuí)來(lái)執(zhí)教廣東男籃?我來(lái)出三個(gè)方案

杜鋒若下課,誰(shuí)來(lái)執(zhí)教廣東男籃?我來(lái)出三個(gè)方案

男足的小球童
2026-04-30 17:34:37
拉多維奇臨時(shí)上位?廣東隊(duì)G2生死戰(zhàn)可能換帥,米切爾碾壓杜鋒!

拉多維奇臨時(shí)上位?廣東隊(duì)G2生死戰(zhàn)可能換帥,米切爾碾壓杜鋒!

緋雨兒
2026-05-01 12:15:52
大陸為何不攔?美最后一批坦克送達(dá)臺(tái)島,博主:他們甚至沒(méi)保密

大陸為何不攔?美最后一批坦克送達(dá)臺(tái)島,博主:他們甚至沒(méi)保密

共工之錨
2026-05-01 00:07:24
拉什福德被標(biāo)天價(jià)!或遭巴薩退貨,曝紐卡欲用頭牌與曼聯(lián)交換

拉什福德被標(biāo)天價(jià)!或遭巴薩退貨,曝紐卡欲用頭牌與曼聯(lián)交換

體壇鑒春秋
2026-04-30 17:10:06
體內(nèi)有癌,睡覺(jué)先知!睡覺(jué)時(shí)出現(xiàn)5種表現(xiàn),或是癌的“報(bào)警”信號(hào)

體內(nèi)有癌,睡覺(jué)先知!睡覺(jué)時(shí)出現(xiàn)5種表現(xiàn),或是癌的“報(bào)警”信號(hào)

熊貓醫(yī)學(xué)社
2026-04-17 11:35:03
徐冬冬曬性感美照,身材火辣搶鏡,直言 “大嫂” 標(biāo)簽不是枷鎖

徐冬冬曬性感美照,身材火辣搶鏡,直言 “大嫂” 標(biāo)簽不是枷鎖

橙星文娛
2026-04-29 18:43:20
又打起來(lái)了,以色列軍機(jī)被擊落,美航母跑路?普京拒絕邀請(qǐng)?zhí)乩势?>
    </a>
        <h3>
      <a href=悄悄史話
2026-05-01 07:38:55
廖凡:25年不拼爹的星二代,妻子是周星馳黃金搭檔

廖凡:25年不拼爹的星二代,妻子是周星馳黃金搭檔

笑飲孤鴻非
2026-05-01 05:36:41
官方通報(bào)“廣西一酒店謊稱老板離世要求女子退房后隨即大幅漲價(jià)”:涉嫌違反法律法規(guī)

官方通報(bào)“廣西一酒店謊稱老板離世要求女子退房后隨即大幅漲價(jià)”:涉嫌違反法律法規(guī)

齊魯壹點(diǎn)
2026-04-28 07:37:21
2026-05-01 13:20:49
科技浪子M
科技浪子M
客觀,做一個(gè)有態(tài)度的媒體人
2551文章數(shù) 11195關(guān)注度
往期回顧 全部

科技要聞

蘋果上季在華收入繼續(xù)大增 iPhone收入新高

頭條要聞

銀行員工轉(zhuǎn)走儲(chǔ)戶1800萬(wàn)元喝藥輕生 官方最新回應(yīng)

頭條要聞

銀行員工轉(zhuǎn)走儲(chǔ)戶1800萬(wàn)元喝藥輕生 官方最新回應(yīng)

體育要聞

季后賽場(chǎng)均5.4分,他憑啥在騎士打首發(fā)?

娛樂(lè)要聞

鄧超在景德鎮(zhèn)被偶遇,穿黑外套逛茶園

財(cái)經(jīng)要聞

GPU神話松動(dòng),AI真正的戰(zhàn)場(chǎng)變了

汽車要聞

專訪捷途汪如生:捷途雙線作戰(zhàn) 全球化全面落地

態(tài)度原創(chuàng)

家居
本地
藝術(shù)
旅游
公開(kāi)課

家居要聞

靈動(dòng)實(shí)用 生活藝術(shù)場(chǎng)

本地新聞

用青花瓷的方式,打開(kāi)西溪濕地

藝術(shù)要聞

劉明華 2026油畫新作(2024-2026)

旅游要聞

讀經(jīng)典,玩非遺!三水樂(lè)平這個(gè)古村五一有點(diǎn)“潮”

公開(kāi)課

李玫瑾:為什么性格比能力更重要?

無(wú)障礙瀏覽 進(jìn)入關(guān)懷版