国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

晚點(diǎn)獨(dú)家丨吳永輝接管字節(jié) Seed 這一年

0
分享至



創(chuàng)新需要適當(dāng)?shù)幕叶群突靵y,但應(yīng)對競爭需要秩序和紀(jì)律。

文丨陳佳惠 賀乾明

制圖丨黃幀昕

編輯丨賀乾明

上千人的研究團(tuán)隊(duì)、投入上百億元追趕兩年,終于研發(fā)出能排在中國第一梯隊(duì)的基礎(chǔ)模型,迅速被只有上百人的團(tuán)隊(duì)用更少資源研發(fā)的模型超過,部門負(fù)責(zé)人承認(rèn)失誤,公司 CEO 在全員會上點(diǎn)名,本可以做得更好。

這是吳永輝 2025 年初接管字節(jié)跳動大模型研究部門 Seed 時(shí)的情況。多位 Seed 人士說,他背負(fù)著 “把模型能力做到國內(nèi)第一,與國際領(lǐng)先模型公司競爭” 的期待。

“沉穩(wěn)” 是他們對吳永輝的直觀感受。我們了解到,接管 Seed 后,吳永輝密集與 100 多位核心研究員 1on1,隨后提拔了數(shù)位模型架構(gòu)方向的研究員。

接管 Seed 一年間,吳永輝聚焦兩件事:一是提升基礎(chǔ)模型能力,提高研究效率保證交付;二是營造研究導(dǎo)向的氛圍,“做第一流的研究,打造第一流的 AI 研究團(tuán)隊(duì)”。

“有務(wù)實(shí)又有浪漫。” 一位接近吳永輝人士說,他像是在字節(jié)體系內(nèi)成長起來的,而不是出自 Google。

吳永輝 2008 年博士畢業(yè)后加入 Google,前 7 年作為軟件工程師參與最核心的搜索排名工程;隨后轉(zhuǎn)崗到 Google Brain 從事 AI 應(yīng)用研究,推動深度學(xué)習(xí)改變翻譯領(lǐng)域、用到搜索排名算法中;2023 年成為大模型研發(fā)部門 Google DeepMind 研究副總裁,參與 Gemini 大模型研發(fā)和早期追趕歷程。

另一位接近吳永輝的人士說,“他對技術(shù)了解很深,能迅速判斷什么方向可以出成果?!?過去一年,Seed 的文生圖、文生視頻模型在一些基準(zhǔn)測試榜單上排在全球前列,豆包手機(jī)助手模型成為行業(yè)關(guān)注焦點(diǎn)。

在競爭最激烈、最重要的基礎(chǔ)模型方向,Seed 迭代 4 版(算上即將發(fā)布的豆包 2.0),與此前模型能力有較大提升,持續(xù)追趕海外領(lǐng)先模型。“但還需要補(bǔ)課,填上過去幾年留下來的 ‘技術(shù)債’?!?一位 Seed 人士說。

追求 “一流研究團(tuán)隊(duì)” 這個(gè)長期目標(biāo)的同時(shí),吳永輝還要不斷和短期目標(biāo)做平衡。

調(diào)整:組建三個(gè)虛擬團(tuán)隊(duì),打通數(shù)據(jù)、代碼庫提高效率

2025 年 1 月,Seed 組建 “Seed Edge” 虛擬團(tuán)隊(duì),設(shè)置 3 年期限的考核機(jī)制,鼓勵(lì)骨干研究更基礎(chǔ)、更長期的 AGI 課題。我們了解到,吳永輝參與了該團(tuán)隊(duì)的組建。

隨后他又抽調(diào)研究人員組建 Focus 團(tuán)隊(duì),打破部門邊界和既有分工,負(fù)責(zé)基礎(chǔ)模型的攻堅(jiān),研發(fā)下一版模型需要提升的部分。剩下基礎(chǔ)模型的團(tuán)隊(duì)劃分成 Base,包括工程、數(shù)據(jù)、測評等,研發(fā)當(dāng)前一代基礎(chǔ)模型。

這年 3 月,時(shí)任 LLM 團(tuán)隊(duì)負(fù)責(zé)人喬木被舉報(bào)暫停工作后,LLM 下屬的 Pre-train(預(yù)訓(xùn)練)、Post-train(后訓(xùn)練) 和 Horizon 等直接向吳永輝匯報(bào)。

兩位 Seed 人士說,在吳永輝的規(guī)劃中,可以同時(shí)推進(jìn)三代模型研發(fā),人員、課題都可以相互輪換,同時(shí)盤活內(nèi)部的資源,“Edge 有了成果可以直接下放;Focus 發(fā)現(xiàn)長期課題可以轉(zhuǎn)入 Edge,有了成果可以用于改進(jìn)當(dāng)前一代模型?!?/p>

為了提高效率,吳永輝還推動內(nèi)部數(shù)據(jù)、代碼庫透明,對外保密。他在內(nèi)部說,這是 “改進(jìn)內(nèi)部反映的一些問題”。

在字節(jié)跳動,Seed 脫離各營收部門單獨(dú)設(shè)立,團(tuán)隊(duì)直接向集團(tuán)管理層匯報(bào),更容易擺脫部門政治。但在 Seed 中,總是多個(gè)團(tuán)隊(duì)研發(fā)方向接近,團(tuán)隊(duì)之間溝通相對困難。

兩位曾在 Seed 工作的研究員說,之前他們像是一群研究小組的集合,而不是整體的研究部門,比如小組 A 的研究者想看小組 B 的文檔,要先經(jīng)過文檔所有者、所有者的領(lǐng)導(dǎo)同意,“有時(shí)候部門負(fù)責(zé)人出面調(diào)解都看不了全部信息。”

更透明的信息共享提高了溝通效率,也帶來了一些麻煩。我們了解到,2025 年下半年,Seed 至少發(fā)生兩起實(shí)習(xí)生泄密事件。之后他們不再要求內(nèi)部文檔公開授權(quán)。

基礎(chǔ)語言模型研究方向之外,Seed 依舊保持原有的組織架構(gòu)。上一任 Seed 負(fù)責(zé)人朱文佳與吳永輝同時(shí)負(fù)責(zé) Seed 部門數(shù)月后,轉(zhuǎn)向吳永輝匯報(bào),負(fù)責(zé)大模型應(yīng)用。

多模態(tài)交互和世界模型團(tuán)隊(duì)由 2024 年從阿里加入字節(jié)的周暢負(fù)責(zé),代表成果是豆包手機(jī)助手模型。過去一年,隨著視覺多模態(tài)生成負(fù)責(zé)人楊建朝休假、視覺基礎(chǔ)模型研究負(fù)責(zé)人馮佳時(shí)離職等變動,周暢的管理范圍持續(xù)擴(kuò)大,新增文生圖 Seedream、文生視頻 Seedance 模型等。

Infra(基礎(chǔ)設(shè)施)團(tuán)隊(duì)由項(xiàng)亮負(fù)責(zé)。字節(jié)跳動的 AI Lab 帶著剩下的三個(gè)研究方向——AI for Science、Robotics、Reponsible AI 并入 Seed,負(fù)責(zé)人李航向吳永輝匯報(bào)。

過去一年,Seed 整體規(guī)模維持在 1500 人左右,擴(kuò)張速度比前兩年放緩,幾乎不再從外部招聘中高層技術(shù)管理者。他們更加重視招聘應(yīng)屆畢業(yè)生、提拔年輕人。我們了解到,一位 2024 年從清華大學(xué)畢業(yè)的博士生,現(xiàn)在同時(shí)向周暢和吳永輝匯報(bào)。





成果:邊開車邊修輪子,訓(xùn)出萬億參數(shù)豆包 2.0

即將發(fā)布的豆包 2.0 模型是吳永輝接管 Seed 一年最核心的產(chǎn)出。它是一款類似 Gemini 的多模態(tài)模型,10000 億參數(shù),是 Seed 成立以來訓(xùn)練的最大模型。

吳永輝到來后,多位 Seed 研究員明顯感受到開會的頻率提升,原本 3 個(gè)月開一次會的研究團(tuán)隊(duì)現(xiàn)在每月就要溝通一次,核心團(tuán)隊(duì)基本每兩周一次。有字節(jié)人士提到,在食堂吃飯時(shí),經(jīng)常能看到吳永輝端著餐盤坐到研究員對面,邊吃邊聊進(jìn)展。

每次研究團(tuán)隊(duì)匯報(bào)完畢后,吳永輝通常會提幾個(gè)簡短的問題——通常是 3 個(gè)?!八粫苯咏o出具體的解決方案,而是引導(dǎo)大家思考更本質(zhì)的問題?!?一位 Seed 研究員說。

多位 Seed 人士告訴我們,這款模型訓(xùn)練期間遇到基礎(chǔ)設(shè)施層面的挑戰(zhàn)。他們分析,過去兩年 Seed 持續(xù)追趕期間,相對忽視了基礎(chǔ)能力建設(shè),所以訓(xùn)練豆包 2.0 期間擴(kuò)大參數(shù)規(guī)模時(shí)不穩(wěn)定,一度難以推進(jìn)。

“就像蓋房子,如果地基不穩(wěn),往上加磚頭的確容易出問題。” 一位 Seed 研究員說。

OpenAI 的 RL Infra 負(fù)責(zé)人翁家翌在一檔播客節(jié)目中說,每個(gè)模型團(tuán)隊(duì)的 Infra 都有 bug,模型公司本質(zhì)上拼的是 Infra 修 bug 的速度,它決定了單位時(shí)間內(nèi)驗(yàn)證想法的數(shù)量,而想法只要提高人才密度就能解決。OpenAI 去年開始重構(gòu)使用三年的 Infra 體系,解決越積越多的 “技術(shù)債”。

過去一年,阿里、騰訊的大模型團(tuán)隊(duì)都提高了對 Infra 的重視程度。Qwen 模型團(tuán)隊(duì)去年中開始在內(nèi)部組建 Infra 團(tuán)隊(duì),這部分工作原來主要靠阿里云的人工智能平臺 PAI。騰訊去年底宣布成立 AI Infra 部及數(shù)據(jù)計(jì)算平臺部,由大模型負(fù)責(zé)人姚順雨直接負(fù)責(zé)。

而對于 Seed 團(tuán)隊(duì),想要重整 Infra 系統(tǒng)難度更大。我們了解到,Seed 的 Infra 團(tuán)隊(duì)有數(shù)百人,同時(shí)支撐 Seed 內(nèi)部數(shù)十款模型的研發(fā)和嘗試,高層認(rèn)為水平國內(nèi)第一?!跋胍卣枰度氪罅咳肆?、物力,還要承擔(dān)不小的信任成本?!?一位 Seed 人士說,只能 “邊開車邊修輪子”。

我們了解到,訓(xùn)練豆包 2.0 遇到問題后,最終多個(gè)團(tuán)隊(duì)配合,花了 3 個(gè)月時(shí)間,主要從模型架構(gòu)、訓(xùn)練數(shù)據(jù)等方面入手解決問題,確保模型趕在春節(jié)前上線。

難題:既要做一流研究組織,又要有短期產(chǎn)出

“我們致力于打造一種獨(dú)特的文化融合體:既有初創(chuàng)企業(yè)的專注與活力,又兼具學(xué)術(shù)界的天馬行空式思維。”Google DeepMind CEO 德米斯·哈薩比斯(Demis Hassabis)曾說。

多位 Seed 人士說這也是吳永輝的目標(biāo),“他想把 Seed 做成一流的研究品牌。”

字節(jié)跳動給他提供了環(huán)境。過去兩年,字節(jié)在 Seed 聚集了一批研究人才,就算沒有合適的位置,也傾向于 “先把人招進(jìn)來”。

字節(jié)給 Seed 部門設(shè)置更寬松的考核機(jī)制,大部分取消 OKR。2025 年中,字節(jié)發(fā)放獨(dú)立于公司期權(quán)之外的 “豆包虛擬股” 激勵(lì)員工,并多次提高薪酬。

他們也在 Seed 營造一種寬松的工作氛圍,實(shí)習(xí)生能直接與最高層交流。一位 TopSeed 實(shí)習(xí)生曾在社交媒體上分享,他在開發(fā)某個(gè)項(xiàng)目的近兩個(gè)月里,大部分時(shí)間睡在公司,經(jīng)常凌晨兩點(diǎn)帶著新想法興奮驚醒,寫兩小時(shí)代碼再睡,“感覺每一刻都在不斷的發(fā)現(xiàn)新現(xiàn)象”。

去年 3 月,吳永輝在部門全員會上說,Seed 做了很多不錯(cuò)的工作,但外界不太了解,鼓勵(lì)研究者以論文和博客的形式發(fā)表成果?!八€建議大家 ‘裝修’ 下個(gè)人主頁?!?一位曾在 Seed 的人說。根據(jù)我們初步統(tǒng)計(jì),吳永輝加入 Seed 之后的三個(gè)月,該團(tuán)隊(duì)發(fā)布的論文數(shù)量就超過 2024 年全年。

能夠?qū)ν饨绯浞终故狙芯砍晒?,進(jìn)一步激發(fā)了 Seed 研究者的自驅(qū)力?!昂Y選出來了一批非常勤奮專注,或者說熱衷于鉆研的年輕人?!?一位去年離開 Seed 的核心研究者說,他們多數(shù)人每天兩點(diǎn)一線,為了省事,吃飯只在公司食堂,“生活的主要樂趣就在于工作帶來的 feedback”。

我們了解到,Seed 會出現(xiàn)一種情況:幾個(gè)研究員決定自發(fā)研究一個(gè)方向,如果上級不同意、不分配資源,他們可以上升匯報(bào),得到認(rèn)可后,就可以從上到下推進(jìn)。

“他們從前是自己領(lǐng)域內(nèi)的 ‘小霸王’,帶著 ego 來到 Seed,每個(gè)人都想成就一番事業(yè)?!?上述人士預(yù)估,可能只有 20% 的資源是用在短期有用的課題上,“浪費(fèi)有可能是對的,字節(jié)不缺資源。”

但 Seed 并不是一個(gè)脫離競爭存在的研究組織,他們需要給字節(jié)跳動提供 “彈藥”,應(yīng)對騰訊、阿里等公司的競爭。團(tuán)隊(duì)資源不可避免會向短期有成果的團(tuán)隊(duì)傾斜。多位 Seed 人士說,去年下半年開始,有研究者做一些單點(diǎn)研究,“感覺不符合 Seed 的主流方向,就很少有人在意這份成果”。

我們了解到,從去年三季度開始,字節(jié)管理層對 Seed 團(tuán)隊(duì)發(fā)論文有了新要求,包括 “高質(zhì)量”“內(nèi)容與正迭代的核心技術(shù)無關(guān)” 等,之后每月發(fā)布的論文有所減少。

“永輝想要營造研究氛圍,但很難避免 DDL 導(dǎo)向。” 一位 Seed 研究員說,他們團(tuán)隊(duì)本來要花更多資源和時(shí)間,自研算法解決某個(gè)技術(shù)問題,但為了盡快上線,項(xiàng)目啟動后不久就被要求調(diào)整思路,在開源項(xiàng)目基礎(chǔ)上改進(jìn),“哪怕性能有損失”。

今年 1 月,字節(jié)跳動 CEO 梁汝波在全員會上說,字節(jié)今年關(guān)鍵詞是 “勇攀高峰”,短期內(nèi)高峰是 “豆包 /Dola(豆包海外版)助手應(yīng)用”,重點(diǎn)是 “AI 模型能力要做到行業(yè)前列,通過助手整合好已有業(yè)務(wù)”。一年前的全員會上,梁汝波說 AI 研究團(tuán)隊(duì)要 “探索智能上限”。

創(chuàng)新需要適當(dāng)?shù)幕叶群突靵y,而應(yīng)對競爭需要秩序和紀(jì)律。怎么平衡好這兩個(gè)目標(biāo),是吳永輝在 Seed 持續(xù)要解的管理難題。

題圖來源:《盜夢空間 Inception》

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
三場狂轟102分,37歲杜蘭特創(chuàng)火箭最老!終于熬到烏度卡被迫開竅

三場狂轟102分,37歲杜蘭特創(chuàng)火箭最老!終于熬到烏度卡被迫開竅

鍋?zhàn)踊@球
2026-03-03 13:33:22
太嚇人了!A股全線跳水!發(fā)生什么了?

太嚇人了!A股全線跳水!發(fā)生什么了?

龍行天下虎
2026-03-03 10:57:35
“一次就能癱瘓整個(gè)美國!”美專家曾要求中國立即停止使用該武器

“一次就能癱瘓整個(gè)美國!”美專家曾要求中國立即停止使用該武器

阿器談史
2026-01-08 20:36:37
中核集團(tuán)的顧軍被查了。最讓人脊背發(fā)涼的是他的第一個(gè)身份

中核集團(tuán)的顧軍被查了。最讓人脊背發(fā)涼的是他的第一個(gè)身份

南權(quán)先生
2026-02-02 16:05:36
國乒11人出征重慶!29歲梁靖崑帶傷復(fù)出,4位新星落選另有隱情?

國乒11人出征重慶!29歲梁靖崑帶傷復(fù)出,4位新星落選另有隱情?

八斗小先生
2026-03-03 11:48:40
打破魔咒!三分命中率48.3%!湖人2換1交易贏麻了

打破魔咒!三分命中率48.3%!湖人2換1交易贏麻了

籃球教學(xué)論壇
2026-03-03 13:22:47
烏克蘭再攻入俄羅斯領(lǐng)土!摧毀布良斯克指揮觀察所

烏克蘭再攻入俄羅斯領(lǐng)土!摧毀布良斯克指揮觀察所

項(xiàng)鵬飛
2026-02-27 20:35:45
涉美伊局勢,復(fù)旦教授、人大教授雙雙發(fā)聲,“外網(wǎng)和國內(nèi)的一些自媒體造謠,這些人臉都不要了”

涉美伊局勢,復(fù)旦教授、人大教授雙雙發(fā)聲,“外網(wǎng)和國內(nèi)的一些自媒體造謠,這些人臉都不要了”

都市快報(bào)橙柿互動
2026-03-02 15:33:41
伊朗稱已準(zhǔn)備好長期戰(zhàn)爭

伊朗稱已準(zhǔn)備好長期戰(zhàn)爭

界面新聞
2026-03-02 20:42:23
來了!跟腱撕裂,10個(gè)月歸來,塔圖姆即將復(fù)出,東部要變天了

來了!跟腱撕裂,10個(gè)月歸來,塔圖姆即將復(fù)出,東部要變天了

球童無忌
2026-03-02 23:17:33
巴鐵宣戰(zhàn)首日274人陣亡,中械軍團(tuán)重創(chuàng)印盟軍,莫迪無奈

巴鐵宣戰(zhàn)首日274人陣亡,中械軍團(tuán)重創(chuàng)印盟軍,莫迪無奈

深藍(lán)獨(dú)奏
2026-03-03 04:51:06
特朗普可能會成為美國歷史上最倒霉的總統(tǒng),在特殊的時(shí)刻當(dāng)上總統(tǒng)

特朗普可能會成為美國歷史上最倒霉的總統(tǒng),在特殊的時(shí)刻當(dāng)上總統(tǒng)

百態(tài)人間
2026-02-09 15:39:25
五角大樓怒了!F-35首席教官去中國打工,難怪我軍總能逮個(gè)正著

五角大樓怒了!F-35首席教官去中國打工,難怪我軍總能逮個(gè)正著

書紀(jì)文譚
2026-02-28 16:48:05
微星MPG X870I EDGE TI EVO WIFI,讓ITX主機(jī)的擴(kuò)展不再成為軟肋

微星MPG X870I EDGE TI EVO WIFI,讓ITX主機(jī)的擴(kuò)展不再成為軟肋

世界盡頭的bear
2026-03-02 10:32:39
這個(gè)死磕王楚欽的裁判,決賽就沒讓她上場

這個(gè)死磕王楚欽的裁判,決賽就沒讓她上場

楊仔述
2026-03-02 11:13:02
剛剛,韓國股市暴跌觸發(fā)熔斷!鈣鈦礦電池新突破,機(jī)構(gòu)扎堆盯上這幾只概念股

剛剛,韓國股市暴跌觸發(fā)熔斷!鈣鈦礦電池新突破,機(jī)構(gòu)扎堆盯上這幾只概念股

數(shù)據(jù)寶
2026-03-03 12:46:28
鄒市明一家國外度假!冉瑩穎膘肥體壯不好惹,軒軒一頭白毛好土氣

鄒市明一家國外度假!冉瑩穎膘肥體壯不好惹,軒軒一頭白毛好土氣

小徐講八卦
2026-03-01 05:51:11
突發(fā)!李雨桐實(shí)名開撕薛之謙,劇情反轉(zhuǎn)比翻書還快,結(jié)局全網(wǎng)傻眼

突發(fā)!李雨桐實(shí)名開撕薛之謙,劇情反轉(zhuǎn)比翻書還快,結(jié)局全網(wǎng)傻眼

阿廢冷眼觀察所
2026-03-03 07:19:00
慘遭15分大逆轉(zhuǎn)!女籃霸主加時(shí)3分惜?。簵盍S空砍14分3板4助!

慘遭15分大逆轉(zhuǎn)!女籃霸主加時(shí)3分惜?。簵盍S空砍14分3板4助!

籃球快餐車
2026-03-03 01:57:58
曝林葳將回CBA但會被同曦交易 鍍金后留國內(nèi)還是繼續(xù)旅外追夢?

曝林葳將回CBA但會被同曦交易 鍍金后留國內(nèi)還是繼續(xù)旅外追夢?

大嘴爵爺侃球
2026-03-03 10:56:42
2026-03-03 13:59:00
晚點(diǎn)LatePost
晚點(diǎn)LatePost
晚一點(diǎn),好一點(diǎn)。商業(yè)的真相總是在晚點(diǎn)。《晚點(diǎn)LatePost》官方賬號
3088文章數(shù) 21893關(guān)注度
往期回顧 全部

科技要聞

手機(jī)AI在MWC上卷出了新高度

頭條要聞

伊朗稱摧毀美空軍基地大樓:20架無人機(jī)和3枚導(dǎo)彈命中

頭條要聞

伊朗稱摧毀美空軍基地大樓:20架無人機(jī)和3枚導(dǎo)彈命中

體育要聞

35輪后積分-7,他們遭遇史上最早的降級

娛樂要聞

謝娜霸氣護(hù)夫:喊話薛之謙給張杰道歉

財(cái)經(jīng)要聞

霍爾木茲海峽近乎停擺 布油直逼80美元

汽車要聞

長安汽車2月銷量151922輛 環(huán)比逆勢增長12.8%

態(tài)度原創(chuàng)

健康
家居
親子
旅游
公開課

轉(zhuǎn)頭就暈的耳石癥,能開車上班嗎?

家居要聞

萬物互聯(lián) 享科技福祉

親子要聞

自閉癥兒童空間方位分不清?別急!這樣教so easy

旅游要聞

從“觀燈”到“玩燈” 達(dá)州“燈會+”激活夜經(jīng)濟(jì)新動能

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進(jìn)入關(guān)懷版