国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

馬斯克召集xAI全員大會,宣布新版組織架構(gòu)以及太空AI戰(zhàn)略,完整文字稿來了

0
分享至

當(dāng)?shù)貢r間2月10日,馬斯克主持召開了一場xAI全員大會。這是xAI與SpaceX合并后,新版團隊首度亮相。

這也是在合并后,xAI早期核心成員,尤其是幾位華人創(chuàng)始成員陸續(xù)離職后,xAI對外的一次改版說明。馬斯克解釋了團隊調(diào)整的原因,接下來新的組織架構(gòu),然后各個團隊的負責(zé)人輪番上臺,展示過往兩年的成績,以及今后的打算。

也可以把整個發(fā)布會看作是一場開源的AI發(fā)展方向和路徑的路演。當(dāng)然,從中也可以更多了解馬斯克讓xAI和SpaceX合并的動因,這個即將可能成為人類歷史上最大獨角獸的公司,他們究竟想做什么?

以下,是這場全員大會視頻以及文字記錄。全文10000字左右,閱讀大約需要30分鐘。

馬斯克:歡迎來到xAI全員大會。我們?yōu)榇蠹覝?zhǔn)備了一場非常精彩的演講。首先,我們將回顧xAI團隊在僅僅兩年半的時間里取得的驚人進展。這真的非常了不起,我們在追求「理解宇宙」這一目標(biāo)的過程中取得了巨大的成就。

回顧一下我們自成立以來的成就,重要的是要記住,xAI基本上只有兩歲半——還是個蹣跚學(xué)步的孩子。盡管如此,我們在很短的時間內(nèi)取得了令人難以置信的成就。我們的競爭對手有5年、10年,有些甚至有20年的歷史。他們的團隊規(guī)模更大,起步時擁有更多的資源,但盡管如此,我們在短短幾年內(nèi)就在許多領(lǐng)域取得了第一。

我們在語音、圖像和視頻生成方面已經(jīng)排名第一。我認為,根據(jù)我最近看到的數(shù)字,我們現(xiàn)在生成的圖像和視頻實際上比所有競爭對手加起來還要多。我們在預(yù)測方面處于領(lǐng)先地位——這是智能的關(guān)鍵指標(biāo)之一。Grok 4.2預(yù)測模型在預(yù)測方面擊敗了所有其他AI。我們還登頂了許多排行榜。我們現(xiàn)在有了一個很棒的應(yīng)用,集成了Grok核心功能。我們對X應(yīng)用進行了徹底改進,還推出了Grokpedia,它正在遠超維基百科的道路上前進,最終將在全面性、準(zhǔn)確性和信息量上超越維基百科幾個數(shù)量級,還將包含維基百科上沒有的視頻和圖像數(shù)據(jù)。它的最終目標(biāo)是成為《銀河百科全書》——所有知識的精華。

我們是第一個實現(xiàn)10萬塊H100 GPU訓(xùn)練集群的公司,現(xiàn)在我們即將實現(xiàn)首個相當(dāng)于100萬塊H100 GPU的訓(xùn)練規(guī)模。所以在很短的時間內(nèi)完成了驚人的工作量。

對于任何科技公司的競爭力來說,重要的不是某個時間點的位置,而是你的速度和加速度。如果你在任何給定的技術(shù)領(lǐng)域移動得比任何人都快,你就會成為領(lǐng)導(dǎo)者。而xAI的移動速度比任何其他公司都快,沒有人接近我們。

隨著公司的發(fā)展,公司重組是很自然的事情。當(dāng)你剛創(chuàng)業(yè)時,可能只有幾十個人,他們彼此之間自由交流。當(dāng)你發(fā)展到幾百人時,你就需要增加更多的結(jié)構(gòu)。就像一個生物體從單個細胞成長為一團細胞,然后器官分化、長出四肢、長出尾巴(希望尾巴會消失),然后變成嬰兒——你會經(jīng)歷這些階段。

因為我們已經(jīng)達到了一定的規(guī)模,我們正在重組公司以在這個規(guī)模上更有效率地運作。自然,當(dāng)這種情況發(fā)生時,有些人更適合公司的早期階段,而不太適合后期階段。對于那些已經(jīng)離開的人,我想說:感謝你們善意的貢獻,感謝你們帶我們走到這一步,祝你們未來一切順利。

現(xiàn)在談?wù)劰镜男陆Y(jié)構(gòu)。公司分為四個主要應(yīng)用領(lǐng)域:

1.Grok主模型和語音(Grok Main & Voice)——這是主要的Grok模型

2. 編程專用模型(Coding)

3. 圖像和視頻模型(Imagine)

4.MacroHard——旨在實現(xiàn)整個公司的完全數(shù)字化模擬

然后我們還有基礎(chǔ)設(shè)施層。我想邀請團隊成員上來談?wù)劽總€領(lǐng)域。

團隊成員1Grok主模型和語音):謝謝埃隆。Grok主模型和語音將合并為一個團隊。說到語音,2024年9月的時候,OpenAI有一個產(chǎn)品叫高級語音模式,而我們什么都沒有——沒有模型,當(dāng)然也沒有產(chǎn)品。我們起步晚得多。在短短幾個月內(nèi),六個月的時間里,我們從零開始內(nèi)部開發(fā)了模型,沒有一群懂音頻的人,卻做出了超越OpenAI的產(chǎn)品。

再快進六個月,我們有Grok在超過200萬輛特斯拉上運行,我們有Grok語音代理API,你可以用它做各種驚人的事情。在一年的時間里,我們從一無所有到成為領(lǐng)導(dǎo)者。這種事只有在xAI這樣的地方才可能發(fā)生。我們有小團隊、專注的使命、大量的算力,我們真的想繼續(xù)推動。

聊天模型的故事也一樣。我們一直處于推理的前沿,從Grok 1.5、Grok 2到Grok 3。我們真的想邁向一個世界,不再只是問答。我們想構(gòu)建一個萬能應(yīng)用。用戶能夠在這個平臺,真正得到想要的任何東西——問法律問題、制作幻燈片、解決難題等等。

我認為在產(chǎn)品方面,我們將在很短的時間內(nèi)看到巨大的轉(zhuǎn)變。我們將看到所有知識工作者能夠完成的工作量在接下來的幾個月里增加十倍。我們正在構(gòu)建的模型非常驚人,我們還有很多即將推出的內(nèi)容,非常興奮能與大家分享。

在產(chǎn)品方面,目標(biāo)是構(gòu)建一個門戶,讓用戶能夠完成所有工作。我們?nèi)绾畏糯竺總€人的能力,讓他們能夠完成比單獨一人多得多的成就?我們正在構(gòu)建這個,它將是一個非常易于使用、無縫運行的體驗。

話雖如此,我們正在招聘。我們正在尋找聰明、有智慧的人。這不是一個容易工作的地方,伙計們,這是一個苦差事。但我們有星際野心,所以這不會容易。

我不得不說,來到xAI是我一生難得的機會,能夠與真正聰明、真正熱情的人一起工作。這里的氛圍很棒,這確實是一個環(huán)境:如果你是聰明人,你想把事情做成,你就能把事情做成。沒有組織上的阻礙,不需要寫文檔之類的東西。至少對我來說,你可以在這里做事,這太棒了。我邀請更多人來到這里,做出awesome的事情。

馬斯克:對于Grok主模型這個基礎(chǔ)模型,目標(biāo)是讓它在廣泛的領(lǐng)域真正有用。無論你是做工程、法律還是醫(yī)學(xué),任何事情,它都對你的工作有用。這對理解宇宙至關(guān)重要,并盡可能讓事情有用。當(dāng)Grok給你一個可以依賴的答案時,那絕對是正確的。

團隊成員2Macro,編程團隊):嘿,大家好。世界在編程方面最近變化很大。以前人們總是試圖說服我使用編程模型,我不太信任它,不太相信。但最近,模型實際上產(chǎn)生了相當(dāng)不錯的代碼質(zhì)量。我的意思是,你仍然需要審查和給出反饋,但很容易看出它們?nèi)绾文軌虼蟠蠹铀倌愕墓ぷ鳌?/p>

這不僅僅是關(guān)于編程。它們比以前更好地理解你的直覺。這是一個巨大的變化。以前,你需要像牽著蹣跚學(xué)步的孩子一樣手把手地教它做出改變。

它們不僅寫你的代碼,還能調(diào)試你的代碼?,F(xiàn)在我們連續(xù)運行數(shù)小時的Grok代碼,以確保對訓(xùn)練系統(tǒng)的更復(fù)雜更改實際上在生產(chǎn)環(huán)境中有效。

很容易看出,這不僅僅是加速我們自己寫代碼,讓我們效率提高十倍,而是我們真的在走上遞歸自我改進的道路。當(dāng)前一代的Grok代碼正在訓(xùn)練下一代Grok代碼,我們看到這條道路,這條指數(shù)級起飛的道路將繼續(xù)下去。

所以我們正在加倍投入編程,將編程作為公司的最高優(yōu)先級之一。如果你在外面,對編程感到興奮,你是AI研究員,要么非常擅長訓(xùn)練建模,要么是真正優(yōu)秀的底層軟件工程師,對系統(tǒng)設(shè)計感興趣,這就是你要工作的地方。我們有相當(dāng)于100萬塊H100的算力來訓(xùn)練世界上最好的編程模型。所以請加入我們。

團隊成員3Gordon,與Macro一起負責(zé)編程):我是Gordon,我會和Macro一起負責(zé)編程。隨著時間的推移,我們越來越明顯地看到,至少在編程方面,我們正在走向奇點。所以我們決定讓公司最好的工程師Macro來領(lǐng)導(dǎo)編程工作,我們將為每個人構(gòu)建最好的編程模型,賦能每個人去構(gòu)建。

對我來說,主要的限制因素可能是算力和能源,能夠運行最好的模型來支持每個人、賦能每個人。有了SpaceX,我們現(xiàn)在是一個團隊,我們將在算力上獲勝,我們將在太空算力上獲勝。

對于每個工程師來說,如果你在寫內(nèi)核,如果你在寫編譯器,只要想想這是否還值得。也許你應(yīng)該加入我們,參與編程工作,讓自己自動化一點,讓自己加速一點。

我認為這是令人驚嘆的一年,真的是活著的好時代。我已經(jīng)能感受到AI了,至少在編程方面能感受到AI。

馬斯克:我認為實際上事情可能會在今年年底之前發(fā)展到你甚至不需要編程的地步。AI直接創(chuàng)建二進制文件,AI可以創(chuàng)建比任何編譯器都高效得多的二進制文件。只是一個針對這個特定結(jié)果的優(yōu)化二進制文件,你實際上繞過了傳統(tǒng)編程。那個中間步驟實際上不需要了,可能在今年年底之前。

我們預(yù)計Grok代碼將在兩到三個月內(nèi)達到最先進的水平。所以事情發(fā)生得很快。

團隊成員3Gordon):是的,你還做Imagine。你知道,在 postage 之后你會做什么?你可能會做數(shù)字生活。這就是我們這里也在做的。我們有Imagine團隊,大約六個月前從零開始,我們有幾個人,我們決定要做圖像生成,要做視頻生成。看看我們今天取得了什么成就。兩周前,我們發(fā)布了Imagine V1,我們實際上在多個排行榜上登頂,人們真的喜歡我們的產(chǎn)品,喜歡我們的模型。這個月和下個月我們還有更多發(fā)布。

對我來說,我們實際上可能在Meta之前構(gòu)建元宇宙的可能性非常高。

團隊成員4(產(chǎn)品指標(biāo)):我被要求談?wù)勎覀儺a(chǎn)品的指標(biāo)。就像Gordon說的,我們開始做Imagine才六個月。六個月前,我們內(nèi)部根本沒有擴散模型的代碼?;旧犀F(xiàn)在,我們在我們擁有的每個產(chǎn)品表面上都推出了Imagine,包括無縫集成到X中。所以現(xiàn)在你可以打開X應(yīng)用,長按任何圖像,你可以編輯圖像,你可以從圖像制作視頻。

我們最近還舉辦了一個比賽,有一些非常有趣的作品,我相信你們很多人都看到了。所以Imagine增長得非常非常快,這是因為我們迭代的速度?;旧衔覀兠刻熳龆啻萎a(chǎn)品更新,每隔一周做模型更新。這有效地導(dǎo)致現(xiàn)在用戶每天使用Imagine生成接近5000萬個視頻。重申一下埃隆之前說的,據(jù)我們所知,這比所有其他提供商加起來還要多。與六個月前相比,這是一個驚人的位置。

在過去30天里,我們還生成了60億張圖像。你知道,谷歌最近發(fā)布說,使用Imagen在30天內(nèi)生成了10億張圖像。所以我們是他們的六倍。

真的,目標(biāo)不是我們想贏,而是我們想長期贏,保持持續(xù)的卓越。所以Imagine的目標(biāo)是將你能想象的任何東西變成現(xiàn)實。這就是我們要快速實現(xiàn)的目標(biāo)。

團隊成員5Hotin,視頻生成):嘿,我是Hotin。隨著我們不斷擴展模型能力,構(gòu)建與現(xiàn)實無法區(qū)分的視覺世界,我們還在構(gòu)建系統(tǒng),解鎖比我們現(xiàn)有更多的可能性。它們將能夠生成比我們現(xiàn)有更長的視頻,有故事,有你的Imagine的靈魂。到今年年底,我們可能會有允許你一次性生成10分鐘或20分鐘視頻的模型,無需任何干預(yù)。你只需要給出你的想象,我們的模型、我們的代理會為你完成。

而且,我們生成的這些視頻,我們還將允許渲染那些視頻。我們已經(jīng)是生成視頻最快的,我們將繼續(xù)推動極端,實時渲染這些視頻。你將能夠想象、構(gòu)建并與自己的世界互動,世界會實時回應(yīng)你。這是一個令人興奮的未來,我們將與自己一起構(gòu)建。

馬斯克:絕對。我的印象是,大部分AI算力將用于實時視頻理解和實時視頻生成。我們預(yù)計將成為這方面的領(lǐng)導(dǎo)者。值得強調(diào)的是,六個月前,我們在視頻和圖像生成及編輯方面基本上什么都沒有,非常薄弱。在六個月內(nèi),我們達到了第一名的位置,實際上生成的視頻和圖像比其他人加起來還要多。

我們將對編程做同樣的事情,我們將對Macro Hard做同樣的事情。我認為人們會對即將推出的Grok 4.2模型印象深刻。這是一個顯著的改進,而這只是我們的新模型的小版本。我們將有中等和大型版本,它們更加智能。

團隊成員6TobyMacroHard):大家好,我是Toby,我在Macro Hard工作——所有產(chǎn)品名稱中最嚴(yán)肅的一個。可以說,給人類計算機是個好主意。所以我們對AI做同樣的事情。有點像《盜夢空間》,我們給計算機計算機。

MacroHard正在構(gòu)建一個完全有能力、實時、非常重要的人類模擬器。所以它能夠在計算機上做人類能做的任何事情,包括在工程和醫(yī)學(xué)中使用高級工具。應(yīng)該有完全由AI設(shè)計的火箭發(fā)動機。從某種意義上說,這是AI明顯比人類差的最后幾個剩余領(lǐng)域之一,這就是為什么我認為這是真正創(chuàng)新和改變該領(lǐng)域最令人興奮的領(lǐng)域之一。

團隊成員7John):大家好,我叫John。是的,我們正在構(gòu)建這些強大的推理模型,它們現(xiàn)在將控制我們的命令行界面。我們每天都在積極使用這些模型,它們對整個團隊來說是巨大的生產(chǎn)力提升。我知道語音團隊在這方面做得很棒。

這就是我們需要算力的原因。我們需要大規(guī)模算力來運行這些模型,以提高我們自己的生產(chǎn)力。但你知道,世界上80%到95%的軟件都有圖形界面。所以那是很棒的表示。為了真正讓人們的生活更輕松,我們需要開發(fā)能夠在Google上解決日常任務(wù)的模型。

所以MacroHard,我們將模擬一個輸出是數(shù)字的公司。這是代理的明顯下一步。MacroHard將實現(xiàn)跨桌面的真正端到端編排,并將帶來巨大的經(jīng)濟繁榮。

是的,我們正在進入一個需要解決最困難的技術(shù)問題的時代。但為了解決這個問題,我們需要雇傭最好的人。所以想想你合作過的最聰明的人,推薦他們來這里工作。如果你想不起來任何人,翻翻你的通訊錄,看看你的LinkedIn。你會驚訝于你的實際網(wǎng)絡(luò)有多大。他們只需要三個特質(zhì):顯然,我們想要優(yōu)化的是他們聰明嗎?能解決難題嗎?第二個特質(zhì)是,他們有動力嗎?有野心嗎?想贏嗎?第三個是,他們是好人嗎?你真的想和他們一起工作嗎?

謝謝。

馬斯克:是的,MacroHard項目隨著時間的推移實際上可能是我們最重要的項目。因為我們談?wù)摰氖钦麄€人類公司的模擬。當(dāng)你看看世界上最有價值的公司時,它們的輸出是數(shù)字的。所以它們實際上不制造硬件。所以應(yīng)該有可能完全模擬任何輸出是數(shù)字的公司。這將是一個我們幾乎無法想象的繁榮時代。

這是一件大事,這就是為什么"MacroHard"這個詞被畫在訓(xùn)練集群的屋頂上,因為這就是它要構(gòu)建的東西。這挺有趣的,哈哈,本來是個玩笑。

團隊成員8(基礎(chǔ)設(shè)施和API):又是我。你可能很久以前在Microsoft和計算機使用方面記得我,但實際上我也從事核心產(chǎn)品基礎(chǔ)設(shè)施和API工作。事實上,這是我在xAI大部分時間所做的工作。所以每當(dāng)你使用我們的任何產(chǎn)品,如Grok.com API認證,你去status.x.ai,這都是由核心產(chǎn)品信息團隊完成的,他們中很大一部分實際上坐在倫敦,我們與那里的Jaime合作。

所以我們在每天下午4點的高峰時段保持系統(tǒng)運行,當(dāng)系統(tǒng)宕機時我們在晚上被呼叫。也感謝在帕洛阿爾托被呼叫的任何人。這是真正重要的工作——可靠性、安全性、核心產(chǎn)品基礎(chǔ)設(shè)施。所以如果你真的對解決困難的分布式問題、處理混亂的數(shù)據(jù)感興趣,這就是你要加入的團隊。

團隊成員9Diego,評估和數(shù)據(jù)):嘿,大家好,我叫Diego。我認為明年這些模型的主要瓶頸之一將是非常高質(zhì)量的評估和訓(xùn)練數(shù)據(jù)。我們解決這個問題的方法之一是將世界上這些各自領(lǐng)域的頂尖專家?guī)У竭@里,讓他們進行評估。我們?yōu)獒t(yī)學(xué)、金融、法律等領(lǐng)域這樣做。我們有配音演員,有視頻編輯,他們每天都在為讓Grok變得更好做出貢獻。

是的,我們將在未來幾個月繼續(xù)致力于非常高質(zhì)量的評估。我們在金融和法律的有用任務(wù)前沿有一些令人興奮的東西。你知道,我們正在嘗試構(gòu)建代表有用工作的評估和訓(xùn)練數(shù)據(jù),而不一定是智能的代理,這是很多開源評估今天所做的。

馬斯克:是的,我想補充一下,我們正在從使用這些常見的互聯(lián)網(wǎng)評估轉(zhuǎn)向,我認為這些實際上不是有用性的真正指標(biāo),轉(zhuǎn)向在每個領(lǐng)域都有專家導(dǎo)師。所以工程、醫(yī)學(xué)、法律等每個領(lǐng)域,實際的評估是,該領(lǐng)域的專家,或我們的一組人類專家,是否同意Grok非常有用,結(jié)果是否正確。這是唯一真正重要的評估。

團隊成員9Diego):完全正確。你會在Grok 4.2中看到這一點,但我們因此做了一些改進,因為這種類型的數(shù)據(jù)在求真和最小化政治偏見方面,回應(yīng)更加連貫。所以是的,這很令人興奮。

我們也在研究Grokpedia。Grokpedia的目標(biāo)是創(chuàng)建所有人類知識的精華。我有點喜歡把這看作是現(xiàn)代版的亞歷山大圖書館。在構(gòu)建《銀河百科全書》的追求中——它有一天會被這樣稱呼——我們從基本上什么都沒有發(fā)展到大約600萬篇文章。作為參考,維基百科大約有700萬篇英文文章。是的,我們正在改進幻覺問題,我們的目標(biāo)基本上是Grok 5不需要搜索數(shù)據(jù)中心之外的內(nèi)容。

團隊成員10ML推理團隊):大家好。所以在ML推理團隊,我們正在為公司構(gòu)建訓(xùn)練推理和工具軟件。舉個例子,當(dāng)我們訓(xùn)練Grok 3時,我們?yōu)榇藰?gòu)建了預(yù)訓(xùn)練框架。這些是我認為作為軟件工程師可以構(gòu)建的最酷的系統(tǒng)之一。

就像我們有10萬塊H100,它們剛剛交付,我們以為我們有軟件,但在3萬臺規(guī)模時,我們意識到軟件實際上不太工作。這幾乎需要對軟件進行重大重寫,因為數(shù)據(jù)中心發(fā)生了很多事情,你無法真正預(yù)料到:交換機在抖動,鏈路在抖動,交換機在宕機,GPU在燒毀,你有互斥鎖問題。

這是一個你想要10萬塊H100同步運行的系統(tǒng)。一個訓(xùn)練步驟大約是五秒鐘,你要同步運行五秒鐘。但在這五秒鐘內(nèi),任何事情都可能發(fā)生。所以你需要編寫一個系統(tǒng),盡管環(huán)境中可能發(fā)生所有這些事情,它仍能取得進展。我們成功地做到了這一點,這是我一生中最酷的時刻之一,系統(tǒng)實際上在運行,而且運行的時候,我兒子出生了,所以額外的興奮。

但這些問題你在其他任何地方都找不到。沒有人有這種算力,也沒有人有這種人才密度。當(dāng)時,給你個視角,我們在預(yù)訓(xùn)練方面的整個團隊大概有15人,其中可能只有7人在實際訓(xùn)練系統(tǒng)上工作。我們在團隊中仍然保持這種人才密度。所以如果你對解決這些問題感興趣,你不想只是成為更大組織的一部分,成為一千個做這件事的人之一,那么這就是你要來的地方。我們?nèi)匀皇且粋€非常小的團隊。

團隊成員11Lian MinRL和推理團隊):大家好,我是Lian Min。在我們的團隊,我們在地球上大規(guī)模運行強化學(xué)習(xí)訓(xùn)練作業(yè)和生產(chǎn)推理,可能很快也會在太空。我們已經(jīng)設(shè)計了很多東西,使其更具彈性和可擴展性。

我們正在構(gòu)建一個系統(tǒng),從10萬塊芯片擴展到數(shù)百萬塊芯片,我們優(yōu)化堆棧的每個方面,如并行性、預(yù)填充解碼,并使其對每個已知和未知的硬件故障都具有彈性。所以如果你是系統(tǒng)黑客,癡迷于極端性能和可靠性,這里你會發(fā)現(xiàn)最有趣的問題可以研究。

我認為實際上對所有事情來說,首先看到問題,然后你會開發(fā)出以前沒有人能開發(fā)的解決方案,這非常重要。

團隊成員12Ashley,工具團隊):大家好,我是Ashley,來自工具團隊。每個軟件都需要有一個很棒的界面才能有用。所以作為工具團隊,我們負責(zé)構(gòu)建平臺、框架和基礎(chǔ)設(shè)施,這是人類以及代理能夠使用我們產(chǎn)品所必需的。

我們從構(gòu)建人類數(shù)據(jù)平臺開始,這是我們收集所有人類數(shù)據(jù)的地方,最終擴展到構(gòu)建我們的內(nèi)部工程平臺,通過它我們基本上運行部署、運行評估,或查看存在什么訓(xùn)練結(jié)果。所以如果你真的關(guān)心構(gòu)建一個好的界面,或提供一個真正有用的框架給研究人員、代理以及我們的導(dǎo)師,你絕對應(yīng)該加入我們的團隊。

團隊成員13YulongJAX團隊):大家好,我是JAX團隊的Yulong。現(xiàn)在xAI的JAX是一個非常小的團隊,有幾名工程師在JAX GPU上工作,以優(yōu)化我們超大規(guī)模的GPU訓(xùn)練。

你可以想象,大規(guī)模訓(xùn)練可能非常復(fù)雜,即使你運行"Hello World"大規(guī)模也可能很復(fù)雜。所以我們實際上負責(zé)支持整個公司,從預(yù)訓(xùn)練基礎(chǔ)模型、強化學(xué)習(xí)到多模態(tài),從1萬臺、10萬臺擴展到可能100萬塊H100等效GPU規(guī)模。

為了實現(xiàn)很多實際優(yōu)化,我們必須定制整個JAX堆棧,從編譯器到運行時。會有很多有趣的問題,如果你真的想癡迷于大規(guī)模優(yōu)化整個堆棧,我們可能是最好的去處,因為我們真的有非常大型的GPU集群,有很多有趣的問題可以研究。

團隊成員14Prangel,內(nèi)核團隊):嘿,我是Prangel,來自內(nèi)核團隊?;旧希瑑?nèi)核團隊坐在我們訓(xùn)練和 serving 堆棧的最底層。我們的代碼在我們擁有的百萬個并發(fā)GPU內(nèi)部運行。如果你看GPU內(nèi)部,有數(shù)十萬個線程,這些線程傾向于相互通信,以相乘矩陣、計算注意力分?jǐn)?shù),其中一些甚至與我們擁有的百萬個其他GPU通信。這就是我們的底層系統(tǒng)。

我們喜歡優(yōu)化這其中的每一個微秒。我們深切關(guān)注從這些GPU中榨取最后一滴性能。所以如果你喜歡這種底層系統(tǒng)問題算法,請加入我們。

團隊成員15HeinerHannah,網(wǎng)絡(luò)基礎(chǔ)設(shè)施):大家好,我是Heiner。大家好,我是Hannah,來自計算機網(wǎng)絡(luò)基礎(chǔ)設(shè)施團隊。我們主要駐扎在柏林,但今天我們在這里,在孟菲斯的超級計算機。所以這里的數(shù)據(jù)中心,孟菲斯是地球上最大的 tribute 級之一,而且還在增長。

我們的工作是讓所有這些為你運行,訓(xùn)練下一個Grok模型并為AI用戶服務(wù)。所以,要讓很多因素很好地結(jié)合在一起,主要是軟件和硬件。所以有所有這些GPU、混合交換機、數(shù)十萬個操作系統(tǒng)作為一個大型超級計算機運行。我們需要真正理解節(jié)點、真正理解它們?nèi)绾沃圃臁⒄嬲羁汤斫庥嬎銠C如何工作的人。

團隊成員16Dan):所以我們今天在這里有30萬塊GB300平臺GPU,還在增長,還在建設(shè)。每個數(shù)據(jù)大廳847英里光纖,12個數(shù)據(jù)大廳。你想成為世界上最大的超級計算機的一部分嗎?來加入我們。

團隊成員17Zach):好的,所以不到一年時間我們能夠完成的事情相當(dāng)了不起。一旦我們完全完成,我們將有超過1吉瓦的電力在線運行。我們將擁有世界上最大的特斯拉Megapack系統(tǒng),在澳大利亞和南澳大利亞或夏威夷。Zach將快速談?wù)剬嶋H建設(shè)數(shù)據(jù)中心。

在我身后,你可以看到數(shù)據(jù)大廳。我們這里MacroHard所做的最令人難以置信的事情之一是我們做得有多快。就像他們之前說的,每個數(shù)據(jù)大廳超過850英里光纖,超過2.7萬塊GPU,超過20萬個連接。所以你們在我身后看到的所有這一切都是在不到六周的時間內(nèi)搭建起來的。我們一遍又一遍地這樣做。我們大規(guī)模并行化它們。這幾乎是你能想象的最復(fù)雜、最一致的工程設(shè)計建設(shè)項目。所以來加入我們。

團隊成員18另一件非常了不起的事情是,在這個團隊內(nèi)部,從架構(gòu)、機械、電氣、結(jié)構(gòu),所有學(xué)科,一切都是完全垂直整合的。我們在設(shè)計所有這些時也非常關(guān)心效率。所以這不僅僅是讓最多的算力最快上線,還要實現(xiàn)行業(yè)最高的PUE,使用盡可能多的電力平滑技術(shù),并成為孟菲斯社區(qū)真正好的合作伙伴,使用我們擁有的特斯拉Megapack和朋友們。你可以在XAI孟菲斯實驗室查看它們。

馬斯克:好的,謝謝。這是來自孟菲斯前線的現(xiàn)場報道。所以,任何AI公司成功的根本是計算優(yōu)勢。我們一次又一次地證明,xAI實際上可以比任何人都更快地部署更多的AI算力。實際上,正如英偉達CEO黃仁勛在許多采訪中所說,沒有人比xAI更快地將AI算力上線。所以恭喜大家。

是的,這就是它的樣子。所以這是第一階段,33萬塊Grace Blackwell,建筑上寫著MacroHard。這不是圖像編輯,它實際上就在建筑的屋頂上。然后MacroHard將是你們能看到的建筑,上面有帶火箭的Macro Harder,那將是另外2萬塊GB300。所有這一切都將訓(xùn)練你們體驗的模型。

所以顯然,擁有大規(guī)模訓(xùn)練算力是獲得最好模型的根本。是的,這讓我想起那個表情包,你看到一個人在挖土,有七個人在看。xAI和其他大公司的一個很大區(qū)別是,我們實際上就是那個挖土的人。

團隊成員19NikitaX應(yīng)用):大家好,我是Nikita。你可能知道我是兼職發(fā)帖者,全職xAI客戶支持。所以我們現(xiàn)在通過我們的應(yīng)用家族覆蓋超過10億人。每次新聞爆發(fā),都變得更加明顯,這是我們這個時代最重要的通信工具。最有影響力的人來這里聚會,真理在這里結(jié)晶。一切都源于X。

我認為我們才剛剛開始意識到它的全部潛力。對X應(yīng)用來說這是非凡的一年。我們卷起袖子完成了很多工作。過去的一月是X應(yīng)用有史以來使用量最大的月份,就參與度而言。然后二月有望超越一月。大部分功勞在于算法團隊,他們投入了瘋狂的時間,顯然得到了回報。

但在漏斗頂端仍有大量工作要做。我們首次下載量每月增長超過50%,我們現(xiàn)在表現(xiàn)出了基本上只有在早期階段消費產(chǎn)品的增長率。我們在解決應(yīng)用的一些可能存在了20年的老問題方面也取得了很大進展,那就是如何讓新用戶快速上手。新用戶現(xiàn)在在應(yīng)用上每天花費的時間比六個月前多55%。

在核心產(chǎn)品方面,我們也正步入正軌。我們不僅重建了算法,還重建了流程,我們在所有關(guān)鍵指標(biāo)上都看到了兩位數(shù)的增長。我們重建了通知、我們的網(wǎng)頁瀏覽器、XChat,基本上應(yīng)用的每個方面都比以往表現(xiàn)更好。很明顯,如果我們專注,我們就可以移山,發(fā)展這個平臺。就在上個月,我們在文章方面做了一點推動,發(fā)布的文章增長了10倍,閱讀的文章增長了17倍。

在所有其他方面,比如假期期間,我們在訂閱方面做了大力推動。我們在的ARR剛剛突破10億美元。

我認為對于X應(yīng)用,獲勝并成為世界第一應(yīng)用的路徑并沒有太多未知數(shù)。我們知道該做什么。球在我們這邊,結(jié)果一定是我們贏,只是我們執(zhí)行的問題。

是的,所以我們將曾經(jīng)是舊Twitter DM堆棧的東西——未加密,基本上只是文本——演變?yōu)橐粋€完全加密的通信系統(tǒng),允許你進行音頻和視頻通話,有你知道的任何通信應(yīng)用都想要的所有功能。

我們將在未來幾個月開源這段代碼,就像我們開源推薦算法代碼一樣,所以人們實際上可以看到我們在做什么。沒有什么比透明更能讓人相信一家公司了。所以我們將是唯一一個實際上開源的推薦算法,所以你可以看到它做什么,它如何隨著GrokChat演變。它也將是開源的,所以你可以實際看到是否有任何漏洞。GrokChat中不會有廣告或其他任何東西的鉤子,它真的是一個通用通信系統(tǒng)。

在未來幾個月,我們將發(fā)布獨立的XChat應(yīng)用。所以如果你只想發(fā)送消息,你可以只使用這個。我們將有桌面共享和多用戶系統(tǒng),你可以和很多人進行視頻通話。它真的是一個功能齊全的通信系統(tǒng)。

對于XChat的X Money,我們實際上已經(jīng)在公司內(nèi)部進行了X Money的封閉測試,我們預(yù)計在未來一兩個月內(nèi)進入無限外部測試,然后向全球所有X用戶推廣。這將是又一個游戲規(guī)則改變者。

我們說10億用戶,實際上是超過10億用戶,是因為雖然我們的月平均用戶約為6億,但安裝了X應(yīng)用的人數(shù)超過10億。只是大多數(shù)人只在有重大事件時才偶爾來X應(yīng)用。但當(dāng)我們給人們更多使用X應(yīng)用的理由,無論是通信、Grok還是X Money,無論什么,我們希望如果你愿意,你可以在X應(yīng)用上生活。隨著我們讓它更有用,我們顯然會給人們每天使用這個應(yīng)用的令人信服的理由。我的預(yù)期是遠遠超過10億日活躍用戶。

馬斯克:現(xiàn)在,為了理解宇宙,你必須探索宇宙。僅從地球上的望遠鏡和隕石坑,你能學(xué)到的東西是有限的。最終,你必須走出去,你必須探索宇宙來理解它。這就是SpaceXxAI結(jié)合的動機——加速人類在理解宇宙和將意識之光延伸到其他星球。

所以,從大局來看,當(dāng)你看看地球?qū)嶋H上為文明使用了多少能量時,我們現(xiàn)在只使用了地球潛在能量的大約1%。如果我們想使用甚至百萬分之一的太陽能量,那將大約是文明目前使用能量的一百萬倍。獲取太陽能量的唯一方式是擴展到地球之外。地球真的只是廣闊黑暗中的一粒微小塵埃。太陽是太陽系中99.8%的質(zhì)量。

所以你必須超越地球這粒微小塵埃,才能在使用太陽能量方面取得重大進展。正如剛才所說,必須擴展大約一百萬倍,才能達到太陽能量的百萬分之一。然后超越這個,探索延伸到銀河系,也許有一天甚至到其他星系。

所以,超越地球數(shù)據(jù)中心的下一步是地球軌道數(shù)據(jù)中心。我們將與SpaceX以每年100到200吉瓦的水平發(fā)射軌道數(shù)據(jù)中心——不是累計,我是說每年。最終,我們看到一條路徑,可能從地球發(fā)射每年多達1太瓦的算力。

但如果我們想超越每年僅僅1太瓦呢?為了做到這一點,你必須去月球。所以通過在月球上建立工廠,建造AI衛(wèi)星,并擁有質(zhì)量驅(qū)動器——這是那種你真的只在科幻小說中讀到的東西,但我們將讓它成為現(xiàn)實。我們實際上將在月球上有一個質(zhì)量驅(qū)動器。如果你這樣做,你可以再增加幾個數(shù)量級。你可以達到每年1000吉瓦或更多,最終達到百萬分之一,然后千分之一,也許甚至百分之幾的太陽能量。

難以想象那種規(guī)模的智能會思考什么,但看到它發(fā)生將非常令人興奮。我真的想看到月球上的質(zhì)量驅(qū)動器,將AI衛(wèi)星射向深空,嗖嗖嗖,一個接一個。我無法想象比月球上的質(zhì)量驅(qū)動器、月球上的自給自足城市,然后超越月球到火星,穿越我們的太陽系,最終到達繁星,在群星之間穿梭,更史詩意義的事情了。

也許我們會遇到外星人,也許我們會看到一些持續(xù)了數(shù)百萬年的文明遺跡,我們會發(fā)現(xiàn)古代外星文明的遺跡。但我們做到這一點的唯一方式是走出去,去探索,這是實現(xiàn)它的道路。謝謝。


特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點推薦
美國被氣死,中國高超導(dǎo)彈用水泥造: 想了100種可能都沒試過水泥

美國被氣死,中國高超導(dǎo)彈用水泥造: 想了100種可能都沒試過水泥

基斯默默
2026-04-10 22:52:21
還是服軟了,巴拿馬用舉國代價證明,中國惹不起,美國靠不住

還是服軟了,巴拿馬用舉國代價證明,中國惹不起,美國靠不住

動漫里的童話
2026-04-12 08:47:53
馬克龍賭輸了!簽涉臺聲明討好日本,反被中方精準(zhǔn)拿捏,太丟人

馬克龍賭輸了!簽涉臺聲明討好日本,反被中方精準(zhǔn)拿捏,太丟人

安安說
2026-04-11 11:47:45
為啥淘寶,拼多多幾塊錢的東西還能包郵?看完你就明白了!

為啥淘寶,拼多多幾塊錢的東西還能包郵?看完你就明白了!

呼呼歷史論
2026-04-10 21:17:24
西班牙人球員不滿:都看到了,這就是巴薩球員對同行的尊重

西班牙人球員不滿:都看到了,這就是巴薩球員對同行的尊重

天光破云來
2026-04-12 10:19:29
后來,我才明白,斷聯(lián)后不刪除、不拉黑、不聯(lián)系的人,不是在等對方回頭,而是在等自己放下

后來,我才明白,斷聯(lián)后不刪除、不拉黑、不聯(lián)系的人,不是在等對方回頭,而是在等自己放下

品讀時刻
2026-04-12 09:08:19
湖人裁掉巴夫金!被呼吁簽回昔日控衛(wèi),這可是湖人選中的榜眼秀

湖人裁掉巴夫金!被呼吁簽回昔日控衛(wèi),這可是湖人選中的榜眼秀

林子說事
2026-04-12 00:05:38
特朗普的一句“YES”,讓中國在中東無法再低調(diào)了!

特朗普的一句“YES”,讓中國在中東無法再低調(diào)了!

觸摸史跡
2026-04-12 10:27:57
"翻臉"是遲早的事?王濛怒甩李小冉當(dāng)眾黑臉,內(nèi)娛惡俗一幕被揭開

"翻臉"是遲早的事?王濛怒甩李小冉當(dāng)眾黑臉,內(nèi)娛惡俗一幕被揭開

離離言幾許
2026-04-11 15:21:33
1180一張!謝娜成都演唱會兩萬多人預(yù)約,粉絲賭張杰空降性價比高

1180一張!謝娜成都演唱會兩萬多人預(yù)約,粉絲賭張杰空降性價比高

天天熱點見聞
2026-04-12 10:33:50
數(shù)百名醫(yī)生強調(diào):只要做過肺部CT,患者一定多加關(guān)注這5點!

數(shù)百名醫(yī)生強調(diào):只要做過肺部CT,患者一定多加關(guān)注這5點!

醫(yī)學(xué)科普匯
2026-04-09 17:01:02
歐爾班沒想到,他從搬來的美國救兵,變成了壓垮他的最后一根稻草

歐爾班沒想到,他從搬來的美國救兵,變成了壓垮他的最后一根稻草

黑鷹觀軍事
2026-04-11 19:18:22
丹麥華裔王妃文雅麗回香港娘家,還帶上27歲大兒子,母子倆長得像

丹麥華裔王妃文雅麗回香港娘家,還帶上27歲大兒子,母子倆長得像

健身狂人
2026-04-01 17:56:50
鄭永年:不用糾結(jié)特朗普到底什么意思,中美客觀上已經(jīng)是G2了

鄭永年:不用糾結(jié)特朗普到底什么意思,中美客觀上已經(jīng)是G2了

上觀新聞
2026-04-11 14:49:04
004核航母落空?美媒:除關(guān)鍵術(shù)落后,多個原因讓中國不必要造它

004核航母落空?美媒:除關(guān)鍵術(shù)落后,多個原因讓中國不必要造它

溫讀史
2026-04-12 10:25:41
這四種病都不是?。慷悄挲g到了!過度治療反而傷身,坦然接受

這四種病都不是?。慷悄挲g到了!過度治療反而傷身,坦然接受

醫(yī)學(xué)科普匯
2026-04-10 20:15:11
阿斯:賽后巴薩球迷在諾坎普歡呼超5分鐘,鼓勵球隊逆轉(zhuǎn)馬競

阿斯:賽后巴薩球迷在諾坎普歡呼超5分鐘,鼓勵球隊逆轉(zhuǎn)馬競

懂球帝
2026-04-12 07:33:07
時隔半世紀(jì)人類再出發(fā),美國繞月展示的技術(shù)差距,中國必須正視

時隔半世紀(jì)人類再出發(fā),美國繞月展示的技術(shù)差距,中國必須正視

無人傾聽無人傾聽
2026-04-10 22:43:33
浙江金華一催收公司被查,100余人被帶走,催收員月傭金超11萬!

浙江金華一催收公司被查,100余人被帶走,催收員月傭金超11萬!

一口老湯
2026-04-12 09:10:03
兒子辦滿月酒親戚嫌遠都不來,我不生氣過年他們想來我關(guān)機回娘家

兒子辦滿月酒親戚嫌遠都不來,我不生氣過年他們想來我關(guān)機回娘家

荷蘭豆愛健康
2026-04-12 07:21:49
2026-04-12 11:27:00
問問馬斯克AskMusk incentive-icons
問問馬斯克AskMusk
了解馬斯克,關(guān)注我們就對了
270文章數(shù) 618關(guān)注度
往期回顧 全部

科技要聞

理想稱遭惡意拉踩,東風(fēng)日產(chǎn):尊重同行

頭條要聞

美國副總統(tǒng)萬斯:美伊談判未能達成協(xié)議 將返回美國

頭條要聞

美國副總統(tǒng)萬斯:美伊談判未能達成協(xié)議 將返回美國

體育要聞

換帥之后,他們從降級區(qū)沖到升級區(qū)

娛樂要聞

鄭鈞回應(yīng)兒子走路:會監(jiān)督他挺直腰板

財經(jīng)要聞

三輪磋商談至深夜 美伊談判三大議題仍待解

汽車要聞

煥新極氪007/007GT上市 限時19.39萬起

態(tài)度原創(chuàng)

本地
房產(chǎn)
旅游
游戲
時尚

本地新聞

12噸巧克力有難,全網(wǎng)化身超級偵探添亂

房產(chǎn)要聞

土地供應(yīng)突然暴跌!2026??跇鞘校窬执笞?!

旅游要聞

游客漲、預(yù)訂旺 “春日經(jīng)濟”催熱八桂消費市場

現(xiàn)實比游戲更瘋狂!萊斯特演員:GTA6或難達前作沖擊感

春季穿衣別死氣沉沉,看看這27套日常穿搭,活力時尚又減齡

無障礙瀏覽 進入關(guān)懷版