国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

推理性能提升13倍!百度智能云發(fā)布昆侖芯超節(jié)點

0
分享至

4月25日,以“模型的世界,應用的天下”為主題的Create 2025 百度AI開發(fā)者大會在湖北武漢召開。會上,百度集團執(zhí)行副總裁、百度智能云事業(yè)群總裁沈抖分享了百度智能云在智能基礎設施建設方面的最新成果,并在算力、模型及應用等方面發(fā)布一系列全新產(chǎn)品。

大模型的高效落地亟需從底層算力到應用的全棧、系統(tǒng)級支撐——既需高性能硬件與集群優(yōu)化,也需靈活的開發(fā)工具鏈與場景化解決方案?;诙嗄暝诖竽P脱邪l(fā)與產(chǎn)業(yè)落地的深厚積累,百度智能云構建了新一代系統(tǒng)級智能基礎設施,為企業(yè)大模型應用落地提供最佳解決方案。?

相關數(shù)據(jù)顯示,2024全年百度智能云在大模型相關中標項目數(shù)、行業(yè)覆蓋數(shù)、央國企中標項目數(shù)三個維度均為第一,在能源、政務、金融三個行業(yè)的中標項目數(shù)位于所有廠商第一。截止目前,千帆平臺企業(yè)用戶數(shù)量超40萬,千帆平臺組件數(shù)量超1000個,企業(yè)在千帆平臺上已開發(fā)出了超100萬個應用。

沈抖表示,系統(tǒng)的價值,不僅是解決某一個問題,而是讓企業(yè)擁有創(chuàng)造“創(chuàng)造的能力”。企業(yè)可以結合自己的數(shù)據(jù)、流程、邏輯,利用百度智能云的系統(tǒng)級能力打造企業(yè)專屬AI基礎設施。

百舸+昆侖芯超節(jié)點:推理性能提升13倍、成本降低95%

算力是AI時代的“新電力”。百度智能云通過自研昆侖芯P800芯片及百舸大規(guī)模推理加速能力,實現(xiàn)算力性能與成本的雙重突破。

本次大會,百度正式點亮了昆侖芯P800的三萬卡集群。在金融行業(yè),招商銀行與百度智能云基于昆侖芯P800展開算力合作,能穩(wěn)定支持各類開源大模型,性能表現(xiàn)卓越,在智能客服、多模態(tài)數(shù)據(jù)分析等場景實現(xiàn)了顯著效能提升。目前,除了招商銀行這類金融機構,昆侖芯P800算力已在國家電網(wǎng)、中國鋼研等央企,同濟大學、北京大學等高校及一批互聯(lián)網(wǎng)企業(yè)進行規(guī)?;渴稹?

為了進一步降低算力使用成本,百度智能云正式發(fā)布昆侖芯超節(jié)點。

昆侖芯超節(jié)點支持把64張昆侖芯AI加速卡放到同一個機柜,實現(xiàn)單節(jié)點的超強性能,一個機柜就能頂過去100臺機器。與以往的方案相比,昆侖芯超節(jié)點用更快的機內(nèi)通信替代機間通信,可以有效降低帶寬成本,最終實現(xiàn)卡間互聯(lián)帶寬提升8倍,單機訓練性能提升10倍,單卡推理性能提升13倍。

僅僅擁有高性能芯片和大規(guī)模集群是遠遠不夠的,如何穩(wěn)定、高效地釋放算力的真正價值才是關鍵所在。沈抖認為,未來三年,推理降本,一定是企業(yè)最重要的工作。

百度智能云全面升級百舸推理加速能力。通過大規(guī)模分布式推理的PD分離,百舸支持客戶根據(jù)不同場景的業(yè)務特點,自適應地設置PD配比,并做到token級別的PD負載均衡。針對MOE模型,百舸做到了大規(guī)模多機專家并行的極致優(yōu)化,可以大幅降低MOE模型推理的通信開銷。最后,百舸對核心鏈路上的每一個細節(jié)做了系統(tǒng)級的工程優(yōu)化,大幅提升GPU的有效利用率。

從百度內(nèi)部實踐來看,百舸推理加速的能力正在作為千帆的算力底座,為40萬客戶提供服務。上線以來,千帆的推理吞吐提升20倍,推理速度提升50%以上。在外部,百舸不止支持著像招商銀行、中國石化、長安汽車等企業(yè)的超大規(guī)模算力需求,也很好地支撐著創(chuàng)企客戶、伙伴的模型訓練、推理需求。

以北京人形機器人創(chuàng)新中心為例,百度百舸為創(chuàng)新中心構建了穩(wěn)定的超大算力集群,確保具身模型的訓練和推理得以高效進行,支持了人形機器人的快速迭代。在近日全球首個人形機器人半程馬拉松中,北京人形機器人創(chuàng)新中心旗下純電驅(qū)全尺寸人形機器人“天工”,以2小時40分42秒的成績率先沖線一舉奪冠。

為企業(yè)應用開發(fā)提效!千帆發(fā)布智能體Pro及MCP服務

企業(yè)部署大模型,不僅需要高性價比的模型服務,更需要全面的模型工具。在模型服務層面,目前千帆平臺上有超過100多個模型,不僅包括文心4.5Turbo、文心X1 Turbo等百度自研模型,還包括DeepSeek、Ilama、Vidu等第三方模型,服務穩(wěn)定、可靠。在模型開發(fā)層面,千帆平臺可以提供全面的模型開發(fā)工具鏈,支持深度思考模型、多模態(tài)模型的定制、精調(diào)。

以模型蒸餾為例,智聯(lián)招聘在人崗匹配場景使用了千帆平臺的模型蒸餾工具鏈,用千億參數(shù)的DeepSeek R1作為“教師模型”,用百億參數(shù)的ERNIE Speed作為“學生模型”,經(jīng)過調(diào)優(yōu)后的小參數(shù)模型,不僅可以媲美“教師模型”的效果,成本也降低至3成。

在應用開發(fā)上,本次大會千帆平臺全面升級了企業(yè)級Agent開發(fā)工具鏈,發(fā)布了全新推理式智能體——智能體Pro,從快問快答升級到深思熟慮,并且支持每個企業(yè)定制自己的專屬智能體。以污水寶為例,基于千帆Agentic RAG能力,讓Agent結合企業(yè)自己的私域數(shù)據(jù)和企業(yè)知識庫,可以基于對任務的理解去制定檢索策略,大幅降低模型幻覺。同時,智能體Pro也支持Deep Research深度研究模式,能讓Agent自主完成復雜任務的步驟規(guī)劃、信息篩選和整理,支持像人一樣操控電腦瀏覽網(wǎng)頁(computer use)進行探索式知識收集,也支持像人一樣使用多種工具繪制圖標、撰寫,生成結構清晰、內(nèi)容豐富的專業(yè)報告。

基于DeepResearch能力,榮耀正在利用千帆平臺,面向高校學生、職場白領等群體,打造一款科研場景深度研究的應用,將很快會在榮耀筆記本上上線。

MCP的出現(xiàn),幫助開發(fā)者和企業(yè)在開發(fā)Agent時,能夠更好地利用行業(yè)數(shù)據(jù)和工具。本次大會,百度智能云正式發(fā)布國內(nèi)首個企業(yè)級MCP服務,第一批已經(jīng)有超過1000個MCP Servers供企業(yè)及開發(fā)者靈活選擇。另外,開發(fā)者也可以在千帆上開發(fā)自己的MCP Server,并發(fā)布到MCP廣場,支持免費托管,而且百度搜索也會索引這些MCP Server,讓它們被更多的開發(fā)者引用。

從模型服務到應用開發(fā),企業(yè)客戶已經(jīng)在千帆平臺上做出了很多行業(yè)創(chuàng)新。民生銀行與百度智能云合作,探索大模型在商業(yè)銀行的落地,完成了金融領域第一個端到端涵蓋算力、平臺、模型、應用四層架構的項目落地。

自研AI應用重磅升級:實現(xiàn)營銷全旅程服務,視覺AI應用成本大幅下降

百度智能云打造的智能基礎設施也支撐著百度自己的應用創(chuàng)新。本次大會,百度智能云面向智能營銷、視覺AI兩大領域,升級了兩大自研AI應用產(chǎn)品。

金融營銷場景需要高精準獲客、“高情商”客服及高效的流失預警,百度智能云本次升級發(fā)布客悅·ONE,在上述核心場景進行了全面優(yōu)化,為客戶提供全生命周期智能營銷服務,助力企業(yè)實現(xiàn)營銷效能全面提升。

以理財撤單場景為例,傳統(tǒng)模式下,用戶需經(jīng)歷復雜的說明閱讀和多層級菜單操作,效率低下??蛺偼ㄟ^AI驅(qū)動的智能交互,極大簡化了這一流程。AI不僅能識別并安撫用戶焦慮,更能在對話中直接引導解決問題,還能自動提煉關鍵信息并回流數(shù)據(jù),持續(xù)優(yōu)化服務體驗。

目前客悅已經(jīng)服務銀行、證券、保險等不同細分領域的金融企業(yè)50余家,落地金融行業(yè)10余個場景。

為了解決視覺AI模型訓練周期長、門檻高,需要大量人工干預的問題。百度智能云升級發(fā)布一見5.0,在標準化高、規(guī)則清晰的任務中,僅需一句自然語言,即可秒級生成專業(yè)級視覺AI應用,一線業(yè)務人員也能輕松上手,借助云邊協(xié)同,應用成本大幅降低,加速了視覺智能規(guī)?;穆涞?。

目前,百度智能云從算力、平臺到應用的系統(tǒng)級能力,已經(jīng)在多個企業(yè)場景中穩(wěn)定運行。中國鋼研與百度智能云聯(lián)合打造全棧智能基礎設施,基于昆侖芯和百舸,搭建了專屬的智算平臺;在千帆上做模型精調(diào),使用大、小模型結合的方式獲得最佳效果;結合一見視覺平臺,快速完成了表面缺陷檢測、金相分析等核心場景的應用開發(fā)。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
“爬樓爬到膝蓋都要廢了!”滬上居民樓唯一電梯拆除,換新梯竟陷“漫漫苦等”

“爬樓爬到膝蓋都要廢了!”滬上居民樓唯一電梯拆除,換新梯竟陷“漫漫苦等”

新民晚報
2025-12-25 18:27:20
不勝唏噓!廣東佛山成立幾十年門窗大廠停工停產(chǎn),全員放假五個月

不勝唏噓!廣東佛山成立幾十年門窗大廠停工停產(chǎn),全員放假五個月

微微熱評
2025-12-26 01:03:13
我替首長擋槍后退伍,剛上火車就有個人靠近我:下一站有人接應

我替首長擋槍后退伍,剛上火車就有個人靠近我:下一站有人接應

蕭竹輕語
2025-12-16 17:59:12
姜昆美國過圣誕僅1天,厭惡的一幕出現(xiàn),郭德綱的話含金量還在升

姜昆美國過圣誕僅1天,厭惡的一幕出現(xiàn),郭德綱的話含金量還在升

淡淡稻花香s
2025-12-26 03:02:29
驟降10℃!河南將在雨雪中跨年?最新預報來了

驟降10℃!河南將在雨雪中跨年?最新預報來了

大象新聞
2025-12-26 07:13:03
2026年,幼兒園關停潮已經(jīng)來了

2026年,幼兒園關停潮已經(jīng)來了

沒有偏旁的常慶
2025-12-26 08:14:36
曝37歲福原愛將誕下3胎!老公身份公開,簡直把前夫臉面放地上踩

曝37歲福原愛將誕下3胎!老公身份公開,簡直把前夫臉面放地上踩

法老不說教
2025-12-22 19:20:00
鐘麗緹亮相芭莎之夜,胸大腚圓胖到不敢認,一大把年紀還玩性感

鐘麗緹亮相芭莎之夜,胸大腚圓胖到不敢認,一大把年紀還玩性感

黃小仙的搞笑視頻
2025-12-24 11:46:44
遼寧男籃一場大敗,不敵衛(wèi)冕冠軍!沒有想到賽后采訪楊鳴會這么說

遼寧男籃一場大敗,不敵衛(wèi)冕冠軍!沒有想到賽后采訪楊鳴會這么說

林子說事
2025-12-26 01:11:49
1957年杜聿明參觀長春第一汽車廠,向工作人員提了一個特殊的要求

1957年杜聿明參觀長春第一汽車廠,向工作人員提了一個特殊的要求

磊子講史
2025-12-22 16:24:37
為什么80%的散戶都虧損?因為他們連"集合競價巨量高開7%"都不懂

為什么80%的散戶都虧損?因為他們連"集合競價巨量高開7%"都不懂

一方聊市
2025-11-19 14:27:49
三個信號表明,美準備打大仗,六國已被鎖定,卻避開了中國這條線

三個信號表明,美準備打大仗,六國已被鎖定,卻避開了中國這條線

梁訊
2025-12-25 10:36:48
天冷了要養(yǎng)骨!少吃白菜蘿卜,多吃這8樣,腿腳有勁,精氣十足!

天冷了要養(yǎng)骨!少吃白菜蘿卜,多吃這8樣,腿腳有勁,精氣十足!

美食店主
2025-12-22 00:27:55
順德魚生是淡水生魚片,不擔心寄生蟲嗎?網(wǎng)友:大數(shù)據(jù)不會騙人!

順德魚生是淡水生魚片,不擔心寄生蟲嗎?網(wǎng)友:大數(shù)據(jù)不會騙人!

夜深愛雜談
2025-12-23 17:35:17
西方花了30多年,終于用“中國崩潰論”把自己整崩潰了

西方花了30多年,終于用“中國崩潰論”把自己整崩潰了

阿器談史
2025-12-03 23:15:31
王思聰,名下資產(chǎn)被法拍,“估值-166萬元,起拍價10.75萬元”!相關公司曾紅極一時,后被曝出大規(guī)模裁員、關店

王思聰,名下資產(chǎn)被法拍,“估值-166萬元,起拍價10.75萬元”!相關公司曾紅極一時,后被曝出大規(guī)模裁員、關店

每日經(jīng)濟新聞
2025-12-25 13:45:25
1971年外賓順走國寶九龍杯,周總理一招讓他掏出來,全場鼓掌叫好

1971年外賓順走國寶九龍杯,周總理一招讓他掏出來,全場鼓掌叫好

宅家伍菇?jīng)?/span>
2025-12-22 09:00:03
雷霆最大短板出爐,亞歷山大看清現(xiàn)實!文班直言不諱,杰威也攤牌

雷霆最大短板出爐,亞歷山大看清現(xiàn)實!文班直言不諱,杰威也攤牌

魚崖大話籃球
2025-12-26 07:47:35
人社部部長表態(tài)!2026養(yǎng)老金到底怎么漲?40年以上工齡更吃香?

人社部部長表態(tài)!2026養(yǎng)老金到底怎么漲?40年以上工齡更吃香?

阿纂看事
2025-12-26 09:21:37
最新!佛山更新一批人事任免

最新!佛山更新一批人事任免

南方都市報
2025-12-26 09:06:05
2025-12-26 11:12:49
解碼NewSight incentive-icons
解碼NewSight
關注TMT領域
1180文章數(shù) 1037關注度
往期回顧 全部

科技要聞

豆包新模型,閃電發(fā)布,閃電“下架”

頭條要聞

媒體:讓美中產(chǎn)無法翻身的"斬殺線" 震碎中國網(wǎng)友三觀

頭條要聞

媒體:讓美中產(chǎn)無法翻身的"斬殺線" 震碎中國網(wǎng)友三觀

體育要聞

約基奇有多喜歡馬?

娛樂要聞

朱孝天把阿信好意當球踢!

財經(jīng)要聞

涉案近300億元 多方圍剿金融“黑灰產(chǎn)”

汽車要聞

速來!智界在上海西岸準備了年末潮流盛典

態(tài)度原創(chuàng)

手機
親子
家居
游戲
旅游

手機要聞

vivo、小米、蘋果,前50周格局依然沒變

親子要聞

一歲以后一定要讓寶寶多涂鴉畫畫,培養(yǎng)想象力和手眼協(xié)調(diào)

家居要聞

格調(diào)時尚 智慧品質(zhì)居所

你支持第一人稱還是第三人稱?《GTA6》視角大戰(zhàn)爆發(fā)

旅游要聞

百千萬·山海間|打卡最美218的N種生活

無障礙瀏覽 進入關懷版