国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

搶先實(shí)測(cè)豆包1.8模型,多模態(tài)Agent超強(qiáng)!

0
分享至


這是蒼何的第 463 篇原創(chuàng)!

大家好,我是人在火山大會(huì)的蒼何。


說實(shí)話,我現(xiàn)在就在火山引擎 FORCE 原動(dòng)力大會(huì)的現(xiàn)場(chǎng),人太多了,多到要擠著才能進(jìn)來。


這一年也見證了豆包大模型的快速成長(zhǎng),今天豆包大模型 1.8 也正式發(fā)布。

這次模型的更新帶來了更強(qiáng)的 Agent 能力和多模態(tài)理解能力,在公開測(cè)試集中的表現(xiàn)相對(duì)于豆包 1.6有了很大的提升。


不少能力都可以和其他全球頂尖模型一爭(zhēng)高下,在不同場(chǎng)景維度下的測(cè)試集表現(xiàn)也很出色。


豆包大模型 1.8 大幅增強(qiáng)工具調(diào)用(Tool Use)能力,長(zhǎng)文和多輪指令遵循大幅度增強(qiáng),Coding能力也顯著增強(qiáng)。

具備 OS Agent 落地能力,支持 Agent 完成屏幕操作任務(wù)。模型格式輸出更穩(wěn)定,執(zhí)行規(guī)劃能力和復(fù)雜流程理解再提升,更適合復(fù)雜多步多分支的企業(yè)級(jí) Agent 任務(wù)。


同時(shí)視覺理解基礎(chǔ)能力大幅躍升,圖片理解Tokens消耗更少,理解精度更高,單次視頻理解幀數(shù)從640幀提升至1280幀,(在1秒1幀的情況下,可支持20分鐘長(zhǎng)視頻理解)。

同時(shí)火山方舟應(yīng)用實(shí)驗(yàn)室還支持Video Cup Tool體驗(yàn):新增低幀率(如每5s一幀)查看完整視頻后,聚焦某個(gè)與問題強(qiáng)相關(guān)的視頻片段,正?;蚋邘剩ㄈ缑?s一幀或5幀)具體理解并回答問題。

模型推理能力更出色,支持思考長(zhǎng)度可調(diào)節(jié),各模式下思考更加精簡(jiǎn),Tokens更節(jié)省。


關(guān)于模型信息更新信息給大家介紹完畢,接下來是帶來一手實(shí)測(cè),其實(shí)前些天就拿到了內(nèi)測(cè)資格,這次測(cè)試我更聚焦于實(shí)際 Agent復(fù)雜場(chǎng)景,而非簡(jiǎn)單case測(cè)試。

先是來一個(gè)自動(dòng)寫公眾號(hào)圖文并發(fā)布的場(chǎng)景,要求根據(jù)主題搜索相關(guān)圖文信息,并寫文章,同時(shí)發(fā)布到公眾號(hào)后臺(tái)。

我是在 Trae 中調(diào)用豆包大模型 1.8 的 API,然后自定義的智能體。


智能體的提示詞是這樣子的:

你是專業(yè)的內(nèi)容編輯,擅長(zhǎng)做公眾號(hào)文章的創(chuàng)作,你能根據(jù)指定的主題創(chuàng)作一篇公眾號(hào)文章,并寫入到文件中,文件名以標(biāo)題.md來命名,你需要先調(diào)用Chrome DevTools 工具去瀏覽器搜索查找相關(guān)信息(注意這一步是必須的,你必須調(diào)用工具自行百度搜索,
搜索內(nèi)容是用戶輸入的主題,請(qǐng)嚴(yán)格將用戶主題放入搜索而非其他多余元素),然后調(diào)用MiniMax MCP工具來生成文章配圖,
放在image文件夾下,并引入到到文章中。最后幫我到公眾號(hào)后臺(tái)發(fā)布。公眾號(hào)標(biāo)題你自行選擇爆款標(biāo)題。

同時(shí)配置了 Chrome DevTools MCP 和 MiniMax MCP。

可以看到豆包大模型 1.8 會(huì)根據(jù)任務(wù)自動(dòng)調(diào)用瀏覽器搜索內(nèi)容,然后生成文字和配圖,最后發(fā)布。

整個(gè)長(zhǎng)時(shí)任務(wù),可以看到豆包大模型 1.8 完成的很不錯(cuò)。

另外看一個(gè)更復(fù)雜的實(shí)測(cè),扮演一個(gè)CTO 助手審核郵件匹配出合適的投資項(xiàng)目。

為了測(cè)試它到底有多硬核,我給它設(shè)置了一個(gè)極具挑戰(zhàn)性的 Case:模擬一個(gè) CTO 助手,完成一整套 AI 項(xiàng)目的立項(xiàng)審批。

背景:模擬一家奶茶公司,茶小鮮,要投資 AI 項(xiàng)目的,由各個(gè)分公司提報(bào)項(xiàng)目到指定郵件。CTO再結(jié)合公司的情況進(jìn)行審查出合適的投資項(xiàng)目。

先給大家看下最終的效果:

整個(gè)任務(wù)足夠復(fù)雜,從郵件中提取附件并解析附件,然后去調(diào)用眾多的公司文件解析,最終生層決策報(bào)告。

你可以看下我給的提示詞:

作為 CTO 助手,請(qǐng)按照以下詳細(xì)流程完成 AI 項(xiàng)目審批工作:
1. 郵件篩選與提?。?br/>● 使用 Chrome DevTools 工具登錄 163 郵箱
● 精確篩選滿足以下條件的郵件:
○ 主題包含"立項(xiàng)申請(qǐng)"的郵件
○ 主題包含"2026年戰(zhàn)略重點(diǎn)"的郵件
● 確保完整獲上述取郵件正文內(nèi)容和所有附件
1. 附件下載與存儲(chǔ):
● 將所有符合條件的郵件附件下載至指定路徑:/Users/Downloads/*.pdf
2. 內(nèi)容解析與整合:
● 調(diào)用 mcp-email-service 中的專用解析工具
● 對(duì)每份PDF附件進(jìn)行結(jié)構(gòu)化解析
● 將解析結(jié)果與對(duì)應(yīng)郵件正文內(nèi)容進(jìn)行智能整合
3. 戰(zhàn)略契合度評(píng)估:
● 以公司最新發(fā)布的 郵件 2026年戰(zhàn)略重點(diǎn) 的正文和附件內(nèi)容 為評(píng)估基準(zhǔn)
● 為每個(gè)項(xiàng)目生成量化評(píng)分和詳細(xì)評(píng)估意見
4. HTML匯報(bào)頁面制作:
● 創(chuàng)建專業(yè)的企業(yè)級(jí)HTML靜態(tài)頁面,包含:
○ 項(xiàng)目概覽儀表盤
○ 戰(zhàn)略契合度雷達(dá)圖
○ 預(yù)算分配餅圖
○ ROI預(yù)測(cè)折線圖
● 確保所有數(shù)據(jù)展示均標(biāo)注明確來源:
○ 直接引用原始PDF文件關(guān)鍵頁截圖
○ 標(biāo)注具體引用位置(頁碼/段落)
● 實(shí)現(xiàn)交互功能:
○ 點(diǎn)擊數(shù)據(jù)可跳轉(zhuǎn)至對(duì)應(yīng)PDF原文
○ 支持篩選和排序功能
5. 自動(dòng)交付:
● 生成完成后自動(dòng)在默認(rèn)瀏覽器中打開HTML頁面
質(zhì)量要求:
1. 數(shù)據(jù)準(zhǔn)確性:所有引用數(shù)據(jù)必須與原始文件100%一致
2. 視覺規(guī)范:符合公司VI標(biāo)準(zhǔn),使用官方配色方案
3. 安全要求:處理過程中不得存儲(chǔ)任何敏感郵件內(nèi)容

可以看到它直接調(diào)用 Chrome DevTools MCP,像真人一樣登錄郵箱、精準(zhǔn)篩選、自動(dòng)下載附件到指定路徑。這種 OS Agent 的落地感,真的非常絲滑。


它沒有上來就盲目操作,而是先在后臺(tái)給自己拆解了 10 個(gè)任務(wù)步驟:

1、登錄163郵箱并篩選包含"立項(xiàng)申請(qǐng)"的郵件
2、下載符合條件郵件的所有PDF附件到/Downloads/
3、調(diào)用mcp-email-service解析所有PDF附件和郵件正文
4、以指定基準(zhǔn)文件評(píng)估項(xiàng)目戰(zhàn)略契合度,選出最合適的投資項(xiàng)目
5、創(chuàng)建企業(yè)級(jí)HTML靜態(tài)匯報(bào)頁面,包含儀表盤、圖表和交互功能
6、在默認(rèn)瀏覽器中打開生成的HTML頁面完成交付
7、解析新增補(bǔ)充文檔:中國茶飲AI應(yīng)用白皮書、投資回報(bào)分析報(bào)告、預(yù)算制度、人力資源檔案
8、結(jié)合補(bǔ)充文檔重新評(píng)估項(xiàng)目投資價(jià)值,確定最終最優(yōu)項(xiàng)目
9、更新HTML評(píng)估報(bào)告,整合新的評(píng)估維度
10、重新打開更新后的HTML報(bào)告完成最終交付

大概總結(jié)一下

登錄與篩選: 搞定 163 郵箱。登錄這個(gè)步驟需要人工掃描參與

收集數(shù)據(jù)(郵件的正文和郵件的附件)


調(diào)用MCP工具 mcp-email-service 提取結(jié)構(gòu)化數(shù)據(jù)這里包含了需要結(jié)合的本地文件。


每一個(gè) PDF的文件都至少有十幾頁,字?jǐn)?shù)非常多,這人要一個(gè)個(gè)看沒個(gè)把小時(shí)很難看完。


此時(shí)整個(gè)任務(wù)需要加載5+5 =10份PDF的解析任務(wù),每份文檔大小不低于500kb

最后是戰(zhàn)略契合度評(píng)估環(huán)節(jié),這一點(diǎn)最難,它需要理解 256K 窗口里的那堆復(fù)雜戰(zhàn)略。


我中途丟給它《中國茶飲 AI 白皮書》和預(yù)算制度,它能迅速合并維度,重新修正投資價(jià)值。

最終自動(dòng)在瀏覽器打開一個(gè)帶交互功能的 HTML 儀表盤。


最后得到評(píng)估報(bào)告:


在測(cè)試過程中,我有幾個(gè)非常深刻的體會(huì):

1、工具調(diào)用(ToolUse)極其穩(wěn)定

以前的 Agent 經(jīng)常會(huì)在多步調(diào)用中斷片,但豆包 1.8 的輸出格式非常穩(wěn)定。即使是面對(duì) mcp_mcp-email-service_parse_pdf 這種復(fù)雜的自定義工具,它也能精準(zhǔn)傳參,報(bào)錯(cuò)率低得驚人。

2、思考長(zhǎng)度可調(diào)節(jié)

它支持思考過程的精簡(jiǎn)或深入。在處理“戰(zhàn)略契合度評(píng)分”時(shí),我能感覺到它在進(jìn)行深度邏輯推理;而在處理下載附件這種確定性任務(wù)時(shí),它又非常節(jié)省 Tokens,這才是成熟模型該有的樣子。

3、視覺與多模態(tài)的精準(zhǔn)度

在 HTML 報(bào)告里,它能直接引用 PDF 原始文件的關(guān)鍵頁截圖,并標(biāo)注頁碼。這種對(duì)多模態(tài)內(nèi)容的“索引”能力,避免了 AI 常見的胡說八道。

最后統(tǒng)計(jì)了下大概的 token 消耗情況:


在企業(yè)級(jí)復(fù)雜的業(yè)務(wù)場(chǎng)景中,豆包大模型 1.8 更適合處理復(fù)雜的 Agent 任務(wù)。

看完豆包 1.8 的表現(xiàn),我一直在想,現(xiàn)在的工具真的太多了,開發(fā)者和職場(chǎng)人的切換成本越來越高。

我覺得工具不應(yīng)該讓人去適應(yīng)它,而應(yīng)該主動(dòng)融入我們的工作流。

豆包這次把 Agent、超長(zhǎng)上下文和多模態(tài)打通,其實(shí)是給了每個(gè)人一個(gè)“一站式”的數(shù)字辦公室。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
韓國:70%的石油和20%的天然氣由中東進(jìn)口 危機(jī)時(shí)將動(dòng)用戰(zhàn)略儲(chǔ)備

韓國:70%的石油和20%的天然氣由中東進(jìn)口 危機(jī)時(shí)將動(dòng)用戰(zhàn)略儲(chǔ)備

財(cái)聯(lián)社
2026-03-02 19:02:07
外媒:特朗普對(duì)伊朗發(fā)出新威脅

外媒:特朗普對(duì)伊朗發(fā)出新威脅

參考消息
2026-03-01 15:52:28
現(xiàn)實(shí)教訓(xùn)!重慶女子離婚無家可歸,抱娃跪求前任接盤,被連趕3次

現(xiàn)實(shí)教訓(xùn)!重慶女子離婚無家可歸,抱娃跪求前任接盤,被連趕3次

今朝牛馬
2026-03-02 21:27:47
上海某電影院事件:81秒視頻流出,主角社交媒體曝光

上海某電影院事件:81秒視頻流出,主角社交媒體曝光

溫柔看世界
2026-03-02 16:33:22
伊朗指揮中樞遭團(tuán)滅,數(shù)千名軍官正排隊(duì)投降

伊朗指揮中樞遭團(tuán)滅,數(shù)千名軍官正排隊(duì)投降

西樓飲月
2026-03-02 16:30:15
中國與伊朗接近達(dá)成超音速導(dǎo)彈采購協(xié)議?外交部:不屬實(shí)!

中國與伊朗接近達(dá)成超音速導(dǎo)彈采購協(xié)議?外交部:不屬實(shí)!

澎湃新聞
2026-03-02 15:36:40
伊朗再對(duì)美以基地發(fā)動(dòng)大規(guī)模襲擊

伊朗再對(duì)美以基地發(fā)動(dòng)大規(guī)模襲擊

財(cái)聯(lián)社
2026-03-01 12:32:05
涉美伊局勢(shì),復(fù)旦教授、人大教授雙雙發(fā)聲,“外網(wǎng)和國內(nèi)的一些自媒體造謠,這些人臉都不要了”

涉美伊局勢(shì),復(fù)旦教授、人大教授雙雙發(fā)聲,“外網(wǎng)和國內(nèi)的一些自媒體造謠,這些人臉都不要了”

都市快報(bào)橙柿互動(dòng)
2026-03-02 15:33:41
巴拿馬運(yùn)河兩端港口運(yùn)營恢復(fù),MSC完成首船裝卸

巴拿馬運(yùn)河兩端港口運(yùn)營恢復(fù),MSC完成首船裝卸

海事服務(wù)網(wǎng)CNSS
2026-03-02 19:58:04
A股:剛剛,中央四部門聯(lián)合發(fā)布,不出意外,周二將迎來新的轉(zhuǎn)變

A股:剛剛,中央四部門聯(lián)合發(fā)布,不出意外,周二將迎來新的轉(zhuǎn)變

另子維愛讀史
2026-03-02 19:31:01
伊朗生死關(guān)頭,一個(gè)關(guān)鍵人物走向前臺(tái)……

伊朗生死關(guān)頭,一個(gè)關(guān)鍵人物走向前臺(tái)……

補(bǔ)壹刀
2026-03-02 16:08:19
參宿四爆炸后,地球夜空會(huì)亮如白晝,至少半年不用開燈了

參宿四爆炸后,地球夜空會(huì)亮如白晝,至少半年不用開燈了

觀察宇宙
2026-03-02 19:09:35
突發(fā)! 內(nèi)賈德沒死? 親信稱: 他一切安好

突發(fā)! 內(nèi)賈德沒死? 親信稱: 他一切安好

每日經(jīng)濟(jì)新聞
2026-03-02 12:32:06
伊朗4枚彈道導(dǎo)彈“突襲”美軍航母,卻變成一場(chǎng)“昂貴的煙花秀”

伊朗4枚彈道導(dǎo)彈“突襲”美軍航母,卻變成一場(chǎng)“昂貴的煙花秀”

矚望云霄
2026-03-02 10:49:12
暴跌40%,關(guān)店4000家!曾創(chuàng)神話的“零食界愛馬仕”,賣不動(dòng)了

暴跌40%,關(guān)店4000家!曾創(chuàng)神話的“零食界愛馬仕”,賣不動(dòng)了

好賢觀史記
2026-03-02 20:17:10
加水加糖加廢料,椰子水系統(tǒng)性摻假翻車!網(wǎng)友:真夠歹毒……

加水加糖加廢料,椰子水系統(tǒng)性摻假翻車!網(wǎng)友:真夠歹毒……

柴狗夫斯基
2026-03-02 10:46:05
上海影院現(xiàn)場(chǎng)意外捉奸,女子露面身材姣好,丈夫目睹后聲音都變了

上海影院現(xiàn)場(chǎng)意外捉奸,女子露面身材姣好,丈夫目睹后聲音都變了

離離言幾許
2026-03-02 12:52:58
36歲副鎮(zhèn)長(zhǎng)開會(huì)時(shí)腦出血暈倒,除夕當(dāng)天不幸離世:上任僅10余天,最后一條動(dòng)態(tài)為督促社火排練,留下3個(gè)孩子

36歲副鎮(zhèn)長(zhǎng)開會(huì)時(shí)腦出血暈倒,除夕當(dāng)天不幸離世:上任僅10余天,最后一條動(dòng)態(tài)為督促社火排練,留下3個(gè)孩子

極目新聞
2026-03-02 15:45:15
不到48小時(shí),3大名人禁言被封,160萬粉賬號(hào)涼涼,不值得同情

不到48小時(shí),3大名人禁言被封,160萬粉賬號(hào)涼涼,不值得同情

青橘罐頭
2026-03-02 17:26:53
伊朗發(fā)射近1200枚導(dǎo)彈報(bào)復(fù)美國和以色列

伊朗發(fā)射近1200枚導(dǎo)彈報(bào)復(fù)美國和以色列

中國網(wǎng)
2026-03-01 16:43:10
2026-03-03 02:47:00
蒼何
蒼何
前大廠工程師,努力分享AI干貨知識(shí)
71文章數(shù) 100關(guān)注度
往期回顧 全部

科技要聞

蘋果中國官網(wǎng)上線iPhone 17e,4499元起

頭條要聞

中國留學(xué)生:很多人得知哈梅內(nèi)伊身亡后 決定盡快撤離

頭條要聞

中國留學(xué)生:很多人得知哈梅內(nèi)伊身亡后 決定盡快撤離

體育要聞

“想要我簽名嗎” 梅西逆轉(zhuǎn)后嘲諷對(duì)手主帥

娛樂要聞

李亞鵬與哥哥和解 只有一條真心話短信

財(cái)經(jīng)要聞

油價(jià)飆升 美伊沖突將如何攪動(dòng)全球經(jīng)濟(jì)

汽車要聞

國民SUV再添一員 瑞虎7L靜態(tài)體驗(yàn)

態(tài)度原創(chuàng)

藝術(shù)
教育
本地
親子
手機(jī)

藝術(shù)要聞

這四位老人的花鳥畫,竟讓人欲罷不能!

教育要聞

特別猛,但在留學(xué)生心中存在感很低的英國大學(xué)!

本地新聞

津南好·四時(shí)總相宜

親子要聞

45歲這年,我這個(gè)二胎媽媽決定做一件“瘋狂”的事

手機(jī)要聞

iPhone 17e外觀與前代幾乎一致 舊款iPhone 16e保護(hù)殼可繼續(xù)用

無障礙瀏覽 進(jìn)入關(guān)懷版