大家好，我是喬叔，今天咱們來(lái)聊聊美團(tuán)和港中文的新研究，看看多模態(tài)AI到底該不該“拆部門”，背后到底藏著什么門道

最近，一場(chǎng)關(guān)于AI模型架構(gòu)的討論引發(fā)了行業(yè)熱議。美團(tuán)和香港中文大學(xué)MMLab聯(lián)手，通過(guò)新技術(shù)重新審視多模態(tài)模型，直接戳破了一個(gè)行業(yè)慣例：為了提升性能，很多團(tuán)隊(duì)總習(xí)慣把復(fù)雜模型拆成專門處理“理解”和“生成”的兩個(gè)部分。

這種做法靠效率和表現(xiàn)搶眼，但用起來(lái)總覺得不太舒服。一拆兩用雖好，但算力和細(xì)節(jié)都有損失，企業(yè)和用戶都不免吃了點(diǎn)虧。

最初大家都憧憬統(tǒng)一模型能像人那樣，不只會(huì)看，還能馬上動(dòng)手修正，像“可靈O1”這種工具，就是想讓AI會(huì)根據(jù)一句話直接改圖做視頻。

但真正用起來(lái)才發(fā)現(xiàn)，這些全能型模型在單一任務(wù)上總是沒辦法和針對(duì)某一項(xiàng)的專業(yè)模型比拼。通用性和高效率之間，始終有一道難越的坎。

為了解決這個(gè)難題，業(yè)界紛紛嘗試把模型拆分，把處理圖片和生成內(nèi)容的任務(wù)隔開，好像公司分了兩個(gè)組，各自琢磨自己的事情。

這樣做性能確實(shí)提高了不少，但等到兩邊真正需要協(xié)作，溝通成本反而高了：數(shù)據(jù)來(lái)回傳遞，算力一漲再漲，還可能掉細(xì)節(jié)，最后工具體驗(yàn)也打了折扣。

正因如此，哪怕是熱門產(chǎn)品的開發(fā)團(tuán)隊(duì)都在公開場(chǎng)合強(qiáng)調(diào)要讓各項(xiàng)功能真正融合到一起，可見大家都在尋找新出路。

美團(tuán)和港中文的研究團(tuán)隊(duì)沒有止步于現(xiàn)有解決方法，他們抽絲剝繭地分析了拆分后模型內(nèi)部的協(xié)作機(jī)制。

他們發(fā)現(xiàn)，不管怎樣設(shè)計(jì)，模型理解和生成這兩個(gè)部分都在爭(zhēng)搶資源，始終有沖突。但更有趣的是，模型其實(shí)有能力自己調(diào)整分配，把協(xié)作做到更自然。

過(guò)去的拆分方法，其實(shí)就是硬把模型變成專攻一門的“專家”，但這并沒有解決核心矛盾，僅僅讓問(wèn)題隱形而已。

在這個(gè)基礎(chǔ)上，團(tuán)隊(duì)提出了AIA新技術(shù)，目標(biāo)非常明確，就是不再靠拆分，而是像師傅帶徒弟一樣，讓統(tǒng)一模型學(xué)會(huì)專業(yè)模型的能力。

通過(guò)把“專家模型”表現(xiàn)當(dāng)作訓(xùn)練指標(biāo)，AIA技術(shù)讓全能模型找準(zhǔn)方向，協(xié)作效果也越來(lái)越接近“專家級(jí)”。

實(shí)際測(cè)試很有說(shuō)服力，不管是統(tǒng)一型模型還是輕度拆分版本，加上AIA后表現(xiàn)都顯著提升，和行業(yè)里最頂尖的模型差距大大縮短。

這項(xiàng)技術(shù)不僅省去了調(diào)參數(shù)配比的麻煩，將原本繁瑣的流程簡(jiǎn)化成自動(dòng)化訓(xùn)練，開發(fā)者再也不用為數(shù)據(jù)怎么分配頭疼。訓(xùn)練成本降了下來(lái)，模型也更容易部署到實(shí)際應(yīng)用場(chǎng)景。

對(duì)中小企業(yè)來(lái)說(shuō)，這意味著只要掌握AIA技術(shù)，就能做出高性能又實(shí)用的AI工具，再也不用搭建一堆復(fù)雜的系統(tǒng)了，工具體驗(yàn)感也拉滿。

更重要的是，當(dāng)開發(fā)和算力成本下降，普通用戶可以享受到價(jià)格更實(shí)惠的智能服務(wù)，真正實(shí)現(xiàn)了科技的普惠。

這項(xiàng)研究?jī)r(jià)值，不僅僅在于解決了拆分帶來(lái)的困擾，更提醒行業(yè)應(yīng)把重心轉(zhuǎn)到如何高效協(xié)調(diào)模型內(nèi)部任務(wù)。

研究團(tuán)隊(duì)提出，不一定非要把各項(xiàng)任務(wù)徹底分開，讓模型學(xué)會(huì)自己取舍和管理才是關(guān)鍵。

未來(lái)，甚至可以探索讓模型不分任務(wù)標(biāo)簽，直接從數(shù)據(jù)中歸納統(tǒng)一邏輯，讓AI自主成長(zhǎng)。雖然挑戰(zhàn)很大，但這樣的思路才是真正推動(dòng)技術(shù)進(jìn)步的動(dòng)力所在。

整個(gè)行業(yè)不妨換個(gè)思路，少糾結(jié)架構(gòu)拆分，多關(guān)注團(tuán)隊(duì)協(xié)作和資源優(yōu)化。無(wú)論是內(nèi)容創(chuàng)作還是生活服務(wù)領(lǐng)域，高效的協(xié)同才真正代表未來(lái)。

多模態(tài)AI的精彩之處，不在于有多少單點(diǎn)高手，而在于它能不能把所有能力擰成一股繩。從美團(tuán)和港中文的創(chuàng)新舉措來(lái)看，這才是讓技術(shù)普惠、工具好用的關(guān)鍵。

隨著AIA和更多新方法出現(xiàn)，硬件和軟件的邊界變得越來(lái)越模糊，AI的發(fā)展路子也會(huì)變得更加寬廣。