国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

CVPR 2026 | BiMotion:用 B 樣條曲線重新定義 3D 角色運動生成

0
分享至





圖 1:同一文本描述下,AnimateAnyMesh(上)與 BiMotion(下)的生成結(jié)果對比。離散幀采樣導(dǎo)致動作語義中途斷裂,而連續(xù) B 樣條曲線則將完整動作保留至序列末尾。



  • 論文標題:BiMotion: B-spline Motion for Text-guided Dynamic 3D Character Generation
  • 論文:https://arxiv.org/abs/2602.18873
  • 項目主頁:https://wangmiaowei.github.io/BiMotion.github.io/
  • 代碼:https://github.com/wangmiaowei/BiMotion
  • 數(shù)據(jù)集(Hugging Face):https://huggingface.co/datasets/miaoweiwang/BiMotion
  • 第一作者主頁:https://wangmiaowei.github.io/

當你希望 AI 將 "士兵舉起手臂,向后傾身,然后身體向前撲倒" 這段文字轉(zhuǎn)化為一段 3D 角色動畫,現(xiàn)有大多數(shù)方法給出的答案是:一段搖搖晃晃、語義殘缺的短片段。這并非模型能力不足,問題的根源在于將運動表達為逐幀離散序列這一根本性的設(shè)計決策。

來自愛丁堡大學、康奈爾大學和密歇根大學的研究團隊提出了 BiMotion:一種基于 B 樣條曲線的文本驅(qū)動 3D 角色運動生成框架,即將在 CVPR 2026 正式發(fā)表,三位審稿人均給出 5/6 的高分評價。其核心主張只有一句話:運動是連續(xù)的,就應(yīng)該用連續(xù)的方式來表達。

離散幀的困境:

為什么現(xiàn)有方法總在 "丟情節(jié)"

目前主流 3D 運動生成方法大多采用 VAE–潛在擴散模型架構(gòu),該架構(gòu)具有固定的輸入窗口,每次只能處理固定幀數(shù)的運動序列。面對長度各異的真實運動數(shù)據(jù),現(xiàn)有方法只有兩條路:

  • 裁剪(Cropping):將長序列切割為短片段,模型僅能學到局部子動作,而非完整語義。如文本描述 "轉(zhuǎn)圈后停步",模型最終只能生成 "向右轉(zhuǎn)"。
  • 均勻降采樣(Downsampling):將 200 幀壓縮至 16 幀再復(fù)原,導(dǎo)致動作卡頓抖動,如同一份低幀率的 GIF。

問題的本質(zhì)在于:幀數(shù)僅代表時間采樣密度,與動作語義本身無關(guān)。一只龍扇翅膀的動作,用 24 幀記錄還是 120 幀記錄,語義始終是 "扇翅膀"。逐幀離散表示,是這一領(lǐng)域長期忽視的根本性瓶頸。

B 樣條:用少數(shù)控制點,刻畫完整軌跡

BiMotion 的核心思路是將每個頂點隨時間的運動軌跡,用一條連續(xù)可微的 B 樣條曲線來表達。B 樣條是計算機圖形學中的經(jīng)典參數(shù)曲線,僅用少量 "控制點" 便可描述一條光滑連續(xù)的軌跡;修改其中一個控制點只影響局部區(qū)域,不會破壞整體形狀。

具體實現(xiàn)上,BiMotion 將任意長度 T 的頂點位移序列,通過帶 Laplacian 正則化的最小二乘擬合,壓縮為固定數(shù)量(默認 16 個)控制點。該壓縮具有閉合解,在普通消費級 CPU 上,對 5 萬頂點、200 幀的網(wǎng)格,不到一秒即可完成。Laplacian 正則專門處理序列極短時的欠定義問題,相比 Ridge 正則,其生成的插值更自然、過渡更流暢,消融實驗對此給出了明確驗證。

模型架構(gòu):從控制點到可生成的運動潛空間



圖 2:BiMotion 整體架構(gòu)。訓練時(紅色箭頭)頂點差異轉(zhuǎn)化為 B 樣條控制點后編碼為運動潛碼;推理時(黑色箭頭)從噪聲采樣得到控制點,經(jīng) B 樣條重投影還原為任意長度的動畫序列。

BiMotion 整體采用 VAE 加 Rectified Flow Matching 的兩階段架構(gòu)。

B 樣條 VAE

編碼器將初始網(wǎng)格形狀與控制點一并壓縮為緊湊的運動潛碼,其中包含兩項關(guān)鍵設(shè)計:

  • 法線融合(Normal Fusion):將頂點法線信息以余弦相似度加權(quán)的方式融入點特征,有效解決網(wǎng)格上空間相近但內(nèi)在結(jié)構(gòu)屬于不同部位(如手指關(guān)節(jié))難以區(qū)分的問題,且無需依賴網(wǎng)格特定的拓撲結(jié)構(gòu),對任意拓撲均表現(xiàn)穩(wěn)健。
  • 多層級控制點嵌入(Multi-level Control Point Embedding):受小波包分解啟發(fā),將控制點逐層分解為從粗到細的多級殘差并分別編碼。相比標準頻率位置編碼,這種方式能同時捕捉運動的全局節(jié)奏與局部細節(jié)(如獅子尾巴的微小擺動),重建誤差大幅降低。



圖 3:B 樣條 VAE 架構(gòu)。編碼器(橙色區(qū)域)將初始形狀與控制點壓縮為潛碼;解碼器(綠色區(qū)域)重建控制點后通過 B 樣條重投影得到頂點差異序列。

損失函數(shù)設(shè)計

VAE 訓練采用三項聯(lián)合損失:擬合損失(直接對齊控制點)、對應(yīng)損失(通過 B 樣條重投影對齊原始軌跡,早期訓練收斂更快)、局部剛性損失(約束相鄰頂點間距在各幀保持一致,防止形變時產(chǎn)生表面 "融化" 的視覺偽影)。三項損失各司其職、互為補充,共同保證運動的精度、連續(xù)性與形狀一致性。

運動生成(Flow Matching DiT)

生成階段基于 Rectified Flow 與 Diffusion Transformer(DiT),以初始網(wǎng)格的潛碼和 CLIP 文本嵌入為條件,從高斯噪聲中逐步去噪并采樣出運動潛碼,再經(jīng) VAE 解碼器還原為完整動畫序列。由于 B 樣條重投影對幀數(shù)完全自由,推理時可按需輸出任意長度的動畫,如慢動作或子彈時間鏡頭。單張 A100 上平均推理時間僅為 4.4 秒。

BIMO 數(shù)據(jù)集:約 3.9 萬條帶文本標注的動態(tài)網(wǎng)格序列

為訓練 BiMotion,團隊整理并將開放 BIMO 數(shù)據(jù)集,包含約 39,000 條動態(tài)網(wǎng)格運動序列、總計逾 368 萬幀,涵蓋動物、機器人、人體、道具等多種類別。每條序列配有 3 條高質(zhì)量文本描述,全部展開為 16 個 B 樣條控制點存儲,便于直接使用。

DeformingThings4D 部分來自 OmniMotionGPT 的人工標注;Objaverse 部分則通過基于 GPT-5 的自動標注流水線生成,配備生成器與質(zhì)檢器兩個環(huán)節(jié),確保描述的準確性和風格一致性。

實驗結(jié)果:全面領(lǐng)先,效率顯著提升



圖 4:定性對比。左列:機器人與鹿的動作對比;右列:老虎與行走機器人的動作對比。紅圈標注基線方法產(chǎn)生的形變偽影,BiMotion 均表現(xiàn)清晰自然。

團隊在 20 個靜態(tài)網(wǎng)格上與三類代表性方法展開全面對比:前饋生成方法 AnimateAnyMesh、動態(tài)高斯生成方法 GVFDiffusion,以及基于視頻優(yōu)化重建的 V2M4。網(wǎng)格來源涵蓋 Meshy 生成資產(chǎn)與現(xiàn)有 3D 內(nèi)容庫,屬于所有基線中最為嚴格的評測設(shè)置之一。

在 VBench 自動評估的 5 項指標中,BiMotion 在整體一致性、時序穩(wěn)定性、美學質(zhì)量和動作豐富度四項均居最優(yōu)。其主體一致性略低于 AnimateAnyMesh,但消融實驗已揭示該差距為虛高:后者生成的動作幅度極小、近乎靜止,相鄰幀高度相似,致使該指標人為偏高。

20 位參與者的用戶研究中,BiMotion 在 "文本與動作匹配度"、"動作合理性"、"動作表現(xiàn)力" 三個維度的平均得分均超過 4.0/5.0,遠高于所有對比方法。效率方面,網(wǎng)格頂點規(guī)模從 9K 增至 24K 時,BiMotion 生成時間僅從 3.7 秒微增至 4.6 秒,峰值顯存從 1.1 GB 小幅升至 1.3 GB;而 AnimateAnyMesh 在同等條件下時間與顯存均翻倍以上,充分體現(xiàn) BiMotion 面向大規(guī)模網(wǎng)格的更強可擴展性。

局限性與未來展望

BiMotion 目前固定使用 16 個控制點,對高頻、極復(fù)雜運動細節(jié)的表達能力仍有提升空間;同時基于固定網(wǎng)格拓撲的假設(shè),暫不支持拓撲變化(如角色分裂、融合)的動畫生成。當前 BIMO 數(shù)據(jù)集規(guī)模(約 3.9 萬條)相較于視頻或圖像領(lǐng)域仍偏小,引入更大規(guī)模數(shù)據(jù)有望進一步提升質(zhì)量與泛化能力。代碼與 BIMO 數(shù)據(jù)集現(xiàn)已全部開源,歡迎社區(qū)共同建設(shè)。

作者簡介:

Miaowei Wang, 目前是愛丁堡大學信息學院的博士研究生(2023年10月入學),研究方向為計算機視覺與計算機圖形學中的可控運動表征(controllable motion representation)。他的博士研究由Amir Vaxman教授和Oisin Mac Aodha教授共同指導(dǎo)。 在此之前,他曾就讀于密歇根大學電氣工程與計算機科學系,在Jason Corso教授的指導(dǎo)下完成研究生學習。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點推薦
40分鐘挨了4輪導(dǎo)彈,以色列遭盟友背叛?中方:支持巴勒斯坦建國

40分鐘挨了4輪導(dǎo)彈,以色列遭盟友背叛?中方:支持巴勒斯坦建國

今墨緣
2026-03-26 14:05:55
伊朗議長和外長被移出美以清除名單,“時限4到5天”!專家:若達成協(xié)議最慌的是以色列!特朗普:油價漲、股市跌,我無所謂

伊朗議長和外長被移出美以清除名單,“時限4到5天”!專家:若達成協(xié)議最慌的是以色列!特朗普:油價漲、股市跌,我無所謂

每日經(jīng)濟新聞
2026-03-26 12:20:14
長護險制度全面推開!國家醫(yī)保局:參保人無論來自農(nóng)村還是城市,從同一個資金池報銷費用

長護險制度全面推開!國家醫(yī)保局:參保人無論來自農(nóng)村還是城市,從同一個資金池報銷費用

紅星新聞
2026-03-26 11:28:05
春天,這堿性菜再貴也要多吃,殺菌強免疫,補鈣補鉀兩不誤,好吃

春天,這堿性菜再貴也要多吃,殺菌強免疫,補鈣補鉀兩不誤,好吃

阿龍美食記
2026-03-25 10:38:40
向鵬林詩棟退出世界杯

向鵬林詩棟退出世界杯

乒乓11分
2026-03-26 09:48:25
緊急提醒:截圖別亂發(fā),暗水印能直接找到你的本人

緊急提醒:截圖別亂發(fā),暗水印能直接找到你的本人

戧詞奪理
2026-03-25 10:35:41
Manus終于喝下自己藏好的毒

Manus終于喝下自己藏好的毒

藍媒匯財經(jīng)plus
2026-03-25 21:27:26
潘漢年被認定有三條罪名,陳云作證說:這三條罪名都不成立

潘漢年被認定有三條罪名,陳云作證說:這三條罪名都不成立

浩渺青史
2026-03-25 12:52:37
事情鬧大了,日本內(nèi)閣連發(fā)公告,中國的態(tài)度,告訴了世界一個事實

事情鬧大了,日本內(nèi)閣連發(fā)公告,中國的態(tài)度,告訴了世界一個事實

書紀文譚
2026-03-26 16:24:14
30萬!不是工資,是汪峰每個月要給的撫養(yǎng)費

30萬!不是工資,是汪峰每個月要給的撫養(yǎng)費

小光侃娛樂
2026-03-25 16:45:05
河南鄭州,10歲男孩在上課時與同桌發(fā)生矛盾。老師竟然讓兩...

河南鄭州,10歲男孩在上課時與同桌發(fā)生矛盾。老師竟然讓兩...

網(wǎng)絡(luò)易不易
2026-03-26 14:05:04
20人老頭樂公司起訴小米汽車,把網(wǎng)友們CPU干冒煙了……

20人老頭樂公司起訴小米汽車,把網(wǎng)友們CPU干冒煙了……

柴狗夫斯基
2026-03-26 11:44:33
四川一車主送孩子上學違規(guī)停車,孩子“開門殺”將騎電動車母女絆倒,車主直接開車駛離,當?shù)亟痪号懦岂{、毒駕嫌疑,司機賠償了醫(yī)藥費

四川一車主送孩子上學違規(guī)停車,孩子“開門殺”將騎電動車母女絆倒,車主直接開車駛離,當?shù)亟痪号懦岂{、毒駕嫌疑,司機賠償了醫(yī)藥費

瀟湘晨報
2026-03-26 14:17:08
為什么氰化物入口幾秒,還沒到胃呢,人立馬就會死了?

為什么氰化物入口幾秒,還沒到胃呢,人立馬就會死了?

心中的麥田
2026-03-24 19:53:20
轟25+3+6!把球給杜蘭特,申京賽后如夢初醒,烏度卡也找到答案了

轟25+3+6!把球給杜蘭特,申京賽后如夢初醒,烏度卡也找到答案了

巴叔GO聊體育
2026-03-26 16:24:50
沙特實戰(zhàn)封神!中國“天盾”21發(fā)全中,15億美制系統(tǒng)竟慘遭反殺

沙特實戰(zhàn)封神!中國“天盾”21發(fā)全中,15億美制系統(tǒng)竟慘遭反殺

素衣讀史
2026-03-25 21:26:46
倒計時36天,黃金將爆發(fā)拋售潮?中國開始行動,鄰國限制金條出口

倒計時36天,黃金將爆發(fā)拋售潮?中國開始行動,鄰國限制金條出口

觸摸史跡
2026-03-26 16:29:23
黃天鵝就雞蛋角黃素抽檢結(jié)果發(fā)布聲明,三地監(jiān)管部門抽檢結(jié)果反饋,雞蛋未檢出角黃素

黃天鵝就雞蛋角黃素抽檢結(jié)果發(fā)布聲明,三地監(jiān)管部門抽檢結(jié)果反饋,雞蛋未檢出角黃素

每日經(jīng)濟新聞
2026-03-25 18:11:54
筱梅曬圖,汪寶滿月,桌子上僅擺6個菜,發(fā)文稱簡單即是幸福!

筱梅曬圖,汪寶滿月,桌子上僅擺6個菜,發(fā)文稱簡單即是幸福!

潮鹿逐夢
2026-03-26 11:02:11
三亞夢幻同框!鐘麗緹夫婦偶遇張紀中一家,現(xiàn)場畫面太溫馨

三亞夢幻同框!鐘麗緹夫婦偶遇張紀中一家,現(xiàn)場畫面太溫馨

眼底星碎
2026-03-26 11:09:37
2026-03-26 17:07:00
機器之心Pro incentive-icons
機器之心Pro
專業(yè)的人工智能媒體
12606文章數(shù) 142593關(guān)注度
往期回顧 全部

科技要聞

Meta高管狂分百億期權(quán),700名員工卻下崗

頭條要聞

國防部:日本侵略過所有周邊國家 至今都沒有真正反省

頭條要聞

國防部:日本侵略過所有周邊國家 至今都沒有真正反省

體育要聞

申京努力了,然而杜蘭特啊

娛樂要聞

張雪峰家人首發(fā)聲 不設(shè)追思會喪事從簡

財經(jīng)要聞

長護險誰能享受?享受多少?解答來了

汽車要聞

一汽奧迪A6L e-tron開啟預(yù)售 CLTC最大續(xù)航815km

態(tài)度原創(chuàng)

健康
游戲
教育
手機
房產(chǎn)

轉(zhuǎn)頭就暈的耳石癥,能開車上班嗎?

商業(yè)互吹or真心話?制作人玩《紅色沙漠》忘記工作

教育要聞

2026湖北高職單招工作啟動

手機要聞

iPhone「自己打電話」是Bug!蘋果終于承認了,怎么回事?

房產(chǎn)要聞

質(zhì)價比標桿!三亞首創(chuàng)浮島全景艙亮相,還得是萬科!

無障礙瀏覽 進入關(guān)懷版