剛剛過(guò)去的除夕夜，各路機(jī)器人爭(zhēng)奇斗艷，從仿生陪伴到打拳舞劍，從洗衣服講笑話到盤核桃遞水瓶，中央廣播電視總臺(tái)馬年春晚讓人類看到了具身智能的無(wú)限可能，也讓全球觀眾看到了百家爭(zhēng)鳴的中國(guó)科創(chuàng)產(chǎn)業(yè)。多年來(lái)，當(dāng)春晚逐漸成為前沿科技與藝術(shù)美學(xué)融合創(chuàng)新的平臺(tái)，越來(lái)越多的人已經(jīng)開始期待從這方舞臺(tái)看到更多智與韻的完美結(jié)合。

細(xì)數(shù)起來(lái)，“活人感”十足的機(jī)器人只是馬年春晚眾多“科技狠活”的其中之一。中央廣播電視總臺(tái)編務(wù)會(huì)議成員姜文波表示，近年來(lái)總臺(tái)以“思想+藝術(shù)+技術(shù)”為主線，牢牢把握科技賦能文化傳播的時(shí)代機(jī)遇，春晚的視音頻質(zhì)量和全媒體融合傳播不斷提升，已成為媒體科技大舞臺(tái)。

今年，總臺(tái)除了在超高清、菁彩聲等傳統(tǒng)優(yōu)勢(shì)技術(shù)上繼續(xù)開拓創(chuàng)新，在節(jié)目創(chuàng)作方面更是練成了屬于自己的“獨(dú)家秘笈”——人工智能、跨屏聯(lián)動(dòng)、虛實(shí)融合等被巧妙地搬進(jìn)演播廳、融入節(jié)目里。總臺(tái)技術(shù)局局長(zhǎng)劉朝暉表示，利用AI大模型和云計(jì)算等技術(shù)，馬年春晚在訓(xùn)練中融入大量中國(guó)風(fēng)語(yǔ)料，將國(guó)風(fēng)美學(xué)、真人實(shí)景和AR、XR充分融合，既展現(xiàn)中國(guó)AI的快速發(fā)展，又為觀眾打造出一臺(tái)科技感十足的視聽盛宴。

人工智能化意成真

當(dāng)人工智能的每一次迭代都會(huì)成為全社會(huì)熱議的話題，總臺(tái)春晚自然要記錄下AI發(fā)展的足跡。今年，生成式AI在春晚舞臺(tái)迎來(lái)大爆發(fā)，最引人矚目的應(yīng)用就是幾乎一力承擔(dān)了歌詠創(chuàng)意秀《賀花神》的視覺(jué)制作，且畫質(zhì)高達(dá)4K，用最前沿的科技完成了一次對(duì)中華優(yōu)秀傳統(tǒng)文化的創(chuàng)意詮釋。

短短幾分鐘的時(shí)間里，楊玉環(huán)、王昭君、陶淵明、張騫等代表農(nóng)歷十二月令的司花之神輪番翩然而出，用屬于自己的故事為大家呈現(xiàn)了四季流轉(zhuǎn)、生生不息的中華思想文化。

十二種花開花月份不同、十二花神故事背景也不同，短時(shí)間內(nèi)完成十二重時(shí)空轉(zhuǎn)場(chǎng)難度不小——采用傳統(tǒng)綠幕摳像合成的CG制作耗時(shí)耗力，想讓節(jié)目“在演播廳內(nèi)完成”還需對(duì)演播室進(jìn)行三維建模；AR則更擅長(zhǎng)在鏡頭前“貼片”，將視效覆蓋于真實(shí)場(chǎng)景之上。于是，創(chuàng)作團(tuán)隊(duì)創(chuàng)新采用AI實(shí)景拓展技術(shù)，讓演播廳里真正實(shí)現(xiàn)漫天繽紛。

雪地、巖石、樹木等均為AI制作

由AI制作的馬的毛發(fā)質(zhì)感順滑

AI實(shí)景拓展技術(shù)，顧名思義就是以AI為手段對(duì)舞臺(tái)實(shí)景結(jié)構(gòu)進(jìn)行拓展，使之成為一個(gè)既能實(shí)現(xiàn)創(chuàng)作團(tuán)隊(duì)想象、又可以實(shí)現(xiàn)與觀眾交互的動(dòng)態(tài)空間。

舞臺(tái)上，無(wú)論是活靈活現(xiàn)的動(dòng)物，還是飛花落雪、池塘大漠，甚至是在小朋友互動(dòng)時(shí)才會(huì)盛開的杏花，都由AI制作而成，甚至運(yùn)鏡軌跡都由AI模擬，可以說(shuō)除了演員和觀眾，“所見皆AI”。

杏花交到小朋友手上的同時(shí)盛開，對(duì)于傳統(tǒng)CG制作的難度極高，但AI僅需一條指令

AI在學(xué)習(xí)真實(shí)運(yùn)鏡后，根據(jù)運(yùn)鏡軌跡生成與之匹配的視效，與實(shí)景舞臺(tái)完美融合一體

創(chuàng)作團(tuán)隊(duì)依托總臺(tái)央視聽媒體大模型，以工作流的形式進(jìn)行內(nèi)容生成。比如在一個(gè)移動(dòng)鏡頭中要完成小貓?zhí)S、杏花開花等動(dòng)作，只需要對(duì)能夠控制動(dòng)作、形象、風(fēng)格等不同模塊下達(dá)指令，然后將不同工作節(jié)點(diǎn)進(jìn)行串聯(lián)，就可以形成一段完整的視頻了。

再比如荷花一節(jié)中，采用AI制作的場(chǎng)景相比其他特效包裝而言，融合度和真實(shí)感都會(huì)更好。因?yàn)锳I可以讓荷花在屏幕中的任意位置精準(zhǔn)生長(zhǎng)，同時(shí)在移動(dòng)鏡頭中保證物理結(jié)構(gòu)和透視關(guān)系的一致性，真正達(dá)到人在景中、層次錯(cuò)落有致的效果。

移動(dòng)鏡頭下，亭子的透視關(guān)系始終保持正確

采用AI制作的荷花可以生長(zhǎng)在觀眾前后。傳統(tǒng)AR只能將荷花置于觀眾前，造成遮擋

衣袂翻飛間，AI將人類腦海中的想象化為現(xiàn)實(shí)，不僅細(xì)節(jié)逼真、制作周期和成本更大幅降低。除了絕美的花神，《馭風(fēng)歌》一開場(chǎng)，AI便讓徐悲鴻《六駿圖》中栩栩如生的馬兒奔跑如飛；《快樂(lè)小馬》背景大屏幕上憨萌的小馬也來(lái)自AI……未來(lái)，生成式AI一定將會(huì)給春晚帶來(lái)更多電影級(jí)的精彩節(jié)目。

跨屏聯(lián)動(dòng)如影隨形

“也都是追夢(mèng)離家的孩童，行走在滿是年輪的旅程……”當(dāng)《人間共鳴》的旋律響起，舞臺(tái)上的演員向光而行，地屏上隨腳步擴(kuò)散的漣漪讓觀眾看清他來(lái)時(shí)的路。這段人與光影跨屏聯(lián)動(dòng)的“年輪足跡”，來(lái)自另一種AI技術(shù)的應(yīng)用——判定式AI。

演播廳內(nèi)，一套高精度AI視覺(jué)追蹤系統(tǒng)在時(shí)刻識(shí)別追蹤演員佩戴的智能信標(biāo)裝置，通過(guò)采集演員位置和姿態(tài)數(shù)據(jù)，與播控系統(tǒng)聯(lián)動(dòng)，讓AI即時(shí)生成匹配的視覺(jué)反饋，讓演員與舞臺(tái)同頻共振。

除了判定演員在舞臺(tái)上的位置，這項(xiàng)技術(shù)還能判別物體在鏡頭中的位置，從而更精準(zhǔn)地完成節(jié)目的特效制作。在歌曲《媽媽有座電影院》中，隨著扮演媽媽的演員打開放映機(jī)，膠片帶緩緩轉(zhuǎn)動(dòng)，媽媽的記憶便以光的形式“投映”到大屏幕上。這道光束由AR技術(shù)制作展現(xiàn)，但光從哪里打出、又投向哪里，則需要判定式AI識(shí)別放映機(jī)這一節(jié)目道具的位置后給出指令。這樣，即使在動(dòng)態(tài)鏡頭中，光束位置和軌跡依然可以保持精準(zhǔn)，完美呈現(xiàn)節(jié)目意境。

同樣需要對(duì)節(jié)目道具進(jìn)行位置捕捉的，還有雜技節(jié)目《繪新春》。這個(gè)由奧地利與中國(guó)兩家雜技團(tuán)攜手演繹、融合現(xiàn)代科技與傳統(tǒng)雜技的視覺(jué)表演，將眼花繚亂的動(dòng)作化為行云流水的光影，在除夕夜繪就了一幅春俗意象圖。

節(jié)目中，西方捷克棒和中國(guó)空竹閃轉(zhuǎn)騰挪，它們的軌跡以不足0.5秒的延時(shí)出現(xiàn)在舞臺(tái)大屏幕上，并根據(jù)不同道具特點(diǎn)，以不同筆觸作畫。

以翻轉(zhuǎn)動(dòng)作居多的捷克棒，在大屏幕上顯示的筆觸也以翻轉(zhuǎn)為主

走位更飄逸的空竹，顯示的筆觸多以點(diǎn)狀軌跡為主

那么，舞臺(tái)大屏幕上的光影是如何而來(lái)的呢？許多人以為這是提前錄制好的背景視效，由演員配合視頻完成演繹。其實(shí)恰恰相反：大屏幕上的光影軌跡是根據(jù)道具的實(shí)際位置生成的，而道具的位置則由紅外光定位識(shí)別——在捷克棒和空竹上，都安裝了紅外LED燈珠，持續(xù)發(fā)出人眼看不到的紅外光。

演播廳中布置的紅外攝像機(jī)則通過(guò)捕捉這些紅外光，同時(shí)以AI技術(shù)對(duì)紅外光定位區(qū)域進(jìn)行圖像視覺(jué)理解，分析光點(diǎn)的角度、距離變化，確定每一個(gè)LED燈珠位置，并實(shí)時(shí)計(jì)算出目標(biāo)道具的具體方位和移動(dòng)軌跡，從而實(shí)現(xiàn)持續(xù)跟蹤。

無(wú)論是上下翻飛的捷克棒打造的波浪，還是輕巧靈動(dòng)的空竹變幻的繡球，科技創(chuàng)新不僅讓人看到了科技本身，也讓更多人以全新方式，再次認(rèn)識(shí)更多的巔峰技藝。

虛實(shí)融合如夢(mèng)似蝶

你還記得曾經(jīng)的那個(gè)人嗎？或許，你們只在夢(mèng)里再次相遇。當(dāng)穿越了名為夢(mèng)的那道門，TA依然在那里靜靜地等待。而夢(mèng)醒之后，TA在哪里？似幻似真的歌曲《夢(mèng)底》，正如莊周夢(mèng)蝶，為大家講述了一個(gè)難以分清、或者說(shuō)不想分清現(xiàn)實(shí)與夢(mèng)境的愛(ài)情故事。

節(jié)目中，舞蹈演員在主舞臺(tái)翩然起舞。而每一道光門的背后又都是同一個(gè)她玉步輕隨，這樣的效果在一場(chǎng)直播節(jié)目中是怎樣做到的呢？答案就是首次在春晚舞臺(tái)應(yīng)用的超寫實(shí)數(shù)字人：通過(guò)70個(gè)4K攝像機(jī)對(duì)真人演員進(jìn)行360°全方位光場(chǎng)采集，形成可以完美復(fù)刻演員形象與肢體表演的高精度動(dòng)態(tài)三維模型，再通過(guò)AR技術(shù)的包裝，就能讓演員和她的“數(shù)字分身”同屏共舞了。

除舞臺(tái)中央的歌唱和舞蹈演員為真人外，圖片兩側(cè)和遠(yuǎn)端位置的“演員”均為超寫實(shí)數(shù)字人

真人舞蹈演員（中）和她的“數(shù)字分身”（右）同屏共舞

超寫實(shí)數(shù)字人最顯著的兩個(gè)特點(diǎn)是制作周期短和成品效果真。特別是對(duì)于春晚這種時(shí)間緊、動(dòng)作可能需要隨時(shí)調(diào)整的任務(wù)來(lái)說(shuō)，超寫實(shí)數(shù)字人可以在幾天時(shí)間內(nèi)完成影像采集和建模，而效果也足以達(dá)到以假亂真。

根據(jù)真人演員制作的超寫實(shí)數(shù)字人在近距離觀看也十分逼真

不知道你注意到?jīng)]有，馬年春晚與以往的春晚還有一點(diǎn)顯著不同，而且并不在節(jié)目上，而是在倒計(jì)時(shí)環(huán)節(jié)。往年，春晚都會(huì)單獨(dú)切出表盤倒計(jì)時(shí)的畫面，而今年，春晚將倒計(jì)時(shí)的鐘表“搬進(jìn)”了演播廳——在AR技術(shù)的助力下，全球觀眾都可以和演播廳內(nèi)的演職人員和現(xiàn)場(chǎng)觀眾一起見證零點(diǎn)鐘聲的敲響。

《馬上有奇跡》中，奔騰嘶鳴的群馬；《吉量》中，56個(gè)民族的孩子們看《山海經(jīng)》中奔馳而來(lái)的神馬；《追影》中，飲馬岸邊的白馬倒影……其實(shí)，AR技術(shù)在春晚舞臺(tái)上的應(yīng)用已極為成熟，甚至可以達(dá)到XR效果。比如在《致愛(ài)組曲》中，嚴(yán)絲合縫的特效讓觀眾看不出舞臺(tái)大屏幕和兩側(cè)豎屏的位置。演員們仿若真正置身于華麗的殿堂，演奏大家耳熟能詳?shù)拿�，真真正正�?shí)現(xiàn)了真假難辨的視覺(jué)效果。

通過(guò)視覺(jué)制作在演播廳內(nèi)打造更多變化的舞臺(tái)效果，XR技術(shù)起到了關(guān)鍵作用。今年，春晚在主舞臺(tái)正對(duì)面設(shè)計(jì)了一個(gè)XR舞臺(tái)，12米高、5米寬的立屏也為立體影像帶來(lái)更廣闊的延伸空間。《絲路古韻》開場(chǎng)的“石窟飛天”和《智造未來(lái)》中的“宇宙暢想”，都是依托XR舞臺(tái)進(jìn)行延展，不僅將以往需要提前制作短片插入節(jié)目才能實(shí)現(xiàn)的全景特效簡(jiǎn)化為現(xiàn)場(chǎng)演繹，更為節(jié)目轉(zhuǎn)場(chǎng)提供了更為自然的過(guò)渡方式。

科技創(chuàng)新既非一蹴而就也非一枝獨(dú)秀。作為春節(jié)最有影響力的文化符號(hào)之一，總臺(tái)春晚呈現(xiàn)的科技創(chuàng)新應(yīng)用既為觀眾帶來(lái)了觀賞性極佳的文化盛宴，也為媒體行業(yè)乃至文化產(chǎn)業(yè)、科技產(chǎn)業(yè)的發(fā)展提供了可借鑒的經(jīng)驗(yàn)�！凹夹g(shù)賦能，是總臺(tái)近年來(lái)文藝節(jié)目持續(xù)出新出彩的一大秘訣�！笨偱_(tái)文藝節(jié)目中心主任張國(guó)飛表示。春晚，這頓科技感藝術(shù)味俱佳的“文化年夜飯”，讓我們來(lái)年繼續(xù)！