本文精選自《廣播與電視技術(shù)》2025第11期，閱讀原文請(qǐng)?jiān)L問(wèn)“廣電獵酷”小程序“期刊在線”。

近年來(lái)，隨著人工智能與大數(shù)據(jù)的快速發(fā)展及其在傳媒行業(yè)的廣泛應(yīng)用，常州廣播電視臺(tái)順應(yīng)技術(shù)趨勢(shì)，啟動(dòng)了“AI驅(qū)動(dòng)多模態(tài)”融媒大數(shù)據(jù)服務(wù)項(xiàng)目。該項(xiàng)目旨在運(yùn)用人工智能與大數(shù)據(jù)分析技術(shù)，將傳統(tǒng)媒體資源轉(zhuǎn)化為智慧媒體內(nèi)容，以提升全媒體內(nèi)容的管理與運(yùn)營(yíng)效率。本文圍繞該背景，探討項(xiàng)目的實(shí)施過(guò)程、方法及學(xué)術(shù)價(jià)值，以期為傳媒行業(yè)提供新思路，促進(jìn)創(chuàng)新發(fā)展。

本文作者：

姚源，張迎慶，查駿元，陳珂，張俊欽 常州廣播電視臺(tái)

第一作者簡(jiǎn)介：

姚源（1984—），男，常州廣播電視臺(tái)技術(shù)中心工程師，本科。主要從事廣播電視技術(shù)維護(hù)與管理、媒體融合、智 能媒資、AIGC應(yīng)用方面的研究和技術(shù)服務(wù)工作，曾參與過(guò)常州廣播電視臺(tái)搬遷至現(xiàn)代傳媒中心的整體技術(shù)流程設(shè)計(jì)、常州臺(tái)高清化改造、智能媒資平臺(tái)的設(shè)計(jì)與建設(shè)等重大項(xiàng)目的技術(shù)和管理工作。

NO.1

智能融媒平臺(tái)的創(chuàng)建思路

為了盤(pán)活全媒體內(nèi)容資產(chǎn)，實(shí)現(xiàn)全媒體內(nèi)容管理，常州廣播電視臺(tái)啟動(dòng)了“AI 驅(qū)動(dòng)多模態(tài)”融媒大數(shù)據(jù)服務(wù)項(xiàng)目的建設(shè)。全面匯聚電視、廣播、新媒體、報(bào)紙?jiān)趦?nèi)的全媒體資源， 利用人工智能、大數(shù)據(jù)分析、大語(yǔ)言模型等先進(jìn)技術(shù)，打造新型智慧媒體。將常州臺(tái)積累近 40 年的珍貴歷史資料轉(zhuǎn)換為數(shù)據(jù)和功能，賦能節(jié)目生產(chǎn)，讓業(yè)務(wù)側(cè)的應(yīng)用創(chuàng)新和平臺(tái)側(cè)的智能能力形成優(yōu)勢(shì)互補(bǔ)，釋放更大價(jià)值。

NO.2

智能融媒平臺(tái)的系統(tǒng)架構(gòu)

2.1 智能融媒平臺(tái)技術(shù)方案

項(xiàng)目采用私有云 + 智能中臺(tái) +AI 本地化部署的整體框架，整合大模型、人臉識(shí)別、語(yǔ)音識(shí)別等智能引擎，建設(shè)八大業(yè)務(wù)功能板塊。

2.2 智能融媒平臺(tái)的項(xiàng)目架構(gòu)與規(guī)模

本項(xiàng)目基于超融合私有云架構(gòu)，采用微服務(wù)分層設(shè)計(jì)，通過(guò)容器化（Docker）部署，保障應(yīng)用組件在隔離環(huán)境中高效運(yùn)行。利用Kubernetes實(shí)現(xiàn)容器編排，支持自動(dòng)化部署、擴(kuò)展與管理，提升系統(tǒng)可伸縮性與可靠性。借助ZooKeeper進(jìn)行配置管理、服務(wù)注冊(cè)與發(fā)現(xiàn)，實(shí)現(xiàn)去中心化集群管理，并結(jié)合三副本部署確保高可用性、數(shù)據(jù)一致性與容錯(cuò)能力，同時(shí)優(yōu)化性能、簡(jiǎn)化擴(kuò)展。

項(xiàng)目配置了8臺(tái)超融合服務(wù)器與11塊GPU深度計(jì)算卡，具備強(qiáng)大處理能力。

NO.3

智能融媒平臺(tái)的建設(shè)

按照平臺(tái)功能模塊，主要建設(shè)八大功能板塊，如圖1所示。

圖 1系統(tǒng)整體架構(gòu)圖

1.智能媒資庫(kù)管理

提供電視、廣播、新媒體三大媒體渠道圖文視音頻內(nèi)容的統(tǒng)一上載、回遷、歸檔智能標(biāo)引編目、人工審校等功能。

2.多模態(tài)融合智能處理

整合人臉識(shí)別、通用視覺(jué)識(shí)別、智能審核、0CR、語(yǔ)音識(shí)別、自然語(yǔ)言處理等多種智能引擎，可對(duì)視音頻、圖文等全媒體內(nèi)容進(jìn)行多模態(tài)融合智能處理，可對(duì)智能處理生成的文本標(biāo)簽、視覺(jué)標(biāo)簽進(jìn)行歸一、合并、去重等融合處理。

3.多維度標(biāo)簽和內(nèi)容大數(shù)據(jù)

基于多模態(tài)標(biāo)簽知識(shí)圖譜，構(gòu)建內(nèi)容門(mén)戶，提供全媒體全文檢索及人物、事件、機(jī)構(gòu)等多維度分類檢索，支持標(biāo)簽實(shí)體的深度聚合、關(guān)聯(lián)鉆取與分析，并實(shí)現(xiàn)知識(shí)圖譜的可視化及自定義管理。

4. AI問(wèn)答

采用大語(yǔ)言模型將海量稿件轉(zhuǎn)化為本地知識(shí)庫(kù)，通過(guò)向量化分析抽取文本關(guān)鍵信息，構(gòu)建知識(shí)圖譜，實(shí)現(xiàn) AI 智能問(wèn)答。

5. AIGC

通過(guò)整合 AIGC 技術(shù)，輔助創(chuàng)意構(gòu)思、文案撰寫(xiě)及多媒體內(nèi)容生成，實(shí)現(xiàn)個(gè)性化內(nèi)容的高效生產(chǎn)，極大地提升創(chuàng)作效率與內(nèi)容質(zhì)量，滿足新媒體運(yùn)營(yíng)的多樣化需求。

6.融媒生產(chǎn)應(yīng)用集成

圍繞融媒體生產(chǎn)需求，提供智能處理功能與數(shù)據(jù)接口，涵蓋智能拆條、審核、非編上唱詞、短視頻快剪等工具，支撐新媒體、電視、廣播的智能化融合生產(chǎn)。

7.新媒體運(yùn)營(yíng)支撐

針對(duì)自有客戶端 APP 等新媒體業(yè)務(wù)運(yùn)營(yíng)對(duì)智能化處理和內(nèi)容數(shù)據(jù)服務(wù)的需求，提供新媒體運(yùn)營(yíng)類的數(shù)據(jù)接口、智能處理接口等各類功能支持。

8.多租戶擴(kuò)展模式

項(xiàng)目將平臺(tái)的算力和服務(wù)以租戶形式輸出給第三方使用。以私有云為底座，通過(guò)容器云的軟件部署方式實(shí)現(xiàn)應(yīng)用服務(wù)的彈性擴(kuò)展。支持內(nèi)容管理、智能處理和內(nèi)容大數(shù)據(jù)服務(wù)的按需定制。

NO.4

應(yīng)用成效

項(xiàng)目以租戶形式對(duì)外輸出平臺(tái)算力與各類服務(wù)。基于私有云與容器云實(shí)現(xiàn)彈性擴(kuò)展，支持內(nèi)容管理、智能處理及大數(shù)據(jù)服務(wù)的按需定制。

目前平臺(tái)已與常州市政協(xié)、金壇電視臺(tái)等合作，以常州臺(tái)近40年視頻素材為基礎(chǔ)，為租戶提供低碼率素材的媒資管理服務(wù)，實(shí)現(xiàn)鏡像存儲(chǔ)備份，并輔助孵化區(qū)域特色標(biāo)簽。同時(shí)，依托智能中臺(tái)的AI能力，為租戶提供智能標(biāo)簽生成服務(wù)，支撐其自動(dòng)化編目、多模態(tài)檢索、智能標(biāo)引、人物刷庫(kù)、專題聚類等業(yè)務(wù)場(chǎng)景。

NO.5

智能融媒平臺(tái)的主要技術(shù)創(chuàng)新點(diǎn)

5.1基于多引擎融合的智能中臺(tái)設(shè)計(jì)

項(xiàng)目集成索貝與騰訊智能引擎，由智能中臺(tái)統(tǒng)一管理與調(diào)度，并通過(guò)融合智能API網(wǎng)關(guān)對(duì)外輸出能力。通過(guò)對(duì)多引擎處理結(jié)果進(jìn)行合并、去重、對(duì)比等融合推理，形成一套多引擎智能處理方法。

區(qū)別于常規(guī)單引擎方案，本項(xiàng)目采用雙引擎并行處理策略，在視覺(jué)識(shí)別與自然語(yǔ)言處理領(lǐng)域融合雙方技術(shù)優(yōu)勢(shì)，通過(guò)結(jié)果融合推理顯著提升了識(shí)別準(zhǔn)確性與可靠性，如圖2所示。

圖2 智能中臺(tái)結(jié)構(gòu)圖

5.2人機(jī)共建的多模態(tài)多維度標(biāo)簽知識(shí)圖譜

項(xiàng)目通過(guò)人機(jī)協(xié)作，構(gòu)建了覆蓋六大領(lǐng)域、二十四個(gè)維度的標(biāo)簽知識(shí)圖譜。結(jié)合多模態(tài)智能識(shí)別技術(shù)，形成高質(zhì)量的知識(shí)關(guān)聯(lián)網(wǎng)絡(luò)，顯著拓展了內(nèi)容數(shù)據(jù)的分析維度，為深度洞察提供了知識(shí)基礎(chǔ)。

5.3基于多維度、任意標(biāo)簽實(shí)體的內(nèi)容大數(shù)據(jù)洞察

知識(shí)庫(kù)基于圖數(shù)據(jù)庫(kù)構(gòu)建，支持復(fù)雜知識(shí)圖譜，包含人物、機(jī)構(gòu)、事件、實(shí)體關(guān)系等核心庫(kù)，作為標(biāo)簽庫(kù)的重要補(bǔ)充。通過(guò)智能與人工融合標(biāo)引約5000萬(wàn)次，生成300萬(wàn)個(gè)標(biāo)簽，構(gòu)建了涵蓋六大領(lǐng)域、二十四個(gè)分類維度，包含上百個(gè)一級(jí)分類、數(shù)千個(gè)二級(jí)分類的多模態(tài)多維度標(biāo)簽知識(shí)圖譜，顯著提升了內(nèi)容標(biāo)記能力。

5.4用于數(shù)字內(nèi)容資產(chǎn)智能處理的數(shù)據(jù)治理方法

項(xiàng)目建立了用于數(shù)字內(nèi)容資產(chǎn)智能處理與標(biāo)引質(zhì)量評(píng)估的業(yè)務(wù)指標(biāo)體系，包括節(jié)目屬性版本、周期性節(jié)目庫(kù)存缺漏、智能識(shí)別處理、標(biāo)簽量與分類等維度的量化分析。支持對(duì)上述指標(biāo)進(jìn)行定期自動(dòng)化統(tǒng)計(jì)與報(bào)表生成，以便掌握標(biāo)簽產(chǎn)出情況，實(shí)現(xiàn)對(duì)智能處理能力與多維度標(biāo)簽數(shù)量、質(zhì)量的精細(xì)化洞察，從而持續(xù)開(kāi)展數(shù)據(jù)治理。

5.5應(yīng)用大語(yǔ)言模型，創(chuàng)建廣電知識(shí)庫(kù)問(wèn)答系統(tǒng)

項(xiàng)目核心是構(gòu)建統(tǒng)一高效的知識(shí)庫(kù)問(wèn)答系統(tǒng)，以處理海量?jī)?nèi)容并提供高質(zhì)量檢索?；贚M Studio+MaxKB框架實(shí)現(xiàn)流程自動(dòng)化與標(biāo)準(zhǔn)化，提升開(kāi)發(fā)效率。系統(tǒng)依托大語(yǔ)言模型Qwen1.5，自動(dòng)從文本中抽取實(shí)體、關(guān)系與事件，結(jié)構(gòu)化構(gòu)建知識(shí)圖譜，并通過(guò)MaxKB完成存儲(chǔ)與查詢。

在業(yè)務(wù)層面，系統(tǒng)整合多源信息，構(gòu)建了包含80萬(wàn)條音視頻解析內(nèi)容的知識(shí)庫(kù)，結(jié)合檢索增強(qiáng)生成（RAG）技術(shù)，提供高效、準(zhǔn)確的自然語(yǔ)言問(wèn)答接口，顯著提升了資料檢索與歸納能力。

5.6 AI在線工具集

通過(guò)結(jié)合智能繪圖技術(shù)，可以實(shí)現(xiàn)自動(dòng)化的 AI 創(chuàng)作，極大地提升內(nèi)容生產(chǎn)的效率和質(zhì)量。如圖3所示。

圖3 AI工具集應(yīng)用界面

具體而言，利用麒智和騰訊提供的人臉引擎、語(yǔ)音引擎以及自然語(yǔ)義處理引擎，構(gòu)建一系列功能強(qiáng)大的AI 工具，這些工具包括但不限于：

1.語(yǔ)音轉(zhuǎn)文本工具：通過(guò)語(yǔ)音引擎將音頻內(nèi)容實(shí)時(shí)轉(zhuǎn)換為文字，便于編輯和存檔。

2.圖片人臉識(shí)別：使用人臉引擎自動(dòng)識(shí)別圖片中的人物，并可進(jìn)一步分析人物表情、年齡等信息。

3.圖片字幕識(shí)別：結(jié)合圖像處理和自然語(yǔ)言處理技術(shù)，自動(dòng)從視頻或圖片中提取并生成字幕。

4.文本關(guān)鍵詞提取：利用自然語(yǔ)義引擎分析文本內(nèi)容，自動(dòng)提取關(guān)鍵信息和主題詞匯。

5.文本摘要生成：基于深度學(xué)習(xí)算法，自動(dòng)生成文本的簡(jiǎn)潔摘要，幫助用戶快速把握文章主旨。

6.文本校對(duì)與編輯：運(yùn)用自然語(yǔ)言處理技術(shù)進(jìn)行語(yǔ)法檢查、拼寫(xiě)校正和風(fēng)格統(tǒng)一，提高文本質(zhì)量。

此外，還可以探索更多創(chuàng)新應(yīng)用，如利用智能繪圖技術(shù)輔助視覺(jué)設(shè)計(jì)，或者開(kāi)發(fā)能夠理解并回應(yīng)用戶查詢的智能助手等。這些 AI 工具的應(yīng)用不僅能夠顯著提高節(jié)目制作的效率，還能為創(chuàng)意工作帶來(lái)更多可能性，推動(dòng)媒體行業(yè)的創(chuàng)新發(fā)展。

NO.6

結(jié)束語(yǔ)

在信息化和數(shù)字化迅速發(fā)展的今天，常州廣播電視臺(tái)通過(guò)實(shí)施“AI 驅(qū)動(dòng)多模態(tài)”的智能融媒平臺(tái)項(xiàng)目，展示了如何利用人工智能與大數(shù)據(jù)技術(shù)有效轉(zhuǎn)化和升級(jí)傳統(tǒng)媒體資源。此項(xiàng)目不僅是技術(shù)進(jìn)步的體現(xiàn)，更是對(duì)傳統(tǒng)媒體行業(yè)轉(zhuǎn)型升級(jí)和創(chuàng)新發(fā)展的一次深刻探索。通過(guò)整合先進(jìn)的智能處理技術(shù)和構(gòu)建多模態(tài)知識(shí)圖譜，常州廣播電視臺(tái)實(shí)現(xiàn)了對(duì)全媒體內(nèi)容管理的革新，提升了運(yùn)營(yíng)效率，賦能了節(jié)目生產(chǎn)，釋放了數(shù)據(jù)價(jià)值。這一創(chuàng)新實(shí)踐不僅為媒體行業(yè)提供了寶貴的經(jīng)驗(yàn)，也為其他行業(yè)的數(shù)字化轉(zhuǎn)型提供了示范。希望未來(lái)有更多此類創(chuàng)新項(xiàng)目，共同推動(dòng)我國(guó)數(shù)字經(jīng)濟(jì)的發(fā)展和繁榮。

end

參考文獻(xiàn)

[1] 王海濤. 人工智能技術(shù)驅(qū)動(dòng)下融媒體平臺(tái)構(gòu)建研究[D]. 北京: 清華大學(xué), 2022.

[2] 李明霞 . 多模態(tài)數(shù)據(jù)融合算法在智能媒體系統(tǒng)中的應(yīng)用 [D]. 上海 : 復(fù)旦大學(xué) , 2023.

《廣播與電視技術(shù)》、“廣電獵酷”廣告經(jīng)營(yíng)與商務(wù)合作代理：

北京中廣信通文化傳媒有限公司

聯(lián)系人：李聰

聯(lián)系電話：18518221868

好文共賞請(qǐng)轉(zhuǎn)發(fā) 有話要說(shuō)請(qǐng)留言