“云”養(yǎng)熊貓是一種怎樣的體驗(yàn)？

在廣工，一群騰創(chuàng)班的同學(xué)們

為大熊貓開發(fā)了一個(gè)

智能行為識(shí)別算法模型

將這個(gè)想法變成了現(xiàn)實(shí)

這是全球首個(gè)

大熊貓行為識(shí)別數(shù)據(jù)庫

行為智能識(shí)別模型

智慧系統(tǒng)

能夠準(zhǔn)確識(shí)別圈養(yǎng)大熊貓的

進(jìn)食、喝水和睡覺等日常行為

識(shí)別準(zhǔn)確率超過了80%

產(chǎn)教融合項(xiàng)目驅(qū)動(dòng)

廣工與騰訊云

創(chuàng)新產(chǎn)學(xué)研合作新范式

助00后大學(xué)生研發(fā)大熊貓“AI奶爸”

“大熊貓今天吃東西正常嗎？”“大熊貓更喜歡吃什么東西？”“大熊貓今天喝夠水了嗎？”……過去需要大熊貓奶爸現(xiàn)場查驗(yàn)甚至需要24小時(shí)觀察記錄的問題，迎來了AI的遠(yuǎn)程解答。

“全球首個(gè)大熊貓行為智能識(shí)別模型”由廣工信息工程學(xué)院電子信息工程（騰創(chuàng)班）（下簡稱“廣工騰創(chuàng)班”）十余名00后大學(xué)生訓(xùn)練開發(fā)，可智能識(shí)別圈養(yǎng)大熊貓進(jìn)食、喝水和睡覺等日常行為，準(zhǔn)確率超過了80%。算法模型可將大熊貓日常行為的記錄過程智能化、數(shù)字化，填補(bǔ)該研究領(lǐng)域的空白，對大熊貓保護(hù)具有重大意義。5月17日，該模型在騰訊云生成式AI產(chǎn)業(yè)應(yīng)用峰會(huì)上展出。廣工騰創(chuàng)班師生應(yīng)邀參加峰會(huì)，受到央視網(wǎng)等多家媒體采訪報(bào)道。

“AI+大熊貓保護(hù)”項(xiàng)目源于2023年暑假。在一次人工智能專業(yè)課結(jié)束后，廣工騰創(chuàng)班的幾名同學(xué)找到蔡念教授提出“為大熊貓開發(fā)一個(gè)智能行為識(shí)別算法模型”，能夠智能識(shí)別大熊貓異常行為并及時(shí)預(yù)警。在蔡念教授的鼓勵(lì)下，項(xiàng)目組組長藍(lán)學(xué)深，組織10多名同學(xué)分成前端組、后端組、算法組、云端組四個(gè)小組，展開了數(shù)據(jù)采集、算法訓(xùn)練、智慧系統(tǒng)開發(fā)等工作。

2024年1月，大熊貓項(xiàng)目組在廣工騰創(chuàng)班負(fù)責(zé)人蔡念教授帶領(lǐng)下前往中國大熊貓保護(hù)研究中心進(jìn)行技術(shù)交流。

在大熊貓專家、騰訊導(dǎo)師、學(xué)業(yè)教師指導(dǎo)下，從盛夏到寒冬，跨越200多個(gè)日日夜夜和無數(shù)場線上會(huì)議。廣工“AI+大熊貓保護(hù)”項(xiàng)目組同學(xué)們從5000小時(shí)的原始視頻數(shù)據(jù)中精選出120小時(shí)有效行為視頻，在騰訊云TI-ONE平臺(tái)快速抽幀得到220萬張大熊貓圖片，構(gòu)建起業(yè)內(nèi)首個(gè)高質(zhì)量的大熊貓行為數(shù)據(jù)集。借助騰訊云TI-ONE平臺(tái)，同學(xué)們對數(shù)據(jù)集進(jìn)行篩選、數(shù)據(jù)標(biāo)注、清洗以及算法訓(xùn)練，最終訓(xùn)練出首個(gè)大熊貓行為智能識(shí)別模型。識(shí)別圈養(yǎng)大熊貓進(jìn)食、喝水和睡覺等日常行為，準(zhǔn)確率超過了80%，成為照看大熊貓的AI超級(jí)奶爸。

騰訊云基于公有云、人工智能開發(fā)服務(wù)平臺(tái)騰訊云TI-ONE及一站式研發(fā)管理平臺(tái)CODING DevOps等產(chǎn)品和資源，為項(xiàng)目組提供從底層算力、訓(xùn)練環(huán)境部署、數(shù)據(jù)標(biāo)注到模型訓(xùn)練的全鏈路技術(shù)與平臺(tái)支持，幫助同學(xué)們了克服大熊貓行為標(biāo)注、算法模型訓(xùn)練、協(xié)同開發(fā)、代碼優(yōu)化等難題，縮短算法模型訓(xùn)練時(shí)長，加速成果落地。

新型產(chǎn)學(xué)研助力創(chuàng)新人才培養(yǎng)

騰訊云教育行業(yè)高級(jí)架構(gòu)師劉永杰介紹，騰訊云TI平臺(tái)為數(shù)據(jù)標(biāo)注的質(zhì)效提升提供了關(guān)鍵的技術(shù)支撐。采用平臺(tái)半自動(dòng)標(biāo)注功能，同學(xué)們得以提前完成大熊貓行為標(biāo)注，并快速清晰篩選出具有鮮明行為特征的幀級(jí)圖像數(shù)據(jù)，不僅提高了效率，也比手工標(biāo)注更加精準(zhǔn)。

“項(xiàng)目的順利推進(jìn)，離不開同學(xué)們的努力，離不開中國大熊貓保護(hù)研究中心專家的專業(yè)知識(shí)指導(dǎo)，也離不開騰訊云提供的技術(shù)指導(dǎo)和開發(fā)平臺(tái)支持?！?騰創(chuàng)班負(fù)責(zé)人，項(xiàng)目指導(dǎo)老師、廣工教授、博士生導(dǎo)師蔡念表示，行業(yè)出題，院校答題，騰訊助力，共建共享。

“名師引領(lǐng)，真實(shí)場景，以賽促學(xué)，朋輩碰撞，這是一次產(chǎn)教融合教學(xué)模式的生動(dòng)案例”， 廣工信息工程學(xué)院張俊副院長表示，項(xiàng)目制是廣工騰創(chuàng)班拔尖人才培養(yǎng)的模式，在實(shí)踐情境下鍛煉學(xué)生的思維方式，激發(fā)內(nèi)生動(dòng)力，培養(yǎng)解決復(fù)雜工程問題的能力。廣工騰創(chuàng)班將繼續(xù)努力構(gòu)建“面向?qū)W科前沿、行業(yè)產(chǎn)業(yè)、區(qū)域發(fā)展”的協(xié)同創(chuàng)新模式，緊密貼合產(chǎn)業(yè)實(shí)際案例和技術(shù)前沿，全力培養(yǎng)AI領(lǐng)域創(chuàng)新人才。

素材|信息工程學(xué)院

編輯 | 袁立群

運(yùn)營團(tuán)隊(duì)|學(xué)生新聞中心

責(zé)編|王宇涵

初審|李成瑤

復(fù)審|杜清