著眼未來(lái) 元宇宙概念成大賽新亮點(diǎn)
當(dāng)元宇宙成為數(shù)字經(jīng)濟(jì)時(shí)代最具想象力的新趨勢(shì),芒果TV已提前布局虛擬制片、數(shù)字藏品等元宇宙領(lǐng)域的業(yè)務(wù)。在今年的大賽,元宇宙場(chǎng)景中基礎(chǔ)技術(shù)之一的“自由視角”成為新賽題,吸引了超過(guò)300支隊(duì)伍加入該賽道的角逐。
元宇宙世界由各種虛擬形象和虛擬場(chǎng)景構(gòu)成,因此需要大量的建模與算力。“自由視角”簡(jiǎn)而言之,即可在原始數(shù)據(jù)不足的基礎(chǔ)上通過(guò)算法模型進(jìn)行“預(yù)測(cè)”與“補(bǔ)全”,優(yōu)化計(jì)算效率,釋放生產(chǎn)力,從而讓元宇宙場(chǎng)景的搭建在工業(yè)上成為可能。
進(jìn)行賽題點(diǎn)評(píng)的武漢大學(xué)王正教授表示,自由視角在虛擬現(xiàn)實(shí)、在線直播、電影制作以及游戲建模等方面應(yīng)用廣泛,是與文娛產(chǎn)業(yè)密切相關(guān)的技術(shù)。
為了提升虛擬制作能力,芒果TV已建成中國(guó)目前最大的4K光場(chǎng)拍攝棚,利用近百個(gè)相機(jī)、數(shù)千個(gè)光源環(huán)繞組成點(diǎn)光源加高低速相機(jī)協(xié)同采集系統(tǒng),兼容包括綠幕在內(nèi)的現(xiàn)有拍攝技術(shù),實(shí)現(xiàn)包括實(shí)時(shí)可變光效、子彈時(shí)間、高精度動(dòng)態(tài)人物建模在內(nèi)的專業(yè)影視級(jí)特效場(chǎng)景拍攝。正是這個(gè)光場(chǎng),為“自由視角”的算法模型提供了寶貴的原始數(shù)據(jù)。
算法大賽再次為芒果TV的產(chǎn)品技術(shù)團(tuán)隊(duì)構(gòu)建了與行業(yè)交流的橋梁,未來(lái),隨著自由視角技術(shù)的應(yīng)用,芒果的下一代內(nèi)容產(chǎn)品、電商直播等業(yè)務(wù)都將受益于此。
立足實(shí)際 真實(shí)業(yè)務(wù)與前端技術(shù)有效銜接
在“自由視角”之外,“推薦預(yù)測(cè)”與“畫(huà)質(zhì)評(píng)價(jià)”也作為與音視頻領(lǐng)域業(yè)務(wù)關(guān)聯(lián)度最高的算法賽題,出現(xiàn)在這次大賽中。
對(duì)芒果TV以及旗下小芒電商來(lái)說(shuō),商品推薦、視頻預(yù)分發(fā)、實(shí)時(shí)消息推送都是真實(shí)的業(yè)務(wù)場(chǎng)景。推薦算法從第一屆算法大賽的“千人前面”到“猜你喜歡”再到“看了又看”,不斷演進(jìn),也成為芒果TV理解用戶、預(yù)測(cè)用戶偏好以提升用戶滿意度的重要方法。在含金量極高的ACM RecSys Challenge 2022比賽的推薦算法賽題中,今年首次參賽的芒果TV團(tuán)隊(duì)一路披荊斬棘,勇奪冠軍。
山東大學(xué)教授任昭春點(diǎn)評(píng)賽題稱,此次大賽的推薦算法賽題同屬于“序列推薦問(wèn)題”,需要在數(shù)據(jù)序列較短、數(shù)據(jù)規(guī)模較大與不全面的基礎(chǔ)上優(yōu)化推薦模型。通過(guò)大賽對(duì)優(yōu)秀選手以及方案的收集,芒果TV將更好地積累相關(guān)的技術(shù)成果,鞏固在這一領(lǐng)域的優(yōu)勢(shì)。
而另一道賽題“視頻畫(huà)質(zhì)評(píng)價(jià)”針對(duì)的正是視頻行業(yè)一直致力于改善與提升的核心議題。過(guò)去,視頻評(píng)價(jià)依賴人工,主觀性較強(qiáng),效率偏低。上海交通大學(xué)的宋利教授認(rèn)為,該道賽題以芒果TV上線節(jié)目在手機(jī)端條件下的畫(huà)質(zhì)體驗(yàn)機(jī)器評(píng)價(jià)為研究背景,真實(shí)還原了因節(jié)目拍攝、制作、轉(zhuǎn)碼等各類環(huán)節(jié)導(dǎo)致的畫(huà)質(zhì)缺陷和退化,業(yè)務(wù)實(shí)戰(zhàn)性很強(qiáng)。其冠軍方案基于圖像的方法,模擬多人評(píng)價(jià)輸出多個(gè)預(yù)測(cè)值并進(jìn)行數(shù)據(jù)處理和推理加速,實(shí)現(xiàn)高效率與高精準(zhǔn)度的機(jī)器評(píng)價(jià)。
搭建橋梁 促進(jìn)產(chǎn)學(xué)研人才良性循環(huán)
今年的“馬欄山杯”國(guó)際音視頻算法大賽,吸引了超過(guò)2000支來(lái)自全球各地各高校、研究機(jī)構(gòu)與企業(yè)的選手參賽,創(chuàng)下歷史記錄。大賽舉辦三年來(lái),成功吸納超過(guò)100名頂尖算法人才入湘,成為芒果TV算法崛起的最重要科研力量。在今年的算法界兩項(xiàng)頂尖賽事ACM與CVPR中,芒果TV也取得了一冠一亞兩季的歷史最好成績(jī)。
在頒獎(jiǎng)典禮結(jié)束后,芒果TV與學(xué)界及業(yè)界專家共同舉行了閉門(mén)算法研討會(huì),IEEE標(biāo)準(zhǔn)協(xié)會(huì)候任主席袁昱、中國(guó)傳媒大學(xué)動(dòng)畫(huà)與數(shù)字藝術(shù)學(xué)院院長(zhǎng)黃心淵、南京信息工程大學(xué)人工智能學(xué)院院長(zhǎng)潘志庚、北京理工大學(xué)光電學(xué)院教授劉越、湖南科技大學(xué)計(jì)算機(jī)科學(xué)與工程學(xué)院院長(zhǎng)梁偉、湖南科技大學(xué)元宇宙創(chuàng)新研究院院長(zhǎng)李濤、北京瀾景科技有限公司總經(jīng)理李林等11位不同背景的專家學(xué)者,從技術(shù)基礎(chǔ)、內(nèi)容與應(yīng)用產(chǎn)品等不同層面探討了元宇宙的概念,并探討了數(shù)字人、NFT、數(shù)字內(nèi)容等發(fā)展趨勢(shì)。同時(shí),還分享了業(yè)界對(duì)元宇宙領(lǐng)域最為關(guān)注的部分議題的最新解決方案與成果。
萬(wàn)物智能,數(shù)即媒介。數(shù)字化與現(xiàn)實(shí)世界深度融合已成顯性趨勢(shì),文化+科技也已成為實(shí)施創(chuàng)新驅(qū)動(dòng)發(fā)展戰(zhàn)略,加強(qiáng)關(guān)鍵核心技術(shù)攻關(guān),已成為推進(jìn)建設(shè)網(wǎng)絡(luò)強(qiáng)國(guó)、數(shù)字中國(guó)的關(guān)鍵。在“繁榮發(fā)展文化事業(yè)和文化產(chǎn)業(yè),實(shí)施國(guó)家文化數(shù)字化戰(zhàn)略”重要指示精神下,“馬欄山杯”國(guó)際音視頻算法大賽將繼續(xù)以業(yè)務(wù)發(fā)展為驅(qū)動(dòng)促進(jìn)技術(shù)提升,以人才吸納為途徑增強(qiáng)產(chǎn)學(xué)研互動(dòng),以學(xué)界與業(yè)界的持續(xù)互動(dòng),推動(dòng)技術(shù)成果更快更好落實(shí),推動(dòng)媒體融合與數(shù)字視頻產(chǎn)業(yè)邁向新時(shí)代,繼續(xù)推進(jìn)與拓展中國(guó)式現(xiàn)代化。
來(lái)源:芒果TV