
中央廣播電視總臺(tái)自成立以來(lái),緊緊圍繞5G+4K/8K+AI戰(zhàn)略布局積極構(gòu)建媒體融合生產(chǎn)平臺(tái),在底層技術(shù)方面建立了5G云平臺(tái),主要包括總臺(tái)的新聞云和CMG媒體云,應(yīng)對(duì)不同的業(yè)務(wù)。4K/8K超高清技術(shù),在高清以前(含高清),我們都是跟隨美國(guó)、日本、歐洲,到了超高清時(shí)代,尤其是近幾年8K的發(fā)展,我們已經(jīng)開(kāi)始引領(lǐng)超高清整個(gè)產(chǎn)業(yè)和行業(yè)發(fā)展。除了視頻之外,還有最新推出的三維菁彩聲。2023年7月,正式推出了央視聽(tīng)媒體類(lèi)大模型,這也是我們現(xiàn)在AI的底座。基于自成立以來(lái)多年的積累,現(xiàn)在庫(kù)里面大概有148萬(wàn)個(gè)小時(shí)的數(shù)字資產(chǎn),這些構(gòu)成了我們的技術(shù)底座。
在AI類(lèi)領(lǐng)域的應(yīng)用包括兩大類(lèi),第一類(lèi)是從2019年開(kāi)始到2023年,針對(duì)判別式AI,像語(yǔ)音轉(zhuǎn)寫(xiě)、視頻修復(fù),我們修復(fù)了很多經(jīng)典的老片,比如《紅樓夢(mèng)》《西游記》。應(yīng)對(duì)體育的戰(zhàn)術(shù)分析系統(tǒng)、智能剪輯系統(tǒng)。第二類(lèi)是自2023年大模型出現(xiàn)之后,開(kāi)始傾向于AIGC,生成式AI的發(fā)展,在今年年初推出了中國(guó)首部AI動(dòng)畫(huà)片《千秋詩(shī)頌》,針對(duì)文本類(lèi)、動(dòng)畫(huà)類(lèi)、視音頻類(lèi)的AIGC產(chǎn)品。第三類(lèi)是在虛擬類(lèi),包括XR、AR、VR,基于XR之上推出了VP。在立體視覺(jué)類(lèi)有6DoF自由視角、全息、大場(chǎng)景掃描、裸眼3D、云渲染等。
首先為大家介紹總臺(tái)超高清的發(fā)展。可能大家通過(guò)電視屏幕、各類(lèi)新媒體都已經(jīng)觀看到了,現(xiàn)在有全系列端到端自主研發(fā)的超高清制播系統(tǒng),成功支撐了各大晚會(huì),包括新中國(guó)成立70周年閱兵、建黨100周年、北京冬奧會(huì)、總臺(tái)春晚,都是用的總臺(tái)自主研發(fā)的全流程超高清制播系統(tǒng)。
除了這些耳熟能詳?shù)膱?chǎng)景之外,今天要給大家隆重介紹的是一個(gè)非常有意思的、有特殊場(chǎng)景的應(yīng)用,是我們跟中國(guó)載人航天工程辦公室聯(lián)合設(shè)計(jì)的中國(guó)空間站超高清影像系統(tǒng)。該系統(tǒng)主要包括兩部分,一是針對(duì)空間艙的艙內(nèi)和艙外進(jìn)行超高清2D、3D、VR全系列全流程拍攝。二是以此為基礎(chǔ)構(gòu)建的數(shù)字影像資產(chǎn)庫(kù),成功運(yùn)用到總臺(tái)的《飛向月球》《你好火星》等一系列紀(jì)錄片制作,目前有更多的紀(jì)錄片正在制作當(dāng)中。
科技+文化的結(jié)合是未來(lái)總臺(tái)努力的方向。用虛擬制片技術(shù)跟臺(tái)里的很多IP結(jié)合,這是《尋古中國(guó)》做的一系列嘗試。
XR最新的嘗試,在今年的春晚中跟虛擬特效+實(shí)時(shí)渲染的合成,舞蹈演員的整個(gè)軌跡、位置信息都可以通過(guò)大屏同步展示出來(lái)。還有跟VR的融合,可以在空間去作畫(huà),這也是春晚當(dāng)中的節(jié)目。XR現(xiàn)在已經(jīng)成為總臺(tái)在虛擬類(lèi)最重要的技術(shù)。
這些技術(shù)怎么跟文化或文旅結(jié)合?XR可以做成簡(jiǎn)短的小系統(tǒng),可以形成BOX,在著名的打卡點(diǎn)去布置,適合打卡。像VR類(lèi)的線下大空間體驗(yàn),如把李白放到長(zhǎng)安城,與現(xiàn)場(chǎng)觀眾互動(dòng)。在VR大會(huì)中,我們跟江西文旅合作,發(fā)布了《王勃?dú)w來(lái)》,圍繞王勃這個(gè)人物去打造IP形象,通過(guò)超寫(xiě)實(shí)數(shù)字人和XR制作、大場(chǎng)景三維掃描復(fù)原了滕王閣,復(fù)原了王勃,構(gòu)建了一個(gè)文化元宇宙體系。
如何通過(guò)AI去完成一部動(dòng)畫(huà)電影的制作?總臺(tái)現(xiàn)在正在制作中國(guó)首部AIGC動(dòng)畫(huà)電影,里面主要解決3個(gè)問(wèn)題。一是統(tǒng)一性,整場(chǎng)動(dòng)畫(huà)當(dāng)中得保證每一個(gè)人物是一致的。通過(guò)建立對(duì)象模型庫(kù)進(jìn)行微調(diào),確保統(tǒng)一性。二是穩(wěn)定性。在使用AI過(guò)程中大家會(huì)發(fā)現(xiàn)AI生成非常不穩(wěn)定,我們通過(guò)大量的數(shù)據(jù)訓(xùn)練,形成了專(zhuān)屬的角色動(dòng)作庫(kù),實(shí)現(xiàn)了角色的演繹。三是整體的連貫性、敘事性問(wèn)題。解決整場(chǎng)多鏡頭切換當(dāng)中連貫性的問(wèn)題。解決了這三個(gè)問(wèn)題之后就對(duì)整個(gè)傳統(tǒng)動(dòng)畫(huà)電影制作進(jìn)行了重構(gòu)。我們知道動(dòng)畫(huà)電影制作流程大概分13個(gè)環(huán)節(jié),用了AI之后減少到7個(gè)環(huán)節(jié),從原來(lái)的線性流程進(jìn)展到并行協(xié)作,原來(lái)必須先做劇本創(chuàng)作再做角色設(shè)計(jì),現(xiàn)在是劇本創(chuàng)作之后所有的中間流程都可以同步進(jìn)行。
我們認(rèn)為未來(lái)需要AGI(通用人工智能),當(dāng)然更需要PAI,垂直領(lǐng)域的專(zhuān)業(yè)大模型,總臺(tái)已經(jīng)打造了央視聽(tīng)媒體大模型,目前已經(jīng)試用了,包括四大模塊,包含文本、圖像、視頻和利用多智能體協(xié)同打造的自媒體庫(kù),這是垂直領(lǐng)域的生成工具。

