此次計(jì)劃研發(fā)的“全媒體多模態(tài)大模型”，將基于中科院自動(dòng)化所“聞海”多模態(tài)媒體大數(shù)據(jù)和“紫東太初”三模態(tài)大模型核心技術(shù)積累，面向新華社技術(shù)局、媒體融合生產(chǎn)技術(shù)與系統(tǒng)國家重點(diǎn)實(shí)驗(yàn)室等部門的業(yè)務(wù)領(lǐng)域模型，構(gòu)建“大數(shù)據(jù)+大模型+多模態(tài)”的多任務(wù)統(tǒng)一學(xué)習(xí)體系，以及“知識(shí)與數(shù)據(jù)混合驅(qū)動(dòng)”的可信建模方式，從而實(shí)現(xiàn)對(duì)全媒體數(shù)據(jù)理解與生成的統(tǒng)一建模，打造全棧國產(chǎn)化媒體人工智能平臺(tái)。

會(huì)上，媒體融合生產(chǎn)技術(shù)與系統(tǒng)國家重點(diǎn)實(shí)驗(yàn)室主任、新華融媒科技董事長、總裁徐姍娜指出，推進(jìn)深度融合的關(guān)鍵，在于主流媒體要結(jié)合職能定位，以用戶為中心，以需求側(cè)倒逼供給側(cè)結(jié)構(gòu)性改革，著眼生產(chǎn)效能、強(qiáng)調(diào)科技驅(qū)動(dòng)，通過數(shù)字化轉(zhuǎn)型夯實(shí)智能化底座，形成“后發(fā)優(yōu)勢(shì)”，實(shí)現(xiàn)跨越發(fā)展，重塑互聯(lián)網(wǎng)時(shí)代主流媒體的權(quán)威地位。

中國科學(xué)院自動(dòng)化研究所王金橋研究員在會(huì)上分享了“紫東太初”三模態(tài)大模型與媒體業(yè)務(wù)融合方面的新進(jìn)展，介紹了內(nèi)容理解、圖像生成、視頻生成等方面的性能提升，展示了多模態(tài)對(duì)話虛擬人“小初”在高清圖片生成、新聞續(xù)寫和熱點(diǎn)新聞的發(fā)現(xiàn)能力。

“紫東太初”三模態(tài)大模型兼具跨模態(tài)理解和生成能力，結(jié)合新華社在海量全媒體數(shù)據(jù)積累和媒體融合業(yè)務(wù)場(chǎng)景，共同打造“全媒體多模態(tài)大模型”，將加速推動(dòng)AI在如視頻配音、語音播報(bào)、標(biāo)題摘要、海報(bào)創(chuàng)作等更多元媒體業(yè)務(wù)場(chǎng)景的應(yīng)用。

當(dāng)前，媒體融合已經(jīng)邁入深水區(qū)，“全媒體多模態(tài)大模型”的聯(lián)合研發(fā)計(jì)劃，是主流媒體與科研院所合作的有益嘗試，也是高性能算力、算法賦能媒體業(yè)務(wù)創(chuàng)新的積極實(shí)踐，對(duì)我國實(shí)現(xiàn)媒體領(lǐng)域科技創(chuàng)新具有重要的戰(zhàn)略意義。未來，中國科學(xué)院自動(dòng)化研究所、新華社技術(shù)局、媒體融合生產(chǎn)技術(shù)與系統(tǒng)國家重點(diǎn)實(shí)驗(yàn)室將充分發(fā)揮各自科研積累、傳播渠道、網(wǎng)絡(luò)資源、領(lǐng)域人才等優(yōu)勢(shì)，進(jìn)一步探索全媒體時(shí)代科研創(chuàng)新的協(xié)作鏈條與合作模式，以跨界融合之力推動(dòng)媒體融合智能化發(fā)展。

據(jù)悉，本次大會(huì)以“新賽道，新融合，新機(jī)遇”為主題，由新華社民族品牌工程辦公室、新華社新媒體中心、媒體融合生產(chǎn)技術(shù)與系統(tǒng)國家重點(diǎn)實(shí)驗(yàn)室共同主辦，吸引了來自主管部門、新聞單位、行業(yè)主體、研究機(jī)構(gòu)等百余位行業(yè)專家和業(yè)內(nèi)精英人士蒞會(huì)，圍繞5G、元宇宙、數(shù)字化轉(zhuǎn)型、媒體跨界融合等熱點(diǎn)話題和熱門領(lǐng)域展開探討。