新華社北京5月20日電(記者鄔金夫)她能隨時(shí)變換發(fā)型,她能隨時(shí)更改服裝,她能穿梭于演播室的不同虛擬場(chǎng)景中……然而,她卻不是真人,她是全球首位人工智能驅(qū)動(dòng)的3D版AI合成主播。
↑“新小微”走進(jìn)虛擬演播室。
“大家好,我叫新小微,是由新華社聯(lián)合搜狗公司推出的全球首位3D版AI合成主播,我將為大家?guī)?lái)全新的新聞資訊體驗(yàn)?!?/span>
一段“未來(lái)感”十足的視頻播報(bào)畫(huà)面讓人眼前一亮,全球首位3D版AI合成主播在全國(guó)兩會(huì)開(kāi)幕前夕正式亮相,這是繼全球首位AI合成主播、站立式AI合成主播、AI合成女主播、俄語(yǔ)AI合成主播之后,新華社智能化編輯部聯(lián)合搜狗公司最新研發(fā)的智能化產(chǎn)品。
“新小微”是如何誕生的?
“新小微”的原型是新華社記者趙琬微,采用最新人工智能技術(shù)“克隆”而成。從外型上看,“新小微”高度還原真人發(fā)膚,在立體感、靈活度、可塑性、交互能力和應(yīng)用空間等方面,較前一代AI合成主播(2D形象)有了大幅躍升。在特寫(xiě)鏡頭下,甚至連頭發(fā)絲和皮膚上的毛孔都清晰可見(jiàn)。
3D版AI合成主播,是如何誕生的?
“‘新小微’的研發(fā),經(jīng)歷了極其復(fù)雜的過(guò)程。”據(jù)項(xiàng)目負(fù)責(zé)人介紹,研發(fā)人員進(jìn)行了海量數(shù)據(jù)采集工作。趙琬微戴著數(shù)據(jù)采集頭盔,幾百個(gè)攝像頭對(duì)其身體部位360度全方位“打點(diǎn)”掃描,采集每一處細(xì)節(jié),并對(duì)其多種形態(tài)的表情和動(dòng)作進(jìn)行細(xì)致入微的捕捉記錄。
↑趙琬微正在進(jìn)行數(shù)據(jù)采集,3D渲染由原力科技公司提供技術(shù)支持。
“就像拼樂(lè)高一樣,我們對(duì)‘新小微’的各個(gè)部位和表情進(jìn)行了模塊化處理,然后重新組裝?!表?xiàng)目負(fù)責(zé)人解釋說(shuō),通過(guò)算法實(shí)時(shí)驅(qū)動(dòng)、渲染構(gòu)建出來(lái)的3D數(shù)字人物模型,表情唇動(dòng)、肢體動(dòng)作和語(yǔ)言表達(dá)實(shí)現(xiàn)了高度契合。
據(jù)介紹,目前絕大部分“能動(dòng)”的3D數(shù)字人,主要是靠真人驅(qū)動(dòng)。而“新小微”采用的是人工智能驅(qū)動(dòng),輸入文本后,AI算法便可實(shí)時(shí)驅(qū)動(dòng)“新小微”,生成的語(yǔ)音、表情、唇動(dòng)更接近于真人。
“新小微”實(shí)現(xiàn)了哪些升級(jí)進(jìn)化?
和前一代AI合成主播相比,“新小微”實(shí)現(xiàn)了從單一景深機(jī)位到多機(jī)位多景深、微笑播報(bào)到多樣化精微表情播報(bào)等進(jìn)步,播報(bào)形態(tài)可通過(guò)不同角度全方位呈現(xiàn),立體感和層次感明顯增強(qiáng)。
↑“新小微”在站姿狀態(tài)下播報(bào)新聞。
“前一代AI合成主播只能在坐姿或站姿下做一些簡(jiǎn)單的手勢(shì)。‘新小微’不僅能走動(dòng)和轉(zhuǎn)身,還能擺出各種復(fù)雜動(dòng)作和姿態(tài),靈活性大大提升了。”項(xiàng)目負(fù)責(zé)人介紹。
此外,“新小微”以其“微模塊化”的特性,實(shí)現(xiàn)了靈活“變妝”。她的發(fā)型、服飾均能根據(jù)不同新聞和場(chǎng)景變換,這些功能也是前一代AI合成主播所不具備的。
↑“新小微”播報(bào)新聞,面部表情生動(dòng)自然。
“可以說(shuō),3D版AI合成主播在多方面都更加智能化了,在人工智能的實(shí)時(shí)驅(qū)動(dòng)下,可實(shí)現(xiàn)功能持續(xù)自我更迭。”項(xiàng)目負(fù)責(zé)人說(shuō)。
“新小微”將開(kāi)啟怎樣的未來(lái)想象?
作為新聞界首位由人工智能驅(qū)動(dòng)、3D技術(shù)呈現(xiàn)的AI合成主播,“新小微”在今年全國(guó)兩會(huì)期間可量化生產(chǎn)新聞播報(bào)視頻。
只需要在機(jī)器上輸入相應(yīng)文本內(nèi)容,“新小微”就能播報(bào)新聞,并根據(jù)語(yǔ)義生成相對(duì)應(yīng)的面部表情和肢體語(yǔ)言。
“隨著后期自我更迭和進(jìn)化,‘她’的工作空間會(huì)更大?!表?xiàng)目負(fù)責(zé)人說(shuō),隨著3D虛擬場(chǎng)景不斷拓展,“新小微”將走出演播室,在不同場(chǎng)景中更好地滿足新聞呈現(xiàn)的多樣化需求。
↑“新小微”的播報(bào)形態(tài)可通過(guò)不同角度全方位呈現(xiàn)。
2018年11月7日,新華社聯(lián)合搜狗公司發(fā)布全球首位AI合成主播,“克隆”出與真人主播擁有同樣播報(bào)能力的“分身”。此后又不斷迭代升級(jí)和擴(kuò)容,業(yè)界評(píng)論這是人工智能技術(shù)在新聞?lì)I(lǐng)域的開(kāi)拓性應(yīng)用。
作為新華社AI合成主播家族的最新成員,3D版AI合成主播在今年全國(guó)兩會(huì)期間將通過(guò)新華社客戶端為廣大網(wǎng)友帶來(lái)全新的新聞資訊體驗(yàn),也將進(jìn)一步助力新華社智能化編輯部建設(shè),推動(dòng)媒體融合向縱深發(fā)展,為新聞生產(chǎn)的“未來(lái)場(chǎng)景”開(kāi)辟新空間。
總策劃:劉思揚(yáng)
出品:陳凱星、周亮
策劃:齊慧杰
監(jiān)制:何強(qiáng)、曹曉軒
統(tǒng)籌:李瑜、盧靜娜
海報(bào)設(shè)計(jì):潘紅宇
視頻制作:胡碧霞
新華社新媒體中心&搜狗公司聯(lián)合出品
相關(guān)鏈接: