新華社北京5月20日電(記者鄔金夫)她能隨時變換發(fā)型,她能隨時更改服裝,她能穿梭于演播室的不同虛擬場景中……然而,她卻不是真人,她是全球首位人工智能驅(qū)動的3D版AI合成主播。
↑“新小微”走進(jìn)虛擬演播室。
“大家好,我叫新小微,是由新華社聯(lián)合搜狗公司推出的全球首位3D版AI合成主播,我將為大家?guī)砣碌男侣勝Y訊體驗?!?/span>
一段“未來感”十足的視頻播報畫面讓人眼前一亮,全球首位3D版AI合成主播在全國兩會開幕前夕正式亮相,這是繼全球首位AI合成主播、站立式AI合成主播、AI合成女主播、俄語AI合成主播之后,新華社智能化編輯部聯(lián)合搜狗公司最新研發(fā)的智能化產(chǎn)品。
“新小微”是如何誕生的?
“新小微”的原型是新華社記者趙琬微,采用最新人工智能技術(shù)“克隆”而成。從外型上看,“新小微”高度還原真人發(fā)膚,在立體感、靈活度、可塑性、交互能力和應(yīng)用空間等方面,較前一代AI合成主播(2D形象)有了大幅躍升。在特寫鏡頭下,甚至連頭發(fā)絲和皮膚上的毛孔都清晰可見。
3D版AI合成主播,是如何誕生的?
“‘新小微’的研發(fā),經(jīng)歷了極其復(fù)雜的過程?!睋?jù)項目負(fù)責(zé)人介紹,研發(fā)人員進(jìn)行了海量數(shù)據(jù)采集工作。趙琬微戴著數(shù)據(jù)采集頭盔,幾百個攝像頭對其身體部位360度全方位“打點”掃描,采集每一處細(xì)節(jié),并對其多種形態(tài)的表情和動作進(jìn)行細(xì)致入微的捕捉記錄。
↑趙琬微正在進(jìn)行數(shù)據(jù)采集,3D渲染由原力科技公司提供技術(shù)支持。
“就像拼樂高一樣,我們對‘新小微’的各個部位和表情進(jìn)行了模塊化處理,然后重新組裝?!表椖控?fù)責(zé)人解釋說,通過算法實時驅(qū)動、渲染構(gòu)建出來的3D數(shù)字人物模型,表情唇動、肢體動作和語言表達(dá)實現(xiàn)了高度契合。
據(jù)介紹,目前絕大部分“能動”的3D數(shù)字人,主要是靠真人驅(qū)動。而“新小微”采用的是人工智能驅(qū)動,輸入文本后,AI算法便可實時驅(qū)動“新小微”,生成的語音、表情、唇動更接近于真人。
“新小微”實現(xiàn)了哪些升級進(jìn)化?
和前一代AI合成主播相比,“新小微”實現(xiàn)了從單一景深機位到多機位多景深、微笑播報到多樣化精微表情播報等進(jìn)步,播報形態(tài)可通過不同角度全方位呈現(xiàn),立體感和層次感明顯增強。
↑“新小微”在站姿狀態(tài)下播報新聞。
“前一代AI合成主播只能在坐姿或站姿下做一些簡單的手勢?!滦∥ⅰ粌H能走動和轉(zhuǎn)身,還能擺出各種復(fù)雜動作和姿態(tài),靈活性大大提升了。”項目負(fù)責(zé)人介紹。
此外,“新小微”以其“微模塊化”的特性,實現(xiàn)了靈活“變妝”。她的發(fā)型、服飾均能根據(jù)不同新聞和場景變換,這些功能也是前一代AI合成主播所不具備的。
↑“新小微”播報新聞,面部表情生動自然。
“可以說,3D版AI合成主播在多方面都更加智能化了,在人工智能的實時驅(qū)動下,可實現(xiàn)功能持續(xù)自我更迭。”項目負(fù)責(zé)人說。
“新小微”將開啟怎樣的未來想象?
作為新聞界首位由人工智能驅(qū)動、3D技術(shù)呈現(xiàn)的AI合成主播,“新小微”在今年全國兩會期間可量化生產(chǎn)新聞播報視頻。
只需要在機器上輸入相應(yīng)文本內(nèi)容,“新小微”就能播報新聞,并根據(jù)語義生成相對應(yīng)的面部表情和肢體語言。
“隨著后期自我更迭和進(jìn)化,‘她’的工作空間會更大。”項目負(fù)責(zé)人說,隨著3D虛擬場景不斷拓展,“新小微”將走出演播室,在不同場景中更好地滿足新聞呈現(xiàn)的多樣化需求。
↑“新小微”的播報形態(tài)可通過不同角度全方位呈現(xiàn)。
2018年11月7日,新華社聯(lián)合搜狗公司發(fā)布全球首位AI合成主播,“克隆”出與真人主播擁有同樣播報能力的“分身”。此后又不斷迭代升級和擴容,業(yè)界評論這是人工智能技術(shù)在新聞領(lǐng)域的開拓性應(yīng)用。
作為新華社AI合成主播家族的最新成員,3D版AI合成主播在今年全國兩會期間將通過新華社客戶端為廣大網(wǎng)友帶來全新的新聞資訊體驗,也將進(jìn)一步助力新華社智能化編輯部建設(shè),推動媒體融合向縱深發(fā)展,為新聞生產(chǎn)的“未來場景”開辟新空間。
總策劃:劉思揚
出品:陳凱星、周亮
策劃:齊慧杰
監(jiān)制:何強、曹曉軒
統(tǒng)籌:李瑜、盧靜娜
海報設(shè)計:潘紅宇
視頻制作:胡碧霞
新華社新媒體中心&搜狗公司聯(lián)合出品
相關(guān)鏈接: