央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技

央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技

5月2日,在央視新聞?lì)l道的特別報(bào)道中,虛擬主持人“康曉輝”與央視記者江凱共同主持《直播長江》安徽篇,并在現(xiàn)場(chǎng)進(jìn)行實(shí)時(shí)互動(dòng)。

屏幕上這位讓觀眾“似曾相識(shí)”的虛擬主持人——“康曉輝”,他的形象是基于央視主持人康輝的外形,通過相芯科技FaceUnity的虛擬形象生成(P2A)技術(shù)創(chuàng)建的,并通過虛擬形象驅(qū)動(dòng)技術(shù)實(shí)現(xiàn)實(shí)時(shí)驅(qū)動(dòng)。而他的聲音是通過科大訊飛旗下的訊飛智聲平臺(tái)的AI語音合成技術(shù)對(duì)康輝老師的聲音進(jìn)行合成模擬的。此次相芯科技和科大訊飛聯(lián)手打造的虛擬主持人,讓觀眾們能聞其聲,也見其人。

虛擬主持人的形象是怎么創(chuàng)建的?

一張照片就夠了

虛擬主持人的,創(chuàng)建過程比所有人想象的都要簡(jiǎn)單,相芯科技僅使用了一張央視主持人康輝的照片,通過相芯科技的P2A(Photo-to-Avatar)技術(shù),直接生成了全動(dòng)態(tài)的虛擬主持人“康曉輝”。這項(xiàng)技術(shù)打破了人們以往對(duì)虛擬形象技術(shù)需要特殊硬件設(shè)備和高昂成本的距離感,而是只需普通攝像頭和一張自拍,便可在97%的Android機(jī)型、iOS平臺(tái)、PC端實(shí)現(xiàn)與好萊塢CG特效媲美的效果。

也就是說,普通用戶在自己的手機(jī)里就能創(chuàng)建自己的虛擬形象。在生成3D虛擬形象后,還能根據(jù)用戶的實(shí)際需求,對(duì)虛擬形象的服裝、造型、環(huán)境光線、背景等進(jìn)行個(gè)性化自定義,并提供真人版和卡通版兩種風(fēng)格。

央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技

  ▲央視主持人康輝 和 虛擬主持人“康曉輝”

虛擬主持人的實(shí)時(shí)驅(qū)動(dòng)

從新聞畫面里可以了解到,虛擬主持人“康曉輝”在播報(bào)內(nèi)容的過程中,能做出和真人一樣的口型、表情等變化,頭部也能做出點(diǎn)頭、搖頭等一系列動(dòng)作,這些并不是提前做好的動(dòng)畫,而是可以實(shí)時(shí)操控的。這個(gè)實(shí)時(shí)驅(qū)動(dòng)就是通過相芯科技的虛擬形象驅(qū)動(dòng)技術(shù)實(shí)現(xiàn)的。

相芯科技通過智能人臉檢測(cè),精確捕捉面部肌肉運(yùn)動(dòng)節(jié)點(diǎn)并標(biāo)記特征點(diǎn)(眼睛、口鼻、眉毛、面部輪廓等),獲取面部表情系數(shù)并將表情同步至3D虛擬形象面部,從而驅(qū)動(dòng)3D虛擬形象。在直播期間,工作人員通過筆記本上的攝像頭,拍攝他的視頻影像,在屏幕上的虛擬主持人就能實(shí)時(shí)逼真地還原工作人員做出的表情動(dòng)作。這項(xiàng)技術(shù)同樣只需要普通攝像頭就能實(shí)現(xiàn)。

未來,人人都有自己的虛擬形象

央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技

未來,人們?cè)谏缃痪W(wǎng)絡(luò)上不再滿足于用一串字符、一個(gè)ID、一張圖片詮釋自己,而希望用黑科技創(chuàng)造出一個(gè)說話、長相、甚至行為與本人高度一致的虛擬形象。而隨著技術(shù)的不斷推進(jìn),虛擬形象的創(chuàng)建已經(jīng)不再需要依賴專業(yè)的硬件設(shè)施和高昂的成本,普通用戶在手機(jī)上就可以輕松實(shí)現(xiàn)。相芯科技的虛擬形象技術(shù)已在視頻社交、虛擬偶像、游戲等泛娛樂領(lǐng)域得到廣泛應(yīng)用,也在醫(yī)療、在線教育、智能商業(yè)領(lǐng)域開始嶄露頭角。相芯科技相信,在未來,每個(gè)人都將擁有這種實(shí)時(shí)、互動(dòng)、智能的虛擬形象,作為自己在虛擬世界的化身,成為自己專屬的數(shù)字資產(chǎn)。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2018-05-10
央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技
5月2日,在央視新聞?lì)l道的特別報(bào)道中,虛擬主持人“康曉輝”與央視記者江凱共同主持《直播長江》安徽篇,并在現(xiàn)場(chǎng)進(jìn)行實(shí)時(shí)互動(dòng)。

長按掃碼 閱讀全文