科技感拉滿,盤盤這屆冬奧會的虛擬數(shù)字人

科技云報道原創(chuàng)。

憑借驚天一跳,谷愛凌成為全球新晉頂流!

2月8日,18歲的中國運動員谷愛凌摘得冬奧會自由式滑雪大跳臺金牌,也是中國在本屆冬奧會上奪得的第三枚金牌。

但就在前一天,本該積極備戰(zhàn)比賽的“谷愛凌”卻還在咪咕的演播室里趕通告,錄節(jié)目。

當(dāng)然,這并不是谷愛凌不務(wù)正業(yè)。因為在咪咕演播室里的其實并不是谷愛凌本人,而是她的“數(shù)字分身”Meet GU。

Meet GU冬奧首秀(來源:咪咕視頻)

Meet GU是中國移動咪咕視頻推出的首個體育數(shù)字達人。按計劃,奧運會舉辦期間,它將在咪咕冬奧賽事演播室中完成滑雪賽事解說、播報及場景電商的虛擬互動等工作。

事實上,在整個冬奧會上,虛擬數(shù)字人也并不止運動員數(shù)字分身這一項。從賽場內(nèi)到賽場外,虛擬數(shù)字人已經(jīng)滲透到了冬奧會的多個環(huán)節(jié)。

冬奧會虛擬數(shù)字人玩出新高度

拉滿的黑科技,絕對是本屆冬奧會的一大亮點。無論是驚艷不已的開幕式,還是場館內(nèi)外的建設(shè),無不因為科技,一次又一次地引發(fā)輿論的驚嘆。

但萬萬沒想到的是,虛擬數(shù)字人的出現(xiàn),讓奧運天氣播報這樣的日常工作,也玩出了充滿科技感的新高度。

或許你會產(chǎn)生疑問,圖中的不就是中國天氣的主持人馮殊嗎?

但真相,卻并非如此。

這位正在聲情并茂播報天氣的TA,其實并不是馮殊本人,而是一個很純粹的虛擬數(shù)字人——馮小殊。

據(jù)了解,馮小殊是由中國氣象局華風(fēng)氣象傳媒集團,聯(lián)合小冰公司共同打造。早在冬奧會開幕前10天,他就已經(jīng)在各大平臺上“持證上崗”了。

除了馮小殊持續(xù)播報“冬奧公眾觀賽氣象指數(shù)”,在北京冬奧會期間,AI手語主播也火遍全網(wǎng)。

早在2021年11月,央視新聞就已經(jīng)預(yù)告了它和百度智能云聯(lián)合打造的AI手語主播,將在冬奧會上承擔(dān)手語翻譯的工作,讓聽障人士也能和正常人一樣看比賽。

在網(wǎng)上爆紅的央視“段子手”朱廣權(quán)PK“手語主播”的視頻中,朱廣權(quán)用超快語速的順口溜挑戰(zhàn)“手語主播”的“手速”,而這位手語主播也憑過硬的專業(yè)能力輕松應(yīng)戰(zhàn)。事實上,這位手語主播就是一位虛擬數(shù)字人。

從整個冬奧會的進程來看,虛擬數(shù)字人的全面參與,是在冬奧會的宣傳、開幕式和播報上。

虛擬數(shù)字人“熱愛REAI”就是首次被采用的數(shù)字人奧林匹克公益宣傳大使。熱愛REAI在2021年11月由新華社推出以來,不僅和谷愛凌的虛擬形象Meet GU進行了聯(lián)動,也在許多公益宣傳場景中與觀眾有過“接觸”。

2月2日,在北京舉辦的“相約北京”奧林匹克文化節(jié)開幕式上,中國虛擬歌手洛天依以一首歌曲《Time to shine》受到廣泛關(guān)注,成為第一位登上奧運舞臺的中國虛擬歌手。

作為云上奧運的技術(shù)服務(wù)商之一,阿里巴巴也推出了冬奧宣推官數(shù)字人“冬冬”。盡管賽前新華社將冬冬包裝成特約記者,為冬冬專門拍了一個招聘視頻,但從實際工作職能來說,冬冬更像是一名虛擬帶貨主播。

冬冬在北京冬奧會主媒體中心的首秀,便是與主持人一同到北京2022官方特許商品零售店介紹各種冬奧周邊商品。

而冬奧會開始之后,冬冬也會在每天晚上7點半之后在淘寶直播帶貨2個小時左右。截至2月8日,冬冬已經(jīng)連續(xù)進行了6場直播,并從2月6日之后,直播間的觀看人數(shù)就已經(jīng)穩(wěn)定在14萬左右。

拓爾思旗下的虛擬數(shù)字人“小思”在冬奧會期間連續(xù)進行冬奧熱點播報的同時,還正式加盟了本屆冬奧會宣傳報道的重要媒體之一——國家體育總局官方媒體《中國體育報》。據(jù)悉,小思可以實現(xiàn)自動采編、智能寫稿、虛擬播報等全自動功能。

科大訊飛派出的“3D虛擬冰冰”,在專屬H5中帶領(lǐng)大家說冬奧。憑借酷似央視主播王冰冰的眉眼和神韻,“3D虛擬冰冰”迅速贏得了眾多網(wǎng)友的擁躉。令人拍案叫絕的是,“3D虛擬冰冰”還解鎖了東北話、英語等多達31種語言技能。

虛擬數(shù)字人背后的“黑科技”

為冬奧會打工的虛擬數(shù)字人隨處可見,讓人們不禁好奇,這些技能點滿滿的虛擬數(shù)字人,是怎么煉成的?

比如氣象播報員“馮小殊”的背后,是微軟小冰框架數(shù)字孿生虛擬人技術(shù)。

“馮小殊”之所以能在面容、表情、肢體動作在內(nèi)的整體自然度和馮殊本尊真假難辨,主要是結(jié)合了小冰深度神經(jīng)網(wǎng)絡(luò)渲染技術(shù)(Xiaoice Neural Rendering,XNR)及小樣本學(xué)習(xí)技術(shù)。

在語音專家模型、嘴型專家模型及人臉渲染專家模型的訓(xùn)練下,“馮小殊”準(zhǔn)確學(xué)習(xí)了馮殊本人的嘴部動作、眼部及臉部肌肉之間的協(xié)同關(guān)系,而整個訓(xùn)練周期僅為一周。

就AI手語虛擬主播來說,其背后的技術(shù)分別來自百度和騰訊,其中百度主要為央視電視直播提供手語翻譯服務(wù),騰訊的聆語主要為央視頻提供手語翻譯服務(wù),并上線小聰在騰訊體育上進行手語翻譯。

AI手語翻譯的主要困難在于,手語也有自己的“語法”,語序也并不一定與漢語相同,且手語也存在“方言”,即便是真人手語翻譯師也難以保障百分百的可懂度。因此AI手語虛擬主播本質(zhì)上仍是一個即時翻譯功能。

由百度開發(fā)的AI手語虛擬主播由其數(shù)字人平臺曦靈打造,主要是通過語音識別、自然語言理解等人工智能技術(shù)構(gòu)建手語翻譯引擎,再通過專為手語優(yōu)化的自然動作引擎獎授予實時演繹為數(shù)字人的表情動作。

“聆語”則由騰訊云小微聯(lián)合PCG AI等技術(shù)團隊共同打造,通過整合多模態(tài)交互技術(shù)、3D數(shù)字人建模、機器翻譯、語音識別和自然語言理解等技術(shù)優(yōu)化手語翻譯。

相關(guān)報道顯示,百度通過百度智能云構(gòu)建手語翻譯引擎,可懂度達到85%以上,聆語詞匯和語句覆蓋量超過160萬,手語翻譯的可懂度可達90%,基本可以滿足電視直播手語翻譯的需要。

作為冬奧會備受矚目的運動員,谷愛凌的數(shù)字分身Meet GU則是則應(yīng)用了3D人臉關(guān)鍵點位置精確修正、眼眶眼球自動適配、任意姿態(tài)人臉配準(zhǔn)等核心技術(shù),讓3D人臉擬合精度達亞毫米量級。

不難發(fā)現(xiàn),和早期基于3D技術(shù)和CG動畫生產(chǎn)的數(shù)字人相比,“超仿真”的虛擬數(shù)字人已融入了CG(計算機動畫)、CV(計算機視覺)、語音識別、語音合成、圖像識別、動作捕捉、自然語言處理、深度學(xué)習(xí)等最新技術(shù),在聲音、語氣、肢體動作、外表、行為、交互等多重特征上,越來越媲美真人。

虛擬數(shù)字人或?qū)⒂瓉泶蟊l(fā)

虛擬數(shù)字人并非新鮮事物,從二次元偶像“初音未來”到清華虛擬學(xué)生“華智冰”、萬科財務(wù)部虛擬員工“崔筱盼”、央美畢業(yè)的畫家“夏語冰”、美妝博主“柳夜熙”等,虛擬數(shù)字人產(chǎn)業(yè)正在站上風(fēng)口。

頭豹研究院數(shù)據(jù)顯示,當(dāng)前虛擬數(shù)字人市場規(guī)模已超過2000億元,預(yù)計到2030年將達到2703億元。

虛擬數(shù)字人可被定義為通過計算機動畫等技術(shù)打造出的具備數(shù)字化外形的虛擬人物,主要分兩類,即偶像類的身份型虛擬數(shù)字人,以及服務(wù)型虛擬數(shù)字人。

相關(guān)研究數(shù)據(jù)顯示,身份型虛擬人將在未來發(fā)展中占據(jù)主導(dǎo)地位,市場規(guī)模達到約1750億元,服務(wù)型虛擬數(shù)字人總規(guī)模將超過950億元。

然而,觀察時下火爆的虛擬數(shù)字人市場會發(fā)現(xiàn),雖然自2021年以來,各種虛擬人已經(jīng)層出不窮,但真正在這種國際盛會上展示應(yīng)用的,除了像洛天依這樣的元老級虛擬偶像之外,娛樂型、表演型的公司出鏡卻并不多,更多的還是以技術(shù)驅(qū)動,并最終在一定程度上替代人類工作的服務(wù)型虛擬數(shù)字人。

事實上,在畫面呈現(xiàn)方式日漸成熟的的基礎(chǔ)下,疊加5G、算力、AI等技術(shù)能力的提升,虛擬數(shù)字人的落地場景日漸豐富。

未來虛擬數(shù)字人不再局限于傳統(tǒng)文娛如影視、動畫在人物建模、CG等方面在虛擬形象塑造的應(yīng)用,還將在社交、游戲、辦公等場景實現(xiàn)真實人類虛擬化身的身份職能,并逐漸于直播電商、偶像造星、陪伴服務(wù)等領(lǐng)域?qū)崿F(xiàn)商業(yè)變現(xiàn)。

結(jié)語

雖然當(dāng)前虛擬數(shù)字人的發(fā)展仍處于初級階段,其智能化水平還比較初級,無法應(yīng)對復(fù)雜的工作環(huán)境,距離大規(guī)模商業(yè)化應(yīng)用還有一段距離,但在經(jīng)受了冬奧會的考驗后,虛擬數(shù)字人終將迎來的大爆發(fā)的一天。

極客網(wǎng)企業(yè)會員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2022-02-10
科技感拉滿,盤盤這屆冬奧會的虛擬數(shù)字人
科技感拉滿,盤盤這屆冬奧會的虛擬數(shù)字人

長按掃碼 閱讀全文