盤古大模型賦能華為云MetaStudio數(shù)字內(nèi)容生產(chǎn)線,構(gòu)建有“溫度和情感”的企業(yè)應用

今天,華為開發(fā)者大會(Cloud)在東莞盛大開幕。華為云媒體服務產(chǎn)品部部長呂陽明在大會主題演講中帶來盤古基礎大模型賦能的MetaStudio數(shù)字內(nèi)容生產(chǎn)線,也是華為云MetaStudio的全新升級。通過提供模型生成和模型驅(qū)動兩大服務,快速生成和驅(qū)動數(shù)字人模型,賦能在線教育、文娛直播、企業(yè)會議等行業(yè)應用,從“0101的比特傳輸”走向“有溫度的模型交互”,改變傳統(tǒng)交互方式,重塑內(nèi)容生產(chǎn)。并通過現(xiàn)場展示數(shù)字人阿拉伯演講視頻生成和數(shù)字人云會議實時驅(qū)動引爆全場。

在數(shù)字內(nèi)容產(chǎn)業(yè),內(nèi)容力決定了企業(yè)的競爭力。當前,AI生成內(nèi)容(AIGC)正在重構(gòu)數(shù)字內(nèi)容生產(chǎn)模式,重新定義內(nèi)容力。企業(yè)在內(nèi)容生產(chǎn)上用到的算力核數(shù)、模型參數(shù)量和行業(yè)知識數(shù),決定了企業(yè)在內(nèi)容生產(chǎn)上的競爭力,因此,知識力(模型的深度)決定了內(nèi)容力。

華為云基于盤古基礎大模型,賦能MetaStudio數(shù)字內(nèi)容生產(chǎn)線,打造了盤古數(shù)字人大模型,實現(xiàn)MetaStudio數(shù)字內(nèi)容生產(chǎn)線全新升級,通過提供模型生成和模型驅(qū)動兩大服務,讓每個人實現(xiàn)數(shù)字人自由,幫助企業(yè)構(gòu)筑更強的內(nèi)容力。

數(shù)字人模型生成服務

基于盤古基礎大模型,MetaStudio使用了PB級的音視頻數(shù)據(jù)進行訓練,構(gòu)建了數(shù)字人通用大模型,包括數(shù)字人形象、動作、表情、口型、聲音等;每個用戶可以基于數(shù)字人通用大模型,再結(jié)合個人數(shù)據(jù)進行訓練,構(gòu)建用戶自己的數(shù)字人個性化大模型。

數(shù)字人模型生成服務,可以通過文字、圖片、視頻等多種模式來生成數(shù)字人。

·文本生成數(shù)字人:通過輸入文本,描述希望生成數(shù)字人的樣子,10秒即可生成模型;

·圖片生成數(shù)字人:通過上傳一張照片,根據(jù)照片中的個人特征,生成不同類型的數(shù)字人,比如風格化數(shù)字人、美型數(shù)字人,模型生成時間僅需30秒;

·視頻生成數(shù)字人:只需要拍攝一段5分鐘的視頻,就可以生成數(shù)字人個性化大模型,包含用戶自己的表情、口型、動作特征,整個模型訓練過程只需要1個小時。而業(yè)界一般需要訓練12個小時以上。

數(shù)字人模型驅(qū)動服務

數(shù)字人大模型可以使用多種方式進行驅(qū)動,包括文字、語音、視頻等,通過驅(qū)動向量信息來驅(qū)動數(shù)字人,生成高清視頻。

·文字驅(qū)動:基于識別文字的語義和情感,實現(xiàn)數(shù)字人動作和文字的精準匹配;

·語音驅(qū)動:通過多語言泛化技術(shù),一種語言、一次訓練,即可使用多種語言驅(qū)動數(shù)字人;

·視頻驅(qū)動:現(xiàn)在業(yè)界大部分數(shù)字人都是站在固定點講解,無法支持移動,華為云通過2D視頻,以及2D/3D數(shù)據(jù)的聯(lián)合訓練,實現(xiàn)數(shù)字人走動、側(cè)身、手勢的精確驅(qū)動。

華為云MetaStudio數(shù)字內(nèi)容生產(chǎn)線,基于盤古大模型、渲染引擎和實時音視頻能力,提供數(shù)字人模型生成服務和模型驅(qū)動服務,聯(lián)合伙伴和開發(fā)者,共同構(gòu)建有“溫度和情感”的企業(yè)應用。

(免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )