構(gòu)建開放的AI生態(tài)：京東AI聯(lián)合相芯科技打造3D虛擬主播

近日，京東AI聯(lián)合生態(tài)合作伙伴相芯科技打造了3D虛擬主播，基于計算機3D圖形學(xué)、語音內(nèi)容識別以及深度學(xué)習技術(shù)，對真人主播聲音、唇形、表情動作等特征進行提取，利用NeuHub京東人工智能開放平臺的語音合成、語音識別和多輪對話能力，經(jīng)深度學(xué)習和訓(xùn)練，讓虛擬主播也具備了和真人主播一樣的實時播報能力，并且實現(xiàn)了雙語播報。

目前該技術(shù)已在NeuHub京東人工智能開放平臺正式上線，這項新技術(shù)目前適用于新聞資訊播報、廣電虛擬演播室、融媒體平臺內(nèi)容生產(chǎn)中心、新媒體、直播網(wǎng)站虛擬網(wǎng)紅、智能客服虛擬形象升級等多種場景之中。

隨著互聯(lián)網(wǎng)技術(shù)的飛速發(fā)展，網(wǎng)絡(luò)視頻、手機視頻成為主流的內(nèi)容形式，真人直播、主持人等職業(yè)成為求職市場上的“香餑餑”。然而真人主播、主持人、人工客服等培養(yǎng)培訓(xùn)成本很高，工作強度大，還有檔期的限制，AI虛擬主播技術(shù)的誕生，有效地解決了這些問題，大大地提高了視頻的應(yīng)用范圍和工作效率。

京東AI和相芯科技聯(lián)合打造的3D虛擬主播技術(shù)則可以讓靜態(tài)主持人圖片“活”過來，并根據(jù)輸入的文本信息自動形成播報視頻。有了播報內(nèi)容文本，就有了“主播”，通過在線云端語音合成引擎合成，達到讓“主播“實時說話的效果，進而生成相應(yīng)的播報視頻。

據(jù)悉，該產(chǎn)品具備幾大特征。首先是強大的定制能力，包含語音和形象定制，提供高自然度、有感情、個性化的語音合成服務(wù)，支持中英文雙語，并可以定制個性化語音庫;結(jié)合相芯科技在CG形象方面的驅(qū)動技術(shù)及模型積累，可根據(jù)個人形象(照片)或者地方文化名人形象(畫像)，定制真人或卡通形象，滿足不同場景需求。

語音驅(qū)動口型匹配。通過AI語音動畫技術(shù)智能識別語音或文本，自動匹配口型，疊加表情信息，輔助動作腳本設(shè)計，持續(xù)實時驅(qū)動3D虛擬形象。這就意味著該技術(shù)的適配性更高，不會受到播報內(nèi)容文本的限制，大大提升了該技術(shù)的使用性。

人臉關(guān)鍵點檢測，實現(xiàn)表情實時驅(qū)動。通過攝像頭捕捉真人表情，智能檢測人臉區(qū)域并標記特征點(眼、口、鼻、眉、面部輪廓等)，不斷對人臉特征和表情進行自適應(yīng)，同步至3D虛擬形象面部，驅(qū)動3D虛擬形象動畫;支持47種面部表情，及10種舌頭動作，靈動逼真。

NeuHub京東人工智能開放平臺從建立之初就本著開放共贏的心態(tài)積極引入生態(tài)合作伙伴共同實現(xiàn)人工智能技術(shù)在各產(chǎn)業(yè)的落地。針對不同類型的合作伙伴，京東AI發(fā)布了AI生態(tài)合作伙伴煉金計劃，旨在連接AI創(chuàng)業(yè)伙伴、地方政府和品牌企業(yè)，深入場景，融合產(chǎn)品攜手生態(tài)伙伴，成就AI價值。煉金計劃包含服務(wù)提供類、渠道合作類及集成創(chuàng)新類合作伙伴，京東AI為三類伙伴提供全渠道的品牌催化、技術(shù)催化及業(yè)務(wù)催化，與合作伙伴攜手創(chuàng)造有溫度的AI(煉金計劃申請鏈接。截至日前，NeuHub京東人工智能開放平臺生態(tài)已吸納超過300家優(yōu)秀的合作伙伴，并與超過10家合作伙伴深度合作進行聯(lián)合產(chǎn)品打造。

作為產(chǎn)業(yè)開發(fā)者和生態(tài)伙伴，相芯科技僅是京東人工智能開放平臺NeuHub的一個縮影。未來將會有更多的產(chǎn)業(yè)開發(fā)者，調(diào)用NeuHub平臺的AI能力，結(jié)各自產(chǎn)業(yè)痛點，引發(fā)AI+產(chǎn)業(yè)的化學(xué)反應(yīng)。同時，產(chǎn)業(yè)開發(fā)者在產(chǎn)業(yè)應(yīng)用過程中的成果和實踐又可以反哺AI技術(shù)的迭代、更新。京東AI助力更多人成為產(chǎn)業(yè)開發(fā)者，讓產(chǎn)業(yè)加上AI的能力，扶持更多的千億產(chǎn)業(yè)領(lǐng)軍企業(yè)，推動社會文明進步。

生成海報

免責聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關(guān)資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。