曠視移動端實時人體姿態(tài)識別亮相IMC聯(lián)發(fā)科技展臺

10月24日，聯(lián)發(fā)科技在2018印度移動大會(India Mobile Congress 2018)上正式展出曦力 P70(Helio P70)系統(tǒng)單芯片(SoC)，其增強型的 AI引擎結(jié)合 CPU與 GPU的升級，實現(xiàn)了更強大的 AI處理能力。作為聯(lián)發(fā)科技核心的人工智能戰(zhàn)略合作伙伴(AI Partner)，曠視科技受邀參會并現(xiàn)場展示了其最新的人工智能技術(shù)在高性能移動平臺曦力P70上的能力。同時，曠視科技聯(lián)合創(chuàng)始人楊沐還在展會期間分享了雙方合作創(chuàng)新之處。

　　圖：曠視科技聯(lián)合創(chuàng)始人楊沐就聯(lián)發(fā)科技曦力P70 Demo演示發(fā)言

曦力 P70可支持更復(fù)雜AI應(yīng)用，與曠視科技合作創(chuàng)新硬件層

作為聯(lián)發(fā)科技芯片產(chǎn)品家族的新成員，曦力 P70具備最大功率，最長電池壽命，絕佳拍攝效果，流暢使用體驗等優(yōu)勢。聯(lián)發(fā)科技無線通信事業(yè)部總經(jīng)理李宗霖表示：“曦力 P70的推出，延續(xù)了聯(lián)發(fā)科技致力于為大眾市場提供高端智能手機才能擁有的強大功能及先進技術(shù)的承諾。”

據(jù)了解，此次新鮮出爐的曦力 P70采用臺積電12nm FinFET制程工藝，應(yīng)用多核APU，工作頻率高達 525 MHz，可實現(xiàn)快速、高效的終端人工智能(Edge-AI)處理能力。為了最大限度提升嚴苛的AI應(yīng)用性能，芯片組采用八核心大小核(big.LITTLE)架構(gòu)，內(nèi)建四顆Arm Cortex-A73 2.1 GHz處理器和四顆 Arm Cortex-A53 2.0 GHz處理器。該芯片組還搭載先進型 Arm Mali-G72 MP3 GPU，工作頻率高達 900 MHz。

與曦力 P60相比，曦力 P70的增強型 AI引擎續(xù)航時間增加 7%，且功耗降低 35%，從而可提升10%至 30%的 AI處理能力;這意味著曦力 P70可以支持更復(fù)雜的 AI應(yīng)用，例如實時人體姿態(tài)識別和基于 AI的視頻編碼。

曠視科技作為全球領(lǐng)先的 AI+IoT解決方案提供商，始終致力于研發(fā)先進的算法并在各個終端建立感知網(wǎng)絡(luò)，其中最重要的一部分便是移動端計算。自深入手機行業(yè)以來，曠視的技術(shù)已實現(xiàn)了再手機業(yè)務(wù)的應(yīng)用層、算法層、解決方案層以及硬件層的全棧賦能，以打造適配多平臺、多場景以及不同移動端設(shè)備的智能視覺解決方案。因此，曠視科技在追求移動端算法創(chuàng)新的同時，也一直在尋找能將自身算法運行的更加流暢高效的平臺。

　　圖：曠視科技聯(lián)合創(chuàng)始人楊沐(左)與聯(lián)發(fā)科技無線通信事業(yè)部總經(jīng)理李宗霖(右)

長期以來，曠視科技在硬件層都與聯(lián)發(fā)科技有著合作創(chuàng)新。早在2月份的2018年世界移動通信大會 (MWC 2018)上，曠視科技就與聯(lián)發(fā)科技聯(lián)合展示了基于各自移動平臺的全新的手機智能應(yīng)用;除此之外，在3月份聯(lián)發(fā)科技的曦力P60發(fā)布會上，曠視科技也曾作為核心AI技術(shù)合作伙伴之一出席。此次展會，曠視則將自研的人體姿態(tài)算法模型和人臉解鎖應(yīng)用帶到曦力P70首次Demo演示中，實現(xiàn)了首個在移動端完成人體關(guān)鍵點檢測的應(yīng)用演示。

曠視人體姿態(tài)識別舞動全場移動端AI應(yīng)用就該這樣玩

曠視科技聯(lián)合創(chuàng)始人楊沐在曦力P70 Demo首次演示中表示，聯(lián)發(fā)科技的AI處理器對實現(xiàn)人臉解鎖、人體姿態(tài)識別等移動AI應(yīng)用的性能提升有著很大的幫助。實際上，早在曦力 P60芯片平臺上，曠視科技就開發(fā)出了包含安全人臉識別解鎖、先進影像處理、單鏡頭背景虛化、智能物體以及手勢識別、智能相冊分類等兼具實用性和趣味性的 AI應(yīng)用。此次在曦力 P70平臺上更是實現(xiàn)了端到端性能改進，使設(shè)備能夠在90+毫秒完成精準(zhǔn)、高效的人臉解鎖，同時節(jié)省12%的功耗。

在展示區(qū)，曠視科技不僅展示了最熱門的人臉識別解鎖，更有挑戰(zhàn)的是將實時人體姿態(tài)識別技術(shù)搬到了移動設(shè)備上。架在三腳架上的手機能夠追蹤到舞者在手機攝像頭面前的每一個動作，吸引了不少專業(yè)觀眾駐足并體驗。

　　圖：印度移動大會現(xiàn)場演示曠視移動端人體關(guān)鍵點識別

人體姿態(tài)估計是計算機視覺領(lǐng)域的基本研究方向之一，多人姿態(tài)估計(Multi-Person Pose Estimation)是該方向上的一個經(jīng)典難題;在傳統(tǒng)算法遭遇瓶頸之時，雖然卷積神經(jīng)網(wǎng)絡(luò)的再次崛起和快速迭代為解決這一問題帶來了新工具，多人姿態(tài)估計依然面臨著一些百啃不動的“硬骨頭”。目前，前沿技術(shù)已經(jīng)能夠讓計算機識別復(fù)雜環(huán)境下的人體和動作。而隨著移動AI時代的帶來，大眾對于移動設(shè)備的人機交互要求越來越高，如移動端的體感游戲，除了讓手機識別人臉，對人體的感知能力或?qū)⒊蔀槭謾C行業(yè)下一條賽道。

在人體姿態(tài)估計的研究中，曠視的技術(shù)始終處于世界領(lǐng)先地位。2017年，曠視研究院就曾提出一種獨創(chuàng)的級聯(lián)金字塔網(wǎng)絡(luò)——CPN，以解決關(guān)鍵點識別的難題，并連續(xù)兩年在國際計算機視覺領(lǐng)域最權(quán)威的COCO 2017人體關(guān)鍵點檢測挑戰(zhàn)賽中奪得冠軍。

　　圖：曠視自研級聯(lián)金字塔網(wǎng)絡(luò)CPN實驗結(jié)果實例

楊沐介紹，曠視Face++基于CPN的人體姿態(tài)識別技術(shù)可實時檢測圖片或視頻流中的人體，并對人體中的五官、肩部、肘部、臀部等關(guān)鍵點進行詳細定位。在移動端，曠視針對曦力P70對模型進行了深度定制。在新一代APU的支持下，曠視的技術(shù)可以輸出14個人體關(guān)鍵點，與CPU相比可節(jié)省52%的功耗，性能提升70%。

　　圖：曠視科技展示Face++實時人體姿態(tài)識別技術(shù)

在人工智能成為手機等移動端領(lǐng)域的競爭焦點的今天。此次，曠視科技與聯(lián)發(fā)科技在手機芯片 AI能力研發(fā)方面的合作，意味著曠視科技未來可以更好地幫助手機廠商在計算資源、性能、功耗、成本等多個維度中找到平衡點，滿足不同廠商對于移動平臺的視覺技術(shù)應(yīng)用和圖像增強、相機增強、智能圖像、視頻處理等需求，讓高端 AI技術(shù)友好親民地走近消費終端。

生成海報

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負任何法律責(zé)任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。