曠視移動(dòng)端實(shí)時(shí)人體姿態(tài)識(shí)別亮相IMC聯(lián)發(fā)科技展臺(tái)

10月24日，聯(lián)發(fā)科技在2018印度移動(dòng)大會(huì)(India Mobile Congress 2018)上正式展出曦力 P70(Helio P70)系統(tǒng)單芯片(SoC)，其增強(qiáng)型的 AI引擎結(jié)合 CPU與 GPU的升級(jí)，實(shí)現(xiàn)了更強(qiáng)大的 AI處理能力。作為聯(lián)發(fā)科技核心的人工智能戰(zhàn)略合作伙伴(AI Partner)，曠視科技受邀參會(huì)并現(xiàn)場(chǎng)展示了其最新的人工智能技術(shù)在高性能移動(dòng)平臺(tái)曦力P70上的能力。同時(shí)，曠視科技聯(lián)合創(chuàng)始人楊沐還在展會(huì)期間分享了雙方合作創(chuàng)新之處。

　　圖：曠視科技聯(lián)合創(chuàng)始人楊沐就聯(lián)發(fā)科技曦力P70 Demo演示發(fā)言

曦力 P70可支持更復(fù)雜AI應(yīng)用，與曠視科技合作創(chuàng)新硬件層

作為聯(lián)發(fā)科技芯片產(chǎn)品家族的新成員，曦力 P70具備最大功率，最長(zhǎng)電池壽命，絕佳拍攝效果，流暢使用體驗(yàn)等優(yōu)勢(shì)。聯(lián)發(fā)科技無(wú)線通信事業(yè)部總經(jīng)理李宗霖表示：“曦力 P70的推出，延續(xù)了聯(lián)發(fā)科技致力于為大眾市場(chǎng)提供高端智能手機(jī)才能擁有的強(qiáng)大功能及先進(jìn)技術(shù)的承諾。”

據(jù)了解，此次新鮮出爐的曦力 P70采用臺(tái)積電12nm FinFET制程工藝，應(yīng)用多核APU，工作頻率高達(dá) 525 MHz，可實(shí)現(xiàn)快速、高效的終端人工智能(Edge-AI)處理能力。為了最大限度提升嚴(yán)苛的AI應(yīng)用性能，芯片組采用八核心大小核(big.LITTLE)架構(gòu)，內(nèi)建四顆Arm Cortex-A73 2.1 GHz處理器和四顆 Arm Cortex-A53 2.0 GHz處理器。該芯片組還搭載先進(jìn)型 Arm Mali-G72 MP3 GPU，工作頻率高達(dá) 900 MHz。

與曦力 P60相比，曦力 P70的增強(qiáng)型 AI引擎續(xù)航時(shí)間增加 7%，且功耗降低 35%，從而可提升10%至 30%的 AI處理能力;這意味著曦力 P70可以支持更復(fù)雜的 AI應(yīng)用，例如實(shí)時(shí)人體姿態(tài)識(shí)別和基于 AI的視頻編碼。

曠視科技作為全球領(lǐng)先的 AI+IoT解決方案提供商，始終致力于研發(fā)先進(jìn)的算法并在各個(gè)終端建立感知網(wǎng)絡(luò)，其中最重要的一部分便是移動(dòng)端計(jì)算。自深入手機(jī)行業(yè)以來，曠視的技術(shù)已實(shí)現(xiàn)了再手機(jī)業(yè)務(wù)的應(yīng)用層、算法層、解決方案層以及硬件層的全棧賦能，以打造適配多平臺(tái)、多場(chǎng)景以及不同移動(dòng)端設(shè)備的智能視覺解決方案。因此，曠視科技在追求移動(dòng)端算法創(chuàng)新的同時(shí)，也一直在尋找能將自身算法運(yùn)行的更加流暢高效的平臺(tái)。

　　圖：曠視科技聯(lián)合創(chuàng)始人楊沐(左)與聯(lián)發(fā)科技無(wú)線通信事業(yè)部總經(jīng)理李宗霖(右)

長(zhǎng)期以來，曠視科技在硬件層都與聯(lián)發(fā)科技有著合作創(chuàng)新。早在2月份的2018年世界移動(dòng)通信大會(huì) (MWC 2018)上，曠視科技就與聯(lián)發(fā)科技聯(lián)合展示了基于各自移動(dòng)平臺(tái)的全新的手機(jī)智能應(yīng)用;除此之外，在3月份聯(lián)發(fā)科技的曦力P60發(fā)布會(huì)上，曠視科技也曾作為核心AI技術(shù)合作伙伴之一出席。此次展會(huì)，曠視則將自研的人體姿態(tài)算法模型和人臉解鎖應(yīng)用帶到曦力P70首次Demo演示中，實(shí)現(xiàn)了首個(gè)在移動(dòng)端完成人體關(guān)鍵點(diǎn)檢測(cè)的應(yīng)用演示。

曠視人體姿態(tài)識(shí)別舞動(dòng)全場(chǎng)移動(dòng)端AI應(yīng)用就該這樣玩

曠視科技聯(lián)合創(chuàng)始人楊沐在曦力P70 Demo首次演示中表示，聯(lián)發(fā)科技的AI處理器對(duì)實(shí)現(xiàn)人臉解鎖、人體姿態(tài)識(shí)別等移動(dòng)AI應(yīng)用的性能提升有著很大的幫助。實(shí)際上，早在曦力 P60芯片平臺(tái)上，曠視科技就開發(fā)出了包含安全人臉識(shí)別解鎖、先進(jìn)影像處理、單鏡頭背景虛化、智能物體以及手勢(shì)識(shí)別、智能相冊(cè)分類等兼具實(shí)用性和趣味性的 AI應(yīng)用。此次在曦力 P70平臺(tái)上更是實(shí)現(xiàn)了端到端性能改進(jìn)，使設(shè)備能夠在90+毫秒完成精準(zhǔn)、高效的人臉解鎖，同時(shí)節(jié)省12%的功耗。

在展示區(qū)，曠視科技不僅展示了最熱門的人臉識(shí)別解鎖，更有挑戰(zhàn)的是將實(shí)時(shí)人體姿態(tài)識(shí)別技術(shù)搬到了移動(dòng)設(shè)備上。架在三腳架上的手機(jī)能夠追蹤到舞者在手機(jī)攝像頭面前的每一個(gè)動(dòng)作，吸引了不少專業(yè)觀眾駐足并體驗(yàn)。

　　圖：印度移動(dòng)大會(huì)現(xiàn)場(chǎng)演示曠視移動(dòng)端人體關(guān)鍵點(diǎn)識(shí)別

人體姿態(tài)估計(jì)是計(jì)算機(jī)視覺領(lǐng)域的基本研究方向之一，多人姿態(tài)估計(jì)(Multi-Person Pose Estimation)是該方向上的一個(gè)經(jīng)典難題;在傳統(tǒng)算法遭遇瓶頸之時(shí)，雖然卷積神經(jīng)網(wǎng)絡(luò)的再次崛起和快速迭代為解決這一問題帶來了新工具，多人姿態(tài)估計(jì)依然面臨著一些百啃不動(dòng)的“硬骨頭”。目前，前沿技術(shù)已經(jīng)能夠讓計(jì)算機(jī)識(shí)別復(fù)雜環(huán)境下的人體和動(dòng)作。而隨著移動(dòng)AI時(shí)代的帶來，大眾對(duì)于移動(dòng)設(shè)備的人機(jī)交互要求越來越高，如移動(dòng)端的體感游戲，除了讓手機(jī)識(shí)別人臉，對(duì)人體的感知能力或?qū)⒊蔀槭謾C(jī)行業(yè)下一條賽道。

在人體姿態(tài)估計(jì)的研究中，曠視的技術(shù)始終處于世界領(lǐng)先地位。2017年，曠視研究院就曾提出一種獨(dú)創(chuàng)的級(jí)聯(lián)金字塔網(wǎng)絡(luò)——CPN，以解決關(guān)鍵點(diǎn)識(shí)別的難題，并連續(xù)兩年在國(guó)際計(jì)算機(jī)視覺領(lǐng)域最權(quán)威的COCO 2017人體關(guān)鍵點(diǎn)檢測(cè)挑戰(zhàn)賽中奪得冠軍。

　　圖：曠視自研級(jí)聯(lián)金字塔網(wǎng)絡(luò)CPN實(shí)驗(yàn)結(jié)果實(shí)例

楊沐介紹，曠視Face++基于CPN的人體姿態(tài)識(shí)別技術(shù)可實(shí)時(shí)檢測(cè)圖片或視頻流中的人體，并對(duì)人體中的五官、肩部、肘部、臀部等關(guān)鍵點(diǎn)進(jìn)行詳細(xì)定位。在移動(dòng)端，曠視針對(duì)曦力P70對(duì)模型進(jìn)行了深度定制。在新一代APU的支持下，曠視的技術(shù)可以輸出14個(gè)人體關(guān)鍵點(diǎn)，與CPU相比可節(jié)省52%的功耗，性能提升70%。

　　圖：曠視科技展示Face++實(shí)時(shí)人體姿態(tài)識(shí)別技術(shù)

在人工智能成為手機(jī)等移動(dòng)端領(lǐng)域的競(jìng)爭(zhēng)焦點(diǎn)的今天。此次，曠視科技與聯(lián)發(fā)科技在手機(jī)芯片 AI能力研發(fā)方面的合作，意味著曠視科技未來可以更好地幫助手機(jī)廠商在計(jì)算資源、性能、功耗、成本等多個(gè)維度中找到平衡點(diǎn)，滿足不同廠商對(duì)于移動(dòng)平臺(tái)的視覺技術(shù)應(yīng)用和圖像增強(qiáng)、相機(jī)增強(qiáng)、智能圖像、視頻處理等需求，讓高端 AI技術(shù)友好親民地走近消費(fèi)終端。

生成海報(bào)

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。