OPPO 在以 “躍遷 · 致善”為主題的未來(lái)科技大會(huì) 2020(OPPO INNO DAY 2020)上,首次推出 OPPO FDF 全維人像視頻技術(shù)系統(tǒng)。該系統(tǒng)由感知人像和畫質(zhì)增強(qiáng)兩大引擎組成,分別針對(duì)人像拍攝時(shí)的人物主體和整體畫面進(jìn)行針對(duì)性優(yōu)化。據(jù)悉,首款搭載該系統(tǒng)的產(chǎn)品將在 12 月問(wèn)世。
OPPO 介紹,F(xiàn)DF 全維人像視頻技術(shù)系統(tǒng)由感知人像和畫質(zhì)增強(qiáng)兩大引擎組成,分別針對(duì)人像拍攝時(shí)的人物主體和整體畫面進(jìn)行針對(duì)性優(yōu)化,共同實(shí)現(xiàn)人美、景美的拍攝效果,不管是單人還是多人,白天、夜間還是逆光,都可以實(shí)現(xiàn)全時(shí)段視頻創(chuàng)作自由。
具體來(lái)說(shuō),感知人像引擎擁有 AI 人臉檢測(cè)、AI 超清人像、OFL 膚質(zhì)優(yōu)化算法、人臉畸變矯正等功能,拒絕千篇一律,讓拍攝的作品更自然、真實(shí)、動(dòng)人。
AI 人臉檢測(cè)通過(guò)對(duì)網(wǎng)絡(luò)模型的優(yōu)化,實(shí)現(xiàn) 99.78% 的檢測(cè)準(zhǔn)確率和 25ms 的單幀檢測(cè)耗時(shí),不管是拍視頻還是拍照,都能快速的檢測(cè)出人臉區(qū)域,為后續(xù)臉部?jī)?yōu)化圈定精確的范圍。
同時(shí),AI 算法在人臉區(qū)域標(biāo)記了 296 個(gè)關(guān)鍵點(diǎn)來(lái)實(shí)現(xiàn)五官和輪廓細(xì)節(jié)的區(qū)分,并加入關(guān)鍵點(diǎn)是否可見(jiàn)判斷、人臉角度判斷等輔助信息,最終在業(yè)界權(quán)威的 WFLW 數(shù)據(jù)集上實(shí)現(xiàn)低至 4.71% 的 NME,這套算法在移動(dòng)平臺(tái)上的運(yùn)行幀率達(dá)到了 200fps 以上。
AI 超清人像在深度神經(jīng)網(wǎng)絡(luò)模型中設(shè)計(jì)了 3 個(gè)子模塊對(duì)人臉進(jìn)行超分計(jì)算、降噪優(yōu)化和銳度優(yōu)化。即使在暗光環(huán)境下,也能通過(guò)算法精準(zhǔn)檢測(cè)臉部和鄰近區(qū)域并進(jìn)行增強(qiáng)處理。
OFL 膚質(zhì)優(yōu)化算法能分別對(duì)膚色和膚質(zhì)進(jìn)行 AI 處理,拍攝時(shí)幫助用戶去掉臉部瑕疵、優(yōu)化皮膚表現(xiàn)、讓整體氣色更出眾。這套算法可實(shí)現(xiàn) 96.5% 的皮膚區(qū)域的分割,面部皮膚精度達(dá)到了 97.4%。“膚色檢測(cè)”范圍不僅包括臉部皮膚,也包括脖子和手部的皮膚,幾乎涵蓋在拍攝人像視頻時(shí)會(huì)露出的所有皮膚區(qū)域。
OFL 膚質(zhì)優(yōu)化算法還能實(shí)現(xiàn) AI 祛瑕疵效果,智能識(shí)別區(qū)分天生特征和后天瑕疵的特征,實(shí)現(xiàn)更自然地祛瑕疵效果。斑、痘、眼袋等后天瑕疵會(huì)被去掉,淚痣等天生臉部特征得到保留。
人臉畸變矯正在處理人臉畸變時(shí),取透視投影中的背景部分,同時(shí)對(duì)人臉區(qū)域進(jìn)行切割分離、再做一次球面投影,讓人臉保持正常的、符合人眼觀看習(xí)慣的形狀。
畫質(zhì)增強(qiáng)引擎則包含新一代超級(jí)防抖算法、移動(dòng)延時(shí)攝影、超級(jí)夜景視頻、DOL-HDR 等功能,可在畫面抖動(dòng)較大、光線不足 / 過(guò)亮等場(chǎng)景下保障拍出滿意畫面。
超級(jí)防抖算法加入場(chǎng)景檢測(cè)過(guò)程,通過(guò)抓取陀螺儀、加速度計(jì)和 Sensor 的數(shù)據(jù)分別對(duì)運(yùn)動(dòng)軌跡、姿態(tài)和曝光進(jìn)行判斷,從而區(qū)分不同場(chǎng)景,匹配不同的防抖策略。
針對(duì)手持移動(dòng)延時(shí)攝影,OPPO 在超級(jí)防抖算法中加入運(yùn)動(dòng)趨勢(shì)判斷,不僅可以使被抽取的多幀畫面之間的過(guò)渡更平滑,還可以實(shí)現(xiàn)更長(zhǎng)時(shí)間跨度的防抖,讓移動(dòng)延時(shí)攝影的實(shí)拍表現(xiàn)幾乎達(dá)到云臺(tái)效果。
超級(jí)夜景視頻在前代算法基礎(chǔ)上和 HDR 算法進(jìn)行融合,針對(duì)亮度調(diào)整曲線進(jìn)行區(qū)分調(diào)試,算法先會(huì)根據(jù)當(dāng)前的亮度環(huán)境智能判斷啟用夜景還是 HDR 亮度調(diào)整曲線,實(shí)現(xiàn)更通透、觀感更好的視頻效果。
DOL-HDR 方案解決用戶逆光拍攝痛點(diǎn),其長(zhǎng)短曝光幀幾乎是同時(shí)進(jìn)行,大幅縮減了前后幀的間隔時(shí)間,大大改善鬼影問(wèn)題,實(shí)現(xiàn)更好的 HDR 視頻拍攝效果。
OPPO 表示,首款搭載 OPPO 人像視頻技術(shù)系統(tǒng)的新品將于 12 月份問(wèn)世。目前 OPPO 在 HDR、夜景、超級(jí)防抖等方面的技術(shù)已經(jīng)陸續(xù)開(kāi)放給抖音和快手等第三方平臺(tái)使用。
- 中國(guó)電信:李峻辭任公司執(zhí)行董事
- 5G專網(wǎng)賦能,糯扎渡水電廠開(kāi)啟智慧運(yùn)營(yíng)新時(shí)代
- Dell'Oro報(bào)告:2024年調(diào)整期結(jié)束 光傳輸設(shè)備市場(chǎng)將恢復(fù)增長(zhǎng)
- Dell'Oro報(bào)告:2024年調(diào)整期結(jié)束 光傳輸設(shè)備市場(chǎng)將恢復(fù)增長(zhǎng)
- 為什么要云轉(zhuǎn)型?企業(yè)邁向數(shù)字化未來(lái)的必由之路
- 受AI和混合云推動(dòng) 分布式云網(wǎng)絡(luò)市場(chǎng)到2028年將達(dá)170億美元
- 商業(yè)航天產(chǎn)業(yè)不僅是戰(zhàn)略新興產(chǎn)業(yè),更是戰(zhàn)略常興產(chǎn)業(yè)
- 韋爾股份預(yù)計(jì)2024年?duì)I收創(chuàng)歷史新高 凈利潤(rùn)預(yù)計(jì)增長(zhǎng)五倍
- 郝文宇:我國(guó)商業(yè)衛(wèi)星應(yīng)堅(jiān)持自主發(fā)展 遵循產(chǎn)業(yè)規(guī)律
- 瑞芯微2024年預(yù)計(jì)營(yíng)收創(chuàng)歷史新高 凈利潤(rùn)增長(zhǎng)超300%
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。