楠木軒

感知人像畫質增強美顏技術再升級 難怪這些明星拍出來這麼好看

由 鹹春葉 發佈於 科技

11月18日,OPPO在以“躍遷·致善”為主題的2020未來科技大會上,推出OPPO FDF 全維人像視頻技術系統,這是OPPO多年美顏技術積累的一次釋放,是人像美學領域的一次進化,也是5G視頻時代的一次革新。
從照片時代起,在美顏領域投入大量研究讓OPPO深受年輕人歡迎。王俊凱、楊洋、楊冪、李易峯、楊紫、張一山、鄭凱、迪麗熱巴、周杰倫、蕭敬騰、田馥甄等都做過OPPO代言人。
樹立5G時代全場景視頻美顏新標杆
影像產品經理田智堅表示“影像一直是OPPO堅持並且將長期堅持的賽道,在影像產品定義上始終堅持從用户出發,為讓用户拍出自然、自信、動人的人像作品,我們在內部啓動了魔鏡專項,在不同的城市和Reno系列老用户、終端導購、人像精修師和妝容專家深入探討他們認為拍得好的人像視頻。出乎意料的是,幾乎所有人都認為,好的人像視頻不僅要做到人美,還要景美。基於這樣的洞察,我們打造了OPPO FDF 全維人像視頻技術系統。當然,這也是我們在人像拍攝上一直秉承的理念 —— 讓美自然生長。”
OPPO FDF 全維人像視頻技術系統由感知人像和畫質增強兩大引擎組成,分別針對人像拍攝時的人物主體和整體畫面進行針對性優化,共同實現人美、景美的拍攝效果,不管是單人還是多人,白天、夜間還是逆光,都可以實現全時段視頻創作自由。
拒絕千篇一律 讓美更自然
感知人像引擎擁有AI人臉檢測、AI超清人像、OFL膚質優化算法、人臉畸變矯正等功能,拒絕千篇一律,讓拍攝的作品更自然、真實、動人。
AI人臉檢測通過對網絡模型的優化,實現99.78?檢測準確率和25ms的單幀檢測耗時,不管是拍視頻還是拍照,都能快速的檢測出人臉區域,為後續臉部優化圈定精確的範圍。同時,AI算法在人臉區域標記了296個關鍵點來實現五官和輪廓細節的區分,並加入關鍵點是否可見判斷、人臉角度判斷等輔助信息,最終在業界權威的WFLW數據集上實現低至4.71?NME,這套算法在移動平台上的運行幀率達到了200fps以上。
AI超清人像在深度神經網絡模型中設計了3個子模塊對人臉進行超分計算、降噪優化和鋭度優化。即使在暗光環境下,也能通過算法精準檢測臉部和鄰近區域並進行增強處理,提升臉部清晰度的同時,細節處理更精緻。
OFL膚質優化算法能分別對膚色和膚質進行AI處理,拍攝時幫助用户去掉臉部瑕疵、優化皮膚表現、讓整體氣色更出眾。這套算法可實現96.5?皮膚區域的分割,面部皮膚精度達到了97.4?“膚色檢測”範圍不僅包括臉部皮膚,也包括脖子和手部的皮膚,幾乎涵蓋在拍攝人像視頻時會露出的所有皮膚區域。
OFL膚質優化算法還能實現AI祛瑕疵效果,智能識別區分天生特徵和後天瑕疵的特徵,實現更自然地祛瑕疵效果。斑、痘、眼袋等後天瑕疵會被去掉,淚痣等天生臉部特徵得到保留。
人臉畸變矯正在處理人臉畸變時,取透視投影中的背景部分,同時對人臉區域進行切割分離、再做一次球面投影,讓人臉保持正常的、符合人眼觀看習慣的形狀,最終將兩個畫面疊加,從而得到人臉和背景都正常的畫面,讓整體效果更自然、真實。
全場景全天候拍攝創作更自由
畫質增強引擎包含新一代超級防抖算法、移動延時攝影、超級夜景視頻、DOL-HDR等功能,可在畫面抖動較大、光線不足/過亮等場景下保障拍出滿意畫面。
超級防抖算法加入場景檢測過程,通過抓取陀螺儀、加速度計和Sensor的數據分別對運動軌跡、姿態和曝光進行判斷,從而區分不同場景,匹配不同的防抖策略。
針對手持移動延時攝影,OPPO在超級防抖算法中加入運動趨勢判斷,不僅可以使被抽取的多幀畫面之間的過渡更平滑,還可以實現更長時間跨度的防抖,讓移動延時攝影的實拍表現幾乎達到雲台效果。
超級夜景視頻在前代算法基礎上和HDR算法進行融合,針對亮度調整曲線進行區分調試,算法先會根據當前的亮度環境智能判斷啓用夜景還是HDR亮度調整曲線,實現更通透、觀感更好的視頻效果。
DOL-HDR方案解決用户逆光拍攝痛點,其長短曝光幀幾乎是同時進行,大幅縮減了前後幀的間隔時間,大大改善鬼影問題,實現更好的HDR視頻拍攝效果。
色彩管理作為OPPO全鏈路色彩管理系統中另一項核心技術,通過統一不同色域的色温一致性及對色域座標數據進行分次處理,從而解決採集端和顯示端因色域描述方式不同而造成的色彩偏差問題,能帶給用户更精準的視覺體驗。
據悉,首款搭載OPPO全維人像視頻技術系統的新品將於12月份問世。OPPO也將堅持技術共享、技術普惠精神,目前OPPO在HDR、夜景、超級防抖等方面的技術已經陸續開放給抖音和快手等第三方平台使用,賦能生態夥伴,讓更多人享受到科技的魅力。
來源: 光明網