【算法|OPPO FDF 全维人像视频技术系统首次亮相INNO DAY】【环球网科技综合综合报道】11月18日 ， 在OPPO未来科技大会2020（OPPO INNO DAY 2020）上 ， OPPO FDF 全维人像视频技术系统首次亮相 。
文章图片
现场 ， OPPO影像产品经理田智坚表示“影像一直是OPPO坚持并且将长期坚持的赛道 ， 在影像产品定义上始终坚持从用户出发 ， 为让用户拍出自然、自信、动人的人像作品 ， 我们在内部启动了魔镜专项 ， 在不同的城市和Reno系列老用户、终端导购、人像精修师和妆容专家深入探讨他们认为拍得好的人像视频 。 出乎意料的是 ， 几乎所有人都认为 ， 好的人像视频不仅要做到人美 ， 还要景美 。 基于这样的洞察 ， 我们打造了OPPO FDF 全维人像视频技术系统 。 当然 ， 这也是我们在人像拍摄上一直秉承的理念 —— 让美自然生长 。 ”
据介绍 ， OPPO FDF 全维人像视频技术系统由感知人像和画质增强两大引擎组成 ， 分别针对人像拍摄时的人物主体和整体画面进行针对性优化 ， 共同实现人美、景美的拍摄效果 。
“AI人脸检测通过对网络模型的优化 ， 实现99.78%的检测准确率和25ms的单帧检测耗时 ， 不管是拍视频还是拍照 ， 都能快速的检测出人脸区域 ， 为后续脸部优化圈定精确的范围 。 同时 ， AI算法在人脸区域标记了296个关键点来实现五官和轮廓细节的区分 ， 并加入关键点是否可见判断、人脸角度判断等辅助信息 ， 最终在业界权威的WFLW数据集上实现低至4.71%的NME ， 这套算法在移动平台上的运行帧率达到了200fps以上 。 ”田智坚解释称 ， AI超清人像在深度神经网络模型中设计了3个子模块对人脸进行超分计算、降噪优化和锐度优化 。 即使在暗光环境下 ， 也能通过算法精准检测脸部和邻近区域并进行增强处理 ， 提升脸部清晰度的同时 ， 细节处理更精致 。
据了解 ， OFL肤质优化算法能分别对肤色和肤质进行AI处理 ， 拍摄时帮助用户去掉脸部瑕疵、优化皮肤表现、让整体气色更出众 。 这套算法可实现96.5%的皮肤区域的分割 ， 面部皮肤精度达到了97.4% 。 “肤色检测”范围不仅包括脸部皮肤 ， 也包括脖子和手部的皮肤 ， 几乎涵盖在拍摄人像视频时会露出的所有皮肤区域 。
另外 ， OFL肤质优化算法还能实现AI祛瑕疵效果 ， 智能识别区分天生特征和后天瑕疵的特征 ， 实现更自然地祛瑕疵效果 。 斑、痘、眼袋等后天瑕疵会被去掉 ， 泪痣等天生脸部特征得到保留 。 而人脸畸变矫正在处理人脸畸变时 ， 取透视投影中的背景部分 ， 同时对人脸区域进行切割分离、再做一次球面投影 ， 让人脸保持正常的、符合人眼观看习惯的形状 ， 最终将两个画面叠加 ， 从而得到人脸和背景都正常的画面 ， 让整体效果更自然、真实 。
值得关注的是 ， 画质增强引擎则包含新一代超级防抖算法、移动延时摄影、超级夜景视频、DOL-HDR等功能 。 超级防抖算法加入场景检测过程 ， 通过抓取陀螺仪、加速度计和Sensor的数据分别对运动轨迹、姿态和曝光进行判断 ， 从而区分不同场景 ， 匹配不同的防抖策略 。 针对手持移动延时摄影 ， OPPO在超级防抖算法中加入运动趋势判断 ， 不仅可以使被抽取的多帧画面之间的过渡更平滑 ， 还可以实现更长时间跨度的防抖 。 超级夜景视频在前代算法基础上和HDR算法进行融合 ， 针对亮度调整曲线进行区分调试 ， 算法先会根据当前的亮度环境智能判断启用夜景还是HDR亮度调整曲线 。
据透露 ， 首款搭载OPPO人像视频技术系统的新品将于12月份问世 。 目前OPPO在HDR、夜景、超级防抖等方面的技术已经陆续开放给抖音和快手等第三方平台使用 。
推荐阅读
- 支持|联发科OPPO携手推进5G普及，OPPO A72首发天玑720
- 陈明永|行业观察｜OPPO陈明永：对的路，不怕远
- 系列|OPPO Find X5渲染图的相机造型继续不规则凸起！还多出一块？
- 方面|OPPO Find X5渲染图首次曝光：一脉相承的环形山后置设计
- 旗舰|【旗舰】OPPOFindX5系列真机图泄露 长这样打几分？
- 表格|OPPO Find N热卖：从尝鲜，到常用，变革折叠屏手机
- oppo|OPPO Find X5早期概念渲染图曝光 后置三摄布局奇特
- 边玩|OPPO软件商店推出「边下边玩」能力，为开发者打造留量新体验
- 一代|OPPO Find X5 渲染图曝光：梯形后摄模组，喷砂质感后盖
- OPPO|折叠屏手机为啥火了