首页 > 手机 > 手机文化> 正文

从能拍到美拍,OPPO FDF人像视频技术系统引领视频新时代

不吃鱼的猫 责任编辑:caichengxin 发布于:2020-11-20 15:20 PConline原创

  对美的追求,伴随着 OPPO 品牌发展的方方面面。

OPPO 

  从外观设计上的工艺美,到毒色设计上的颜色美,再到 UI、UX设计上的交互美,最后少不了的当然是花美人更美上的颜值美。在国内众多的手机厂商中,做美颜算法 OPPO 绝对是最认真:P51 开启的非智能机时代自拍的巅峰,U 系列自拍手机、R 系列等众多的功勋机型,巩固了 OPPO在自拍领域的优势地位,最美的人永远是你自己。

OPPO

  进入 5G 时代后,OPPO 已经不满足于将美颜算法简单地套用在静态照片中,他们紧跟时代视频化发展的步伐,开辟了全新的人像美颜战场——人像视频美颜——FDF 全维人像视频技术系统。

从静到动,要克服的困难远超你想象

  作为 OPPO 对外的科技春晚,OPPO 未来科技大会(OPPO INNO DAY)是 OPPO 将最新最炫酷的研发成功带给全行业用户的舞台。在 5G 时代迈入新篇章前,OPPO 未来科技大会 2020 展现了其对理念、战略以及技术产品的全方位跃迁:“科技为人,以善天下”的 OPPO 科技选择,“3+N+X”的科技跃迁战略,探索新形态、新生活、新交互的三大概念产品,伴随发布的 OPPO全链路色彩管理系统和 FDF 全维人像视频技术系统,更是将这场科技盛宴推向了高潮。

OPPO

OPPO

  我们将目光从消费市场拓宽至专业市场,视频的人像美颜、美肤技术,一直以来都是全行业发展的难点:在专业领域,依靠昂贵的化妆师全程陪护,专业的百万后期不惜时间成本逐帧对视频进行繁重的后期美颜修复;在民用领域,Pr 、FCP 的各种磨皮美颜插件,某些短视频软件所自带的美颜美肤功能,要么就效果相对不理想,要么就在人物的磨皮美颜中背景歪了或者整个照片失去了质感。从静态照片到动态视频,其所跨越的技术层面高度远超想象。

OPPO

  近年来,随着 AI 、机器学习的引入,手机技术在智能化的道路开上了快车道,作为手机产品的自带边缘算力,OPPO 将目光投向了AI,创新性地打造了两个极具针对性的引擎:感知人像引擎和画质增强引擎,双剑合璧造就 OPPO FDF 全维视频人像技术系统。

感知人像引擎:是你,没错就是你

  从字面上的意思理解,感知人像引擎的作用十分明确:找到你的脸,锁住你的脸,分析你的脸。说得轻巧,但实际的运算过程绝对超乎你的想象。

  据 OPPO 方面给出的信息,感知人像引擎主要分为以下几个作用:AI 人脸检测、AI 人脸关键点检测、AI 超清人像、OFL 肤质优化算法、人脸畸变矫正。正是对美学的不断探索,为“人美景更美”的视频提供强有力的保证。

OPPO

  AI 人脸检测、AI 人脸关键点检测,这两项关键技术成为FDF 全维视频人像技术系统的核心算法。如今的视频拍摄场景中,面部识别、面部对焦已经成为了一项基础技术,如何在基础技术中发挥更大的作用,AI 的引入、算法的优化十分关键。OPPO 采用了深度可分离卷积模型,减少参数量完成相同数量的特征图谱描绘;在模型中配合金字塔式 FPN 结构,实现更高的精度的检测效果。据 OPPO 方面给出的数据,AI 人脸检测准确率为 99.78% ,单帧的检测耗时 25ms ,更准也更快。

OPPO

  将人脸识别到后,如何将人脸的关键点检测出来至关重要。特别是在没有 TOF 镜头、3D 双目镜头的辅助下,如何让手机影像,从平面识别变成立体识别,从立体识别中获取人脸关键点成为了难点。OPPO 智能感知与交互研究团队,凭借在计算机视觉领域的深厚积累,优化 LOSS 函数,加入关键点是否可见判断、人脸角度判断等辅助信息,将人脸关键点数量提升至 296 个,基于 WFLW 数据集的模型 NME 为4.71% (学术界最好的模型 NME 约为 4.36% )。

OPPO

  有了这些基础性配备,OPPO 就能将所有的精力放在视频的人像美颜、美肤上。OFL 肤质优化算法分为两部分——AI 肤色检测和 AI 祛瑕疵。OPPO 的 AI 肤色检测超越了行业传统定义的皮肤检测,不仅仅检测面部的皮肤区域,更涵盖了脖子和手部皮肤的区域,使得美颜后脸部皮肤和脖颈、手部不会出现色差的情况,让最容易暴露女性生理年龄的手部皮肤也能获得最全面的呵护。据悉,AI 肤色检测能实现96.5%的皮肤区域检测准确率和97.4%的脸部皮肤精度。

OPPO

  而 AI 祛瑕疵 ,更是让每个人手机中聘请了一位专业的化妆师、美妆师。每个用户的脸上总有一些天生的“瑕疵”,如美人痣等天生特性,在不少的美颜算法中会将用户的天生特性“完美祛除”,“过于完美”成为了不少美颜美肤的“缺陷”。 AI 祛瑕疵的智能识别瑕,通过大量的机器学习,精准区分天生特征和后天瑕疵,让每一丝专属于你的美好,留在记忆中。

  人脸畸变矫正可谓是 OPPO 适应超广角镜头普及所推出的杀手级优化。为了获得更佳的视频防抖拍摄效果,为了获得更好的静态照片视角,超广角镜头成为了不少用户影像的主力,但伴随而来的是不矫正前的过度畸变和矫正后不正常画面变形。而 OPPO 的做法更为简单明了:将人像部分与背景部分单独进行畸变矫正,保证背景部分得到充足的畸变矫正之余,人像部分也能做到自然的体态美。

OPPO

  AI 超清人像的用途就更为广泛了,针对用户视频拍摄容易模糊的场景(暗光、长焦拍摄、轻微的抖动等),利用 AI 算法对画面进行处理,获得更加锐利、清晰的画面;同样地,该算法对于画面的噪点变现也有一定的优化作用。

  总得来说,感知人像引擎大幅度压榨了手机的 AI 算力,借助大数据、机器学习、神经网络模型等,革新了用户绝大多数日常场景的使用体验。

画质增强引擎:拍得更好看就是我的责任

  感知人像引擎的存在,让用户拍出山好水好景,美人更美成为了可能。而画质引擎的存在,则将用户拍摄更高质量的视频门槛大大降低。

  最新的画质增强引擎主要分为两个大的功能,分别是防抖算法的优化还有超级夜景模式与视频HDR 的融合算法。

OPPO

  在目前 OPPO 十分优秀的超级视频防抖 Pro 算法面前,OPPO 要将其应用高度、使用场景进一步扩展实属不易。新一代的算法优化了场景检测,通过检测手机陀螺仪、加速度计和Sensor的数据,对运动轨迹、姿态和曝光进行判断,建立不同拍摄场景下的抖动模型,并针对性地匹配防抖策略。提升用户的防抖效果。

全新的防抖算法
全新的防抖算法

  在全新的超级防抖算法中,OPPO 还加入了全新的移动延时摄影玩法,增加运动趋势判断,使被抽取出来的多帧画面过渡更平滑,并且实现更长时间跨度的防抖。手持媲美专业云台不再是梦想。

  在超级夜景视频带来让人惊叹的拍暗叫绝后,OPPO 将夜景视频拍得更好看作为下一步的奋斗目标。将夜景视频与 HDR 模式相匹配,增加画面的层次感,在视频中彰显五彩斑斓的黑与五彩斑斓的白。

业内首个也是业内最强

  人像视频领域作为行业新赛道,OPPO 将自己对自然美的理解、对人像美颜的思考倾注FDF 全维视频人像技术系统中,为行业的下一个发展趋势开启了一个好头。

  无论是对于消费领域亦或是专业层面,该技术的出现大大降低了用户拍摄视频的门槛与难度:特别是对于爱美的女生而言,她们能在静态照片中展现最美的自己,但没有完美的视频美颜技术让她们一度落后与视频化时代;对于专业领域,随着手机影像力的不断攀升,对于一些轻度的视频,甚至说在一些主流的移动端传播的视频资源,借助 FDF 全维视频人像技术系统,他们能大大减少后期的工作量,用手机拍、用手机剪、用手机发布再到在手机上传播,一个十分完整而全面的行业技术闭环就此形成。 

开放API接口

开放API接口

  随着 5G 普及进入深水区,5G 如何应用的问题成为了大家都必须回答的问题,OPPO 用敏锐的目光押宝视频人像技术,推动视频化时代普及再度迈上新台阶,让 4G 从人人都是生活视频的导演,到 5G 人人都是生活视频的主角。想拍就拍,就拍得好看。

  科技自然不是一个人的独舞,既要引进来更要走出去,让“科技为人、以善天下”。据悉,OPPO FDF 全维视频人像技术系统将开放给广大的第三方厂商,让每一个 OPPO 用户,不再做选择,原生相机满足绝大多数用户需求,第三方应用同样能将天生的硬件高水准发挥到极致。

  当然,OPPO 未来科技大会所公布的技术,并不会让用户只能在遥远的未来才能触及。在 12 月 OPPO 即将发布的新品中,FDF 全维视频人像技术就能与广大消费者见面,你与未来的差距,弹指一挥间触手可及。

结语:不讲武德

  在 OPPO 全新开辟的领域中(视频人像技术),用不讲武德来结束本文不足为过:OPPO 在探索自然美的道路上,越走越远,走出自己的风格,从用户痛点出发,以提高用户使用幸福感为己任,让最广大的消费者尽享科技之美好。搭载OPPO FDF 全维人像视频技术的新品即将到来,12 月让我们一同期待。

不吃鱼的猫

网友评论

聚超值•精选

相关推荐 手机 笔记本 影像 硬件 家居 商用 企业 出行 未来
二维码 回到顶部