vivo勇闯影像“无人区”:点燃AI人像摄影,会是移动影像的下一步棋吗?

青蛙科技 2023-08-02
1607 字丨阅读本文需 5 分钟

7月30日,vivo发布全新6nm制程自研影像芯片V3和算法矩阵,公布了vivo在其在影像技术上的最新探索。其中,vivo首次对外披露与AIGC算法相关的研发成果:包括建立了重庆3D动捕实验室,并宣布将在下一代产品中,应用新一代的新研发AI技术。

雷峰网获悉,vivo依托于重庆影像实验室平台,在实验室中自主搭建了影视级光场系统。该系统可以重建出“毛孔级”人体3D模型,实现虚拟环境下具有更强真实感的高保真渲染视效,可以帮助vivo支撑各类人像3D感知算法的研发、迭代工作。

作为vivo布局人像3D重建感知技术的重要平台,重庆3D影像实验室通过搭建影视级光场系统,可重建出“毛孔级”人体3D模型,实现虚拟环境下具有更强真实感的高保真渲染视效。配合底层数据支撑及以人脸、人体和手势为核心的三大人像3D感知算法能力储备,该系统能对人脸面部表情、人体姿势动作和手势交互感知进行精准捕捉和驱动。

1、V3这款自研影像芯片其实包含了不少“剧透”

根据目前官方已经公布的相关信息来看,V3这款自研影像芯片的技术亮点主要有三点。一是升级到了6nm制程、二是首次采用了多并发AI感知ISP架构,其三则是在与主SoC的通信上、升级到了第二代的FIT互联系统。

显然,6nm制程的优势很多,它使得V3的能效比提升了30%,同时也使得其可以“塞进”更多的功能模组。当然,更重要的意义在于,它使得这款芯片在底层架构的“精密度”上,朝着主流SoC的水平又靠近了一步。

在此基础上,V3的“多并发AI感知ISP架构”可能让有些朋友感到有点懵,但其实将它拆开就不难理解了。所谓“多并发”,就意味着V3可以同时驱动不止一枚摄像头。结合官方目前所公布,V3主要用于人像和夜景视频拍摄的用途便不难推测,这样的设计很有可能意味着它能够实现多个不同焦距摄像头在视频拍摄中的“画面融合”,从而获得更高的变焦后视频画质、或是实现更自然的人像背景虚化。

更进一步来说,这实际上也暗示了搭载V3的机型大概率会至少配备广角+长焦的“双大底主摄”配置,甚至不排除会有超广角+广角+人像长焦“三大底”的堆料方案。

2、vivo的“定制光学”也远比想象中更复杂

除了自研影像芯片之外,vivo近年推出的旗舰影像机型另一个被消费者认可的亮点,就是它们的光学设计了。

与其他竞争对手相比,vivo影像旗舰所使用的“蔡司”光学镜头通常被认为拥有更少的畸变,同时在抗眩光能力上也更为突出。

但具体vivo是如何做到这些的呢?难道是蔡司一“点拨”、或是授权了什么关键技术,vivo手机的光学设计就突然飞跃了吗。

当然,这是不可能的。毕竟大家要知道,智能手机的影像模组无论在体积、厚度、重量,还是材质上,都与传统相机的镜头大不相同。特别是由于手机对焦、防抖马达的限制,它们根本不可能像相机镜头那样,去采用沉重的全玻璃、甚至玻璃+萤石材质来制作。

这也就意味着,尽管vivo从蔡司哪里得到了一些镜头光学结构的授权,也拥有T*镀膜的性能指标和认证检测方式。但如何将“蔡司级别的镜头设计”、“蔡司级别的镀膜效果”在智能手机里复现,其实是需要vivo自己要去解决的问题。

正因如此,这实际上也就解释了为什么会看到vivo手机一边有着蔡司的镜头和镀膜认证,另一边vivo自己也会不断发布新的镜头设计成果、推出诸如这次的Multi-ALD这类,行业首创的手机镜片镀膜工艺。因为很多工艺上的细节,其实靠的是vivo自己去“搞定”的。显然这相当不容易,也确实很锻炼vivo自身的设计能力与产业链整合能力。

3、看似“科幻”的算法,背后的故事同样也不简单

除了新的自研影像芯片和新的光学镜头/镀膜技术,vivo此次还在“影像盛典”上发布了一系列全新的人像算法技术。

其中最为引人关注的,无疑就是看似“科幻”的人像3D重建感知技术,以及在此基础上衍生的AIGC“生成式人像风格”功能了。

所谓人像3D重建感知技术,简单来说其实就是借助摄像头捕捉人像,乃至人体的距离、形状信息,建立起高精度的三维模型。这样一来,在用户开启例如“长腿”、“瘦脸”等美化功能时,手机实际上便是在对这个3D模型进行修改,然后在它的基础上再叠加二维的“蒙皮”,并最终加上生成的背景。

如此一来,便能避免传统的2D美颜算法在对人像进行“优化”时,连带着也影响到背景部分,从而“穿帮”的问题。而且它理论上还能任意改变人像摄影时的背景,从而带来更多的乐趣。

影像作为vivo的主力赛道,人像专业拍摄能力的建设也是vivo一直以来的着力点。vivo重庆智能制造中心于2014年布局、2017年完工并正式投产,vivo智能制造中心聚焦智能手机和其他智慧产品的研发测试,构建研产销一体化发展的现代企业体系。

文章来源: 上游新闻,雷锋网,三易生活

免责声明:凡注明来源本网的所有作品,均为本网合法拥有版权或有权使用的作品,欢迎转载,注明出处本网。非本网作品均来自其他媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。如您发现有任何侵权内容,请依照下方联系方式进行沟通,我们将第一时间进行处理。

0赞 好资讯,需要你的鼓励
来自:青蛙科技
0

参与评论

登录后参与讨论 0/1000

为你推荐

加载中...