谷歌5年秘密研发的全息视频通话,真人聊天不用「抱脸虫」,颠覆视频通话方式

通信小匠 2022-10-19
1621 字丨阅读本文需 5 分钟

10月15日消息,谷歌邀请美国科技媒体The Verge的记者Jay Peters实地体验了其3D视频聊天室Starline,它通过3D技术能够实现真实面对面交流,有望取代传统的2D视频通话会议。

Starline能够让人们有一种真实的错觉,仿佛自己真的在和另一个地方的人面对面坐着,可以触摸到他。就像下面这样,不要怀疑,这就是真实录像,不是某种“高科技”。

一段温馨的宣传视频中,家人们、朋友们在Starline上非常愉快的聊着天,这项虚拟娱乐技术让3D虚拟人物看上去栩栩如生。

“这太令人震惊了。”一个人在视频中说。“我也算是见多识广了,但我从来没见过这种技术。”另一个人惊叹道。

2021年谷歌在I/O大会上首次推出下一代3D视频聊天室Starline,从一年前发布至今,谷歌一直在对该项目保密,本次亲自的测试这个机器的记者Jay Peters说:“我很想知道它是否能达到当时宣传视频里的效果。”

一、3D形象似真人,Starline勾勒出空间距离感

谷歌产品管理总监Andrew Nartker说:“我们认为,Starline在通信技术上取得了突破性的进展,它能让你与世界各地的其他人联系地更加紧密。”他将这款3D虚拟聊天室描述为“一扇神奇的窗户”,能让人们感觉自己与其他人正“联系在一起”。

Starline的体验测试是在一间小会议室里,它的机器几乎占据了这间屋子的绝大多数地方。在房间一边,有一个长木凳,其正中间放着一个坐垫,机器的显示屏上呈现着另一个屋子里相似的摆放。

当Jay Peters坐下来时,有十几个摄像头和传感器正在对着他。他说:“这令我非常头疼,我感觉我的一举一动都被监视着。”

但当Andrew Nartker和谷歌研究员Jason Lawrence坐到他们屋子里的Starline的屏幕前时,Jay Peters说:“这个巨大展台给我的不真实感基本上消失了,我们能够立即开始交谈,就像从一张桌子移到另一张桌子一样。”

Jay Peters能看到Jason Lawrence手里拿着的苹果又红又亮,他的大脑告诉他Lawrence和苹果就在面前,但他们只是通过谷歌的Starline展台投影在Jay Peters面前,实际上是在另一个房间里。

在制作3D人物形象上,Starline的3D形象看上去跟真人差不多。Jay Peters感觉屏幕前的Nartker和Lawrence,与几分钟前和他握手时一样,他们身后的虚拟阴影能够让3D形象看上去更真实,他说:“我甚至可以估计出Jason Lawrence手中的苹果离他的身体有多远。”

二、真实成像靠透镜+眼动追踪,适用于医疗或客服行业

Jay Peters认为Starline要比Zoom视频电话更自然,在整个视频聊天中,3D人物的动作没有明显的延迟,也没有出现一些奇怪的声音,视频效果能够做到和人们正常交流时一样。在Starline中,Jay Peters能和真人一般大小的虚拟人进行真正的眼神交流,但在Zoom中,人们只能眯着眼睛盯着一个小小的窗口。

Starline之所以如此令人信服,部分原因在于人们看到的不仅仅是屏幕,还有屏幕前的一系列透镜或透镜阵列。Jason Lawrence说,它的原理类似于3D全息卡片(Holographic Cards),当你来回晃动它们时,卡片可以显示不同的图像或3D效果。Starline更为先进,它利用眼动追踪技术,通过追踪你的眼睛来确定所显示的图像是否与你的视线保持一致。

Jay Peters认为Starline在一对一对话中很有用,特别是在医生办公室或客户服务的环境中。

Starline还不是很完美,仔细观察,你可以看出这个“人”是再造的,比如,人们的头可能不全是圆的,并且其头发顶部可能会有些抖动。如果对面的人坐到Starline正在重新构建的空间边界上,他们就会变得模糊、变成异常的多边形,直到最终完全消失。

此外,Starline显然有一些局限性,比如它的展台很大,那里面可能装着很昂贵的技术设备,而且你需要两个展台才能使用这个设备。当Jay Peters询问谷歌的产品管理总监Nartker时,他没有透露这个3D视频聊天室的价格。

三、全息通话不止谷歌在行动

德国电信(Deutsche Telekom)、Orange、西班牙电信(Telefónica)和沃达丰与深度科技公司MATSUKO一起进行了一项试点,通过互连他们的部署,使全息通话变得像打电话一样简单。这些公司还在开发一个平台,该平台将通过移动连接将现实世界和虚拟世界结合起来,使用智能手机摄像头生成2D视频,然后在云端渲染成3D全息图,流式传输给AR/VR/MR环境中的观众。

该试验平台利用5G连接的属性(高速、高带宽和低延迟)来克服创建逼真的3D图像的一些挑战。全息图是使用智能手机的相机创建的,用于捕获和传输人的实时3D全息图像,然后通过先进的3D渲染引擎进行处理。然后,它提供“虚拟现实”身临其境般的体验,并将其显示在虚拟环境中或使用AR/VR眼镜将其叠加到现实世界的环境中。

得益于5G和尖端技术,以前阻碍全息图平滑运动的网络相关问题已得到解决。此外,MATSUKO 的平台确保最终结果受益于更好的颜色和纹理分辨率,提高在智能手机或其他移动设备上观看时的真实感,并且无需耳机,从而增强身临其境的体验。

互联网和移动终端的发展,让人们即使身在世界各地也能够“面对面”的交流,Starline向我们展现了未来视频发展的一个新的可能性,说不定能带起像VR头显一般的新风潮。

文章来源: 邮电设计技术,湾区元宇宙,The Verge

免责声明:凡注明来源本网的所有作品,均为本网合法拥有版权或有权使用的作品,欢迎转载,注明出处本网。非本网作品均来自其他媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。如您发现有任何侵权内容,请依照下方联系方式进行沟通,我们将第一时间进行处理。

0赞 好资讯,需要你的鼓励
来自:通信小匠
0

参与评论

登录后参与讨论 0/1000

为你推荐

加载中...