德克萨斯大学阿灵顿分校的研究人员,正在开发一种技术,可以使用虚拟现实 (VR) 耳机的用户,看到与之互动的人的真实面部表情。
这是第一批能够详细监控人类面部活动的设备之一,它具有从VR游戏到医疗保健的各种潜在应用。
该项目弥合了人脸解剖学和肌肉知识与电气和计算建模技术之间的差距,以开发用于感知基于面部的生理信号的分析模型、硬件和软件库。
Nguyen 是该大学无线和传感器系统实验室的主任,该实验室专注于构建连接系统以监测和改善人类健康和环境。他从美国国家科学基金会获得了近 250,000 美元的 VR 项目赠款,这是与田纳西大学诺克斯维尔大学合作者的更大赠款的一部分。
当前的 VR 头显仍然体积庞大,尽管包括 Facebook 在内的公司进行了大量的研发工作以减小它们的尺寸,同时保持沉浸感和清晰的图像——并挡住了大部分用户的脸。Nguyen 的团队创造了一种设备,它描述为轻巧、不显眼且隐私友好。
在细粒度细节上监测人类面部肌肉活动并重建 3D 面部表情是一项具有挑战性的任务,该大学计算机科学与工程系主任洪江教授说。该项目将推进最先进的耳戴式传感技术,并将学到的知识转移到多种传感模式中。
这项研究的发现可以实现广泛的应用,从虚拟现实和增强现实到医疗保健中的情绪识别。
科学家们希望该设备可以特别应用于言语治疗。例如,医生和治疗师可以使用它们与患有中风或其他语言障碍的远程患者合作,精确定位肌肉受到影响的位置并根据该信息定制治疗。此外,它还可以在嘈杂的环境中与电话一起使用,例如地铁或酒吧,在这些环境中,语音识别技术不能很好地发挥作用。
医疗保健专业人士希望 VR 和 AR 等扩展现实技术可以为患有精神疾病、神经系统疾病和发育障碍的患者带来可观的益处。例如,一款移动 VR 游戏可以提供痴呆症的警告信号,而一个名为“蓝屋”的受控沉浸式环境帮助自闭症儿童克服了一些因疾病而加剧的恐惧症。
参与评论
登录后参与讨论 0/1000