新技术使用嘴部手势在虚拟现实中进行交互

  纽约州立大学宾汉姆顿大学的研究人员开发出一种新技术,允许用户仅使用嘴巴手势在虚拟现实环境中进行交互。

  可负担得起的虚拟现实头戴式显示器的普及为用户提供逼真的沉浸式视觉体验。然而,头戴式显示器遮挡了用户脸部的上半部分并且防止了整个脸部的面部动作识别。为了解决这个问题,宾厄姆顿大学计算机科学教授Lijun Yin和他的团队创建了一个新的框架,将口部手势解释为虚拟现实中实时交互的媒介。

  Yin的团队测试了一组研究生的申请。一旦用户戴上头戴式显示器,他们就会看到一个简单的游戏;游戏的目的是引导玩家在森林周围的化身,尽可能多地吃蛋糕。玩家必须使用头部旋转来选择他们的移动方向,使用嘴巴手势移动并且只能通过微笑来吃蛋糕。该系统能够描述和分类用户的嘴部运动,并且实现了高正确的识别率。该系统还通过实时虚拟现实应用程序进行了演示和验证。

  “我们希望这适用于不止一个人,也许两个人。想想Skype的采访和沟通,”尹说。“想象一下,如果你感觉自己处于相同的几何空间,面对面,计算机程序可以有效地描绘你的面部表情并复制它们,使它看起来真实。”

  “虚拟世界不仅仅是为了娱乐。例如,医疗保健使用VR来帮助残疾患者,”Yin说。“医疗专业人员甚至是军人都可以参加现实生活中可能无法体验的训练练习。这项技术让体验变得更加真实。”

  论文“虚拟现实应用中的部分遮挡的面部动作识别和交互”在2017年IEEE多媒体和博览会国际会议上发表。

  股通用电气(NYSE:GE)损失了近一半的价值在2017年几个公司的主要业...

内容版权声明:除非注明,否则皆为本站原创文章。

转载注明出处:http://snowjoy.net/binemudun/138.html