纽约州立大学分校宾汉姆顿大学的研究人员最近研究出一项新技术，用户只需使用口型即可在虚拟现实环境中进行交互。

众所周知，虚拟现实头显可以为用户带来逼真的沉浸式体验。然而，目前头显的佩戴方式都遮住了用户脸部上方，妨碍了整个面部识别。为了解决这一问题，宾汉姆顿大学计算机科学教授尹立军(Lijun Yin)和他的团队开发出另外一个系统，将口型作为虚拟现实的一种协作媒介进行交互。

尹的团队在一群学生中测试了这一应用。当用户戴上头显，呈现在其面前的是一款简单的游戏。该游戏的目的是让用户控制角色在森林中散步，尽可能的吃掉更多的蛋糕。用户需要通过转头来选择游戏进程，利用口型进行移动并通过微笑来吃掉目标蛋糕。该系统会对用户的口型进行描述、分类，并实现了较高的正确识别率。此外，该系统已被实际演示，并随后在虚拟现实应用中通过验证。

“我们想让这一系统同时运用在更多人身上，而不仅仅只是一个人。就像在Skype 上面试或者通信，假设该系统可以让你们感觉好像身处在同一空间内，让你们可以更加亲密接触，而电脑程序能有效地扫描你的面部表情并进行复制，使它们看起来真实，”尹如是说道。

尹表示：“虚拟世界不仅仅是为了游戏而存在。例如，医疗保健可以使用VR帮助残疾人，军人或者理疗专家也可以借此进行一些在实际生活中无法完成的训练。而口型交互使这种体验更具真实感。”

尽管该技术仍处于原型阶段，尹相信这一技术拥有广阔的应用前景。