皇家科学院院士马克:手势与眼球追踪有望成为未来AR/VR交互方式

 新闻资讯     |      2019-10-24 04:08
( ID:qingtinwang )--链接科技前沿,服务商业创新

2019年10月19日世界亚洲必赢手机appVR产业大会正式开幕,在下午的主论坛上,大会邀请到了新西兰皇家科学院院士、奥克兰大学教授马克·比林赫斯特,他在大会上进行了以“AR/VR自然界面”为主旨的演讲。

WechatIMG1025

从50年前笨重的显示器到现在像一个眼镜一样,我们会发现虚拟现实硬件设备改变得不多, 50年前,你就能看到可以控制手持的VR设备。50年过去了,我们同样有这样的设备。

大家的展会都用手持的手柄作为控制器,相当于头戴式的展示器,包括控制器,还可以用语音手势控制。除此之外,还可以用触摸屏触摸的方式,所以我们可不可以用不同的方法和AR、VR进行互动。

举一个例子,可以用一个手势跟VR互动的。你看是人真的手在动,会产生虚拟菜单,另外一个虚拟的手也可以和虚拟菜单进行互动。虚拟现实和真实的手可以互通有无。在虚拟的控制中,我们希望能够把不同的手势这样的一些运动和其他设备联合在一起。

大的动作容易识别,小的动作就不灵了,两个设备结合在一起用,有一个专门的装置,这么微小细节的运动可以用雷达探测出来。我们把手指的运动结合在一起,这样一来可以把一个物体移到你想去的地方,而且能够精准地进行控制,把两个自然界面结合在一起。

视频上 ,一个人用手把物体移动了,另外一个动作是非常微小的右手的动作,然后是调整实体物质的定位,你可以看到他抓举的动作,抓了外空飞船。他的手慢慢地、小小地动一下,另外移动了飞船在空中的站位,还可以用手指间来进行选择,想用什么样的手势,都能够精准地定位物体。

除此之外,大家可以看到一个虚拟木偶,你可以用手来移动,然后控制这个木偶。而且用微小的动作能够控制一下移动的速度。

当然,不仅仅把我们的手势结合在一起,还可以把技术和手势放在一起。包括通过语音进行控制,语音发出指令,你可以指这个东西,把这个东西放到另一边,然后用语音加上手一指,就形成自然界面的结合,就可以控制了。

最近有一些公司在研究,怎么样通过对眼球的追踪进行展示。

另一个视频上,你可以用点头,并且把眼球一滚,然后可以选择希望动的物体。在研究过程中我们发现人们有偏好性,喜欢用双十字线,用双对准来进行互动。

除此之外,我们可以把凝视和手势结合在一起。比如你可以通过凝视看这个物体,你发现你的眼球在不断动的过程中,除此之外可以凝视向下,用手来动,这样你可以双结合,精准的定位。这样定位这个物体更加准确。