MindLeap虚拟现实系统:靠脑电波操作,无需控制器
神经技术科技公司 MindMaze 推出了一个可通过思维控制的虚拟现实游戏系统 MindLeap 。起初,这套系统是为医疗领域开发的,用于监测大脑和肌肉活动,但现在,将运动捕捉摄像头和思维控制结合在一起,它可以操控虚拟现实和增强现实内的游戏。
这家瑞士公司还宣布已经获得了850万美元的天使轮 融资 ,这笔资金将用于该技术在医疗领域内的应用开发,帮助神经功能缺陷的患者加速康复流程,而MindLeap则是他们首次将由脑电波控制的虚拟现实技术,应用在游戏玩家身上。
未来几个月,他们将推出包含“神经护目镜”和3D动作摄像头的头盔显示器。这款无需手柄,靠脑波支持的虚拟现实技术,也将应用在更多游戏平台上,包括Xbox和Playstation,iOS,以及安卓。
同样在数月后,MindLeap引擎将通过SDK的方式提供给游戏开发人员,游戏系统也将会在今年底正式上市。
从医疗到游戏
MindMaze创始人兼CEO Tej Tadi博士表示,人类大脑会根据任何指定动作作出反应。这一结论意义很大,当抬手时,在几毫秒之前,大脑里已经做了这个“动作”。通过研究大脑和肌肉活动,MindMaze可以将大脑信号提取出来。运动,移动,和我们看到触摸到的任何事情,都事先就在大脑之中,MindMaze就是要从源头跟踪这些信号。
MindMaze技术的关键,是测定信号从发生到进入大脑内的时间。触觉需要约20毫秒传入大脑,而视觉约70毫秒。了解这些时间可以让玩家的体验更加完美。
MindMaze一开始是为了医疗康复而开发这项技术的。Tadi分享了一位患者的经历,他失去了左手,还要忍受剧烈的幻痛。通过追踪大脑信号,展示一只虚拟的手臂,可以帮助患者减轻幻痛的压力。而且这要求 信号追踪延时能够控制在 20 毫秒以内,甚至更少。这也是他们最终应用在游戏领域内的主要因素之一。
MindLeap则是将这种脑电波追踪技术,与现有虚拟现实和增强现实技术整合在一起,并开发出一套具备全新控制维度的游戏平台。
MindLeap平台
和其他虚拟现实平台一样,最重要的当然是头盔设备。他们开发的头盔设备搭载了运动捕捉摄像头和深度传感器,可以提供虚拟现实和增强现实混合。
此外,该平台还配置了无线功能,通过无线网络将3D运动捕捉数据发送回平台,进一步支持头盔的追踪功能。MindLeap的原型设备有头部追踪功能,还有用于身体追踪的全覆盖3D点云,以及追踪身体运动的运动捕捉技术。Tadi解释说,MindLeap应该和 微软 的Kinect多少有些相似,但经过了调整。
“我们不得不从基础做起,如果你把Kinect放在患者两米远的地方,它基本上不会发挥什么作业,甚至无法追踪判断患者是否坐在床上。所以,从Kinect身上我们借鉴不到任何东西,一切都必须靠自己从头开发。”
最终,他们希望将原型产品设计的再小一些,并且可以和移动设备配套使用。在未来的六个月时间里,MindLeap还将推出SDK,其中包括软件,护目镜,以及摄像头设备。目前该公司尚未发布产品报价。
VIA VB