雷锋网按:在日前的SIGGRAPH大会上,一家创业公司将自己的技术应用于HTC Vive上,通过意念来操作游戏。UploadVR 的记者在现场体验了这项技术,雷锋网编译如下。
在本周的SIGGRAPH大会上,波士顿创业公司展示其改装的HTC Vive,其中包括脑电图内部的EEG(脑电图)传感器, 同时与德国公司SMI的眼球追踪技术相结合(SMI已被苹果收购)。 EEG传感器的梳状结构穿过我的头发,巧妙地接触到我的头皮,以此检测到大脑的活动。旁边的人说我的脑袋看上去不错。
接下来是一个简短的训练,一组物件对象浮在我面前:一列火车,一个球,中间有些方块。 每当它们中的一个旋转时,我被告知要专注于该物件对象,并且脑子里想我“抓住”了ta'它们men。 我做了很多次,都是成功的。
之后有一个测试。 我脑子里只想那个我想要的物件。我试图不直视那个目标,试了五次,每次捡起来的物件都是我想的那个,第六次错了,但这是因为有人和我说话,我分心了,当我中心专注的时候,那个我脑中想的正确物件几乎马上向我移动。
在上面的视频中,你可以看到每个物件在闪烁。 Neurable的CEO兼总裁Ramses Alcaide表示,他们够检测到我的大脑中下意识。 他表示,在演示的训练和测试部分,头显内的眼球追踪系统没有激活。 在演示的下一个部分,眼球追踪系统开始激活,旨在显示系统在游戏环境中的潜力。 以下是Neurable如何描述它:
Neurable演示的是Awakening,这是在今年洛杉矶的SIGGRAPH大会上,与eStudiofuture合作制作的VR游戏预览。 Awakening是一个未来主义的故事,让人联想到陌生的事情:你是一个在政府科学实验室被拘留的小孩。 你发现实验赋予你远程心灵控制能力。 你必须使用这些能力权力才能逃离你的牢房,打败机器人监狱看守,并将脱离实验室。 游戏使你在没有任何手持控制器的情况下,用意念操纵物体和对抗敌人。
根据Neurable的说法,他们通过使用机器学习来翻译“实时的大脑活动,以提供虚拟的心灵遥感能力”。该公司提供SDK,因此Unity开发人员可以将系统集成到游戏中。
我能够通过“想”这件事来选择捡起地面上的一组物件,然后使用它们来尝试逃脱。我可以拿到VR游戏之外的一些提示,帮我逃离房间,但是,抓取我选择的物体则需要使用自己的意念。当我进入一个实验室,我环顾桌面四周,想着用物体投掷机器人。其中一个是键盘。 当我想“抓”这个词的时候,键盘自动向我飘来。一个接着一个物体我投向机器人,直到抵达最后关卡。
“我们有两种模式。纯脑电图(EEG)模式,它只决定你想要的对象,直接把它带给你,还有一种混合的BCI (脑机接口)模式,在这种模式下,我们可以使用眼睛作为鼠标,你可以移动你的眼睛靠近你想要选择的对象,“Alcaide说。 “从那里你的大脑告诉我们你点击了哪一个。”
在上面的视频中,每当系统正确地识别出我想要的对象时,你可以看到我惊喜地捂住了我的脸。坦白讲我震惊了,我真的没想到它能够运作的如此之好。这个我试用的脑机界面和更早的眼球追踪demo真是非常强大。
据Alcaide称,Neurable融资约200万美元,拥有13名员工。
“我认为混合现实互动的未来是一个解决方案的生态系统,其中包含语音、手势控制、眼球追踪和目前缺失的技术:也就是脑机接口...我们需要某种系统来阻止行动发生,除非用户想要行动发生,这就是脑机界面所要解决的问题。“Alcaide说。 “在我看来,在我们的解决方案中加入脑机接口之前,混合现实不能成为像iPhone或者计算机这样无处不在的计算平台。”
来源:uploadvr 雷锋网编译