谷歌 Daydream 实验室：VR中学习新技能是一种怎样的体验？

雷锋网按：在VR中，我们到底能不能学习新技能？VR中的交互学习跟我们实际操作又有什么不同？最近，雷锋网看到谷歌软件工程师 Ian MacGillivray 在官方博客上发表的一篇文章，其中讲到Daydream 实验室对VR中交互学习的一些思考。雷锋网将原文整理如下。

你可以把全世界的食谱都一字不差的记在脑子里，但是要真正成为大厨，还是得撸起袖子下厨房。如果能戴上VR头盔，就有顶级大厨一步步教你如何做菜，那该多好。未来也许真有一天，我们能在全VR环境中学做一桌满汉全席。实际上，VR 可以帮助人们学会各种各样的技能。

在谷歌 Daydream  实验室，我们试图研究 VR 环境中的交互式学习。于是我们进行了一项试验：教人们制作咖啡。我们制作了教人学做咖啡的训练原型，用一个3D模型模拟了一个浓缩咖啡机，只要按下按钮、转动手柄，操作方式与真实世界的咖啡机相同。我们还做了一个非常详细的教程，然后邀请了一组用户在VR中学习如何制作浓缩咖啡。最后，每个用户都会获得一份详细的报告，评价他们的表现，包括制作咖啡的质量。为了进行比较，另一个小组通过观看网络视频学习做咖啡。两个小组都不限训练时间，直到他们能够在真实世界中制作咖啡。看视频学习的小组通常看了三遍教程，而进行VR训练的小组通常进行了两次教程。

我们很高兴地发现，在VR中人们可以学得更快、更好。进行VR训练的小组中，犯错的次数和制作浓缩咖啡的时间都显著减少（不过，就咖啡出品的质量来说，评委们没觉得有什么区别）。虽然一次的试验还不能说明什么，但是这些早期结果让人充满期待。此外，我们还发现未来如何更好地设计试验。下面一起来看一看：  

首先，不该选择做咖啡。震动触感无法替代压实咖啡粉的手感。而且，当VR中有人碰到热蒸汽喷嘴，无论我们做什么样的警告提示，在真实世界中人们还是没有吸取教训，我们需要有专人在边上盯着，时刻准备着把人的手挡开。这说明对于一些技能来说，VR技术还不是很到位。VR训练只适合移动物品、按下按钮之类的输入，除非更好的追踪和触感手套成为主流。如果数字模拟与其所模拟的物品相差甚远，可能对于真正学会这些技能并没有什么帮助。

我们还发现，人们是不听从指令的。

在Daydream实验室制造的所有原型中都看到了这一点，但是在训练原型中的问题尤为突出。在控制器上写指令？那人们的手就停下来了。在背板上显示指令？面前的东西都来不及看。用语音播放？没人有这个耐心听完指令再动手。我们甚至加入了一个“提示”按钮，但是他们觉得这是作弊，一两个步骤之后就把这个按钮忘记了。最后，我们不得不把以上所有办法结合起来，而且还在场景中加上标记。我们用一个很大的绿色箭头指明用户下一步需要互动的物品，这用于测试还行。但是，我们离真正解决问题还远着，要有效地融入指令还需要大量工作。  

用于提示的绿色大箭头

”点击控制器上的灯泡图标，可以获得提示。“

灯泡图标

红色：重置，绿色：提示

最后我们发现，要追踪每个用户的所有步骤难度太大。我们给用户提供的每一个选择，都会让教程中的路径数量指数级增加。更糟糕的是，人们不按照我们设定好的线性路径展开教程，因此我们必须把所有可能的情景进行建模。举个例子，用户有可能在磨咖啡粉之前先蒸牛奶。最终，像游戏一样建模要容易得多，每一个物品都有自己的状态。我们让系统追踪关键步骤是否完成，例如杯子里是否装有牛奶，而非按顺序追踪用户所做的所有步骤。

虽然有很多挑战，我们还是认为这是一个成功的原型：因为人们在VR中学到了新技能，而且享受了整个学习的过程。一些人甚至在真实环境中做完咖啡后，还回来重玩VR教程。实际上，当学员有了真实世界的体验后，就能更好地理解虚拟训练的环境和意义了。也许VR是引导人们学习新技能的好办法，并且人们在真实环境中尝试后，VR能帮助人们练习、巩固所学的技能。

至少，要在VR中get新技能，我们自己还得get更多新技能。