我最近看到了一篇关于VR中交互学习的文章,由谷歌软件工程师Ian MacGillivray发布在官方博客上。他们在Daydream 实验室思考了VR中的交互学习,同时我也非常好奇:在VR中我们到底可以学到多少新技能呢?给大家分享一下 Ian 的思考。

我为大家介绍一下 VR 头盔如何成为学习新技能的绝佳方式,在 VR 环境中,你可以学习到任何你想学的技能,通过学习交互发挥实践操作并不断领悟,你就能很快掌握这个技能。

举个例子,比如太阳系的相关知识,平时学习可能只限于看书或者上网搜索,但在 VR 环境中,你可以直接穿越星际世界,亲身感受,如此一来,学习效果将会更加明显。

未来,我们也许可以在 VR 环境中学习更多东西,或者甚至有大厨通过 VR 环境为我们进行实地指导,那该有多好呀!

总之,VR 无疑是未来学习的新方向,值得我们投入更多的精力和时间去学习和探索。

我们最近做了一个试验,想研究一下在VR环境中学习交互式技能的效果,于是我们尝试了一下用VR教人制作咖啡。我们先制作了一个3D模型的浓缩咖啡机,这个模型模拟了真实的咖啡机,只要按下按钮、转动手柄,它的操作方式与真实世界中的咖啡机是一样的。同时,我们准备了一个非常详细的教程,邀请了一组用户在VR中学习如何制作浓缩咖啡。最后,我们为每位用户提供了一份详细的学习报告,评价他们的表现,包括制作的咖啡质量等等。为了进行比较,我们设置了另外一个小组,这个小组的学习方式是通过观看网络视频学习做咖啡。两个小组的训练时间都不限,他们都可以花费足够的时间来准备制作真实世界中的咖啡。我们发现通过看视频学习的小组通常需要看三遍教程才能学会,而在VR训练的小组通常只需要进行两次学习就掌握了完整的制作流程。

首先,我们不应该选择制作咖啡作为VR训练的对象。由于震动触感无法替代在制作咖啡过程中需要压实咖啡粉的手感,这一点在VR中很难被完美地模拟出来。此外,由于在VR中人们无法真正感受到热蒸汽喷嘴的高温,他们无法从烫伤中获得教训。如果我们想要真正地将技能进行VR训练,我们需要有专人在旁边看护,随时准备着帮助人们避免意外的发生。这也说明了在某些技能方面,VR的技术还有很大的提升空间。

其次,VR训练只适合那些涉及到移动物品、按下按钮等输入方式的技能。除非我们能够普及更高级别的跟踪技术和更好的触感手套,否则数字模拟和真实物品之间的差距会导致在VR中训练所得到的技能并不能完全应用于真实世界。

在进行VR训练的过程中,我们发现人们并不总是听从指令。

我们在Daydream实验室做的所有原型中都能看到这一点,但是在训练原型中这个问题尤为突出。无论是在屏幕上显示指令,还是在背板上展示,甚至是通过语音播报,都不能使人们在训练中完全遵守指令。有时候,当我们在屏幕上提示要做某些事时,人们的手就停下来等待指令。而当我们把指令放在背板上时,人们会试图用手去触摸它,还有的人干脆就连看指令的时间都没有。即便是通过语音播报指令,人们也很快就会失去耐心,想要立即动手做事。我们还加入了一个“提示”按钮,但是人们觉得这是在作弊,一旦几步之后,他们便忘记了这个按钮。最终,我们不得不把所有的方法都结合起来,同时在场景中添加标记。我们用一个大型的绿色箭头来提示用户下一步需要互动的物品,虽然这种方法在测试中还行,但是仍然需要更好的解决方案来帮助人们更好地遵守训练指令。px>在Daydream实验室中进行VR训练存在的挑战

在进行VR训练时,我们离真正解决问题的目标还有很长的一段路要走。要想在训练中有效地融入指令,还需要进行大量的工作和探索。

我们使用了一个大型的绿色箭头作为提示,用来指示用户下一步需要互动的物品。但是,这仍然需要进一步优化和改进,以确保训练过程能够更加顺畅、高效。

这是用于VR训练的绿色大箭头

这是在Daydream实验室中进行VR训练时遇到的挑战

>点击灯泡图标获得提示

在进行VR训练时,我们发现向用户发出指令是一项具有挑战性的任务。为了帮助用户更好地遵守指令,我们引入了一个“提示”按钮,用户可以点击它以获得提示。

点击上面的灯泡图标以获得提示

灯泡图标

不过,我们发现许多用户并不习惯使用提示功能,因为他们认为这是在作弊。一些用户试图在没有使用提示的情况下自己解决问题,而另一些则在忘记提示之后返回提示页面,尝试重新寻找答案。

因此,我们需要继续努力,寻找更好的方法来帮助用户在VR训练中更好地理解和遵守指令。

他们自己知道他们学了些什么。

红色:重置,绿色:提示

我们为用户提供了两种选择,他们可以选择重置,也可以选择获取提示。但是我们发现,跟踪每个用户的步骤是一项巨大的挑战。由于我们提供了太多的选择,这让教程中的路线数量成倍增加。更糟糕的是,用户并不按照我们所设定的线性路径进行操作,所以我们必须对所有可能发生的场景进行建模。

一个例子是,用户可以在磨咖啡粉之前蒸奶。为了简化模型,我们像游戏一样给每个物品一个状态,并让系统记录关键步骤是否完成,例如记录杯子里是否已经加入牛奶,而不是追踪用户的每一个操作步骤。

尽管我们面临很多挑战,但我们还是认为这是一个成功的原型,因为用户在虚拟现实中学习新技能,而且他们自己知道他们学到了什么。享受学习过程是一段美妙的经历,一些人在真实环境完成后,甚至会返回VR教程继续学习。实际上,当我们有了真实体验后,就更能理解虚拟训练的环境和意义了。也许VR是引导人们学习新技能的好方法,并且人们在真实环境中尝试后,VR也能帮助我们练习和巩固所学的技能。至少,想要在VR中获取新技能,我们自己也得获得更多的技能。

作者 admin