在位于加利福尼亚州圣何塞的O??culus Connect 6期间,马克·扎克伯格(Mark Zuckerberg)宣布,Oculus Quest无需任何手动控制器即可进行手和手指跟踪,当然,我迫不及待地想尝试一下 。我很高兴看到这将如何改变当前和未来的沉浸式体验,并可能使VR更加接近大众采用 。
最后,我并没有失望 。无需任何类型的附加硬件即可在Quest上进行手动跟踪显示了Quest和VR整体未来的广阔前景 。这并不完美,但这绝对是朝正确方向迈出的一步 。
手部追踪最初是作为Facebook Reality Labs的一项实验研究项目开始的 。他们的计算机视觉团队提出了一种新的方法,即仅使用Quest配备的单色摄像头,即可使用深度学习来了解手指的位置,而无需使用主动式深度感应摄像头,附加传感器或附加处理器 。该技术可以逼近您的手的形状,并创建一组3D点以准确表示您在VR中的手和手指运动 。
基本上,Quest会使用其内置的深度传感器和摄像头来跟踪每个指关节和手的表面,然后使用这些数据来反映VR环境中的这些运动 。
为了演示该技术的工作原理,Facebook 在Oculus Connect 6演示区为与会者提供了一个动手演示,供他们使用VR游戏Elixir进行试用 。
优点
戴上Quest头戴式耳机的那一刻,您的手即刻就在您面前 。Quest能够快速校准我的手指并使它们在虚拟环境中栩栩如生,给我留下了深刻的印象 。您自然的反应就是开始向各个方向移动您的手,在您面前挥舞它们,握紧拳头,然后张开手指,以便真正看到准确的跟踪 。
深度传感器在读取您的手和脸之间的距离时效果很好 。这实际上就是您在Elixir中的互动方式 。游戏将您带入一个充满超现实世界的实验室,里面散布着绿色的液体,可怕的声音效果和奇怪的木制机器 。类似于您在《哈利·波特》电影中看到的美学 。语音会引导您并鼓励您与分散在整个实验室中的各种对象进行交互 。与会者可以戳戳和刺戳从怪异的大锅中浮出的气泡,在燃烧着的蜡烛上摇动他们的双手,甚至将手指浸入一种奇怪的粘液中,并观察他们的手的颜色改变颜色 。
当然,我要做的第一件事是戳动浮动的眼球 。当您这样做时,我不会破坏会发生的事情,但是我们只能说这是您不应激起的一件事情 。
我注意到的另一个令人印象深刻的元素是跟踪在既定视野之外的准确性 。当我将手伸出耳机的视野之外并带回外围视野时,我的虚拟手又将FOV准确地重新进入了他们离开的位置 。没有突然出现或滞后;而是无缝过渡,无论您身在何处,都能让您沉浸在体验中 。
缺点
话虽如此,我确实发现真正快速的移动导致耳机很容易失去手部追踪功能 。手指和手可能会出现一些延迟问题,或者耳机将完全失去跟踪,从而导致VR指针在尝试重新校准时向后翻转或向后旋转 。
尽管只花了几秒钟即可重新校准,但足以让我沉浸其中,但我发现它有些令人沮丧 。
因此,对于Beat Saber或备受期待的Pistol Whip等快节奏游戏而言,手动跟踪可能不是最好的方法,但这可能是与社交VR体验进行交互的好方法,例如即将推出的Facebook Horizo??n,AltSpaceVR,或不需要快速移动的其他各种VR体验,例如Richie的Plank Experience或PokerStars VR 。
至于诸如拉动菜单或在虚拟环境中传送等动作,诸如Microsoft HoloLens或Leap Motion所使用的手势之类的手势可能会解决 。现有的几种VR体验都具有自己独特的手势激活系统,例如流行的迷你游戏社交平台Rec Room,该平台允许用户通过举起双手并查看虚拟的内容来弹出各种菜单和设置页面 。看 。
【Oculus Quest手部追踪感觉不错 但并不完美】当然,Facebook团队可能已经对此做出了解释 。如果您曾经使用过Facebook即将淘汰的Facebook Spaces平台,那么您就会知道,用户可以通过将手翻过来并触摸手腕来拉出一个小菜单 。这种被动的触觉体验可以轻松地出现在Quest中-顺便说一句,可以假设您的手臂通过轻敲来引入其他控制器选项 。
整体
我对Quest上的手部追踪及其打开的所有可能性感到非常兴奋 。但是最后,我实际上感到有点不舒服,因为手中没有控制器来操纵虚拟环境中的对象,而且我发现自己在触摸对象时会丢失触觉反馈 。
像其他任何东西一样,这也是您也需要使用的功能 。触摸或抓住东西时没有任何感觉是一种奇怪的感觉,一些专用的Leap Motion和HoloLens用户也已经使用过 。
不要误会我的意思,我一直认为VR体验应该需要更少的硬件,但是现在我们就在这里,我想也许我们确实需要控制器 。不是所有的经验,但绝对是某些 。
我确实认识到手部追踪的潜力,并且我可以看到它在我们处理工作培训,教育,,社交等各个方面的过程中起着非常重要的作用 。
Berg继续说,参加Oculus Connect 6的社交VR影响者Navah Berg告诉VRScout:“手部追踪就像是把训练轮移开了,” Berg继续说道,“移除控制器使体验变得更加真实,因为无需移动设备即可自由移动您的双手带给您自由和终极现实的感觉 。”
仅仅戴上头戴耳机就是一种更轻松,更便捷的体验,并且随着硬件的发展,Facebook已将自己定位为完全落后于VR和AR的公司 。Oculus Quest无疑将自己定位为面向大众的头戴式耳机,这最终将导致VR技术在全球的采用 。
自Oculus的消费产品以来,我们已经走了很长一段路 。当Oculus Rift首次出货时,它们并没有配备运动控件—只是一个Xbox One游戏控制器 。仅仅几个月后,Rift所有者便可以通过Oculus Touch将他们的手带入他们的VR体验中 。
就在六个月前,享受VR体验意味着要获得头戴式耳机,传感器,手动控制器和一台昂贵的游戏级PC 。现在,您只需要一个耳机和足够的空间就不会踢您的宠物 。对于VR来说,这是一个很大的飞跃,而手部追踪则将我们推向了更远 。但是,在当前状态下,需要进行更多调整 。但是我们到了那里 。哦,我们到了那里 。
推荐阅读
- 上海下学期什么时候开学2021
- Pr如何放大轨道的高度
- Instagram最终致力于在其搜索结果页面中显示真实内容
- 缺少一个或多个shx文件希望执行什么操作 缺少shx命令
- 圣诞老人为什么把礼物塞袜子里?
- 水务局属于什么单位性质
- TikTok致力于将其视频时长限制延长至5分钟
- 二胎胎盘低置是男孩吗
- 怀孕期间有炎症的表现是什么