查看原文
其他

这里有时下最好玩的Oculus Quest手势追踪应用

前沿科技新媒体 青亭网 2021-09-20
hi188|编辑

自从Oculus Quest手势应用SDK开放之后,越来越多的VR手势应用随之而来。虽然,目前来看实际体验效果还并不完美,但是整体应用可玩性和趣味性大大提升。

同时,当然Quest中手势识别自身还处于Beta阶段,因此即便开发者创建了手势应用目前仍不能上架Oculus商店,当前仅能通过SideQuest等第三方平台分发。

接下来,我们先回顾一下Oculus Quest手势追踪技术的发展:

  • 2019年5月,Oculus Quest产品正式开售;

  • 2019年9月,Oculus Connect 6大会公布Quest手势追踪功能;

  • 2019年12月,Oculus Quest手势追踪功能伴随v12系统开放,仅局限于系统应用;

  • 2019年12月,Oculus Quest手势追踪SDK正式开放,开发者们可进行开发或适配相关功能;

  • 2020年2月,Unity插件可通过Oculus Link获取Oculus Quest手势数据。

据青亭网了解,手势追踪功能依赖于Facebook Reality Labs的研究,使用深度学习技术,通过Quest上单色摄像头即可完成手指追踪,无需深度传感器即可识别单手18个骨骼节点。

手势追踪功能目前可部分取代手柄的功能,目前最新系统已经支持未开启手柄自动切换到手势控制模式。相对来看,手势追踪技术能够降低VR手柄学习成本,也无需担心手柄没电等情况,应用到企业培训或教育领域有巨大潜力。

与此同时,上个月我们还发布《这里有最全的Oculus Quest手势追踪设计指南》一文,详解介绍了手势应用开发细节,并通过一些经过验证的开发技巧为开发者带来一些灵感。

在功能尚未正式开放之前,我们先通过一些案例来了解一下,Oculus Quest手势追踪功能的代表性项目。

VR弹吉他

开发者Ricardo Acosta利用业余时间,开发了一款面向Oculus Quest的可通过手势弹吉他的VR应用:《Air Guitar》。

据悉,他本职工作则是在微软,此前也参与VR创作应用《Maquette》开发。而这款应用则是利用下班时间个人独自开发完成的。

https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=m0950v61yj0

《Air Guitar》项目还处于初期阶段,还有存在很多不完美,并未上架SideQuest。但是,这种新颖的方式有着更大的潜力,此前也有类似的手势谈钢琴应用。另外,考虑到这是一款涉及到音乐的游戏,音乐版权也需要考虑到位。

开发者Ricardo Acosta表示:目前正计划将《Air Guitar》项目上线到众筹平台Kickstarter中,之后有消息我们也会持续关注报道。

VR谈钢琴

《VRtuos》是一款支持VR透视模式的弹钢琴应用,现已上架SideQuest。这款应用的特点是结合将虚拟钢琴和真实钢琴进行模型对比,然后在VR中显示滑落音符,VR不会发出声音,而是通过你的真实操作匹配钢琴声音,还原度很高。

https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=a3067xpf7q6

更有趣的是,《VRtuos》在VR内显示了音符滑落过程,内部显示和俄罗斯方块、手游《节奏大师》类似,可以让你知道何时按哪个音符,需要按多久等。

目前它也有一些bug,例如不能进行较大幅度的操作,但显然这给VR乐器学习打开了一个新的方式,随着追踪稳定性的提升,我们能够遇见未来VR手势应用场景将更为广泛。

《Waltz of the Wizard》手势玩法

VR模拟类游戏《Waltz of the Wizard》也展示了加入手势追踪的玩法,从视频来看不仅比用手柄更好玩,游戏对手势的反应识别也足够灵敏。

https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=h3060ygb60o

在视频中,可以看到玩家可用手势点燃烟火、握住魔药瓶、摆弄物品、隔空写字、隔空取物等等,用手势取代手柄后,会让人感觉自己更像是在使用魔法。

目前该作的手势识别功能进行开发调试,同时开发商表示:手势识别是正在探索中的功能,Oculus对于优化手势识别和第三方支持有自己的安排,这也将是决定《Waltz of the Wizard》支持手势识别的较大因素,意味着支持手势几乎还要等一段时间。

VR音乐探索游戏

可视化音乐游戏《Trippy Fingers》是一款主打色彩变化的应用,当你伸出双手后,就会有五彩斑斓的彩色纸屑,而且是随着你的手指移动而变得美轮美奂。

可能你会问,这款游戏和音乐有什么关系?首先,你可以通过手势切换歌曲,例如轻击手指三次即可切换音乐,旋转手指调节音量,将拳头握紧即可暂停播放,整体操作非常有趣,其次场景内颜色变化也会随着音乐而变化。想在VR内放松心情,《Trippy Fingers》再合适不过。

因此,《Trippy Fingers》的魅力就在于将手势追踪、音乐游戏、可视化变幻界面结合,缺一不可。

VR趣味探索应用

开发者Felix Herbst发布一款支持Quest手势识别功能的VR游戏:Interdimensional Matter,目前已上架SideQuest上。该作画风、配乐和玩法都相当无厘头,本质上是一个通过排列对齐物体通关的游戏,不过玩起来似乎并不简单。

在该作中,你需要协调双手去移动物体,在对齐完成后,点击右下角的粉色按钮进行下一关。难点在于,在将物体移动到一个位置后,它甚至还有自己跑掉的可能,并不会完全固定,而且随着关卡越来越难,你会发现排列物体越来越难,而且数量越来越多。与此同时,游戏并不会提示你摆放的是否正确。甚至,即使你只是胡乱摆弄一通,也可以按钮通关。

目前只是一个简单的概念应用,整个游戏体验大约只持续5分钟就能完成。尽管玩法并不简单,但比SideQuest上许多其他游戏对手势追踪的效果要更好。

VR手势悠悠球

个人开发者Daniel Beauchamp,此前公开了一些基于Oculus Quest开发的小Demo,其中包括:VR悠悠球、手掌追踪功能等。

溜溜球可使单个溜溜球,手掌操控流畅,且动作都很自然。同时游戏内的绳子可以通过手势进行交互。甚至还可以将多个溜溜球绑在同一个手掌上,整体的运动轨迹看上去非常自然,比游戏手柄操控看不出太多差别。

Daniel Beauchamp还有另外一些手势项目,例如这个通过两个手指进行滑行的操作就非常有趣,预计后续可以进行更多尝试。

另外,还有一些有趣的VR手势应用本文中并未介绍到,感兴趣的朋友可以在青亭网官网搜索“手势”关键词了解更多。

(END)


    推荐阅读    






 
每天五分钟,轻松了解前沿科技。    
         —— 青亭网  
: . Video Mini Program Like ,轻点两下取消赞 Wow ,轻点两下取消在看

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存