—— 青亭网
这款手环逆天了,欲通过生物信号控制VR甚至全部穿戴设备
Esther| 撰文
说实话,在此之前我很难将VR与手环联想在一起,手环在我印象中更多还是一个用来计步的工具,可是今天我们要来介绍的却超乎我的想象。
当前VR中输入操作基本上还是通过手柄来完成,虽然手势识别功能已经相对成熟,但受限于可视角度、高昂的成本等原因,这相机技术并没有在VR中大面积铺开。为了解决这个问题,这家来自以色列的公司Wearable Devices就打算通过手环,来解决VR中的输入难题。
据青亭网了解,Wearable Devices公司近期推出了一款名为Mudra Inspire的手环,其特点是能够通过你手腕处独特的生物信号,来判断你的手指动作,无FOV限制,同时该技术也融入了AI技术,可以让其实现更高效、更精的识别效率。
当前,Mudra Inspire系列手环主要识别的手势包括捏合食指、捏合中指、打响指、收起拇指等一系列动作,并通过不同手指动作发出不同的指令。
https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=t0791x0cyfu
据悉,Mudra是梵文“手势”的意思,顾名思义这款手环能够将手势和指压转化成VR和AR中的指令,当然该手环还可以与任何可穿戴设备结合,只要兼容蓝牙4.0以及Android 6.0或更高版本系统即可。
硬件规格,Mudra Inspire手环重量为24.5g、3个SNC传感器、支持6DoF(内置IMU)、蓝牙5、80mAh电池。
上手体验
外媒Tom's Hardware的体验者初次上手的感受就是,手环识别速度很快,几乎与手的动作同步,并表示整体效果近乎完美。
https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=d07914mkr79
初次使用Mudra Inspire前,需要通过App进行矫正,将手环紧紧固定在手腕然后可以通过活动手指来检查设备的反应灵敏度。接着,应用中就会显示出不规则曲线,这就是它识别到的特殊生物信号,它会跟着手指的动作显示不同的波动图案。
该手环还能识别用户的指压,矫正的过程需要用户将食指或中指与拇指捏在一起,在应用中用颜色填充管子,捏得越用力,管子中的颜色越多。
https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=u0791oit4dr
体验者观看Wearable Devices CEO兼联合创始人Asher Dahan演示了一款基于安卓手机的游戏。
可以在上图中看到,在游戏中用手操纵光标,通过上下移动左手以及食指与拇指的捏住和放开,能够精准地将一个个圆圈捡起和套在杆子上放下。Mudra Inspire手环还支持三维移动,比如在VR应用中捡起一只方块,随即他又将食指与拇指捏在一起,将方块朝着自己的方向拉近。
该穿戴式手环的另一大特点是,它的操作性极强。在一款类似于微软绘图相似的演示应用中,它能够支持非常具体的输入,Dahan通过捏住食指和大拇指(指压越大线条越粗)来操控应用中的虚拟喷枪,画出的人脸的效果可以与使用鼠标在微软绘图中的效果相媲美。在应用中选择颜色也很简单,只需要将光标移到屏幕下方使用食指敲击空气便可。
据悉,该手环支持8种默认操作:食指轻击、大拇指轻击、中指与拇指轻击、持续敲击、指压、手指展开(放大缩小)和手部旋转。由于不同动作的生物信号不同,因此你还可以自定义手势,只要你认为足够方便即可。
这名体验者还试用了一款概念验证AR应用,搭配一张识别卡,她捏住食指与拇指时可以在手机屏幕中看到卡片上蹦出火焰。指压越大,火苗越高。在她停止按压手指时火焰并没有熄灭,这可能是该手环的一个Bug,在她松手之后,手环以为她两个指头还在轻轻施加压力。不过她也澄清,因为自己并没有完成校准程序,所以也这可能是部分因素。
手环原理
目前该手环开发者套装售价246.5美元(约合人民币1715元),其中包括印有Mudra标志的可调整腕带(外观类似Apple Watch回环表带)、一块Mudra Inspire核心硬件(可卡在腕带上)、一条micro USB充电/传输线和一本使用手册。不过,当前仅面向开发者,等平台中有足够应用和游戏后,才会在消费级市场发售(预计在2019中旬),预计届时价格也会大幅下调。
该神经脉冲识别硬件搭载了三块Wearable Devices专利的表面神经传导(SNC)传感器、从尺神经读取生物信号的电极材质、位于手腕的桡神经和正中神经检测套件。Mudra Inspire核心硬件在读取到数据后,将进行数字计算,然后将结果通过蓝牙以接近实时的速度传送到配对设备中。接着,配对装置中的TensorFlow开源软件运行神经网络算法,用于识别信号(手/手指活动)和将动作与虚拟指令分类。
如此一来,用户的手就能够变成控制手柄,而手指将变成按钮。在校准后,用户还能够给双手的手指和手臂姿势设定功能,比如上下和左右滑动、选择、进入开始界面、拖放、旋转和反转。此外,Mudra Inspire还集成了AI,也就是说用户使用越频繁,操作就越精准。据Wearable Device称,准确率最高可达99.9%。
应用!应用!应用!
很可惜,它并不具备可供消费者使用的完整应用,不过目前一些发展合作伙伴,如HTC Vive、HoloLens、Google Cardboard和Meta 2 AR头显、安卓手机和Android智能手机系统Wear OS,它们正在为该手环研发合适的应用场景。
据Mudra Inspire官网称,预计在2018年12月,Windows也将支持该手环,而iOS将在2019年1月支持。另外,上面还提到了一些未来的开发者合作伙伴:Oculus、谷歌Daydream VR、PSVR、Magic Leap、任天堂和Apple TV,不过具体合作开发日期还未公开。
当前,Mudra支持的开发平台包括安卓、Unity、Windows(2018年12月)、iOS(2019年1月)、ARCore(2018年12月)、ARKit(2019年1月)。
能否取代手柄?
VR爱好者们对现有的手柄并不是完全满意,因此Wearable Device的Mudra Inspire手环或许能够在消费级市场大受欢迎,此外该手环似乎也避开了一些传统手柄存在的缺陷。
现有手柄的一大痛点是受到视场角的限制,而Mudra Inpire的追踪基于对用户神经脉冲的识别,就不需要考虑这个问题。另一点,一些手柄的设计欠缺对人体工学的考量、过于沉重。比如一些人会抱怨HTC Vive手柄的按钮界面不方便使用,拇指很容易误触Steam菜单键。
而Oculus Touch手柄的一个缺点是,电池不能反复充电,5号电池的电量常常很快就用完了。另外,也是很明显的一点,就是长时间手握坚硬的塑料手柄会产生类似腕道症候群(与鼠标手相似),短期内这种症状可能会让用户手抽筋,长期的话会真的发展成腕道症候群。
另外,在Mudra Inspire宣传视频中,女模特演示了用手环操控智能眼镜,这里想要指出的就是它可是控制任何可穿戴设备,不仅仅是AR/VR。
那么,Wearable Devices的这款黑科技能否吸引到主流消费者呢?答案应该是靠它自己不够,它与其他XR产品在销量上同样受到定价、硬件、使用空间面积要求、成本和缺少主流支持等限制。
如果Mudra Inspire能获得一些受欢迎的应用支持,就很容易吸引VR粉丝来使用。比如AR游戏《精灵宝可梦Go》也曾推出过配套手环,但是如果该游戏能搭配Mudra Inspire,应该能吸引一些追求更高级体验的AR粉丝。
但是回过头来看,VR手柄能提供的不只是指令的输入,它还能为用户提供触觉反馈。Valve公司的第三代Knuckles开发者手柄支持脱离按钮输入,但是Mudar Inspire完全不需要用户手中拿任何东西就可以输入,是完全不同的概念。
不过Wearable Devices认为,虽然使用Mudra Inspire时用户的手只是在空气中活动,但是如果将其与各种实物搭配,比如手握水枪玩VR第一人称射击,或者搭配离合器和方向盘模拟赛车。
当然,这对于消费者来说并不实际,有些人或许更喜欢百搭的标准手柄,而不是手握道具或徒手捏空气。
不过说来说去,对Wearable Devices来说最重要的,还是研发越来越多的原生应用。Mudra Inspire的硬件已经足够优秀,相信如果有热门应用的加持,它将会带来更有趣、交互性更强的AR/VR体验。
(END)
推荐阅读
—— 青亭网