融资动态| Ultraleap: 让手势识别成为Metaverse平台的主要交互方式，D轮腾讯、招银国际领投
近日，人机交互技术公司Ultraleap完成约8200万美元的D轮融资，本轮融资由腾讯、英国Future Fund：Breakthrough基金和招银国际领投。Ultraleap方面表示，本轮融资将用于发展最佳的双手交互方式，帮助手势识别成为Metaverse平台的主要交互方式，并全方面拓展市场。
Ultraleap 现任CEO Tom Carter 在该轮融资后表示，“对于Ultraleap来说，未来的互动并不局限于VR头显和互联网，我们将与生活的各个方面进行虚拟和现实互动：在家中，在办公室，在汽车内，或者在公共场合。我们D轮融资，目标是为了加速主要交互方式往手部姿势的方向迁移，因为在任何人的元宇宙愿景中，不会存在有物理意义的控制器、按钮和触摸屏。”
Ultraleap 由英国公司 Ultrahaptics和美国公司Leap Motion合并组成，在手势识别和隔空触觉反馈技术上有多年积累。并以这两条技术路线开发出多款软硬件产品，产品面向消费、娱乐、生活和相关软件开发等多个方面。同时该公司的技术在VR/AR领域、汽车、线下娱乐、教育培训等多个场景都有应用。
而在此之前腾讯已经投资数家VR/AR相关的公司，其中有Snap、Meta、Innovega等硬件公司，也有FrontierDevelopment、威魔纪元等涉及VR游戏的公司。
就目前来看，手势识别这种新型人机交互方式在VR游戏方面最具广泛应用的可能性，并且也有越来越多游戏开始支持手势识别。作为一种低成本提高VR游戏沉浸感和游戏体验的交互方案，手势识别正逐渐成为一些小型游戏开发团队和大厂游戏项目的基础功能。
Ultraleap：
以手势跟踪和隔空触觉反馈
为核心的技术公司
Ultraleap是一家主打手势跟踪和隔空触觉反馈的技术公司，旗下有面向B端和C端相关硬件产品和软件平台支持。Ultraleap的前身是英国隔空触觉反馈技术公司Ultrahaptics，在2019年5月以3000万美元的价格并购美国手势跟踪技术公司 Leap Motion ，并在9月正式命名为 Ultraleap 。
Ultrahaptics于2013年由英国布里斯托大学计算机系研究生 Tom Carte 与其人机交互学导师 Sriram Subramanian 成立。在创立之初便获得60万种子轮融资，之后在2015年、2017年和2018年完成三轮融资，融资总金额达到6360万英镑。
早期，Ultrahaptics业务重心主要放在与游戏和消费级电子产品公司的合作上，之后他们发现在汽车上也有大量需求，隔空触觉反馈这类新型人机交互技术在广告营销、工业、沉浸式娱乐等方面有巨大潜力。
Tom Carter认为该技术在VR/AR场景的应用将会是最广泛的，“这是VR/AR行业的下一个挑战。现在拥有视觉效果和头部追踪，但你需要让你的手进入其中，提高沉浸感的下一个门槛，就是如何在VR中触摸到东西。”
隔空触觉反馈作为人机交互技术的一种，并非单独存在，而是与手势跟踪技术捆绑，Ultrahaptics早在2014年就与美国手势跟踪技术公司Leap Motion建立合作。
Leap Motion 在2010年成立，通过前卫的红外线手势跟踪技术吸引到硅谷投资者的注意，在2013年估值便达到3.06亿美金。不过因为公司陷入财务危机，在苹果两次尝试将其收购失败后，被Ultrahaptics合并。
在两家合并之后，时任Ultraleap首席执行官Steve Cliffe 说，“现在的故事比Ultrahaptics或Leap Motion都要大，而不仅仅是触觉和手部跟踪。我们为空间交互提供世界上第一个完整的垂直软件和硬件堆栈，我们处于人机交互革命的中心。”
Ultraleap如今在欧洲、北美和亚洲拥有150多名员工，而“隔空触觉反馈”和“手势跟踪”形成了公司的两条重要技术路线。
Ultraleap 的隔空触觉反馈技术，通过阵列排布的多个小型超声波扬声器，利用算法以特定的时间差发射声波，用组合起来的多个超声波在手部皮肤上产生微小压力，以此让手部感受到力反馈。
手势跟踪技术则是通过红外射线来捕捉人手在空间中的运动信息，由此在终端设备中重建出人手的三位模型。
在这两条技术路线之下，Ultraleap推出了数款面向不同用户的软硬件产品。
隔空触觉反馈产品线上，Ultraleap有两款核心产品，面向消费级别的户外娱乐、广告和零售等公共场景的快捷安装式触觉反馈硬件STRATO Inspire。以及面向专业开发者和汽车、智能家居、计算机应用的硬件产品STRATO Explore。
而手势跟踪产品线上的主力硬件产品是 Leap Motion 控制器，这是一款小巧的光学手部跟踪模块，通过USB即刻连接与XR、PC和非接触式自动服务终端，实时捕捉用户的手势操作。
并且在今年10月，正式推出了第五代手势跟踪软件平台Gemini（双子座），支持Windows平台，并且已继承至Varjo XR-3头显和高通骁龙XR-3 5G的参考设计中，通过调用搭载硬件上的红外摄像头来完成手部追踪。
技术应用场景：
VR/AR、游戏、广告营销、
汽车、教育、线下娱乐
手势跟踪和隔空触觉反馈两项技术是共生的关系，由此形成的无接触式人机交互方式不仅应用在VR/AR等线上场景。
在线下，尤其是疫情常态化的当下，Ultraleap判断非接触式交互有颠覆传统触屏按键交互时代的使用价值。疫情期间，一些美国地方影院已经运用Ultraleap的相关技术，无需接触操作就可以完成购票、取票等操作。
Ultraleap 认为人体触觉系统涉及到建立存在感到情感联系和幸福感等所有人体心里感受，如果让虚拟物体产生互动的触觉反馈，能够让用户产生更强的探索和使用欲望。在VR/AR领域，手势识别和触觉反馈能够增强操作的体验感和沉浸感，Ultraleap 推出基于手势的VR/AR操作界面Stems，用户的操作方式更加自然，符合人类直觉。
在2019年底推出的演示视频中，用户可以任意将信息界面在空间拖动，用手指捏合进行放大缩小，翻转查看界面中的内容。Stems可以容纳各种类型的动态内容，包括文本、图像、视频和3D模型。
Ultraleap的技术也开始在《Low-Fi》等VR游戏上加以运用。《Low-Fi》是一款赛博朋克风格的PC VR冒险游戏，开发者透露将在游戏中加入Ultraleap的手势跟踪技术，通过裸手手势来操控游戏中的科幻飞车，控制方向盘、仪表盘、电台、导航等一些互动操作，使游戏更具沉浸感。
在真实的汽车驾驶中，已经有DS、Hosiden等汽车品牌宣布与Ultraleap合作，通过无接触式的中控台操作，使驾驶员得以更加专注于驾驶。通过点击、捏合、手指姿势等多种手势，来控制汽车内包括从娱乐到导航的一系列功能。
此外，Ultraleap在2020年推出与瑞士Luxoft公司合作打造的AR+手势识别的汽车操作界面，驾驶员佩戴AR眼睛看到信息和控制界面，通过手势进行交互。
Utraleap的技术还应用于专业技能培训行业，德国汉莎航空培训项目已经和Utraleap达成合作。空乘人员在VR虚拟环境中，模拟真实飞机服务场景，用自然手势进行训练，已经有超过2万名空乘人员通过这个项目完成培训。
Ultraleap也将其技术带到线下娱乐互动场景中，在国内的狮门娱乐天地主题公园的《暮光之城》项目中，运用到手势跟踪技术，提高游客在虚拟空间见识摩托的沉浸感。
在2020年的一次乐高线下品牌营销活动中，Ultraleap的技术和户外大屏幕集成一体。体验者在大屏幕下方使用STRATO Inspire设备来控制大屏幕中的3D乐高模型完成拼搭。
手势识别和触觉反馈技术覆盖了大部分商业、生活、娱乐的应用场景，Ultraleap认为，随着空间计算技术的不断成熟和发展，数字空间、VR/AR设备将越来越多融入日常的生活，而以人手为中心的物理交互方式将成为所有操作系统的基础。
Tom Carte 表示，“消除物理世界和数字世界之间的界限一直是我们的使命。新冠疫情加速了元宇宙概念的兴起，因为越来越多的人现在了解用虚拟技术增强物理世界的感官体验。”
腾讯加码VR/AR人机交互技术
在去年腾讯出品的年度特刊《三观》中，马化腾在前言中提到，“移动互联网十年发展，即将迎来下一波升级，我们称之为全真互联网。从实时通信到音视频等一系列基础技术已经准备好，计算能力快速提升，推动信息接触、人机交互的模式发生更丰富的变化。”
而如今从各大厂商在VR/AR领域的投入来看，手势识别和触觉反馈是最具实用性的一种新型人机交互方式。Tom Carte 则直接表示，手部追踪将成为 XR 和元宇宙的主要输入方式。
近期，Meta 展示了最新研发成功的虚拟触控手套，该手套配合VR/AR设备石使用，用以解决虚拟世界的真实交互。捕捉手部姿势的同时，用手套上的气囊模拟手部触感。在2020年，Oculus 团队也公开了自研的手势跟踪系统MegaTrack，通过VR头显上的四个灰度摄像头来感知手部姿势。
而谷歌在2019年便通过AI机器学习实现手部跟踪和手势识别，索尼也在同年曝光了一项针对手部跟踪的新一代VR控制器专利。Valve也曾申请过一项名为“虚拟手势生成”的手部跟踪专利，通过控制器上的传感器在虚拟环境中模拟手部姿势。
从智能设备的交互方式演化来看，从电脑设备的键盘鼠标到智能机的手指滑动、点击，交互方式越来越简单且符合人类操作直觉。如果VR/AR设备的交互操作门槛过高，将大大提高用户的学习成本，且沉浸感上也会削弱许多。
腾讯对于VR/AR领域的人机交互关注从很早便开始，如何解决新时代智能设备的交互方式将关系用户的核心体验。马化腾曾在2017年表示，“包括很多其他的方面——AR、VR等等，在终端方面会深刻影响人们的用户体验，人机的交互始终是一个核心。”
手势识别和触觉反馈这类新的人机交互形式，在现在和未来的应用场景不仅局限于VR/AR，但就目前来看，最广泛的应用价值还是在VR游戏中。
对于VR游戏而言，交互方式上更加贴近物理自然，提升代入感的同时，也让VR游戏在游戏玩法层面能够有更多形式的探索。比如手部动作识别能力的增强，能够支持弹吉他等需要手指快速精确活动的游戏玩法。
2021年，知名VR游戏《亚利桑那阳光》的开发商Vertigo Games推出一款基于VR手势识别的吉他音乐游戏《Unplugged: Air Guitar》。玩家可在不佩戴手柄的裸手情况下，用VR头显自带的摄像头和红外线LED捕捉手指活动，体验在VR空间弹奏吉他的乐趣。这款游戏在Oculus 商店评论中，总评分在4分以上，不少玩家为游戏的手部跟踪体验打了满分，认为具有沉浸式的体验感。
近两年，加入手势识别的VR游戏越来越多，从众筹网上小型团队的FPS VR游戏项目《Finger Gun》到大厂Valve与Cloudhead合作开发的《传送门》IP衍生VR游戏《Aperture Hand Lab》，手势识别和触觉反馈逐渐成为一个能够大幅提升游玩体验的解决方案。