查看原文
其他

冲浪 | 海外 XR 大厂在忙啥呢 #1

关注 XR 创业的 XR航海家
2024-08-23


引言:「海外大厂忙啥呢」系列内容主要聚焦于知名互联网和科技企业在 XR  领域的探索,以简讯为主。其中重要的内容和改变我们可能会另撰专文,敬请关注。

Vision Pro 新玩家、极客、应用开发者 加主理人(文末扫码 / 微信:xrvoyager)进讨论群

本文阅读时间约为 5 分钟


1 visionOS 年内
    引入全局实时字幕

visionOS 将在年内引入系统级别的实时字幕功能,这些字幕将适用于通过麦克风输入的现场对话以及任何应用的音频(包括 FaceTime)。Quest 前仅在 Quest TV 和 Quest Store 视频中提供实时字幕选项。
Vision Pro 还将支持更多的为 iPhone 设计的助听设备和人工耳蜗,以及为视觉障碍或光敏感性人士提供的减少透明度、智能反色和减弱闪光灯开关功能。
目前 Vision Pro 已经提供了一系列辅助功能,包括屏幕阅读器、放大和为色觉缺陷者准备的色彩过滤。倒反天罡,今年 iPad/iPhone 等产品也准备引入眼动追踪作为辅助操作方式,用户可停留注视来激活按键

2 Meta 有意开发
    包含相机的 AI 耳机

The Information 援引知情人士消息,Meta 正在开发一款集成了人工智能助手和摄像头的耳机,据称 Mark Zuckerberg 已审阅了几种设计方案,但尚未对任何一款感到满意。目前尚不清楚最终产品是入耳式耳机还是耳罩式耳机,该项目内部被称为「Camerabuds」。有消息称 OpenAI 和苹果也在研究此类产品。
耳机的几种可能用途包括环境映射、物体识别、语言翻译和全景拍照。最终产品设计的时间表尚不明确。Meta 从至少 2019 年起就开始探索开发耳机的可能性。
Meta 已与 Ray-Ban 合作提供智能眼镜,销量已破百万台。鉴于智能眼镜可能不会成为主流成功产品,耳机作为一种已广泛接受的可穿戴设备也是合理的探索方向
2024 年以来 Humane AI Pin 和 Rabbit R1 等产品都以 AI 能力作为主要卖点,但尚未获得广泛成功。

3 Google 演示多模态智能眼镜
    宣布 XR 系统单独发布

这次预录制的演示是实时本地多模态 AI 助手 Project Astra 的一部分,它能够记住并推理其所观察的所有内容。谷歌表示,Astra 通过连续编码视频帧,将视频与语音输入合并到事件时间线中,进而缓存这些信息以便高效地回调。

演示视频起初在智能手机上播放,但中途用户拿起并戴上了一副厚重的眼镜。这些智能眼镜展示了一个固定的 HUD,显示佩戴者讲话时的蓝色音频输入指示器,以及 AI 响应的白色文本。
Deepmind 公司 CEO Demis Hassabis 表示,Project Astra 的最终落地很有可能是通过智能眼镜这类激动人心的新型设备,但没有宣布具体的产品,并在视频片段末尾显示了「demo」的免责声明。
在2024年谷歌 I/O 的主题演讲中,没有提及谷歌为三星即将推出的头戴设备所开发的空间计算平台 Android XR。谷歌表示 XR 系统相关的内容将在年内合适的时间单独发布。

END


继续滑动看下一个
XR航海家
向上滑动看下一个

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存