发现有趣的人机交互 006期

1. AR/VR沉浸式模拟培训方案供应商SimX曾在2022年11月宣布获得美国空军部提供的研发合同，而这家公司日前又表示获得美国空军部的170万美元追加投资，从而将总研发资金增加至1200万美元。以下是SimX的Holodeck VR 训练模拟器。

2. 去年，总部位于纽约的 AI 视频编辑初创公司 Runway 与 Stability AI、LMU Munich、Eleuther AI 和 Laion 合作，帮助推出了开源图像 AI Stable Diffusion。现在它引入了一种新模式：“Gen-1”可以将现有视频可视化地转换为新视频。通过简单的文字提示，可以将逼真的火车门变成卡通风格的火车门。

3. AntVR 是一家早期的 VR 初创公司，曾在多个 XR 耳机项目中苦苦挣扎，但最终没有找到吸引力，现在该公司又带来了一些非常有趣的东西。在 CES 2023 上，AntVR 展示了其“混合波导 AR 光学器件”，它采用一种新颖的方法来保持纤薄的外形，同时包括调光功能，可在透视 AR 和完整 VR 模式之间即时切换。

4. ShapesXR 是 XR 的协作设计和原型制作工具。它具有强大的创意工具集，让您无需事先拥有 3D 经验即可在 VR 中组装复杂的场景。与其他 3D 创作工具不同，它有一个“故事板”系统，允许您为整个沉浸式体验或更详细的用户交互流程制作原型。获得一些 3D 草图后，您可以邀请 VR 中的任何人真正调整设计和愿景，通过网络分享您创建的内容，甚至可以使用方便的插件直接将其导入 Unity。在 VR 中在一起确实增加了对设计过程的新理解水平，并显著减少了迭代和不必要的返工。

5.分享一个我在去年12月做的一个小Demo，用了Unity数字人+计算机视觉+语音交互+ChatGPT，由于ChatGPT返回时间有点久，可以看完前5秒后跳到30秒后。

6. 分享一篇由Meta发表的论文：Toolformer- Language Models Can Teach Themselves to Use Tools。这篇论文指出基于LLM模型的Toolformer可以自学API调用，作者整合了一系列工具，包括计算器、问答系统、搜索引擎、翻译系统和日历，而Toolformer在各种下游任务中实现了显著改进的零样本性能。

7.分享一份行业报告《2022元宇宙系列-XR硬件行业蓝皮书》，如果对6和7相关内容感兴趣的读者可以在公众号回复“006”获取原文档、翻译文档。

以上内容摘自笔者正在构建的人机交互设计知识库，该知识库主要涉及XR、数字人、普适计算、智能座舱、AIGC 5个大方向，目前已经归档了1300多份材料并打了100多个标签，包括各种书单、论文、文档、网页和视频，感兴趣的读者可以加入并阅读。

内容涉及的100多个标签

知识库部分资料

「相关阅读」