Planet:使用Unity构建《David Bowie is》AR应用
《David Bowie is》是由专注于多媒体内容创作的工作室Planet开发的一款AR应用。Planet使用Unity把博物馆展览转变为AR的形式,实现了高分辨率采集内容和沉浸式环境体验。
本文Planet工作室将分享在创作作品时所遇到的挑战。
David Bowie
随着David Bowie在2016年逝世,音乐世界失去了一位艺术天才。David Bowie不仅是流行乐坛的标杆,他也是完美的艺术家和创新者,他不断用新的舞台形象重塑自己,轻松变换音乐风格和流派。在长达40余年的演艺生涯中,David Bowie对世界文化影响深远。
David Bowie热衷于技术及其对人类影响的主题,他的首个单曲《Space Oddity》发行在阿波罗登月前,讲述了一名倔强的宇航员渴望回家的故事。
他在1976年发行的歌曲《TVC15》通过“全息影像”广播警告了电视的成瘾性,整整一年后,莱娅公主才在《星球大战》中通过全息投影把自己呈现在桌面上。
在互联网蓬勃发展的早期,David Bowie看到了网络的颠覆性潜力,建立了自己的AOL风格官方网站BowieNet。
David Bowie is
为了向这位艺术家表达敬意,David Bowie主题展览于2013年在伦敦的维多利亚和阿尔伯特博物馆首次举办,该展览在世界巡回展览长达五年。
在巡回展览接近尾声时,索尼音乐的负责人开始思考如何以XR的形式保存这次展览的重要元素和David Bowie的遗产,于是她找到了Planeta的团队帮助开发AR体验。
这便有了《David Bowie is》,它是重现博物馆展览的增强现实体验,提供该展览展品的2D和3D形式,以及长达数小时的David Bowie音乐和表演。
《David Bowie is》使用Unity开发,iOS版本使用了Unity的ARKit开发,然后通过AR Foundation开发Android版本。《David Bowie is》发布于2019年1月8日,也是David Bowie的生日,如果他还在世,现在就已72岁。这是一款非常出色的应用,相信David Bowie一定会非常喜欢。
项目交流
Unity全球VR/AR战略总监Tony Parisi与Planet的工作室成员Nick Dangerfield、Jimi Stine、Dan Brewster和Pilar Aranda,一起讨论了有关该项目的话题。
索尼日本分公司的Akiko Ozawa是David Bowie的忠实粉丝,她非常喜欢维多利亚和阿尔伯特博物馆的David Bowie展览,二年前,她把David Bowie is展览带到东京。
当展览于去年在布鲁克林落下帷幕时,Akiko Ozawa认为该展览的完整副本应该用XR的形式保留,以供后人敬仰,因此她开始寻找工作室的帮助。
由于我们对沉浸式技术的工作主要围绕音乐和视觉艺术,Akiko Ozawa认为我们能够胜任这项任务。
我们最大的挑战是解决以下问题:移动AR展览馆应该是什么样子?我们应该如何在应用中移动?
我们对创作视觉艺术展览馆并不陌生,自从2016年开始,Planet已经开发了7款VR展览馆和展览区。但对于为小屏幕开发,同时结合超过400个多种载体的物品,这些问题需要反复的设计与讨论,从而得到答案。
技术问题主要和大量的资源数据有关,找到最连贯而优雅的方法来展示这些物品是一个问题,流畅而无缝的实现它也是一项挑战。在这个意义上说,设计受到了技术限制,因为移动AR只能处理有限的内容。确保每件物品有准确的描述和标题也需要大量的QA工作。
AR Foundation的很好地帮助了我们的开发。作为一个工具,Unity编辑器的总体可塑性对实现特定工作流程非常有用,节省了我们大量时间。
在Asset Store资源商店中,我们可以购买工具和视觉效果,避免因为这些内容过多消耗我们的有限资源。
虽然答案听起来很老套,但给我们指明方向的是David Bowie和他繁星般的影响力,这代表了20世纪的最杰出艺术作品。
David Bowie对优秀作品独具慧眼,本项目的一个特色是可以回顾我们时代最具影响力的一些艺术家,包括从Bauhaus乐队到Brian Eno。
创作这个项目,最重要的是理解David Bowie is应用会作为手机上重现的丰富展览,而不仅仅作为一个档案馆,因此以最佳质量采集展览素材非常重要。我们为该项目处理的图片都由大都会艺术博物馆的档案艺术摄影师拍摄。
关于未来展览项目的建议,请记住不要局限于传统博物馆的结构。虽然我们理解有的项目希望精准复制博物馆的体验,但我们觉得实现出想象空间的项目更为成功。
档案类项目使用标准展示的特定技术,帮助用户适应体验。对音效和光线方面可以进行一些处理,如果观众观看作品时,能够沉浸在最有趣的环境氛围中,所以不要限制在传统的白墙和白炽灯环境中。
模型是整个项目最需要精力处理的部分。在拍摄和扫描每件服装后,我们使用了Agisoft Photoscan和Maya来结合所有数据,后期工作完全手动处理。
为了优化资源,我们调整了很多次白平衡,并反复运行来测试性能和总体可用性。最后我们决定在大多数情况下,在场景环境中展示简化的多边形模型,当模型被选中时再提高分辨率。
类似地,当模型被选中时,所有模型在展示时不带有光照数据,这样有助于呈现摄影制图数据所采集的细节。
淡化为黑暗纯粹是为了美感。在开发期间,我们尝试多种背景的不透明度,我们曾想加入滑块,让用户自己调整背景的不透明度。最后,我们决定保持背景为黑色,使注意力留在资源本身。
过多的摄像机视图会导致现实和虚拟空间的混淆,而这种模糊的界线是AR的特色,我们认为如果要创作沉浸式的博物馆级体验,我们需要完全控制视觉效果。
我们很满意最后的结果,而且我们在限定时间内完成了该项目,从开始到结束约花费了6个月。我们也想加入其它功能,但已经没有时间实现。我们暂时没有计划继续开发David Bowie is应用。
我们的下一个数字项目会利用我们创作新型空间的经历,以展示更多传统的艺术形式。通过结合过去作品学到的知识,并且与艺术家和机构展开合作,我们的目标是在虚拟现实创作出全新的文化活动空间。
工作室下一个项目将是一个多人环境,提供长期和临时的展览,我们会与结构,音效设计和光照的杰出人才共同设计该项目。
小结
Planet工作室开发档案类AR项目的一些经验就分享到这里,更多Unity精彩技术经验分享和谈论,尽在Unity Connect平台(Connect.unity.com)。
推荐阅读
Unite Shanghai 2019
5月10日-12日上海,Unite大会强势回归。技术门票正在热销中,购票即获指定Asset Store资源商店精品21款资源的5折优惠券。
购票请访问:Unite2019.csdn.net
点击“阅读原文”访问Unity Connect