利用 GAN、Photoshop 和历史参考文献,复原古罗马皇帝肖像。
波澜壮阔的古罗马文明令人神往,那些如雷贯耳的名字更是引人好奇,例如罗马帝国第一位「皇帝」奥古斯都、暴君尼禄……他们的雕像栩栩如生,但是如果能直接看到肖像图,岂不更加直观?近日,设计师 Daniel Voshart 利用 GAN、Photoshop 和历史参考文献创建了古罗马皇帝的肖像图,让我们能够一窥其「面目」。
罗马皇帝奥古斯都(左)和马克西米努斯 · 色雷克斯(右)的雕像和借助 AI 得到的肖像图。用 AI 技术修复老照片甚至视频,已不鲜见。那么,基于古罗马皇帝雕像复原其面貌呢?Daniel Voshart 在 COVID-19 隔离期间就做了这样一个项目。他转换并修复了 800 张罗马皇帝半身像的照片(包括裂缝、鼻子、耳朵等),并于 7 月份完成了第一批 54 位皇帝的画像。
在创建肖像的过程中,Voshart 结合使用了不同的软件和资源。主要工具是一个在线程序 ArtBreeder,它使用 GAN 技术操纵肖像和 landscape。(ArtBreeder 网站上有大量不同风格的面部图像,用户可以手动进行调整。)
ArtBreeder 图像示例(图源:https://www.artbreeder.com/browse)
Voshart 向 ArtBreeder 输入从雕像、硬币和绘画中收集到的古罗马皇帝图像,然后基于历史描述进行手动调整,再将其返回至 GAN。
「我在 Photoshop 中完成输入图像,然后将它们输入到 ArtBreeder 中,调整后再返回 Photoshop 进行再次加工。」Voshart 简要介绍了整个流程,「这带来了最好、最逼真的肖像画,避免出现恐怖谷效应。」
Voshart 表示,他不想单纯地复制古罗马皇帝雕像的「肉身」,而是想创建展现其气魄、令人信服的画像。
此外,在肖像画生成过程中,Voshart 还将高分辨率名人图像输入 GAN,以增强最终生成图像的逼真度。例如,在奥古斯都肖像生成过程中,使用了 Daniel Craig 的图像;在马克西米努斯 · 色雷克斯肖像生成过程中,Voshart 使用了摔跤手巨人安德雷(André the Giant)的图像。这么做的原因是色雷克斯和安德雷患有同样的疾病,Voshart 想借助安德雷的特征来填充色雷克斯的下巴和额头。Voshart 认为这个过程像「炼金术」一样,最终的生成结果依赖于不同输入的混合。
相比于第一行中的肖像,第二行肖像下巴和脸颊都更加丰润。Voshart 的这些作品惊动了学术界,他们夸赞这些肖像画为罗马皇帝赋予了新的深度和逼真度。Voshart 表示,他和历史学教授和博士进行探讨,向他们寻求建议。Voshart 表示,选择肤色是一个存在大量争议的问题,尤其是塞维鲁皇帝(Septimius Severus),他被认为具有腓尼基人或柏柏尔人血统。Voshart 注意到,塞维鲁皇帝是唯一一个拥有现存绘画作品(Severan Tondo)的罗马皇帝,这幅绘画作品使得他在肖像画生成过程中使用了较暗的肤色。
塞维鲁皇帝肖像画。下图中的肖像画肤色与其现存绘画作品中的肤色相符。设计 Daniel Voshart 将古罗马皇帝的雕像复原成了肖像画,这一工作引发了网友热议。一位网友对重现「这么多」金发碧眼的古罗马皇帝肖像表示难以置信,而且这些肖像的外观着实令人惊叹。
还有网友称赞肖像的复原过程借助了历史记载,甚至引用了参考文献,真的是太专业了。
尽管 Voshart 认真考虑了肖像的肤色问题,仍有网友对肤色提出了疑问,表示肤色看起来不太像南欧或者地中海人,但「不得不承认面部细节真是太棒了」。
这位网友还做了进一步的解释,表示自己赞叹面部细节(great face)并不是因为它们看起来多像古罗马皇帝的真实肖像(并不像),而是因为一些面部表情和纹理处理得太好了,并且设计师将自己对古罗马皇帝的理解融入了其中。Daniel Voshart 是一名设计师。2004 至 2008 年,他就读于加拿大瑞尔森大学图像艺术学院,并顺利取得艺术学士学位。之后,他成为一名电影摄影师,并参与一些音乐 MV、时尚品牌概念片和电影的拍摄。
他拍摄的电影曾多次在柏林电影节、维也纳国际电影节等世界最负盛名的电影节上公映,并两次入选加拿大十大最佳影片,荣获诗兰丹斯国际电影节评审团大奖等。
2011 至 2015 年,Voshart 进入多伦多大学攻读建筑学硕士,专注于可持续性设计和 VR。他希望将自己作为电影摄影师期间培养起来的空间和审美融入到建筑设计中。2015 年,他顺利取得建筑学硕士学位。之后 Voshart 曾在建筑师事务所 Linebox Studio 工作两年,致力于将 VR 工作流整合到住宅和商业项目中。2018 年,他成为《星际迷航:发现号》系列电视剧的 VR 专家。疫情隔离期间,无法继续 VR 工作,这反而让他开始探索如何「基于雕像复原古罗马皇帝肖像」,并结合 AI 技术、历史知识和设计师的经验与审美,获得了不错的结果。https://www.theverge.com/2020/8/21/21395115/roman-emperors-photorealistic-portraits-ai-artbreeder-dan-vosharthttps://voshart.com/ROMAN-EMPEROR-PROJECT近日,南京大学周志华教授的专著《集成学习:基础与算法》中文版上市,让我们能够有机会系统的学习这一经典的机器学习方法。
为了更好的帮助机器之心的读者们了解集成学习,我们邀请到本书的译者、周志华教授的学生李楠博士分别于8月16日与8月23日带来 2 期线上分享,带领大家一起学集成学习。
我们也将在直播过程中,送出10本《集成学习:基础与算法》,识别二维码即可报名。
© THE END
转载请联系本公众号获得授权
投稿或寻求报道:content@jiqizhixin.com