VINCI 智能设计系统第一次图灵测试结果大揭秘
VINCI是同济大学“智能大数据可视化实验室”（IDVX Lab）所设计开发的一款基于人工智能技术的全自动平面设计系统。目前VINCI可以生成各式各样的平面海报。为了验证 VINCI 的设计能力，我们在同济大学内部组织了一场小规模的 “广告海报设计大赛”，让VINCI系统与人类设计师同台竞技。这场别开生面的比赛整体分为两个部分：1. 海报设计大赛；2. 问卷调研。
海报设计大赛：在比赛中，我们先后邀请了三支团队参加：一支由 5位专业平面设计师组成的人类设计师团队；一支由5位非设计师组成的，使用人工智能海报设计系统 "鹿班" 的团队（https://luban.aliyun.com/）；以及一支由5位非设计师组成的，使用 VINCI 设计系统的团队。我们将10道相同的海报设计题目分别发放给这三支团队，这些题目要求他们分别设计 5张针对饮料产品，以及5张针对海鲜产品的海报。每张海报的设计时间要求不超过1个小时，由团队自行决定各自的设计方案，以及最终所提交的作品。最后我们得到了30张海报设计作品。
问卷调研：问卷调研分为两部分：图灵测试，以及作品评分。图灵测试要求测试人员（不同于参赛者）从上述30张海报中一张张的区分哪些是人类设计师创作的，而哪些是人工智能创作生成的；随后，测试者还需要对海报的设计结果根据其美观程度进行打分。
竞赛结果：下图展现了所有30张在竞赛中设计生成的海报，以及他们所对应的作者。你猜对了吗 ？
图1: 竞赛设计作品。从左向右，第一列：产品图；第二列：设计师的设计结果；第三列：鹿班的设计结果；第四列：VINCI 的设计结果
问卷分析：问卷累计有 126 位用户参与。我们从中选取了 100 位用户（其中，50位具有专业设计背景）的数据进行分析，得到了许多有趣的发现（如图2所示）。首先，很遗憾的是，从图灵测试的表现上来看，现在的VINCI 系统与人类设计师相比，在统计上仍然具有显著不同。但值得高兴的是，VINCI 系统在统计意义上也明显优于 “鹿班”。 同时，虽然不少用户能够把 VINCI系统与人类设计师区分开来，但是，用户们认为VINCI 产生的设计结果 在美观度上而言，明显优于 “鹿班”，同时与人类设计师设计的作品在美观度上没有统计意义上的显著差距。
图2: 问卷结果分析。第一列为基于50位设计师统计的结果，而第二列为一般用户的结果。第一行（a,b) 展示了图灵测试结果，图中的纵轴代表在图灵测试中，成功欺骗人类用户的概率。该结果表明，VINCI 显著有别于人类设计师，以及 鹿班系统（优于鹿班，但不如人类）；第二行（c, d）为美观度打分结果（1分代表非常差，5 分代表非常好）。该结果表明，VINCI 与人类无显著差异，且显著优于鹿班系统。
怎么样，这是你所期待的结果吗？应当看到，VINCI 系统 作为一款虚拟的平面设计机器人，仍然有很多不足，仍在不断的进化中，我们也期待她有一天能够与人类设计师并驾齐驱，不分伯仲。
觉得我们的研究有趣吗？你可以现在加入我们。同济大学智能大数据可视化实验室欢迎有意通过推免前来实验室攻读硕士、博士的学生、或者有意加入实验室的老师们 前来实习、访问、交流。快点通过官方邮件与我们取得联系吧：idvx.lab@tongji.edu.cn, 期待你的到来！
公众号二维码
官网二维码