经典游戏《黑暗之魂》中那些逼真的角色如果是由演员扮演的,那么演员阵容会是什么样子的呢?StyleCLIP 给出了答案:OpenAI 的这一图像 AI 模型将这款游戏中的英雄形象变成了当今现实生活中的人物肖像。

2021 年初,OpenAI 发布了 AI 模型CLIP,该模型使用图像和文本数据进行了训练,能够识别图像描述是否与图像内容匹配。除了CLP外,AI研究人员还受到OpenAI推出的DALL-E图像生成器的启发,开始将CLIP 与GAN 模型联系起来,以便根据文本输入生成新图像。

StyleCLIP 便是 Nvidia 的 StyleGAN 和 OpenAI的CLIP 相组合的产物,创建于 2021 年 3 月。这一模型可以通过输入文本进行控制,从而使脸变得可爱、给人脸卸妆、调整发型或将脸变成机器人变体。

从那以后,艺术家们一直在试验这个和类似的人工智能系统。如8 月底,Sasha Toksubaev 在 Twitter 上展示了《街头霸王》中英雄的真人肖像。虽然大多数都是使用免费的开源工具,但视觉结果通常是高质量的,这显示了过去几个月来图像 AI 研发和应用所取得的进展。

现在,YouTube 频道 Illusory Wall 又展示了《黑暗之魂》中的角色作为真人的样子。该频道专门播放《黑暗之魂》和其他 From Software 游戏,AI 转换是其提出的第一个机器学习项目。与《街头霸王》迷 Sasha Toksubaev一样,Illusory Wall 依靠 StyleCLIP 将《黑暗之魂》角色的数字形象转换成了逼真的肖像。

在许多情况下,生成的肖像非常接近他们的数字角色原型。由于《黑暗之魂》不提供高质量的图形化角色原型,因此 StyleCLIP 在生成图像时必须更具创造性:彼得保留了他的特色锅剪, 奎拉格的妹妹看起来病恹恹的,铁匠和往常一样有着蓬松的白发。

Illusory Wall称,他的项目的想法来自 Corridor Crew 视觉效果专家的一段视频,他们已经多次尝试使用Deepfakes等 AI 技术。

在 Illusory Wall 的视频中可以看到《黑暗之魂》中所有角色的 AI 人脸转换。在其中,Wall还详细报告了使用 StyleCLIP 生成 AI 图像目前仍然存在的问题——例如在对怪物、头发的处理上。Illusory Wall 正计划针对From Software 其他游戏的角色进行进一步的实验。【编译自mixed.de】