网易伏羲人工智能实验室团队新研究: 游戏角色自动创建的脸到参数转换
网易伏羲实验室、密歇根大学、和北航大学的研究员近日发表了一篇研究,能自动将真人照片转换成游戏人物形象。以下是摘要:角色定制系统是角色扮演游戏(RPG)中的重要组成部分,允许玩家使用自己的喜好编辑游戏中角色的面部外观,而不是使用默认模板。本文提出了一种根据输入的面部照片自动创建玩家游戏中角色的方法。我们通过解决大量物理上有意义的面部参数的优化问题,在面部相似性测量和参数搜索范例下制定上述「艺术创作」过程。为了有效地最小化所创建的面部与真实面部之间的距离,特别设计了两个损失函数,即「辨别力损失」和「面部内容丢失」。由于游戏引擎的渲染过程不可区分,因此进一步引入生成网络作为模仿游戏引擎物理行为的「模仿者」,以便所提出的方法可以在神经风格转移框架下实现,参数可以通过梯度下降进行优化。实验结果表明,我们的方法在全局外观和局部细节方面实现了输入面部照片与所创建的游戏内角色之间的高度生成相似性。我们的方法已经在去年的新游戏中部署,现在已被玩家使用超过 100 万次。