迪士尼的新AI工具可以轻松对视频中的人脸进行老化处理

• 2022-12-06 15:04:35

摘要当马丁·斯科塞斯的《爱尔兰人》于2019 年上映时，围绕这部电影的很多讨论都是关于制作如何使用开创性的方式来描绘罗伯特·德尼罗饰演的角

当马丁·斯科塞斯的《爱尔兰人》于2019 年上映时，围绕这部电影的很多讨论都是关于制作如何使用开创性的方式来描绘罗伯特·德尼罗饰演的角色弗兰克·希兰的年轻版本。但现在，迪士尼表示它已经开发出一种名为 FRAN(面部再老化网络)的神经网络，它的作用恰恰相反——它可以使屏幕上的角色变老。

迪士尼研究工作室解释说，它在一个包含数百张计算机生成的合成面孔的数据库上对 FRAN 进行了训练。这使他们能够生成数千张具有相同角度、面部表情和光照条件的人物图像;如果必须用真实的图像来完成，这是一项艰巨的任务。

“我们的新面部再生网络 (FRAN) 结合了简单直观的机制，为艺术家提供了本地化控制和创作自由来指导和微调再生效果，这一功能在实际生产流程中非常重要，但经常被忽视在相关研究工作中，”迪士尼研究工作室在一份声明中说。

另请阅读| IIT Madras 研究人员在泰米尔纳德邦海岸开发、部署波浪能发电机

在迪士尼提供的视频示例中，神经网络在对视频中角色的面部进行老化处理方面做得很好，尽管存在一些伪像。虽然看起来这种算法可能会在未来取代许多 VFX 工作，但它不太可能很快就会这样做。在迪斯尼关于神经网络的论文中，它承认神经网络有许多必须解决的局限性。

其一，大的图像变化更难产生，这意味着将一个角色从非常年轻的年龄重新变老到非常年老将是一项挑战。此外，该算法不会捕获头发的花白，这意味着人工老化的角色将拥有与原始镜头中相同的头发。

此外，迪士尼研究工作室表示，再老化过程还会以一种尚无法控制的方式改变角色的体重指数 (BMI)。此外，FRAN 没有为用户提供指定在老化过程中要添加或删除哪些面部结构(痣、皱纹图案和其他皮肤标志)的方法。

标签：