可以映射人物面部动作的人工智能
2019年11月28日 由 TGS 发表
79525
0
前段时间,人工智能模拟人脸事件闹得沸沸扬扬。而近日,韩国的一家公司开发出了有意思的工具,名为“木偶”,只用网络摄像头和图片就能逼真地模拟历史人物或政治家的面部特征。
木偶是一种技术上的面部再造工具,它可以合成一个由人的运动而产生动画的面部再造,同时保留目标面部的外观。该工具之所以能只依靠简陋设备就完成这一神奇“魔术”,主要是依靠了尖端的机器学习技术,研究人员声称,即使是任务目标与人物面部轮廓极不符合的情况下,该工具也能做到让成品优于该领域的基线标准。
这并不是什么新的想法,但木偶不同之处在于,它不需要任何训练数据,且不需要反复预设。它主要通过整合三个新元素来提升艺术水平:图像注意块、目标特征对齐和地标变压器。注意块允许模型关注映射的物理特征的相关位置,而目标特征对齐可以减轻伪影、扭曲和失真。最后的地标变压器,则让它可以在不需要任何标记数据的情况下,使动作的几何结构与目标几何结构相适应。
研究人员使用了名人的照片和开源视频资料库,对模型进行了简单测试,结果表明,木偶几乎超越了所有其他模型,而在另一项用户研究中,100名志愿者被要求,从不同模型生成的两幅图像中,选择最逼真的一幅,结果依然是木偶完胜。
在一篇预印本论文中,研究人员写道:“我们提出的方法不需要任何额外的微调阶段来适应目标人物,这大大增加了模型在野外部署时的实用性。一系列的实验,已经很好地证明了木偶的优越性。”
这项研究的意义在于,可以使摄像师能够在没有运动跟踪设备的情况下,以低廉的成本制作动画人物。弊端在于,它也可能会被滥用来创作高度逼真的深度赝品,让心怀不轨之徒有机可乘。
Pew Center的一项调查数据显示,在最近不到一年的时间里,DeepFake的网络视频数量激增了84%,而其中,57%的具有新闻性质的视频,真实性堪忧。从这一点可以看出,对“木偶”这类的工具还是保持谨慎态度比较好。当然,不是说它不好,只是,需要一些严格的规范,以保证它们不会被有心人用来犯罪,造成不良后果。