蒙娜丽莎皱眉:机器学习将旧画和照片变为现实
2019-05-23 08:28:03爱云资讯
机器学习研究人员已经制作了一个系统,可以从一个人的脸部只有一个帧重建逼真的动作,开启了动画的可能性,不仅仅是照片,还有绘画。它并不完美,但是当它起作用时,它就像 - 现在的AI工作一样 - 令人毛骨悚然,令人着迷。
该模型记录在三星AI中心发布的论文中。这是一种在源面上应用面部标志的新方法 - 任何说话头都可以 - 对目标面部的面部数据进行应用,使目标面部执行源面所做的事情。
这本身并不新鲜 - 它是目前AI世界面临的整个合成图像问题的一部分(我们最近在伯克利的机器人+ AI活动中对此进行了有趣的讨论)。我们已经可以在一个视频中制作一张脸,反映出另一个人面对的是什么或者他们在哪里。但是大多数这些模型需要大量数据,例如一分钟或两分钟的视频需要分析。
然而,三星莫斯科研究人员发表的新论文表明,只使用一个人脸的单个图像,就可以产生一个视频转换,说话和表达普通表达的视频 - 虽然远非完美无瑕,但却具有令人信服的表现力。
它通过使用大量数据前载面部地标识别过程来实现这一点,使得模型高效地找到与源相对应的目标面部分。它拥有的数据越多越好,但它可以通过一个图像(称为单次镜头学习)来实现,并且可以避免它。这就是为什么能够拍摄爱因斯坦或玛丽莲梦露,甚至是蒙娜丽莎的照片,让它像真人一样移动和说话。
在这个例子中,蒙娜丽莎使用三个不同的源视频进行动画制作,正如您所看到的,在面部结构和行为方面产生了截然不同的结果。
它也使用了所谓的生成对抗网络,它实际上将两个模型相互对立,一个试图欺骗另一个模型,使其认为它创造的是“真实的”。通过这些方式,结果满足创造者设定的某种程度的现实主义。 - 例如,“鉴别者”模型必须是90%确定这是继续进程的人性面孔。
在研究人员提供的其他例子中,假谈话头的质量和显而易见性差异很大。有些人试图复制一个人从有线电视新闻中获取图像的人,也会重新创建图像底部显示的新闻自动收报机,并用乱码填充。如果你知道要寻找什么,通常的涂片和奇怪的文物是无所不在的。
也就是说,它的表现和它一样好。但请注意,这只适用于脸部和上半身 - 你不能让蒙娜丽莎用手指或跳舞。不管怎样,还没有。
相关文章
- 微美全息利用机器学习的智能推荐技术,开发多模态融合推荐系统
- 快速玩转 Llama2!阿里云机器学习 PAI 推出最佳实践
- 引领高质量图像处理的创新发展,微美全息研发机器学习的多焦点图像融合技术
- 九章云极DataCanvas公司7次蝉联中国机器学习平台市场三甲
- 人工智能加速落地赋能千行百业,微美全息赋能AI+机器学习算法迎来空前发展机会
- NLP领域再创佳绩!阿里云机器学习平台 PAI 多篇论文入选 ACL 2023
- 什么是MLOps?为什么要使用MLOps进行机器学习实践
- 阿里云机器学习平台PAI论文入选 SIGMOD 2023
- 如何通过人工智能(AI)和机器学习应对零售劳动力和执行方面的挑战
- 时序数据库DolphinDB基于机器学习的异常预警方案
- 机器学习平台PAI支持抢占型实例,模型服务最高降本90%
- 微美全息开发基于人工智能和机器学习的图像处理技术
- 阿里云机器学习PAI发布基于HLO的全自动分布式系统 TePDist,并宣布开源!
- AI推理服务平台升级,阿里云机器学习PAI推出新规格
- 阿里云机器学习平台PAI论文入选ASPLOS 2023
- OPPO异构计算新升级,StarFire端云机器学习平台支持多种异构芯片
热门文章
头条文章
重点文章
推荐文章
热点文章