首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

AI“复活图灵术”测评:低像素出现马赛克,侧脸识别出现失误

作者 | 蒋宝尚

前几日,一款以“蚂蚁呀嘿”为BGM特效在各大网络平台迅速走红,其是由AI技术支持的软件Avatarify制作而成。

而近日,在reddit机器学习板块,AI复活图灵的话题也火了起来,与“蚂蚁呀嘿”不同的是,这款虽然也让图片动起来了,但是并没有为其添加声音。如下:

还有网友将冯诺依曼给复活了,直勾勾的盯着你,好像在说“嗨,我发明的计算机架构好用么?”

如此效果,在reddit上,网友直呼“哈利波特”魔法世界到来。诚然,在这个时代,先进技术达到的效果和魔法效果已经无法区分。

据悉,这款AI 动图生成器由在线家谱服务公司 MyHeritage提供,具体工具名称为深度怀旧(Deep Nostalgia),可以让静态照片达到动态效果。这款工具并没有集成到App中,而是点击网页注册账号即可使用,每张图片转换时间在10到20秒之间。当然,如果照片包含很多姿势,动态视频生成所需时间会更长。

工具链接:https://www.myheritage.cn/deep-nostalgia

1

深度测评:仍需努力

MyHeritage,2003 年创办于以色列,是一家商业家谱网站,允许用户以家为单位在网站上创建账户,分享文档、图片与视频,组织家庭活动,制作家谱,探索家庭历史并寻找远古祖先和远房亲戚。

显然,这家网站的目的是帮助全世界的人们利用强大的互联网轻松寻找他们的传统遗产,并加强与亲友的联系。

而其提供的这项“深度怀旧”功能,可以根据真人的面部表情绘制照片,从而制成嘴唇、眼睛和面部可活动的栩栩如生的视频。视频也有很好的保护措施,为其打上水印,显示这些视频为人工合成,似乎避免了AI的反面应用。

但是,如果订阅(付费),可以抹去右下角MyHeritage的图标,但是左下角的图标无法去掉,理由正是:证实视频人工合成。

另外,根据网站介绍,该工具对黑白照片和彩色照片同样有效,对于拍摄模糊的黑白照片,使用网站MyHeritage In Color功能,能够对其进行着色,增强其焦点。

使用方式非常简单,注册之后,点击upload photo,跳转页面等待几秒即可使用。但是根据照片的不同,其生成的动图效果也不同。例如我们使用了已故的黄煦涛老先生的一张“侧身”照片,系统就识别失败。

一张吴孟达先生的“稍微”侧身照片,生成的动图效果并不好:有些许的马赛克。

而另一张吴孟达“饱含泪水”的照片,经过转视频处理之后,最后的迷之微笑,感觉.....嗯,还是有点东西:

综上,该功能也存在一些局限性。比如系统只能识别照片中的一个人物,也就是说当一张照片中含有多个人物的时候,用户将需要选择其中之一或系统自动选择其中的一人进行视频的合成。

并且,目前该静态转换为动态的功能仅限于头部和颈部,所以,如果你上传一张正在踢球的人物照片,将看到头部转动但身体静止的怪异画面。

因此,通过以上测评可以看出,网站的AI功能十分强大,但是仍然存在不足。其背后的原因,我们猜测:1.AI模型训练时候所用数据不足;2.图片的像素不够,AI无法识别。

尽管有些缺陷,但网友对这个应用感到兴奋,在reddit上更是有3.6k的热度。火爆的原因有很多,其一,网友感谢Deep Nostalgia 初衷,用于纪念逝去的亲人;其二,对技术达到的效果感到惊叹;其三,对这项技术可能导致的危险进行讨论。

例如,下面这位网友,用这项技术看到了29年前的父亲的微笑:

技术效果方面的讨论如下:效果不太好,无厘头的表情,夹杂着不准确的面部形状。

还有网友给予警告:将会用于色情。

2

背后技术猜测:First Order Motion Model

这一套AI捏脸术,AI科技评论猜测,其源技术来自NeurIPS 2019 论文《First Order Motion Model for Image Animation》(,以下简称FOMM,详细技术解释,请参考DeepFake 新高度:一阶运动模型让“万物皆可动”一文),最初的目的是让“静态图片”动起来。

根据作者介绍,这个模型可以轻易地让“权游”中的人物模仿特朗普进行讲话,还可以让静态的马跑起来,另外还可以完成模特的“一键换装”。

论文中的一阶运动模型分为运动估计模块和图像生成模块两个主要组成部分。在运动估计模块中,该模型通过自监督学习将目标物体的外观和运动信息进行分离,并进行特征表示。

而在图像生成模块中,模型会对目标运动期间出现的遮挡进行建模,然后从给定的名人图片中提取外观信息,结合先前获得的特征表示,进行视频合成。

由于微信公众号试行乱序推送,您可能不再能准时收到AI科技评论的推送。为了第一时间收到AI科技评论的报道, 请将“AI科技评论”设为星标账号,以及常点文末右下角的“在看”。

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20210302A08XH100?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券
http://www.vxiaotou.com