您的位置:首页 > 移动互联

光是蚂蚁呀嘿还不够,AI Studio带你玩转“照片活化”等视频特效

发布时间:2021-03-02 00:00:00  来源:互联网     背景:

  这两天最让人上头的神曲是什么?非“蚂蚁呀嘿”莫属呀!

  这个仅用一张照片、一段视频就能做的魔性视频,这两天在某博、某抖和某手上疯狂刷屏。傲娇的表情配合洗脑的音乐,再加上各界大佬的倾情演绎,让人看过一遍就再也忘不了,真可谓“失眠时,没有一只蚂蚁是无辜的。”

图片%201.png

  “蚂蚁呀嘿”火爆全网,各式各样的制作教程也随之而来。其中,最方便的莫过于用PaddleGAN(百度飞桨的生成对抗网络工具套件)来实现。它不仅完全免费,还省去了下载Avatarify(最新消息,该App已被下架)和加速器等多个软件的麻烦,让你无需下载和频繁切换,三步就能生成自己的“蚂蚁呀嘿”小视频。

  接下来就给大家介绍两种制作方法,并揭秘背后的核心技术原理。

  第一种:“小白版”教程

  首先,大家可以点击下方链接,进入AI Studio(人工智能学习与实训社区)中的【天下第一AI武道会-Deepfake换脸】项目,“基础版”或“高级版”两种运行环境皆可:

  https://aistudio.baidu.com/aistudio/projectdetail/1189026

  第二步是备好素材:一张源图片和一个驱动视频。源图片就是你想让他唱歌的照片,只保留人物脖子以上部分,尺寸要求256*256,图片文件名改为【01. png】。驱动视频则是单人唱着“蚂蚁呀嘿”的小视频,可以从网上直接搜索下载,视频文件名改为【02. mp4】。(注意png和mp4都是小写)

  第三步上传图片和视频,并点击“运行全部”,然后静候几分钟即可。待页面左侧出现名为“export. mp4”的文件,即为运行成功,专属于你的“蚂蚁呀嘿”就这样出炉啦。

  (第一步:在AI Studio中搜索并运行项目)

  (第二步:备好一张源图片和一个驱动视频)

  (第三步:上传素材并运行全部)

  第二种:“进阶版”教程

  因为有些同学不只想做“蚂蚁呀嘿”,还想自己录制面部动作,生成任意题材的花样视频,甚至是开发Avatarify这样的App或小程序,走上“致富之路”,而这通过飞桨也都能实现。

  飞桨已将蚂蚁呀嘿的核心技术开源于PaddleGAN套件中,在AI Studio平台实现了完整的在线项目【PaddleGAN表情动作迁移进阶版】,大家可以根据需要,使用AI Studio的免费算力,实现更多脑洞大开的动作迁移效果!

  https://aistudio.baidu.com/aistudio/projectdetail/1586056

  进阶版制作起来同样分为三步,并都是在AI Studio平台上实现,这里继续以“蚂蚁呀嘿”为例进行介绍。首先,大家可以下载PaddleGAN代码。

  !git clone https://gitee.com/PaddlePaddle/PaddleGAN

  !pip install -r requirments.txt

  接下来,使用表情迁移命令。

  命令:

  !export PYTHONPATH=$PYTHONPATH:/home/aistudio/work/PaddleGAN && python -u tools/first-order-demo.py --driving_video ~/fullbody.MP4 --source_image ~/秃头乔哥.png --relative --adapt_scale

  只需在如下命令中的driving_video参数和source_image参数分别换成自己的视频(蓝色部分)和照片路径(黄色部分),即可运行得到“蚂蚁呀嘿”小视频。

  • driving_video: 驱动视频,模型将学习视频中人物的面部表情
  • source_image:源图片,模型将驱动视频中的人物表情迁移至源图片的人物上

  这个视频目前还没有配乐,所以还需要第三步,为视频配上声音。

  运行以下命令即可生成最终的“蚂蚁呀嘿”专属视频啦(本例中的视频文件名为export.mp4)!

  videoclip_1 = VideoFileClip("/home/aistudio/fullbody.MP4")

  videoclip_2 = VideoFileClip("./output/result.mp4")

  audio_1 = videoclip_1.audio

  videoclip_3 = videoclip_2.set_audio(audio_1)

  videoclip_3.write_videofile("./output/export.mp4", audio_codec="aac")

  (生成效果图)

  “蚂蚁呀嘿”视频的核心技术是动作迁移算法First Order Motion,它的功能是将人物A的脸部动作搬移到人物B身上,让人物B的脸演绎人物A的表情。

  First Order Motion算法的结构图如下:

  简单来说,First Order Motion能够通过自监督的方式学习到图像中的关键点。不需要提前知道目标的一些信息,比如骨架等就可以实现动作迁移。

  PaddleGAN的表情迁移能力灵活支持各类不同表情的面部迁移,不仅是“蚂蚁呀嘿”,其他魔性动作也都能制作。除此之外,PaddleGAN这个免费开源的宝藏套件还包含数十种能力,包括唇形合成(对嘴型)、视频/照片修复(上色、超分、插帧)、人脸动漫化、照片动漫化等等。能实现让“蒙娜丽莎”播新闻、修复百年前的老照片、或是将普通的风景照“二次元化”等各种神操作,一个比一个厉害!

  (唇形合成)

  (老照片修复)

  (照片动漫化)

  如果你也想不下载App就能做魔性视频,或是有更多、更大的脑洞想要实现,指路百度AI Studio亲自试试吧!

特别提醒:本网内容转载自其他媒体,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。


返回网站首页

本文评论
央视再次点赞学习类APP,海拔4500米高原上的AI口语课受关注
近日,央视报道了一起教育科技“长江之源——公益行”活动,着重强调了本次活......
日期:01-04
雷竞技LPL春季赛线上赛预测:RNG VS EDG,老牌战队再次对阵
3月29日将要进行的RNG VS EDG比赛,通过赛前专业电竞预测平台雷竞技给出的数据,RNG的指数是1.47,......
日期:03-29
北京:超8800个5G基站完成布局
9月23日消息 据北京日报报道,截至目前,中国移动、中国联通与中国电信三大运营商在北京共建设完成......
日期:09-23
文旅部明确网游执法依据,无版号游戏运营及直播将严查
12月18日消息 据GameLook报道,针对过去一段时间国内游戏市场频繁发生的无版号、套版号等违法违规行......
日期:12-18
百度实时更新:全国数十万商家、景点等营业时间一搜就知道
疫情期间,商场、超市、景区等公共场所的营业时间变化不定,给网友的出行带来不小的干扰。针对这一......
日期:02-27
Soul灵魂社交中的“苏明玉”:在抑郁症中涅槃,在事业里追梦
@清醒梦旅人,745天soul星人,1468个瞬间。一个从事文化遗产保护及数字化工作的鸡血女子。...
日期:03-27
昆明市政府采用华为云WeLink召开远程视频会议
昆明市政府采用华为云WeLink召开远程视频会议 图片来源:云南网 2月11日上午,昆明市应......
日期:02-14
性能暴涨+全面国产化!中国联通发布新沃云助力政企上云
随着国家21世纪初规划的“两网一站四库十二金”电子政务建设任务基本结束,我国政务信息......
日期:07-14
亚信科技中标广发银行研发效能平台(DevOps)建设项目
近日,亚信科技(股票代码:01675.HK)凭借DevOps产品和服务优势,以及对金融行业应用场景的深刻理解......
日期:10-14
5G终端上新 中国移动发布2020年终端产品规划
11月15日,在中国移动召开的5G泛智能终端渠道生态合作峰会上,中国移动发布2020年终端产品规划及5G......
日期:11-18
坚果R1办公套装 今日零点现货开售机会难得不容有失!
锤子科技将于鸟巢发布了真正意义上的旗舰机,发布之后几度断货,尤其是白色款坚果R1更是被誉为&ldqu......
日期:09-18
小米路由器Mesh获系统更新 索尼Alpha 7R IV国行售价公布
据官方消息,小米路由器Mesh(D01)获OTA系统升级,本次更新将分批次进行,用户将在接下来1周内陆续......
日期:07-17
5G手机竞争大幕拉开,新一轮营销占位PK技术占位,谁能赢?
9月8日举办的全球INS大会上,荣耀总裁赵明受邀出席,并作了题为《5G时代的手机创新》的演讲,并首次......
日期:09-09
腾讯看点春雨计划扶持来袭 火速注册入驻攻略
腾讯看点最新发布的政策将短视频领域扶持作为一个重要方向。“看点春雨计划”中,对短......
日期:05-06
浩瀚深度发布鲲鹏网络智能化解决方案
近日,北京浩瀚深度信息技术股份有限公司(以下简称:浩瀚深度)在北京鲲鹏联合创新中心正式发布鲲......
日期:12-15
个人隐私泄露风险无处不在!这十款APP涉及其中
个人隐私泄露的风险可谓是无处不在,消费者关于隐私保护意识也在逐年增强,但是即使是这样,每年也仍有大量的APP进行隐私窃取、恶...
日期:09-12
QQ 正式上线 QID 功能:用户可自定义专属 ID 和专属身份卡
今日,QQ 正式上线 QID 功能。用户可设置长度 7 至 10 位的 ID,ID 具有唯一性,一个 QQ 号仅能对应......
日期:12-01
5G创新,华为云云游戏解决方案2.0正式上线
随着5G进入大规模建设阶段,各行各业都在加强各种5G应用体验,其中基于5G高速率、低时延、广连接的......
日期:03-19
湖北移动“24小时”警企联动打击电信诈骗
“是110吗?有人冒充项目合伙人,骗走了我90多万元的工程款……”日前,在湖北省......
日期:03-20
联通海信联合推出F30S幻彩手机 用的却是360OS系统
近日,中国联通、海信通信、360OS推出联合定制版3D幻彩手机海信F30S。为提升用户体验,360 OS与海信......
日期:08-15