从换脸到换姿势,ai在图像处理的道路上越走越魔幻

Terminator2050 Terminator2050     2022-11-23     315

关键词:

 

从换脸到换姿势,AI 在图像处理的道路上越走越魔幻

 

https://mp.weixin.qq.com/s/VFq3BWLpzyKZ3sqVWf1HKA

 

【导读】加州大学伯克利分校的研究人员,近日在著名预印本网站 arXive 上,发布了最新的图像迁移成果:人体姿势和舞蹈动作迁移。旨在把专业舞蹈演员的动作迁移到不会跳舞的人身上,算法输出流畅,还原度极高。小编在感叹黑科技真厉害的同时,不禁为该算法的用途捏一把汗。因为就在不久前的 DeepFakes 深度换脸算法,还被人拿来将明星的脸换到成人影片上。

 

                       

 

这篇文章的名字叫做:Everybody Dance Now, 是加州大学伯克利分校的研究人员:Caroline Chan, Shiry Ginosar, TingHui Zhou, Alexei A. Efros 在8月22日提交到 arXiv上的。文章中提出了一个简单动作迁移的方法:首先选择一支单人跳舞视频作为源视频,将其中的动作转换到目标视频中。 只需要几分钟,在另一个目标视频上的目标人员(完全不会跳舞的人)就会呈现同样的动作。

 

文章将动作姿态迁移看作是每一帧上图像到图像的转换,同时保证时间和空间的流畅。用动作探测器作为源视频和目标视频中间的表示,学习了一组从舞者动作画面到目标物体的映射,并且对这些数据进行调整,让它与视频完美融合,同时还加上了真实的人脸合成。通过这一框架,他们让很多未经训练的人跳出了芭蕾和街舞。

文章设计了能体现动作的中间表现形式:左图的火柴人。

 

从目标视频中,作者用动作识别器为每一帧制作了(火柴人, 目标人物图像)的组合。有了这样相关的数据,作者就能用监督方法学习火柴人和目标人物之间图像到图像的转换模型了。之后,为了将源视频的动作迁移到目标视频中,作者把火柴人输入到经过训练的模型后,得到和源视频中人物相同的目标动作。

 

 

 

另外,为了提高生成的质量,作者添加了两个元素:

1. 为了使生成的模型更连贯,作者会根据上一帧对目前的帧进行预测; 

 

 

2. 为了提高生成人脸的真实性,作者加入了经过训练的GAN来生成目标人物的脸部。

 

 

-END-

 

javascript定时器越走越快的问题(代码片段)

目录JavaScript定时器越走越快的问题(setinterval)多次初始化清除(clearInterval)的失效解决方法JavaScript定时器越走越快的问题之前在项目中写了定时器来做循环播放,但是总是会有越走越快的问题,开始是以为前后的HTML代码拼接... 查看详情

夜读《匠人手记》-01

...然而执意作死选择嵌入式工程师的活儿,并执着在作死的道路上越走越远,目测可能是因为本人过于乐观,天天做着大神梦。新购书《匠人手记》不得不说,确实是一本好书。今晚主要是为了把单片机基础再扫一遍。技术源于积... 查看详情

2015--越走越精彩

...,见不到的人才是最思念的,未来才是最美好的。我们都越走越精彩。2015是收获的一年。收获的包含知识,思想。管理和梦想。知识知识上大体能够分为两个方面。一个是英语,一个是计算机。英语方面:在英语上最大的改观... 查看详情

了解swagger(代码片段)

...、先后端分离的形态,而且前端技术和后端技术在各自的道路上越走越远。前端和后端的唯一联系,变成了API接口;API文档变成了前后端开发人员联系的纽带,变得越来越重要,swagger就是一款让你更好的书写A 查看详情

mac怎么设置idea的快捷键

...作学习中必不可少的工具,掌握了快捷键,才能在大神的道路上越走越远,今天我们来设置一下IntellijIDEA的快捷键,使他变成我们熟悉的“软件”。 查看详情

第一次,纪念一下。

...算是半路出家吧,所以付出的要多的多的多。希望在这条道路上越走越远,越来越好;为了未来~加油!菜鸟也会有成为老鸟的一天的!   查看详情

在unity使用scriptableobject制作配置文件

...者自己总结的东西慢慢地分享出来也希望大家能在技术的道路上越走越远650)this.width=650;"src="https://img.baidu.com/hi/jx2/j_0057.gif"alt="j_0057.gif"/>. 好了废话不多说了,今天我就来讲一下如何使 查看详情

我愿在程序员这条路越走越远

  今天偶尔和朋友谈起,他对于我选择IT表示很是惊讶,因为IT和我以前学的专业完全不对口。他还说程序猿应该都是比较闷骚的人,本想反驳一句,但想想应该说的没差。因为我的第一感觉也是这样的。  大概是对于新鲜... 查看详情

初次安装hcl软件(代码片段)

...这个软件,于是当即毫不犹豫卸载重装,之后就在安装的道路上越走越远,卸了五六次,还是无所获,,问过班上安装好的同学,大致有几种情况,第一,软件与系统兼容性问题;第二种,最初的安装错误;第三个,就是死办法... 查看详情

获取元素css值之getcomputedstyle方法熟悉

...吃的人来讲,晓得CSS()如何使用就足够了。对于希望在JS道路上越走越远的来人说,简单了解一些JS库底层实现对自己的学习很有帮助。可能谈不上信手拈来的使用,至少对创造一些创意新颖的新技术拓宽了思路。jQuery为何受欢迎... 查看详情

postman的新手教学,一学就会!

...f1b;另一方面也是为了能够提升自己的能力,在学习的道路上越走越远 查看详情

35岁android开发,还能在程序员这条路上越走越远么?,扫地阿姨看完都学会了

说下Activity跟window,view之间的关系横竖屏切换的Activity生命周期变化如何启动其他应用的ActivityActivity的启动过程[]()FragmentFragment为什么会被称为第五大组件Fragment加载到Activity的2种方式Fragment与ViewPager的搭配使用Fragment的生命... 查看详情

天梭自动机械手表为啥越走越快?

...八秒,之前有朋友给我指点是说走快是正常的,可是现在越走越快,每天快接近18秒,是怎么回事啊?什么时候才会走正常?以后是不是还会越走越快啊?自动机械手表都是这样吗?麻烦大家给我再指点一下。1、手表被磁化了游... 查看详情

「博客产品记」从今以后,我们将会正式切入信任交易链条,今后的我们也将会在信任交易上越走越远

上线了上线了。我们还在等,等更好的机会和大家见面。嗯,来自博客PM的流水账。——————14:15:12我们提交审核17:10:02传来捷报,审核通过。之顺利,之完美,超乎想象。上线后,第一时间笑着问一休,“这次界面不挑毛病... 查看详情

日记4.18有感

...背负的越多,才能走的越远。希望努力的人都能在自己的道路上越走越远。  查看详情

2016/11/4

...到正解后没有实验特殊数据以及看题不清,在错误的题意上越走越远,比不会做更严重以上bydsbLQ_double 查看详情

越走窄的道路,谁能带我飞

今天,早上起的很早,不到八点,被舍友的闹钟叫起。吃过早餐,开始了一天的工作,这段时间已经进入稳定状态。过了刚开始的焦虑期,稳定状态下,内心很平静,相信只要坚持走,就没有到不了的终点。上午,下午都在平静... 查看详情

入职阿里,一位女测试工程师的心声

...一个功能测试工程师,看着身边人一个个的在技术的道路上越走越远,而自己只会功能测试,焦虑感也油然而生,这一份工作给 查看详情