deepfacelab

迪士尼自研算法突破百万高清像素用AI换脸来拍电影

亡梦爱人 提交于 2020-08-19 05:28:09
AI换脸又一次刷爆了朋友圈 最近云毕业正当时,各家科技公司顺势推出了自己的AI换脸技术,结果又被同学们玩坏了! 换脸这件事绝不能少了业界大佬们! 不得不说,好看是不分性别的,彦宏兄气质满分! 仔细来看,AI换脸技术近些年还是成熟不少,整体的面部贴合度、细节处理都有了明显的提升。近日,Deepfake领域再一次取得了重要突破。据了解,迪士尼公司公布了一项最新研究成果,声称其人脸交换技术可达到业内最高水平。 从效果图来看,果然一点挑不出毛病! 据了解,迪士尼研究室与苏黎世联邦理工学院合作基于GAN提出了一种新型算法,它可以自动实现图像/视频中的人脸交换,同时保证数百万级的高分辨率。 更值得关注的是,目前这项研究成果已初步计划用于好莱坞大片制作,据说因为它可以改善电影质量和后期制作成本。 走进好莱坞大片的Deepfake 人脸交换在电影行业并不罕见。在一些好莱坞大片经常会用到替身演员完成一些专业的、高难度动作。为了保证电影效果,后期制作会花费大量成本。然而常见的计算机图形合成技术,效果常常差强人意,甚至会翻新重拍。 这在时间和金钱方面都是非常大的成本消耗,因此,迪士尼公司特此联合苏黎世联邦理工学院开展了此项合作研究。 近日,迪士尼公司对完宣称,他们研究了一款新型人脸交换技术,可用于电影或电视剧制作。他们声称该技术可在人脸交换过程中产生高分辨率,逼真的图像/视频,非常适合大屏幕播放。

从基础量子位到当下火热的量子计算机,一文助你入门量子计算

半世苍凉 提交于 2020-08-14 13:19:09
   迪士尼新研究实现百万像素图像和视频换脸,说不定未来大荧幕电影也会使用换脸技术了。      deepfakes 技术可以用于图像和视频换脸,但它能否用于大制作电影和电视节目中呢?迪士尼最新放出的一则视频 demo 展示了这种可能性。   近日迪士尼在欧洲图形学会透视研讨会(EGSR)上发表研究,展示了首个 百万像素 逼真换脸技术。      效果是不是还不错。这样的效果虽然并不足以用于漫威电影,但它是换脸技术迈出的新一步。   来自迪士尼的研究者表示,这项技术的创新点在于能够达到百万像素质量。百万像素或许不再是高质量图像的代名词,毕竟手机自带摄像头就能达到千万像素。但是截至目前,换脸技术一直注重平滑的面部转换,不注重提高像素。   你可能在手机上看到过效果好到爆炸的换脸视频,但是如果把它们放在更大的屏幕上呈现,就会出现很多瑕疵。研究者表示,他们用开源 deepfake 模型 DeepFakeLab 创建的视频分辨率最高也只有 256*256 像素。相比之下,迪士尼新模型能够让视频的分辨率提升到 1024*1024 像素。   那么,百万像素换脸是如何实现的呢?    首个百万像素换脸方法   究发表在欧洲图形学会透视研讨会(EGSR)上,提出了一种在图像和视频中实现全自动换脸的算法。据研究者称, 这是首个渲染百万像素逼真结果的方法,且输出结果具备时序一致性 。   具体来说

Deepfacelab的天坑之旅

蹲街弑〆低调 提交于 2020-08-11 01:01:11
前言 楼主,最近在玩Deepfacelab,深感坑之多,特开此贴,方便自己,也方便后来人 目录 文章目录 前言 目录 环境描述 问题描述 问题解决 环境描述 答主的环境是,i5-9400f和rtx2070的一个杂牌机。 deepfacelab的版本是2018.02的。 问题描述 在运行到视频人脸提取哪一步的时候,cmd界面报了下面这个错误: ”DeepFaceLab:NVML Shared Library Not Found ” 问题解决 本解决参照了 这篇 ,但情况有所不同。 A、出现这个提示的原因 原文 是安装后的原文Nvidia显卡目录C:\Program Files\NVIDIA Corporation\NVSMI不存在,造成的, 在操作前我试了一下,有这个文件夹,里面没东西 B、搜索文件Nvidia-SMI.exe,找到这个文件的目录 原文是 我的电脑在C:\Windows\System32\DriverStore\FileRepository\目录下,我的是在C:\Windows\System32\DriverStore\FileRepository\nv_dispi.inf_amd64_90685a092bcf58c7目录下,一样在系统环境哪里设置,添加到系统Path下。 C 、进入Nvidia驱动的默认安装目录C:\Program Files\NVIDIA

演技差靠换脸?迪士尼开发百万像素换脸新技术,或将用于大荧幕

删除回忆录丶 提交于 2020-08-09 11:30:52
迪士尼新研究实现百万像素图像和视频换脸,说不定未来大荧幕电影也会使用换脸技术了。 选自arXiv,作者:J. Naruniec 等,机器之心编译,参与:小舟、杜伟、魔王。 deepfakes 技术可以用于图像和视频换脸,但它能否用于大制作电影和电视节目中呢?迪士尼最新放出的一则视频 demo 展示了这种可能性。 近日迪士尼在欧洲图形学会透视研讨会(EGSR)上发表研究,展示了首个 百万像素 逼真换脸技术。 效果是不是还不错。这样的效果虽然并不足以用于漫威电影,但它是换脸技术迈出的新一步。 来自迪士尼的研究者表示,这项技术的创新点在于能够达到百万像素质量。百万像素或许不再是高质量图像的代名词,毕竟手机自带摄像头就能达到千万像素。但是截至目前,换脸技术一直注重平滑的面部转换,不注重提高像素。 你可能在手机上看到过效果好到爆炸的换脸视频,但是如果把它们放在更大的屏幕上呈现,就会出现很多瑕疵。研究者表示,他们用开源 deepfake 模型 DeepFakeLab 创建的视频分辨率最高也只有 256*256 像素。相比之下,迪士尼新模型能够让视频的分辨率提升到 1024*1024 像素。 那么,百万像素换脸是如何实现的呢? 首个百万像素换脸方法 迪士尼的这项研究发表在欧洲图形学会透视研讨会(EGSR)上,提出了一种在图像和视频中实现全自动换脸的算法。据研究者称,

AI 换脸或受《民法典》人格权编严监管,我们该如何防范技术作恶?

删除回忆录丶 提交于 2020-08-09 08:53:07
2020年5月28日下午,十三届全国人大三次会议表决通过了中华人民共和国民法典,民法典将在2021年1月1日正式施行。6月1日晚,两会已授权民法典正式文本发布。 这是中国1949年后首部以“法典”命名的法律,财新评价它:“象征生命、自由、财产的私权立法迎来高光时刻。”值得注意的是,民法典人格权编中明确规定了不得用技术手段伪造等方式侵害他人肖像权, 矛头直接指向 AI 换脸、变声 。 “ 民法典正式施行后,即便用户利用 AI 技术换脸只是单纯的娱乐,没有营利目的,也有可能被认定为是侵犯肖像权 。”广东合邦律师事务所律师肖锦阳对开源中国表示,《民法典》第1019条明确规定了肖像权的消极权能,这对 AI 换脸等滥用信息技术手段侵犯肖像权的行为进行禁止和预防具有积极意义。 我国新颁布的民法典中第1019条就规定: 任何组合或者个人 不得以丑化、污损,或者利用信息技术手段伪造等方式侵害他人的肖像权 。未经肖像权人同意,不得制作、使用、公开肖像权人的肖像,但是法律另有规定的除外。 未经肖像权人同意,肖像作品权利人不得以发表、复制、发行、出租、展览等方式使用或公开肖像权人的肖像。 而在此之前,我国的肖像权保护主要参照《民法通则》第一百条规定: 公民享有肖像权,未经本人同意,不得以营利为目的使用公民的肖像。 AI 换脸在技术层面只是做深度学习训练的一个切入点,往往兼具娱乐性。但在应用和商业方面

全栈Deepfake软件来了!支持换脸换头对口型,GitHub 1.4万星

允我心安 提交于 2020-07-23 21:12:28
云栖号资讯:【 点击查看更多行业资讯 】 在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 更高清、更全面、更强大。 这是船新“全栈”Deepfake软件,DeepFaceLab,已有超过14000颗星,还登上了GitHub热榜。 它以一个软件的形式,把各类Deepfake功能都打包在了一起。 关键是,效果更清晰,肉眼都可见。 DeepFaceLab可以换脸,比如汤姆·克鲁斯2020“参选”美国总统的这个竞选广告: 其实是另一位演员来“扮演”汤姆·克鲁斯拍摄的。 但DeepFaceLab就可以让真实的汤姆·克鲁斯上镜,即使是正在跑步大幅晃动的脸,也可以完美贴合变换。 DeepFaceLab可以换头,把普京大帝宣誓就职俄罗斯总统的视频,换成了俄罗斯政客、反普京阵容的桥头堡——阿列克谢·纳瓦利内。 视频看起来毫无违和感。 考虑到DeepFaceLab的核心贡献者是一位没有链接真实身份的俄语名GitHub用户,不知道是不是可以缓解子弹滞销的现状。 口齿清晰,毫无违和感。 国际长寿锦标赛冠亚军之争的一位参与者,伊丽莎白二世女王也参与到了这场DeepFaceLab的狂欢中: 语速飞快还不带喘的,完全不像94岁的老太太。 毫无Deepfake痕迹,你能看出来Her Majesty是在假唱? 真棒,有了这个工具,不管是铁幕的东侧还是西侧,可以一视同仁的鬼畜全世界的大佬。

AI换脸教程:DeepFaceLab使用教程(1.安装及分解视频)

最后都变了- 提交于 2020-05-04 02:29:39
首先需要选择合适的 DeepFaceLab下载 ( https://www.deepfacelabs.com/list-5-1.html ),然后安装相应的显卡驱动,如果已经准备好这些工作,那么恭喜你,终于开始迎接新的挑战 —— AI换脸的使用!接下来会采用图文解说的方式进行演示,只需要跟着一步一步操作即可使用DeepFaceLab进行AI换脸! 选择合适的版本下载到本地硬盘 为了避免出错,请将DeepFaceLab解压到硬盘根目录 解压之后请打开你的DeepFaceLab目录,从1 – 10的bat批处理文件可以理解为一些快捷命令,以后AI换脸全靠这些。 可以看到workspace文件夹里面自带两段视频还有三个文件夹,在此说明:data_dst视频是要被换脸的视频,data_src是替换者的视频,相应的文件夹就是这两个视频分解之后的目录。model是训练模型,首次训练之后便会生成。 回到deepfacelab程序的根目录,我们先来分解data_src视频,也就是替换者的视频。双击2) extract images from video data_src.bat 直接回车 会让选择是png还是jpg,默认选择png格式,直接回车即可(如想选择jpg可切换英文输入法状态后直接输入jpg后回车) 耐心等待 显示Done 请按任意键继续即表明分解完成,直接回车或者关掉窗口

AI换脸教程:DeepFaceLab使用教程(2.训练及合成)

吃可爱长大的小学妹 提交于 2020-05-04 01:50:16
如果前期工作已经准备完毕( DeepFaceLab下载 ( https://www.deepfacelabs.com/list-5-1.html ),然后安装相应的显卡驱动, DeepFaceLab使用教程(1.安装及分解视频) 那么我们就正式进入AI换脸的关键环节:训练模型和合成转换视频,请按照图文步骤一步一步操作。 回到DeepFaceLab根目录,看到6) train 开头的批处理文件,这些代表不同的换脸模型:AVATAR(表情),DF(全脸),H64(64半脸),H128(128半脸模型),LIAEF128(改进型全脸),SAE(自定义模型),SAEHD(自定义高清模型)。建议刚接触的朋友先尝试H64、H128模型。考虑到大众使用的显卡一般比较普通,高模型可能无法使用,所以下面我们拿H64举例(可自行选择模型训练,不必拘泥于本教程的H64,你也可以选择H128或者SAE等模型)。 执行6) train H64 参数已经适配到最合适状态,不建议新手更改,所以只需要一路回车即可。 耐心等待( 注意: 如显存小于3G则有可能无法训练,请在看到Use lightweight autoencoder时选项写上y 执行轻量级) 当出现预览窗口的时候就表明你的训练开始了,正式进入AI换脸。英文输入状态下按P可以更新预览,Iter代表训练的迭代数。训练途中可以随时关闭

DeepFaceLab小白入门(4):提取人脸图片!

偶尔善良 提交于 2020-05-03 23:59:36
通过上面级片文章,你应该基本知道了换脸的流出,也能换出一个视频来。此时,你可能会产生好多疑问,比如每个环节点点到底是什么意思,那些黑漆漆屏幕输出的又是什么内容,我换脸效果这么差,该如何提升?等等,好奇宝宝已上线,不搞明白睡不着。接下来,我就把每个环节展开说一说。本篇文章主要说“人脸提取部分”。 DeepFaceLab 更目录如下。 workspace工作目录如下 1) clear workspace.bat (清空项目) 这是一个用来初始化项目目录的文件,由于软件本身自带了一个workspace,所以你第一次使用的时候可点,可不点。点了之后,一个回车,界面如下。 2) extract PNG from video data_src.bat(视频转图片) 双击这个文件之后程序就开始运行,会出现一个提示。 Enter FPS ( ?:help skip:fullfps ) : 此时你可以直接回车,这样转换出的图片最多,你也可以输入一个20以内的数字,比如10,这样图片就会少一点,设置5 也可以。输入数字后回车即可。 运行结束之后出现 Done Press any key to continue 。 此时在 workspace\data_src 目录中会出现好多图片,这些图片就是把视频一帧帧分解成图片了。 3.2) extract PNG from video data_dst FULL

DeepFaceLab小白入门(5):训练换脸模型!

谁说胖子不能爱 提交于 2020-05-03 23:57:21
训练模型,是换脸过程中最重要的一部分,也是耗时最长的一部分。很多人会问到底需要多少时间?有人会告诉你看loss值到0.02以下就可以了。我会告诉你,不要看什么数值,看预览窗口的人脸。看第二列是否和第一列一样清晰,看最后一列是否清晰,如果答案是“是”,那么恭喜你可以进入下一个环节了。 这个环节主要包括6个文件,每个文件代表一种模型,你只需选择一种即可。目前用的比较多的是, H64,H128,SAE 。 如果你玩这个软件,建议选着H64,出效果快,参数简单。 如果你需要更高的清晰度可选H128 如果你需要自定义更多参数选SAE。 6) train H64.bat 这个步骤虽然是最重要的,但是操作其实非常简单,比如你使用H64模型。只需双击文件。 双击文件文件之后一路回车,当跳出带头像的预览窗口就代表已经开始训练。刚开始训练的时候,第二列和第四列是空的,什么都没有,随着时间的推移会出现模糊的头像,继续训练头像会越来越清晰。 6) train H128.bat 这是H128,点击后出现的预览图明显比H64要大很多,这也是他们唯一的区别。 6) train SAE.bat 这是SAE的效果图。默认SAE的头像是128×128,等同于H128。 但是SAE的参数会更多。 下面说说模型训练环节常见的几个概念 Batch_size 这是一个深度学习中最常见的数字,也是每个模型必备参数