来了来了,非常火爆的让图片跳起舞来的 magic animate 的免费使用教程来了,现在就来教会你!第一种使用方法就是直接从 magic animate 官方 github 的页面上有 demo 的按钮,点进去就来到 hugging face 的免费测试页面, 但第一种方法使用的人比较多,需要排队。第二种免费测试的方法就不用排队了,使用 google collab 连接,我放到评论里, 进到页面就点这个运行按钮,然后等程序启动起来,再点这个连接,就能进入测试页面了。我们先来看看我测试的结果,先来个简单点,上传这张图片,然后这个视力动作结果是这样的, 觉得怎么样?好像还可以哦。再来一个难点的痔疮的动作,看看效果怎么样。 虽然出来效果中间出了瑕疵,但整体来说,从一张图就能生成这样的跳舞视频已经很厉害了,很期待下一个版本的更新。怎么样,你学会了没?如果有问题请在评论里留言。
粉丝1399获赞4.9万

前几天你肯定看过 magic animate 的演示了,它可以通过任何一张人物画像加上动作的蒙版来生成一个视频。图片好找,但是动作蒙版在哪里呢? 今天就来讲一下如何通过现有的视频来制作这个动作的门板。这个软件的名字叫 detection two, 是 facebook 出品的。 他占用的资源不是很大,在 mac 和维诺斯上都可以跑。我在 mac m 一上处理一个五秒多的视频,花费大概是两分钟左右,速度还是可以接受。这个安装虽然不是很复杂,但是也有一点小技巧。 我会在 mac 和 windows 上分别演示一下安装,避免大家踩坑。项目地址呢?是这个 get up 上 read to dance post 这个项目,他是专门给 magic animate 做动作捕捉的一个项目哎。首先我们演示 mac 的安装方, 打开我们的笔记。第一步 get clean 项目地址,把整个项目去拉下来。拉成功后,然后我们 c、 d 进入 wet to dance post 这个目录,可以看一下 b、 w、 d 确认当前是 wet to dance post。 这个项目呢,一定要用拍成三点八来安装。我之前用三点十,三点十一踩了好多坑。我强烈建议用三点八。如果你没有三点八的话,用 bro insto 三点八来安装一下。如果你有三点八的话,我们用这个命令 来确认一下。三点八 version 是三点八点十八。其他的版本也是可以没问题的。确认好版本以后,我们创建虚拟环境,用 python 三点八 dash m v and v v and v 创建一个虚拟环境。创建完之后用这个把它激活。 sauce again activate。 激活之后就可以按照说明进行安装,运行 peep in stole 杠二 requirement 点 txt。 但是这个命令大概率是会出错的,就像我这里一样,你会出现很多错误。你这里 touch 没有安装。怎么解决这个错误呢?这个就是重点。 首先我们把这里清掉,我们通过 vi requirement 点 txt 打开这个文件,然后找到其中的第五行这个 get 加 https 里边。然后我们按一下 i, 启动 insert the mode, 然后再加一个井号,把这一行给注视掉。不要直接删,因为大炮我们要加回来。完了以后,按一下 esc, 再按一下冒号,这里出现个冒号,按一下 w, 再 再按一下 q, 把这个文件给保存。保存完之后,我们打印一下这个文件,看看里边是什么样的。它有 touch, 有 touch, 微信有 open c v, 再加 grade, 再加一个井号,被我们注视掉。 这个时候再去刨我们的 pip install 杠二 requirement 点 txt 就没问题了,我们来安装一下。当然你也会问我,哎,那我注视掉的这一行不用再装了吗?不要着急,待会我会继续再装的。好,这里已经装完。我们通过 k 啊把这把屏幕清空, 进行下一步。下一步呢,我们就要安装 facebook research 他这个 detector 这个项目,把这个 get clone 给弄下来。注意一下啊,当前目录还是项目的目录,我们得把这个 detector 装在这个项目的里边,进行 get clone, 他就会把 detector 这个项目 给克隆进来。克隆完毕以后,然后我们就要安装这个 detector。 注意安装的时候在 max 下,它有一些特殊的命令,就是有一些特殊的环境变量,包括 c, c 烂, c 烂加加。 然后 architecture 得改成 m 六十四的。通过这一行命令呢,应该是可以成功的。把 detector 给成功安装在 mac 上面安装。这个时候他会进行一次重新的编译,根据你这个 m 六十四的环境进行一次重新的编写。如果你是用 inter 的处理器的话,那这里就用 amd x 八六的一个形式。 好,这里也是挺快的,一下就好了。我们清掉命令行。弄完以后呢,我们就回到我们刚刚编辑过的这个 requirement, 点 txt 文件。我们需要把内行给加回来。继续 di requirement 点 txt 文件,然后在这里 按一下点 it, 就可以把这个井号给删掉,然后再按 ese, 再按冒号,再按 w, 再按 q, 这里就可以把它进行存储。做完之后,我们再用 pip install dash r, 然后让 climate 再次进行安装,这个时候就能够成功了。 这个有一点先是鸡还是先是蛋的问题,因为鸡是需要蛋,蛋又需要鸡。他这个包之间互相有一点互相依赖的关系,所以我们得手动先把这个 detective 装好,然后再回来装入框门。 但如果你先装 detector 呢,他又会说你那个 p y touch 没有装好。这个 p y touch 又是在这个 opt 里边的,需要把这个依赖包手动进行修改一下,再进行安装。好。这里就全部都已经安装完了。就简单了。我们可以通过两个方法进行测试安装是否成功。第一个方法 呢是通过 p y, python f 点 p y 直接就可以启动一个浏览器窗口,他这里会出现一个 graduate 窗口,地址在这里 七八六零打开在这里就可以试了。我们可以把一个视频进行放上去,然后点击 submit, 他就会开始处理了。 如果你需要命令行的方式来处理的话,那就是通过这个 python main 点 p y, 然后一个 dash i 就是你的 input video, 然后 dash o 就是你的 output video 来生成你的门板。以上就是 mac 环境的安装系统,通过我这个方法,你应该是能安装成功了。我已经装了两三遍,完全是可以用的。 接下来我来讲一下 windows 的安装。 windows 的安装和麦肯安装大同小异,有一点细小的地方需要改动一下,还是一样先克隆项目,用 getcolon 的命令克隆。完成之后呢,我们 需要检查一下你这个 python 版本是不是三点八的。对我来说,我的电脑上装了多版本的 python, 所以我要指定我的 python 名字。先 cd 进入这个 video to dance post 这个目录, 然后指定我的拍省是第一盘反斜杠拍省三点八。然后通过这个拍省的命令杠 m v and v v and v 打两遍,创建一个三点八的虚拟环境。创建好之后呢,我们通过这个 v and v scripts activate 点 b a t 进行激活。 激活完成之后,可以看见这里有一个括号 v e m b, 说明你激活已经成功了。我们还可以通过 python 两杠和选来验证你的版本是不是三点八。完全弄好以后,我们可以通过 pip install 杠二 这个命令来进行依赖包的安装。但大概率你这个安装是失败的。就像我这样,他会提示你 pip touch 没有安装好。这个时候就跟刚刚的麦克一样,打开我们的资源管理器, 打开我们软花们的这个文件,看到第五行这个 get 加 https 的地方,我们在前面加一个井号, 然后文件保存,把它给注视掉。我们再通过 pip install 杠二 requirement 进行再一次的安装。这个时候安装就会成功了。我们等一下, 他这个时候呢,会重新安装一遍 py touch 和 py touch 微信。这也就是一个比较流行的拍摄的 ai 安装包。为什么要用拍成三点八呢?因为如果你是拍成三点十或者拍点十一的话,他会安装 py touch 和 py touch 微信最新的版本。而这个最新的版本和之前 facebook 它这个 detector 这个 library 又是不兼容的,所以拍摄它也就是搞就搞。在这里我们需要在各种版本里边不停的横跳去找到可以运行这个版本。除非作者把代码更新了,不然的话我们也只能作者用什么版本,我们用什么版本,自己随便升级,那是会出事情的。 这里我们已经安装完毕。之后呢,我们要安装 facebook 这个 detector, 用 get clone 这条命令进行安装。所以我们还是在 read to dance post 这个目录下面,不需要去其他的目录, 用 get com 把这个项目给拉下来。拉完之后,我这个安装呢就不需要任何环境变量了,直接通过 python 杠 m p i p install 杠 e 然后 detection 二这个项目就可以进行安装。这个安装呢应该也是成功的,只要你之前安装的都没有问题,他这里 py touch 的版本应该是对的上的。我们可以看见装到一半,他这里命令行的字体都变了,也就是 windows 操作环境的一个特点吧。好,这里已经全部安装完了。安装完之后,我们打开刚刚被编辑过的这个 requirement, 点 txt 文件,然后把这个整号给删掉, 再进行文件保存。保存完之后,我们重复运行刚刚失败的命令 requirements 点 txt。 刚刚我们还没有安装上的一个依赖包,就可以进行成功的安装了。他就是我们的那个 detection two。 在这里可以看见 detection two dance。 原因呢,刚刚在麦克安装时候我已经说过了 鸡生蛋还是蛋生鸡的问题,因为我们刚刚注视掉了这个依赖包,需要这个 detection two, 而这个 detection two 又需要 requirements 里面的 py touch, 所以它就产生了 互相依赖那谁也装不上的问题。但你注视掉,再装,然后再装回来,那就没问题了。好,这里我们已经全部弄好了,然后我们就可以运行了。运行也很简单,通过拍摄 a p p, 点 p y, 就会出来一个浏览器的地址,复制粘贴,在这里就可以上传视频输出门板了。 从我个人测试上来说呢,我的 windows 电脑和麦克出图速度大概是差不多的,不过具体就看你的配置。总的来说,这个效果还不错,因为这个技术并不是一个新的技术。 不过最近因为 magic animate 火了,所以大家都把这些技术给拼起来做成一个项目。好了,这就是我今天的分享,感谢你的观看,我们下期再见。

这是字节跳动开源的 magic animate 工具,可以把任何图片转成视频,但是使用起来比较麻烦。首先这个工具对 windows 用户并不友好,安装的时候比较困难,部分依赖包需要在 windows 上重复编译后才可以安装。其次,在转视频的过程中需要一个骨折图动作序列, 获得这个动作序列也不容易。好在这个开源的工具可以把视频转成动作序列,但是啊,这个工具也对 windows 用户并不友好。 考虑到大部分人都不想花时间去处理安装的问题,我就稍微费了点功夫把他们两个都做成了整合包。好,接下来就演示一下怎么操作。 拿到压缩包之后先解压。首先是生成动作序列,双击这个名字中有 pose 的 p 处理文件,会弹出一个控制台窗口,在浏览器中打开里面的本地地址,上 传视频,点击 superman, 等到生成技能生成序列之后,就可以体验图片转视频了。双击这个名字中有 magic 的 p 处理文件,同样会弹出一个控制台窗口。这里要稍微提醒一下, 最好把解压后的整个包放到固态硬盘上,否则加载耗时会比较长。模型加载完毕之后,在浏览器中打开本地网址,分别上传图片和动作序列对应的视频,然后点击 anna mate 即可。然后就是漫长的等待时间,要做好心理准备, 这个时间可能会非常久。抖音粉丝群内可免费获取压缩包,本期视频就到这里,关注我,后续还会分享更多 ai 使用工具。

避不开的呀,还是要说一下这个 magic animate, 输入一张参考图片,加上一段运动序列,我们就可以让这个图片动起来,生成一个简单的视频。我也是本地拨鼠进行了体验,那么我先导入了一个视频,生成了运动序列, 然后再把这个运动序列呢放到这个生成界面当中啊,我们来看一下效果如何。 这一段视频的效果还好一点,其他两个视频都处于一个比较抽象的状态, 我们看他这个给出的样章啊,生成的结果的话都要好一些。我们也来一个真人试验一下,我发现的并不会明显的看到已经机变了,那么感兴趣的可以到这个地址 本地部署,或者说去线上体验一下这个 hockey face 的演示页面了。本地部署这个地方我其实并不推荐从官方的地址进行安装,推荐使用这个项目 magic animate for windows。 我们把该项目下载到本地,找到这个安装选项,右键使用 power shirt 运行,将会自动下载进行安装,如果要运行的话,右键使用 power shirt 运行就可以了。 如果要生成运动序列,选择这一项,右键使用 powers 运行。同时要求我们的拍摄版本大于三点八,扩大大于十一点三,还需要安装 fmpag 和 get, 其他就没有什么了,相信这个环境如果说是经常玩 sd 的朋友们,应该是配全了的。

哈喽,大家好,最近又出新东西了啊,就是刚才大家看到这个只要一张图片,然后呢就可以得到一段动画,并且呢这个人物的动作非常的稳定丝滑 啊。这个最早本来应该是阿里出的文章,但是他还没有公布,突然间看到字节先把这个技术给公布出来了,不知道具体是什么原因,反正谁先出来咱就先用谁,目前应该都是在抢先,体验的时候 也不是特别成熟。然后 b 站的这个青龙大佬写了一个 dthub 上面的整合包,废话不多说,先教大家如何来安装一下。呃,首先必须要网络环境通畅。第二 这个呢,现在没有特别完整的整合包,都是从 dtap 上面来呃克隆的,如果有经验的大家可以去下载下来玩一下,觉得比较麻烦的也可以再等一等,应该很快就会被整合到康复与爱里面了。呃,首先呢,整合包的网址在这里,大家可以看一下,这个网址 下载的方式呢也很简单,首先呢要安装 python, 要安装酷打,要安装翻皮和 get, 如果你玩过 sd 的话,这几个应该是基础的要求,就算没装过他这里也都附带了链接。 其次呢,需要我们去呃,先设置一个权限,我们在 windows 的左下角找右键,找到这个 powershell, 它一般有两个,我们选择这个管理员的模式, 然后呢我们输入这串代码在这里呢,摁回车,他会问我们 q a, 摁回车,选择全是,然后关掉这个框就好了,权限我们就设置好了。接下来呢要 克隆整个的这个软件包,这里呢,我建议大家是直接下载这个,在 gw 上面下载这个安装包,然后放到一个,我们新建一个文件夹,然后把它呃这个压缩包给它解压到当前文件夹 之后呢,我们就会看到里面的这个 instyle 和 instyle cn, 我们点击右键运行这个 instyle cn, 使用 powershell 运行,他就会帮我们呃一系列的安装环境。有装过的伙伴大家应该很清楚, 装完了之后呢,接下来呢,我们还要装两个模型,这两个模型的位置呢,分别在第一个位置是 sd 一点五的这个模型,这个模型包我们进到这个网址,大家可以记录一下,点这三个点, 这里有一个克隆,然后呢我们 copy 一下,看他这个链接,然后呢这个东西克隆到哪呢?大家可以直接新建一个跟我同名的这个文件夹, 注意不要打错了,然后进来之后在他的上面输入 cmd, 然后在这里复制粘贴刚才这里克隆的链接,然后摁回车,他这里呢就会下载挺长时间的,这两个模型都比较大,整个这个模型加起来应该有 十几个 g, 十三个 g, 所以他不动也没关系,我们耐心等待啊,只要他出了这个文件夹,我们可以隔一段时间来刷新一下,这个大小是一直在涨的, 所以等他耐心下载完。然后第二个这个 magic animate 也是一样的,我们到了这个网址, 然后呢也是同样的点击这三个点来克隆他的这个网址,然后呢同样是这个文件夹内,我们还是 cmd, 然后把这个包也克隆下来,克隆完了就会有两个这个文件夹,当我们把这些全部装好,如果没报错的情况下,我们就可以点击右键,然后呢运行 进这个 run ps 一这个运行文件使用 powershow 运行,运行了之后呢,他就会啊出来这么一大串,最后锁定到一个我们熟悉的这个网页地址 出来这个之后,我们把它复制粘贴到网页当中,就可以有这样一个界面了。呃,然后呢到这个网页上也非常简单,这里上传我们的图片,这里呢上传这个动作的蒙版, 这个动作蒙版呢,他有一些预设,如果想要呃像我这个一样提取一些视频当中的预设呢,他还需要另外一个这个 video two dance post 这个开源的东西。这个其实也挺难装的, 但是呢装法都是一样的啊,根根据他这个要求,我们不停来克隆他这些库,装好了之后呢,就可以把一个视频转换为这样的效果,那当然了,大家可以直接用默认的来试一下。然后呢这里上传图片,这里上传动作,其他的建议都默认,不要改,我们直接点击生成。 我这个是四零八零的显卡,大概跑四秒钟的视频要四分钟左右,也就一分钟跑一秒吧。同时呢这里的视频如果很长,建议大家裁剪到四秒以内,否则他会卡住。然后这个像素呢,建议都是五幺二,目前他都是五幺二模型训练的, 出来之后,我们发现他的效果其实是非常稳定的,当然人物会有稍微一定的变形,因为毕竟像素比较小,他的崩脸啊,或者是呃什么吉他都很难避免,总之目前来说是一个抢先体验的一个效果吧, 呃,整体玩起来还是挺有意思的,再等一等,我估计他的精度和这个配置要求都会降下来,那个时候应该能拿来做非常多的事情,一张图片可以根据我们的动作设置,然后来随意的做动作,这个想象空间是非常大的,那大家就赶紧来尝试一下吧。

哈喽各位,今天实机给大家演示一下这个 magic anime 这上机的一个效果啊,我已经部署到本地了。可以看到啊,目前这个程序呢,正在跑,然后具体的效果怎么样,请看我的演示, 见仁见智吧,就你们觉得效果好不好,咱们可以一起聊一聊。需要特别说明一下的是,如果是部署到本地的话,可以看到需要占用差不多三十个 g 的。 另外如果确实觉得还是想自己本地体验的话呢,我这边也为大家写了一份简单实用的这个 magic anime 的的部署和安装使用的一个教程,无套路分享啊,关注我后可以直接找我拿哈。好了,今天的分享就到这,如果您 对人工智能为爱绘画,为爱生成视频、生成数字人换长相、克隆声音训练模型等热门项目感兴趣无案安装、教学咨询,欢迎找我,教你领先的人工智能工作流,助你业务增长,降本增项。

现在只需要一张图片就能生成固定动作的动画,这个工具就是麻子干了吗?给大家准备了本地一件包,解压文件后,先点击设置环境变量,然后就可以点击启动了,选择要生成的动作,然后上传图片,点击增城, 这样就生成好了。生成的速度跟时长取决于 gpu, 目前生成的效果还是有一定的局限性,大家可以先体验尝试下。

兄弟们啊,这两天这个插件快被网友玩坏了啊,目前这个插件免费使用,任何人都可以下载啊,他可以从任何一个视频中捕捉出来骨骼动画,套用到任何一张图片中,然后这张图片就可以按照之前提取出来的骨骼进行运动。 各路大神们纷纷发布了自己的作品啊,这个插件就是强大的 by jack anime, 从作者名单上来看啊,大部分都是我国选手,赶紧来试一试吧!