粉丝135.9万获赞1560.5万


hello, 大家好啊,刚才你看到的五只企鹅在跳胜利之舞的视频片段是由 scale 大 模型生成的, 是不是感觉特别的酷,想不想学?今天呢,我就教大家如何去使用 scale 大 模型生成刚才那一段跳舞视频。首先跟着我看一下 scale 大 模型的相关介绍, scale 是 通过对三 d 姿势进行上下文学习,实现了能够制作工作室级别的 ai 视频。换成大白话的意思就是这个模型的动作迁移能力很强,能够对跳舞的姿势进行三维立体的模仿。 你看,只需要上传一张主角的照片,再加上一段跳舞视频,他就能够实现让你刚刚上传的主角跳起来。最关键的是,他还支持多人跳舞,这是不是太棒了? 下面呢,是大佬们使用 skill 大 模型生成的演示作品,有双人对打,还有配合 uni 三 c 实现子弹时间以及多人同时跳舞的 ai 视频。 kj 在 第一时间支持了 skill 大 模型,开发了对应的 comfort ui 节点, 有兴趣的同学你可以更新一下 kj 的 one video rapper 节点包,你就可以在自己的电脑上面去运行 comfort ui 体验这个模型了。 话不多说,我现在带大家搭建一下康复以外工作流,去生成一下视频开头展示的那段五只企鹅在跳胜利之舞的跳舞视频。第一步,跟着我打开 running hub, 搜索我的名字,电磁波 studio, 点击工作流,打开 skill 大 模型,让你开跳胜利之舞工作流, 点击运行工作流就可以跟着我学起来了。进入到康复 ui 工作流页面,我们先看一下左上角设置生成视频的分辨率,在这里呢,需要特别注意,输入的数值需要被三十二整除。 接下来开始进行姿势提取。第一步,你需要在 log v 六节点上传参考舞蹈视频,我上传的是一段五个人在跳胜利之舞的视频片段, 同时呢,把 frame load cap 参数设置为八十一帧,也就是五秒,因为使用 scale 大 模型去生成五秒时长视频的效果是最好的。 第二步,在下面的 load image 节点上传手帧图片。你需要注意的是,你上传的手帧图片的整体构图和主角占位最好跟刚才上传的参考舞蹈视频里的手帧画面保持一致。 第三步,在 complete open pause key point to d w pause 节点输入提取姿势的人数,因为上传的跳舞视频里有五个人在跳舞,那么我就在这里输入数字五就可以了。 完成刚才的操作就可以把要模仿的跳舞视频里的所有主角的姿势都提取出来了。 接着进行模型加载,你需要在 one video model loader 节点加载 skill、 preview、 comfy bf 幺六大模型。同时呢,在最下面配置 uni 三 c 运镜的相关节点, 用来实现复刻原视频的运镜手法,让生成出来的 ai 跳舞视频更加的动感。 剩下的就是枯燥的踩样和解码部分了,你唯一需要动的地方就是设置种子,不同的种子可以生成不一样的视频,效果类似于抽卡。其他地方不要动,点击运行,等待三分钟,你就可以得到五个企鹅在模仿胜利之舞的跳舞视频了。 到这里有同学会问,我,如果想生成十五秒的跳过视频怎么办?很简单,你只需要修改 load video 节点里的 skip first frame 参数,用来控制跳过视频开头的帧数,实现分批次生成多段五秒的视频,然后拼在一起就可以了。 所以呢,看到这里你还等什么,赶紧跟着视频练起来吧!我应该不用多说什么了,你直接看生成视频的效果,自然知道 skill 大 模型的能力有多牛。如果本期视频对你有所帮助,请关注、点赞、收藏,三连走一波!这里是电磁波 studio, 我 们下期视频见!