comflui 影视人物替换教程

大家好，今天分享的工作流是我们提供一个视频素材，通过这个工作流呢，我们可以替换视频素材里面的人物，或者呢你不替换人物，可以替换视频素材里面的背景，可以实现这种功能 效果。我们来整体看一下我们的这个工作流，这个工作流看着节点比较多，比较复杂，其实呢给大家梳理完成之后呢，他的工作流并没有那么复杂，从上到下给大家分好了节点组，我们来梳理一下他是怎么来运作的。首先第一个节点组是我们要读取我们视频素材信息的一个节点组， 在第一个节点里面，我们要生成结果视频的总针数，我设置的是十六针，也就是十六张图片，而这个视频素材呢，并非是十六针的视频素材，只不过我需要让他生成十六针用来测试，因为生成针数太多的话，生成的速度非常慢和显卡达不到要求。然后在这里呢，我通常是使用 塞子节点。什么是塞子节点呢？我们双击搜索节点，可以在这里呢找到这个塞子节点，将这个总帧数的节点去连接到这个塞子节点之后呢，我们可以对它进行一个命名，我命名为 number of prime， 也就是总帧数的意思。命名好之后呢，我们就可以在其他的节点组去 去使用 get 这个节点去找到总帧数的，刚才我们命名好的这个总帧数的这个 set 节点，我们就可以通过这个节点呢去输出去连接到其他节点组，我们就不用从这个节点组呢这个节点去连接到其他的节点组， 麻烦会产生这么乱的线条了，这样的话可以规整我们的线条，我省去我们比较杂乱的线条。可以从读取视频的这个节点呢，我们为他导出一个这个视频的总帧数的一个 size 节点，方便我们后面来使用。使用这个节点可以将我们上传的素材图像呢，进行一个图像宽度和高度尺寸的一个重置， 可以在这里呢对视频素材的尺寸呢进行一个自定义的一个重置，然后从右边这个节点，从这个节点的右边呢，我们可以为它导出再次节点，方便后面使用。同样我们也导出一个图像重置的，因位置节点方便后面来调用。好，下面我们来看第二个节点组。第二个节点组就是一个独 取我们要使用的模型的一个节点组，主要读取我们要使用的大模型，这里呢，我使用的是 sd 一点五的模型，同样我也为他导出了一个 size 接点，方便后边调用。这个名字呢，我们就取名为 sd 一点五，你取的名字要在后边调用的时候能够看懂，如果看不懂呢，你不知道调用哪一个？后边我又加载了一个 lora 模型， 不过这个老马模型呢，使用效果并不好，生成的视频效果不好的话，就不使用这个老马，你直接调用大模型就可以了。这里呢，我也同样将 ve 的模型还有随机种子数全部为他设置为 size 节点， 方便后边调用。在这个节点组里，我们设置好提示词，后面呢就需要设置一下抗冻带子的控制，这里我把能够有可能用到的抗冻带的节点呢，全部设置上来，比如说我们有可能用到 openpose 模型，还会用到软边缘模型， 还会用到深度模型，将这三个呢全部为他设置好。如果有哪个不使用的话，你可以直接将他的权重呢设为零就可以不使用了。如果使用哪个 connect， 就将它的权重为它设置为一，或者是设置为零点几，根据你自己的需求进行一个权重设置。在后面呢，我们将正向提示词 和反向提示词呢，也为它导出为 size 节点。下面我们就需要来看一下我们的生成遮罩的这个节点组。这个节点组呢，全部是为了生成遮罩而使用的。这里呢我使用的主要是这个节点，这个节点是一个新的扩展，大家可以去这个 github 这个网址呢去下载这个新的扩， 这个扩展也可以安装到 sable defusion 上进行一个运行。那我这里呢，是将它安装到抗 vui 扩展插件里面， 它的功能是可以对人物和背景分别进行一个遮罩，或者呢全部为它遮罩。我们可以通过这些开关去为它打开人脸遮罩，或者是身体遮罩，头发遮罩，还有衣服遮罩，或者是单独将背景进行一个遮罩，都可以进行一个开关选择。那么最下面这个数值呢，参数越低，它能计算出来的遮罩就越清晰， 参数越高呢，他可能就计算不出来。遮罩会生成全部的黑色地图，而没有遮罩，也就是说我们设置的参数越大，就越不容易生成遮罩，参数越小就越容易生成遮罩。 我们从上面的节点组去调用我们设置好的 size 节点，也就是这个图片尺寸重置这个节点，我们可以给他用盖子节点的方式呢，直接给他调用过来，然后连接到我们的这个新的 扩展这个起点上面就可以生成十六针的图像遮罩了，用来生成视频。这个遮罩呢，我是将背景全部位的遮罩出来，也就是人物是黑色，背景是白色，我们只对背景呢进行一个重绘，而人物不进行重绘，同样我们也为产生的遮罩呢去设置一个 size 起点，方便后边调用。 至于下边这里有一个 coco sediments 这个节点，这个呢也是用来分离我们视频当中呢图像的所有元素，他是用各种颜色进行一个分割，之后呢再通过选择哦一个颜色来进行遮罩的提取。不过这个功能呢是比较老的一个功能， 用它生成的遮罩效果呢没有现在新出的这个节点生成的遮罩呢清晰和好用，那么我们也可以弃用这个方法，只不过呢这里呢我将这些节点给大家列出来，是让大家知道我们之前呢也可以使用这种方法来生成遮罩。在这个节点组里呢，这个方法 没有进行使用，但是呢他的功能也给大家加上了，他会生成这样一个分割的视频，但是不会进行一个使用，只是给大家预览一下这种方法。通过这个遮罩机电，我们将这些遮罩呢全部设置为赛子机电，方便后边调用。之后我们就来到这个机电动画预设机电，在这个机电组里 全部都是一个动画的一个设置，包括动画模型的设置，在这个节点组的第一个节点，我们是直接通过上一个节点组 直接设置好的人物遮罩去为他调用过来，然后对遮罩呢进行一定的模糊和边缘扩展，可以通过这个节点，如果大家没有这些节点的话，可以通过右上角的这个提示，大家可以看到这个节点呢，他是来自于哪个扩展，大家可以搜索这个扩展去安装一下这个扩展，就可以使用这个节点了。 如果你的右上角没有显示这些信息，你可以来到管理里面，在最左边的这个选项里面去选择在井 号 id 的这个选项，倒数第二个选项，选择好这个，然后你就可以显示出右上角的节点信息了，你就知道这个节点的排序和他所来自的扩展插件的名字。好，我们继续往下看，下面呢，我们又连接到这个节点，这个节点什么意思呢？就是遮罩的控制范围，比如说现在这个数值， 他的控制范围呢是从零点三到零点七，也就是现在的控制范围呢比较小，那么这样的话，我们的生成的视频结果呢，他就比较接近我们原素材图像，不会偏离原素材图像太远，如果你要和原素材差距更大，生成的效果 距离更远的话，那么你可以将下面这个数值的区位的设置的大一些，设置为一，或者是设置为一点二，这样的话生成的结果图像呢就会偏离我们的素材图像更远，也就是生成的结果会更趋向我们的提示词或者是 ipo depth 参考图像后面呢，我们 就可以将它连接到浅空间噪声遮罩节点，直接输入到浅空间噪声这个节点。在下面我们设置好要使用的动画模型，这里呢我使用的是 v 三 sd 一点五的动画模型，然后为他设置好动画的上下纹长度，并且呢模型我们调用 ipo dapt 的模型， 直接到后面进行一个输出，输出到我们自己设置好的 set 节点，方便后边调用。我们来看一下 ipo delta 节点组。 ipo delta 节点组呢，这里上传了一张素材图像作为背景，这里呢有一个去背景的一个节点，因为我们直接要使用背景的话，我们不替换人物， 而是直接替换人物的背景的话，那么我们就可以不使用这个节点，直接将上传的素材图像呢，直接连接到 ipo debt 拼贴节点上面就可以使用了。如果你要是直接替换人物的话，比如说你上传一张人物的素材图像，就要将他的背景给这个 t 除闷，就 需要的使用这个节点，使用这个节点之后呢，将背景剔除之后，我们再给他连接到 ipo depth 拼贴节点上面，用来替换我们视频当中的人物，这就是 ipo depth 几点组的内容。现在准备好这些节点组之后，我们就可以来到最后一步 图书动画了，我们将之前设置好的这些塞子节点全部为它导入到采样器上面，比如说模型的塞子节点呢，直接连接过来，这些呢都是之前设置好的，包括提示词或者还有种子，设置好之后直接连过来就可以了， 连过来之后我们就可以直接输出视频，但是呢这是一个低分辨率的视频输出，我们后边还有一个高分辨率的视频 输出，那么我们就需要将低分辨率输出的这个视频动画呢，再为他输出一个这样的一个节点，设置好这个节点之后，我们就直接再生成高清图像的这个节点组呢，我们调用就可以，不过我所使用的这个节点组 高清放大图像可以不使用这个 set 节点，可以直接调用我们和这个节点组一样的 set 节点呢，去对它进行一个连接， 直接生成两倍放大的一个高分辨率的一个视频动画。比如说我们只替换这个视频的背景的话，我们需要在 come， nice 这三个节点上面呢，我们去怎么调呢？我们只换背景的话，我们只需要深度模型 就可以了。至于转边缘模型和动作模型呢，是不需要的，我们可以将权重为它设置为零就可以了，我们只需要设置一下深度模型 他的权重就行了。那么至于权重的高低呢？如果你想要生成的背景呢，和原素材的视频差距比较大，将权重呢设置的低一些， 如果你想上传效果和原视频素材比较像，而进行稍微的改变的话，就将权重设置度大一些。如果你只是想改个颜色或者是改一点点细节的话，你也可以加上软边缘的权重。 如果你只是要改变人物而不改变背景的话，你需要将人物骨骼模型权重设置到最大，设置为一软边缘模型，根据情况而定。如果你不想改变人物细节，不想改变人物的穿着，想要生成的视频呢，和原图的人物的穿着一模一样，只是改变颜色或者是细节的话，你可以加上软边缘的权重。 如果你要生成生成的人物上，我们上传到 ipo depth 起点组，比如说想要生成的视频呢，更像上传的素材，这张人物的话就需要调低软边缘的权重， 或者是不使用软边缘。但是呢，深度模型不管你是改变人物还是改变背景，都需要设置一定权重的深度模型，因为深度模型 用来保持一致性的。好了，那么这就是这个节点组的一个运行原理，这个工作流呢，我也放在我的碗盘里，供大家免费下载和学习使用。那么今天的分享呢，就到这里，如果大家觉得今天的这个工作流和讲解对你有帮助或者是对你有用的话，也请帮我的视频呢，点击关注加三连，我们下期视频分享，再见，谢谢大家！

大家应该都好奇如何通过图片替换视频中的人物呢？还需要保持与视频人物的表情动作一致。接下来先看生成的效果， 现在我们看看是如何实现的，这里是用 comfy 结合 one 二点二图升视频技术来实现的。这里有刚生成好的视频内容，看下这个视频人物替换的工作流是如何配置的，这里只需要上传一张照片， 下面是设置所需生成的视频宽高尺寸参数配置。右侧这里上传视频 提示词，这里简单描述下人物的动作， 其他参数选项保持不变就可以点击运行了。等几分钟视频人物就替换完成了。 comfy ui 替换视频人物工作流就是这么简单，如果对你有帮助的话，点个赞，谢谢！

最近这种人物替换的影视二创视频非常火爆，一张图片加一个视频就可以让自己当主角，画面里人物的表情和动作都能完全同步，关键完全开源，免费，操作还特别简单。这个模型的整合包我已经上传到了网盘，零基础小白也能一键生 成。你只需要上传一段视频，再上传一张图片，这里可以设置视频的分辨率，然后直接运行工作流。很快视频的人物就替换好了。 不知道怎么使用的同学可以进我的主页看我的第一条置顶视频，上面有详细的使用教程。关注我，为你分享更多 ai 干货。

尿更急了！最近凡人二创视频非常的火爆，上节课分享了一张图片就可以替换多人视频的工作流，效果可以说非常不错，本期继续带来一个更高级的多人替换，并且支持对话的工作流。 我们先来看一下工作流的原理，首先上传视频，通过 cm 三模型对视频进行抠像处理， 再与三个人物图像进行融合，得到我们想要的视频。那么这些人物多角度图像和视频是怎么来的呢？打开我的云端主页， 可以看到这个二五零九提示词多角度工作流。只需要在这里上传一张需要替换的人物图片，图像最好是半个身子往上的全身图更好，点击运行就可以生成这样的多角度图像与这个视频，然后保存到本地。 接着再来捋一下这个多人替换工作流，这里上传的视频还是跟之前一样，把原视频导入剪辑软件进行智能镜头分割，裁剪出每一个分镜片段并保存下来。然后这边上传分镜视频，视频最好清晰一点， 这里是宽和高，如果是九比十六的视频，就把这两个数值调换一下帧率，填写原视频的帧率 传入到 sim 三模型羽翼分割，通过提示词对视频中的人物进行抠像处理，如果视频第一帧画面人物占比不是很大的话，就可以使用这个帧数编辑器 选择人物面积最大的一帧。然后这边上传刚才做的人物图像视频，其实这个视频就是多张图片拼接起来的， 这个五八十一代表着下面序号五八还有十一的图片，而这个对象缩影二代表着这个遮照视频中 id 二的选项，等于说中间这个人物要被他所替换，然后这个人物一直都是半身照正面说话， 所以我们选择了序号五八十一人物正面图片，包括下面也是一样，缩影值对应视频中遮照 id 值。而人物半身动作我们也选定的五六八人物画面， 因为这个是三人视频，我们就选择了三个人替换，然后这边通过弯二点二 enemy 模型处理与一系列算法，让视频与图片进行融合，最后得到三个视频，上面的是换的单人的视频，依次往下是双人多人， 你要更急了，可以看到人物说话与动作效果都很好，如果还需要替换更多人物的话， 这三个选项依次往下复制，再设置一下就行。不过他有一个弊端，就是太痴险存，生存时间也比较长， 没有四零九零显卡的老老实实上云端，我这边云端部署已经全部为大家准备好了，打开即用，而且通过我的链接免费送一千钻利工作牛与模型我也会给大家，右边留言即可。 第一次打开的时候可以看一下这个多框节点，如果只有两个人的话，就把下面三个选项关掉，这样就变成了双人视频了，单人视频也是同样道理，再关掉这三个选项。 注意这个工作流需要分两步生成，第一步，键盘 ctrl 加鼠标左键，先将后面这部分全选，再 ctrl 加 b 忽略一下， 然后生成结束。这里出现人物图片以后，一定要检查一下这个锁影值与图片的人物角度是否跟这个视频里面的人物对的上？选择对应上以后就接着重复操作，键盘 ctrl 加鼠标左键，再全选后面这部分， ctrl 加 b 开启，再点击运行，等待他运行完毕就可以了。好了，本期视频就到这里了，我们下期再见。拜拜。

今天给大家带来 one animate 的 一种高阶玩法，先看效果，视频转会、 真人变，动漫跳舞， 角色动作。我有我自己的原则，我不想一辈子让人踩在脚下， 你以为我是臭脚贩子？这是一个基于 animate 动作迁移的工作流，它不仅免费无限制，而且能够实现无限时长的视频生成。工作流和各种插件我都打包好了， 暗号直接长长操作，非常简单。这里上传一段人物动作模仿视频，再上传一张参考图片，调整好参数后，直接点击运行 段，人物模仿动作姿势的视频就出来了。整体的视频都是比较丝滑的，人物动作自然协调。如果你也想创作这样的视频，多学一个技能，暗号暴走开练！

你的电脑什么配置？你问我电脑什么配置？那我现在问你，地下城你玩过吗？三角洲你玩过吗？最近二创视频的火爆，不仅让韩丽火出了圈，甚至一些游戏人物也跟着爆发。 本期视频继续来看一下二创工作牛的整合版。我这里把人物图像多角度与视频人物替换相互结合了起来，可以看到更加的整洁清晰，同时还增加了 cm 三打点抠图的节点，就是让大家使用起来更加的方便， 另外也加入了声音克隆与视频对口型的工作流，这两个工作流相对来说比较简单，就不过多介绍了，主要来看视频二创的整合版。首先这里加载的是千万二五零九的模型与 lora， 然后这边可同时加载四个人物图像，理论上来说还可以增加更多人物，人物越多，替换难度肯定会越大，也会更加的吃算力。我这边已经整理好了模型包与工作流留言分享。 接着通过多角度提示词来生成三种不同的角度图像。再来看这边有两种方式，通过 sim 三模型抠去视频中的人物图像，优先使用下面这个提示词与缩影 id 的 方式抠取图像。 如果有些人物图像比较复杂，就像这个人物戴着很高的帽子，提示词抠不出来，就需要使用打点的方式进行抠图，打点抠图默认是关闭的。接着下面是一些视频模型的加载， 这里的红色节点填写 sim 三通过提示词抠出的人物缩影值。最后通过一系列的算法与参照得到替换人物的视频。 使用方法跟前面的视频差不多，先将图片与视频中人物的 id 值生成出来，填写到这几个红色节点区域，然后再生成视频。好了，本期视频就到这里，我们下期再见，拜拜。