嗨,同学们大家好,咱们这节课呢,给大家来讲解一下 control net 里边的 open pose 模型。呃, open pose 这个模型的话,其实跟呃 control net 里边其他的模型有比较大的一个区别啊,因为它主要是来形容人体方面的。 那我们来试一下点击这个 openpose 模型,点击之后的话,大家可以看到它有对应的预处理器,还有模型。呃,那这个怎么来用呢?来我们先来尝试一下。来进入一个 一个图片,把这个图片放进来。放进来以后呢,我们先来试一下这个预览。预览的话,它是在 ctrl net 里边非常重要的一个功能,可以把每一个模型里边的一个基础的一个生成逻辑展示出来。好,我们点击预览之后,然后呢,在这一块啊,预处理 语气和模型之间有一个炸弹爆炸的一个小按钮,我们点击他。点击他以后呢,这时候就进入到他的一个预览生成的一个环节。那我们稍等一下。 好,这个玉兰已经生成了。生成之后,大家其实可以非常清晰的看出来啊。呃,这个 openpose 模型呢,它其实就是根据你上传原图的一个骨架人物的一个骨架形式,然后形成了这么一个人像,对吧?这么一个骨架图。 那其实头脑比较灵活的同学们应该已经想出来了。那我们其实可以怎么样通过这个股价的调整,然后去来生成他一个对应姿势的一个人像,对吧?这个其实就是 openpose 的一个核心的一个目的。 呃,那我们下一个问题就到了啊,下一个问题是我们如何才能获取这么一个股价呢?啊,获取这个股价的方式呢,其实 就需要用到 stability feels 里边的另外一个插件,就是这个 openpost 的一个编辑器。 openpost 的编辑器呢,其实有很多啊,它包括有它原始的一个 openpost x, 还有包括这个现在用途最广的这个三 d openpost。 那我们来点开看一下 三 d openpose 打开以后的话,我们可以看到它本身就是一个人像嘛,对吧?是一个人像的一个骨架形式。那么通过呢对他的一个内容的一个调整,比如说让他抬起手 对吧,然后还有让他去转身,然后各方面的一些调整。最终呢获取到一个类似于前边的一个这种 图片对吧?获取到这么一个图片,然后呢,把这个图片放到 openpose 的一个 ctrl net 模型当中,再点击生成他就可以生成一个对应姿势的一个人像。 那这个就是这个三 d openpose 它的一个使用方法。那好,那我们先来看一下三 d openpose 是怎么才能去来安装使用。 那我们其实在阿里云还有包括一件安装包,还有像在 leble 上面去使用的时候,呃,这个选项是没有了,三 d openpose 没有的,这个在我们本地的时候才会能够出现。那这个使用方法是什么呢?我们先来看一下这个整体,这个本地安装的 文件下边有一个叫做扩展的一个选项,点击扩展以后的话,这个里边就是可以取来安装各种各样的插件。首先我们先点击可下载, 可下载之后的话,本地的这个一键安装包里边会集成这个网址,我们来点击这个加载扩展列表,加载扩展列表以后,我们可以看到这里边有非常多 多的这种各种各样的插件,那后期呢同学也可以根据自己的需求去挨个测试。那我们怎么来找到这个三 d oppos 呢?其实很简单啊,就是直接在页面搜索,页面搜索的话,我们输入三 d, 然后就可以找到啊 三 d, 然后这个来找到对应的这个三 d openpose。 ok, 找到了三 d openpose i deter 这么一个选项卡,然后我们点击安装即可。点击安装,那杨老师这里边已经安装过了,这里边就不给大家做演示了。点击安装之后的话,然后这边会出现一个进度啊,进度栏,进度栏结束之后, 再点击前边的选项,他就会在这里边显示出来三 d openpose ibeter mean。 然后这样一个内容,然后对于本页面进行应用更改并重启,重启我们的 ybui, 这时候的话它就能展 展示出来这个三 d openpose 这个选项卡。当然有的同学呢,重启 ybui 之后,我会发现啊,这个三 d openpose 它的一个选项卡依然没有出现。这个时候呢,其实就我们需要去来做几个排查。一个是点击扩展,点击扩展以后,我们来看一下 这个选项有没有被勾选上,如果没有勾选上的时候,你去来点击这个应用并更改,然后重启,他也是不会出现的。首先呢,这个我们要确保他是勾选上的。当然还有一种情况呢,是我们即使勾选上之后,然后去点击重启,他依然没有出现。 那这个时候应该怎么办呢?这个时候呃大家可以点击啊杨老师视频下方这个链接,然后进入到这个 openpose, 它下载的一个官方的一个网址,这个网址呢是它原始一个代码的一个下载 地址啊。呃,只看到这个下载地址之后,我们去来点击这个克隆,然后呢下载原代码,下载原代码之后,他会获取到一个这个一个压缩包。那这个压缩包呢,我们首先把它解压缩解压缩到本地, 这个解压缩的速度还是蛮快的,因为它本身并不是很大的一个文件。好,这个时候呢,我们获取到了这个文件本身了啊。获取之后我们把它放到哪呢?我们来点击外部 ui, 本地这个外部 ui 它的一个目录, 你要进入到呃,进入到这个 extension 这个文件夹,进入到这个文件夹,进入到这个文件夹之后呢,把刚才解压缩的这个这个内容把它整体放进来啊。大家要记住,一定是这个文件夹不是上一层的, 是他正常解压出来以后,他是分两层,一定是这个原始这个层级,然后把这个层级的这个内容直接转移到这,让他展示出来。展示出来以后,我们把这个外部版的一个界面,还有本身的他的一个控制台都关掉, 两边都关掉。关掉之后呢,再点击一键启动,让他去来进入到我们的 ybui, 这个时候他就能展示出来了。这个也是杨老师经过反复测试之后,找到一种三 d openpose 的一个选项卡的展示方式,大家可以去来测试一下 啊。当这个三 d openpose 的选项卡出来之后,我们来如何来使用?大家需要注意几个点。呃,首先一个点呢是这个呃,语言啊,语言,如果大家是习惯什么语言,就用什么语言即可啊。我杨老师这里边 用的就是简体中文版。然后另外大家需要注意这个宽度和高度,这两个属性非常重要。那这个属性到底是跟什么地方相关呢?这个是根据我们的文声图,它本身你上传这个图片它相关的。比如说我们用的是这张图,把它上传上来, 然后点击启用,然后允许一栏这个呢是一个五幺二乘五幺二的一个呃,一个图片,那对应如果我们也希望他产生五幺二乘五幺二的图片的时候,那我们这个宽度和高度他就要需要对应的一个调整,比如我们把它改成五幺二, 五幺二。 ok, 这个图片调整以后,我们看到这个界面并没有发生变化,那其实呢,它是在下方,是发生了变化了。下方这个是画布,画布我们可以看到它已经调 整成了一个正方形,对吧?调整成了正方形,那代表我们三 d open pose, 他最终出了图呢,他就是这么一个图片样式。好,那这个三 d open pos 这个股价到底如何来使用?我们先来看几个。首先我们以这个为参考系,因为他是最终我们成了图嘛, 那因此我们如果是需要让他产生半身图,半身图的话,我们把这个鼠标滑轮向上滚动, 向上滚动之后,我们可以看到他就进行放大,如果拉远呢,那他我们最终产生这个 openpose, 他就比较小,那因此我们可以知道啊,通过鼠标滚轮,他可以控制这个, 控制它的一个大小,那我们怎么来调整它的身形的,一个子身形的一个角度,我们可以看啊,用鼠标的左键点住,然后去 来转对吧,鼠标左键点柱进行转移之后啊,包括上下大家都可以测试,那这样的话我们就可以看到它是类似于我们来拍照的时候的一个相机的一个角度,最终成图的话,我们也会产生类似的一个效果。好,那我们先把这个弄完, 然后下边的话我们来看一下怎么去来调整这个人的一个结构,点击这个关节,点击关节以后的话,我们如果有一些三 d 软件的一个基础的话,我们就可以比较轻松的来使用啊。然后我们让他的 让他的形状进行一个更改,比如说两个手,两个手让他展示出来对吧,让他往前放。呃,然后呢腿呢,我们把这个腿然后也做一个简单一个调整,让他抬起来,抬起来这块呢,让他放下去, 然后对准对应的一个经纬线,然后就可以进行灵活的调整。好呢,然后呢把它进行一个 呃,进行一个姿势的一个调整啊,包括这个各种各样方位一个调整好,我们起比如说呢,已经出现这么一个骨架,那下边去来看一下这个小的一个预览图,小的一个预览图呢,他会展出来你图片的一个大小吗?对,我们把它稍微调大一点, 然后呢把它整体往上放好,调整好,调整好以后,比如说我们就是最终成稿就是这么一个骨架图,那下边应该怎么办?来点击这个生成,点击生成以后,我们可以看出来,他就已经展示出来一个对应的一个姿势。 有了这个姿势以后,我们如何去来使用呢?大家可以看到它有两个重要的选项,一个是 发送到文声图,一个呢是发送到图声图。那这个时候的话我们呃先把它进入到文声图,文声图大家需要注意下边有两个 ctrl net 对吧,他要进入两个模型,那么默认呢,就是 ctrl net 零对,我们来对比着前面看一下啊, 默认的话就是 control net 零,代表是进入到这个 control net 的模型运算里边,那剩下这些不用的,我们一定记住把它也关闭。就是把下边这个模型数字对应选为空,都把它选为空。 好,这个时候呢我们就获取了这样一个内容,把它点击发送到文生图 啊。这个时候呢我们就得到了这么一个图片,然后这个模型也都调整完毕之后,我们点击把它发送到文生图啊。点击以后呢, 我们可以看到刚才我们做好这个骨骼架构已经出现了,出现以后呢,我们就可以依据这个骨骼架构进行出图。那对应我们选好相关的一个控制器 openpose, 然后预处理器呢,就可以关闭了,预处理器要关闭掉,关闭以后的话,我们就是 对 stable tvosion 发出的指令,就是用这个骨架,然后用这个模型,还有上方的大模型,还有对应的正面和负面提示词,产生对应的一个图片。好,那我们输入一下对应的提示词。 我们输入好对应的提示词,然后选好对应的一个采样方式。采样方式如果用人像的话,一般杨老师习惯用这个采样器,然后点好面部修复,然后高清高清修复的话,然后把这个放大,变成一倍啊,重回幅度零点。 好,那我们来点击一下生成,看一下剧中的一个效果。好呢,这个图片呢,已经生成了,大家可以看一下啊,那我们先不管他的一个美观度,还有脸部的一个崩坏情况啊,这个是我们在后期其他地方来进行控制的。 我们首先需要看到他的一个整体的一个姿态,整体姿态的话,首先腿部是弯曲,然后呢,手部一个是 呃往中间放,另外一个是抬起。手部的话,一个是往中间放。另外呢,大家需要注意啊,他这个手并没有抬起。那这个是什么原因呢?这个其实就是在于我们的一个图片本身的一个生成。 呃,目前是一个全身的,我们都知道呢, stable diffusion 呢,它目前对于这个全身生成图片,它的一个整体算法呢,有些时候会有一些问题,如果我们把它改成半身图或者其他图 会更好一些。好了,这里边呢,其实大家能知道啊,这个 openpose, 它的一个生成的一个机制,然后它的一个整体的一个形态,然后最终一个城图,呃,它会按着这个整体的一个形态的一个模型去来贴合。 好,那讲到这以后呢,其实有的同学会有这么一个想法,那我们整体呢,已经生成了这么一个呃, openpose 的一个结构图。如果我们本机的电脑效果并不好的时候,那其实呢我们可以把这个下载下来,下载以后呢,把它上传到我们的一个线上平台, 比如我们进入到利不利不,然后点击在线升图,在线升图以后呢,然后我们去来点击他的 control net, 呃, openpose, openpose, 然后呢点击启用。呃,随后呢,我们把刚才这个图片上传上来,这 这个 pose 好,这个传上来了。传上来以后呢,我们来看一下对应的一个调整预处理器,把它关掉,因为我们这已经是模型了吗,所以用不着预处理器了。好,那这个时候我们再来点击一下声图, 我们这个目的是什么呢?目的是用我们本机的这个 openpose 的这个编辑器生成结构图,然后呢,再用远程的算力去来把它变成我们对应的一个结构的一个图片 啊,这个图片呢,已经生成了。大家可以看一下这个图片啊,我们先不管这个美观度,这个美观度呢,我们是可以通过后期的一些调整区来做的。那我们首先看一下 openpose 它的一个生成的一个效果, 我们看一下他的手部,腿部对吧,两只手。好,那这个呢,其实跟我们的上传的这个骨架是几乎完全一致 啊。那这样的话就代表这个 openpose 的这个骨架已经生成了,他已经生效了。好,那今天呢,就给大家去来讲解了一下 openpops 的一个使用方式,包括三 d openpose 的一个安装方法。那这节课呢,我们就到这里, 那后边的课程也会详细给大家带来更多的一些干货。那好那同学们再见。
粉丝392获赞626

今天跟大家分享三 d openpose 插件,它是一个专门针对人物动作的一个插件,可以说是 ctrl 那插件的一个补充延伸,配合使用。用以前同样的方法先把它安装,有不会安装的或者伸手党的朋友可以留言跟我要安装包,直接拷贝过去,也可以使用。安装完成后重启 ui 界面, 这里就有一个三 d open pose 插件,点文件选择从图片中检测,把需要参考动作的图片导入, 我选择一个动作幅度比较大的演示一下图片导入进来后,他会自动把人体的骨骼绘制出来了,按住鼠标右键可以移动骨骼看图片基本对齐。鼠标左键点中关节点,然后按下键盘, x 键 会出现 x y c 轴,把手掌的位置对应好,按照同样的方法把骨架其他位置对应调整, 点击生成。我们就用纹身图试一下效果,点击纹身图,它就会自动倒入到纹身图的 controller 插件里面,随便用一个提示词生成几个女孩子图片。 这些都是没有启用 ctrl nine, 所以刚刚做好的 三 d oppos 动作没有调用出来的,动作形态各异,我们去调用 ctrl 那看看出来的效果,这个骨骼就是刚刚做出来的动作,点击启用预处理器,因为是用三 d oppos 就不需要了。模型,使用 openpose 的模型, 尺寸要跟刚刚的尺寸一致,点击生成看看效果, 出来的动作基本与刚刚参考图动作一致,赶紧去试试吧! 记得点赞收藏加关注,以免忘记了还能回头看看操作。

今天给大家浅说一下 control net 插件里的 open post 这个工具。 open post 能让我们控制生成人物的姿势,相信这个功能大家比较喜欢,因为有时候生成图片跟想象中可能有点差距,那么这个 open post 可能就能实现你的愿望。 篇幅关系就直接开始。首先还是装 openpose, 这里介绍的有两个 openpose, 一个是 sd waby open pose editor, 一个是三 d openpose, 这两看个人需求也可以组合使用。找到扩展可下载,然后点击加载扩展列表, 在搜索这里输入 openpose, 从下面找到这两个工具安装就可以了。 然后回到已安装里面,点击应用更改并退出,当然你也可以直接关闭后台。这里需要注意把启动器也要关掉,重新打开启动器,启动 webui, 不然刚才的安装不会生效。 先来看一下 web we open pose 这个原来是一个单独的标签,现在集成到 control net 里面来了, 之前好像说和什么插件有冲突,但今天安装的时候暂时没有发现。打开 control net 上传一个准备好的图片,点姿态预处理,这里选 open pose, 这里还有其他选项,根据个人需求选择 点后面的小爆炸图标,这样就生成了一张姿态图,这时候这个姿态图就已经可以使用了。如果觉得这个姿态还不太好, 点旁边的编辑就可以打开 openpose editor 编辑器了。鼠标放到原点上,又可以拖动鼠标调整它的姿态。调整好了之后,点发送姿势到 controlnet。 在此之前,可能需要根据你要生成图片的尺寸调整画布大小。回到 controlled 后,我们需要勾选启用,如果显存不够大,也要勾选低显存模式,勾选预处理结果作为输入,不然不会改变姿态, 选更偏向 control net 默认权重是一,权重不够的话可能不会改变图片的姿势。下面的缩放模式根据个人需求,然后来试一下 好了。图片的姿势跟我们设置的一样了,这里只是控制了姿态,其他比如手部的姿势在御处里哪里选好再去编辑就可以了。 然后是三 d openpose 这个工具比较好的地方就是可以通过三 d 的方式来调整。前面说的 openpose 只能是二 d 的方式,这就给了我们很大的操作空间。鼠标放到原点上会出现各种颜色线,鼠标左键拖动这些线就可以调整姿态。 鼠标左键在空白地方拖动可以改变视角,右键可以移动位置,滚动轮可以改变大小。 在调整之前最好先设置好高度和宽度,也就是尺寸大小。在上 面的菜单里还有其他功能,大家自己去研究。都调整完之后,可以点击生成或者下面到三角的图标,可以看到生成的姿势图、深度图、常规图和硬边缘图。根据需要选好要放到的。 control net 单元,点上面发送到文声图或图声图, 这时候就能在 control net 里面看到这些图了。我这里因为只装了 openpose 和基本两个模型,所以其他两个没有显示,后面生图步骤就跟前面介绍的一样了,就不重复了。这里有一个问题,就是三 d 传回来的图默认是图像,而不是预处理结果, 不知道是什么原因。解决方法就是把图下载下来,然后放到预处理结果里面去就可以了。 需要的模型去 hotting face 下载,不能下载的小伙伴联系我发给你。这里都是在文生图里面演示的图声图的时候注意调整重会幅度和 control net 的控制权重就可以了。好了,先到这里吧,谢谢大家的收看。

竟敢班门弄斧,打威天龙果然不落后! 大龙天威是一款用来绑定骨骼的插件,有了这款编辑器,你可以随心所欲的改变模特的肢体动作。今天就来安装这款编辑器。 首先还是回到拓展,可以用点击加载搜索 openpose, 找到 openpose 编辑器,和三 d openpose 编辑器一起安装。 然后回到安装,勾选 openpos, 点击应用并重启,就可以看到 openpos 编辑器了,我们来试一下。首先 openpos 是个平面插件,我们打开导入一张图片,他就会识别图片的动作,在这个基础上,你可以进行微调, 输出到跟咒孽的。 注意,这种情况下,处理器要勾选无模型,选择 pos, 勾选启用。 点击生成,我们就可以得到一张选定动作的图片。 但是这个插件呢?控制的了手臂,但是控制不了手掌是吧?怎么办呢?没关系,我们还有第二招。我们来到三 d openpose, 同样我们插入一张照片,他会自动调整,但是可能不是太准,还要自己手动微调。 这个调整可以转动,也可以移动。我们只要点击上面的编辑,我们就可以解锁平移的动作。 鼠标左键是转动视角,鼠标右键是平移视角, 大家自己点 点挪一挪,很快就会了。 ok, 我搞好了,点击生成。点击生成,我们会看到四张预处理的图,然后点击 ctrl net, 发现只有一个 openpose 的预处理图,其他的哪去了?我们来到设置选项卡下,拉到 ctrl net 预处理,这里改成四保存。我们重新回到三天 openpos, 点击恢复场景,重新生成预处理图。 回到 ctrl net 就可以看到四张预处理的图了。这里我们只需要 openpose 和 depth, 所以这两个我勾选起用,其他不勾选同样预处理器还是选择无。我这里全中选择二。因为我要让他严格的按照 oppos 来, 尺寸一定要跟三 d openpose 的尺寸一致,否则就会生成一些非常阴间的图片。 ok, 生成好了,效果还是不错的,动作也是一致的,只不过手指还是不太理想。但是他好过什么都没有。今天就到这里,下一期讲室内设计的应用。

大家好,今天来跟大家分享目前觉得比较好用的 open pose editor。 之前的影片,曾经介绍过三种 open pose editor 的,比较有 open pose editor 三 d open pose, 还有这边的 pose x。 这三种 open pose 各有其优缺点。不过当 controllate 更新到一点一以上的版本后,多出了另一个简单易用的 open pose。 让我们先来安装这个 open pose。 第一部分,安装 open pro ctr for control net 点开 control net 点这边,随便开启一张图,把这四个选项打勾。 点 preview 按钮, 当 preview 出现时,在这边会有一个 app 按钮,如果你没有出现这个按钮,请更新您的 control net 如果您的这个按钮中间没有一杠,那表示你已经安装过这个 extension。 如果您看到的跟画面的一样, itt 按钮中间有一杠,就继续跟住做下去。点 itt g 杠按钮,点这边的连接, 点 coat 下拉式选单,点复制,按照网址按钮关闭这个网页。回到 stable defusion web ui, 点这边的叉关闭, 将画面往上拉。点 extensions, 点 install from url。 点这边把刚刚复制的安装网址贴上,点 install, 当出现这串文字时,就表示下载完成。点 installed, 点 apply and restart your, 按按钮 来试看看有没有安装成功。跟刚刚的流程一样,先暂入一张图, 选择 openpoint, 再把这两个选项打勾。点 preview 按钮, 如果这边出现没有一杠的 attend, 恭喜您已经安装成功。第二部分, 喜欢使用教学点压对探钮,这边有简单的操作说明,压住空格键或 f 键,再拖动滑鼠,可以移动画布。滑鼠的滚轮是放大和缩小,滑鼠的右键是隐藏关键点,像这个样子, 不过隐藏起来后不知道要如何打开,也找不到 undo horido, 所以干脆关掉再打开一次。 再来这边是画布的尺寸调整,可以重受画布尺寸缩放,也可以自行调整画布大小。再来这边有一个上传图片的按钮,可以上传多组图片。 下方这边可以让您管理您上传的图片,这边可以删除上传的图片。这边可以更改图片的缩放比喻, 来让您的图片大小更符合 controlled 侦测出来的姿势。也可以用滑鼠将整个姿势选取起来,来摆到更符合图片的地方。 再来是这边的添加人物,可以添加多个不同的人物姿势,点,眼睛可以隐藏或显示人物姿势 一样点差是关闭关键点的调整,就跟其他的 open pose 不一样,用滑书点姿势,关键点可以拖拉。 这边就稍微将人物姿势调整一下, 调整完毕后点发送姿势到 controllight, 这样就完成这个人物姿势。老阿贝觉得这是目前和 controlled 整合度最高的卧盆破灾的 操作,也非常的简单。来跑一张图是看看把 enable 打勾 prompt 正向提示词这边老阿贝偷懒一下,有反推的,先把图载入进来, 就会自动开始反推图片的正向提示词。趁反推时,先来查询一下图片的尺寸大小。点图生图,把刚刚的图片载入进来。 点尺寸按钮,把宽高尺寸系起来。点文商图,输入刚刚的尺寸, 输入完毕后,反推正向提示词应该也推完了,看起来没什么问题。也删除 tax to image。 点翻译软体,将英文翻成中文,删除不要或重复的关键字, 加入骑手画面提示词, 加入反向提示词, 选择您常用的 employee method, 调整 employee steps, 打勾脸部修复,再检查一下参数, 没问题后就可以跑一张图来测一下。 看起来是有符合索要的姿势,不过头部这边被裁剪掉了,把高度设高一点, 这样就可以简单的解决这个问题。 老阿贝想要的是室外公园先加上这些 prompt, 再稍微调整一下人物的 的姿势, 这样就改变了。觉得比之前那三个 open pro 加 deter, 操作上更加与 controlled 融合,操作上也很简单,再随便来调整姿势, 设定 cd, 人物姿势有点怪怪的,再调整一次, 这样就正常一点了。如果只需要简单的调整人物姿势,目前老阿贝最推这个 open pose editor extension, 之前分享的那三个应该就可以退役了。以上就是今天的分享, 如果今天的影片分享对您有帮助的话,再记得帮老阿贝订阅分享加按小铃铛,有闲又有空的话也帮忙看一下广告呦,谢谢大家,祝健康快乐!老阿贝下台一鞠躬!

sd 自由摆姿势插件哈喽,大家好啊,今天给大家分享一款能给人物自由摆姿势的 sd 插件。好东西,先收藏再观看啊。这个插件叫 open pose editor 啊,是基于 open post 骨架图的编辑器。 那我们一起来用一下,现在我在 control net 里面用 openpose 啊,预处理出来一个姿势骨架图,但是我们发现这个姿势明显识别错了啊,那怎么办呢? 我们在这里点这个编辑,那这就进到 openpose 编辑器里面了。好,我们现在可以滚轮缩放,然后按住空格,加鼠标左键拖拽画布。那这个人的左手呢?很明显错了,我们点这里展开, 找到 left hand, 点叉删除,然后手臂这里啊鼠标把这两个点拖拽下来就行。然后我们调整一下右手的姿势,点一下这个, 右手的关键点就组合到一起了啊,再去编辑就是对右手整体的编辑了,可以放大缩小,旋转这些, 然后我们再点一次,解除这个组合,我们把关键点位置啊都调整一下。那每个手指呢?有四个关节啊,大拇指最下面的关节啊,靠近我们的手腕,我们摸一下自己的大拇指,给感受一下, 然后把其他的手指关节调整一下,像这种藏在后面的关节就给他隐藏。编辑好了之后呢,我们点上面这个发送到 control net。 那我们看这个图就到预处理结果这里了,然后他自动报 我们勾选了预处理结果作为输入。这种情况再去生成啊,他就不会参考左边这个图的姿势了。 那我们如果想换一张背景图,或者重做一个新的人体骨骼,点这个叉,删除骨骼图,然后点这个叉清除背景,上传一张新的背景图,把画布的分辨率调成这张背景图的尺寸, 点击添加人物,这个新的骨骼呢就进来了,然后去调整关键点就可以。那这里上面的几个关键点呢?是鼻尖啊,眼睛中心,还有耳朵中心。好吧, 再来说一下安装的方法,我们去扩展里面啊,点可下载,点加载扩展模型列表,然后搜索 openpose editor, 然后在右边点安装,或者我们去这个 从网址安装,然后发安装链接,我们把链接复制到这里面,再点安装就可以。以上两种方法呢,需要科学上网,安装完之后去下载里面,点应用并重载前端就好了。 如果上面的安装方法不行的话,我放一个网盘链接,我们把插件下载到本地,把插件文件夹整个拖到这个 extensions 里面也可以。 ok, 那觉得有帮助的同学麻烦点赞关注支持一下,那我们下期见,拜拜。

大家好,我是灰灰老师,大家看到我现在可以随意操作人物骨骼,并赋予它任意姿势,这个就是使用的 open pose 编辑器, 比如我使用右边的姿势拿它生成了左边的模特图。这就是这节课我要分享给大家的强大插件, open post。 open post 插件目前常用的分为二 d 和三 d 插件,这节课我们先讲一下如何去安装二 d 的 open post 插件。 点击扩展,我们安装应用和插件基本都在扩展,这里点击可用,点击加载字, 然后在下方找到 open pose 编辑器,可以使用快捷键 c t r l 加 f, 输入 open pose 编辑器快速查找,找到后点击后面的下载按钮,下载好后重启 vip u i 就可以啦。这种方式需要网络 支持,下载不下来可以用另一种方式点击从网址安装。输入网址,点击安装这里我们打开网址后找到绿色按钮,点击 download 下载安装包, 然后解压,解压后将文件夹复制粘贴进 vip u i 里面的这个目录。记得需要重启 vip u i。 我们看到界面上就有了 open pose 编辑器选项,点击它进入编辑界面,这里的宽高可以任意调整, 右侧骨骼窗口可以自由拖动点位,改变它的姿势。点击下方的纹声图,我们先测试一下,我们看到骨骼图已经自动导入进 control net 里面了,这里一定记得勾选启用哦。模型选择 openpose, 输入 入一组常用 tag, 点击生成,这个就是通过 openpose 结合关键词 tag 生成的结果。我们再返回编辑器,给它换一个经典的手臂姿势。 进入文声图,这时 control net 的图也自动更换了,我们再生成看一下。 可以看到图中人物姿势按我们指定的生成了,还可以使用底图来探测骨骼姿态。返回编辑器,点击 detect from image 导入一张图片,系统会自动生成一个骨骼结构,不是很准确,我们可以稍微调整一下,也可以在此基础修改动作。 这种方式可以自由调整人物动作,很方便。我们还可以不使用编辑器,直接将底图拖进来。下面的模型 依旧要选择 open pose 再次生成看一下,图像是被裁切了,这里注意生成图高度要与原图尺寸一致,我们将高改为八百。 可以看到生成了与底图一致动作的人物。这个就是 open post 的强大之处,可自由定义动作。我们下节课再深入讲解一下,下期见!

这一期给大家介绍的是 oppos 编辑器,这款插件可以说很好的解决了我们对角色姿态的变化需求,这里我们先点打开 controlled, 接着选择 oppos, 点击启用,开启完美像素, 并打开允许预览,把图片拖入图像框中,点击这个预览渲染,很快角色的人物姿态就渲染出来了。这里可以点击预览图的右上角,下载这张姿态图,看看效果, 整体感觉还不错。接下来点击编辑,点开下面的姿态控制栏,再点击这个眼睛可以调整显示骨骼,这个后面有火焰试提示骨骼有问题。接下来我们看看另一只手,这里这只 只手被我关闭了,可以看到下面就没显示另一只手了,同时这里也可以看出这只手报错很严重,我们把手给删掉,添加一个新的手,再调整一下手的姿势,这里注意一下手的位置,最好和之前位置对齐, 另一只手也一样的操作。最后把编辑好的姿态图发送到 ctrl 中点击下载。我们预览一下这张图片,再把之前那张图拿来对比一下,可以看出动作姿态确实被调整了。接下来点击生成,我们看一下生成后的图片变换, 这里可以看出调整过后,背后的手被拉到前面,同时前面手的姿势也改变了,接下来调低一下引导实际,让其可以发挥更多的自我 运算。感觉还不错,虽然手有点变形,但是还是可以调整的。接下来还是说说安装扩展,可下载里搜索 oppos, 找到这个 open pose 编辑器,点击安装就好了。如果喜欢可以点赞收藏加关注,我会持续更新分享。

ai 绘画里可以参考图片姿势生成一样的动作,但是如果我们想改变部分动作该怎么办呢?大家好,我是 ai 姜子。这期视频我们就来聊聊 controlled obenpose 骨架图,不知道如何安装和使用 controlone 的家人可以查看姜子前面的视频。我们打开 sd 的 controlled, 导入一张姿势参考图, 这四个选项全部给它打勾,控制类型,选择 openpose, 然后点击爆炸图标预览,就能得到一张骨架图。如果预览失败,那就是缺少预览模型,关注我领取。然后我们简单写下提示词,调整宽高比和参数,接着生成图片即可, 这样就得到了一张同姿式的图片。我们回到一开始的问题,如果我们这时候想要让他手抬起来怎么办呢?这里可以直接使用 controllnet 自带的 open pose 在线编辑器了。首先下载插件包,然后放到 extension 重启。我们回到先 前那张照片,打开局部重会,导入照片,和先前一样步骤,打开 open pose, 全打勾,选择对应处理器并预览生成骨架图。 接着点击骨架图的编辑,进入编辑页面,左下角打开 person, 删掉你需要修改的手,然后在图片中拖拽手臂,调整到对应位置,接着给他添加个手掌,点击左侧添加右手,调整手掌大小,回到顶部, 点击发送到 ctrl net 即可。我们就能看到这边的骨架图已经完成替换。然后我们涂抹重绘区域,记得两边都要涂抹。 接下来就是写上手臂手手指的提示词,负面就通用其他参数看我设置,这里重点要记住选择填充,然后调整宽高笔生成即可, 这样手臂就抬起来了,当然手指没画好,这里我们就不过多展开,大家能理解这个过程就好。今天关于骨架图的分享就到这边,我是爱爱江子,谢谢观看。

老板要求去掉厚衣服,还要求换好几个不同姿势,最后还要穿上今年的新款服装。 nice! 方法非常简单,一分钟教会你只需要三步。第一步,去掉外套,选择一个真实的大模型,注意我输入的正反提示词,直接照抄就可以了。拖入大衣照片,点击下面的局部重绘,把这些地方都涂抹覆盖。接下来的参数设置大部分都是默认的,选择我高亮的选项, 最后点击生成厚厚的外套就去掉了。第二步,把图片发送到图声图,所有参数都不用改,直接来到 control net 部分,启用这几个选项。点击爆炸按钮,再点击编辑,可以看到系统已经根据图片匹配好了骨架姿态。左边这个是当前骨架组件,展开能看到每一个肢体单元。 点击这个图标,可以全局变换肢体。我们随便调整一个姿势出来,就可以在左上角发送到 control net。 回到上 面,在图生图的局部重绘里面涂抹一下变化的区域,然后点击生成不同的姿势就做出来了。第三步,给模特穿指定的衣服。首先把提示词第一句话改一下,其他都不用动。把老板要求的衣服素材按照我这样做一个蒙版出来,在图生图里面点击重绘蒙版, 分别拖入对应的图片。因为刚刚已经设置过了 control net 的 open pose, 所以这里也不用动,直接点击生成衣服就穿上来了。怎么样,是不是超级简单?我是影兔清风,下期见!

当你用心良苦写了一堆提示词之后,你发现你出的图是这样,这样, 还有这样,哈哈哈哈哈哈,那么你一定要使用一下我今天推荐的这款插件。 ctrl net ctrl net 的工作流程是先通过它的预处理器和模型来根据我们指定的参考图片去生成这种参数图, 再通过参数图去控制生成图片的细节。因此我们可以随心所欲的控制画面当中人物的姿势,人物的数量,甚至可以生成同一姿势的不同视角,杜绝开盲盒。 让我们来到首页,点击扩展,再点击加载字,然后按住 ctrl f 搜索 ctrl net 我们看到 ctrl net 的插件,然后在右边点击加载,等到加载完成后,我们回到。我们回到主页面,我们就可以看到下面多出了一个 ctrl net 的插件,这就代表插件已经安装成功了。 我们可以先简单的了解一下这里面的参数的作用。第一个是启用按钮,如果说我们想要使用 ctrl net 去对我们正常的画面有一个影响的话,那么我们必须点击这个按钮。第二个,反射模式, 他是说如果说我们的背景图是一个白底图的话,那么我们最好勾选成他,他才能保留更多的细节。第三个,法线贴图,这个按钮呢,我们一般用不到, 所以说先不用管它。第四个,低显存优化,这个是说你的显存如果低于四个 g 的话,那么我们需要点击它,让我们的软件运行过程当中不至于崩溃。 第四个,无提示词模式,这个是说你可以不用写提示词,完全把图片生成的过程交给 ctrl net 去做一个引导。假如说我们想使用这个功能的话,我们需要在在设置页面的 ctrl net 里 把这个选项基于启用 cfg 的引导,把这个选项给勾上才能使用这个功能。 那么想要使用 ctrlnet 插线,它还有一个必要的步骤,就是选择预处理器和与之对应的模型。但是这些模型的文件它并不是 ctrlnet 自带的,需要我们上到这个网站上面自己 去下载。我们可以看到每一个模型的体积都非常大,其实比较常用的呢,只有这几个模型。如果我们的硬盘空间不够,我们只需要把这几个模型下载下来就可以 点击这个按钮就能直接下载下来。下载下来之后呢,我们按照路径把这些模型拖拽到 ctrl net 的模型文件夹里就能可以使用。让我们回到主页面再次选择模型,比如我们选择第一个 canny 边缘检测算法, 那么模型呢,也是对照着第一个 candy 来选,这时候呢,我们只需要把一张我们想用来生成图片的参考图片拽进来,然后点击下面的预览处理结果。当我们第一次点击预览预处理结果按钮, 有的时候控制台会自动帮我们下载预处理器的模型,下载完成后就会帮我们生成堪尼图。 我们暂时跳过模型,先来讲解下面的参数。第一个权重,他是指 ctrl net 能够对我们所输出的图片的一个控制强度,数字越高, ctrl net 的控制强度就越高,数字越低呢,控制力就越低。 然后我们看到这一块,就是开始步数和一个结束步数,比如我们看到现在这个开始的步数写的是零, 它就意味着在最开始,在第零部的时候, ctrl net 就开始对图片的生成施加了了自己的一个引导。结束步数是一, 那就是说图片生成的最后一步 ctrl net 仍然是在做一个引导。如果说我们调一下开始的步数和结束的步数的话,这个意思就是说在开始生成图片后的百分之二十七到百分之七十五这个区间内。 ctrl net 对于我们的图片生成结果有一个影响,接下来是预处理器的分辨率,我们调节这个参数呢,就能让我们的画面的效果变得更加的细致。 后面这两个参数呢,等我们详细去介绍每一个模型的时候再去做讲解。那么下面就是画面的缩放模式,通常的话就选择他默认的这个扩展原图就可以。最下面的参数,画面的宽度和高度,这里的参数他不会影响你生成图片的尺寸, 而是说 ctrl net 会基于这样的一个比例关系来对我们的图片生成自己的一个判断。所以说我们这里的参数选择就要结合上面的这个高度和宽度的比例来进行一个选择。 现在呢,我们就来把我们的参考图片拽入到砍川带这里,然后,然后预处理器选择 canny, 模型也选择 canny, 我们点击预览处理结果,我们可以看到他生成了一个类似于线稿的图片,这个就是他所生成的 canny 图。 那么我们向下看,看到预处理器分辨率的选项,这个选项是说他能决定我们生成的开腻图里面的线条的粗细和一个精细的程度,比如说 我们把它拉到最高,然后点击预览处理,结果我们可以看到高分辨率生成的看你图明显的比低分辨率生成的看你图的线条要更加的细, 对于画面的描绘呢,要更加的有细节,这就是分辨率参数的一个作用。然后我们接下来看到下面的两个参数,是说堪尼的低域值跟高域值, 这两个数据呢决定了你所生成的堪尼图当中的线条的一个数量,比如说我们把地域值给拉高,然后点击生成, 然后我们把生成好的图片呢跟之前生成的图片做一个比较,我们可以看到有大部分的线条被省略了,然 然后我们把低预值恢复原状,把高预值呢拉到最低,我们同样的再生成一张图片,我们把刚才生成的图片呢和低预值图片做一个比较, 我们可以发现调节高于值生成的图片明显的比调节低于值参数生成的图片的线条的数量要更加的密集,而且在细节的表达方面要更加的出色,这就是这两个参数的一个具体的作用。 如果想让生成图片的细节更加接近参考图,就可以拉低高预值的数据,但是 ai 的发挥空间就不大,而且更占现存和算力,容易生出细节比较奇怪的图片,如果想让生成的图片在维持基本形状的前 下,让 ai 有更多的发挥,可以选择拉高低域值,那么我们现在换到第二个算法,深度信息估算,那么匹配的呢,也是 dips 这个模型, 我们同样点击预览处理,那么现在呢,生成的图片我们可以看到他是一个基于空间位置的一个图片,画面的主体变成了一个轮廓,他轮廓线里外的细节呢,进行了一个最大限度的省略。 那么如果我们使用这张图呢,我们能够很好的表达前后空间的一个关系,像我们现在选择 h e d 模型的话,也选择相应的模型,然后点击生成。我们我们可以看到用 h e d 生成的图片呢,相较于使用 candy 生成的图片,它的线条的感觉其实是没有那么严重。那么使用那么使用 h e d 生成的图片的好处呢?就是说 他可以更加接近于我们所提供的参考,因为我们看到 hd 生成的图片的这些边缘,他保留了更多的细节。下一个算法,我们使用线条检测算法搭配 mlsd 模型,我们点击生成, 我们可以看到虽然生成的也是一个线稿图,但是画面当中的关于曲线的部分都被刻意的省略了,所以说呢,这个算法他更加适合用在对于建筑物,对于室内陈设的一个参考上面。然后 我们转到下一个预处理器法线地图,同样的模型也要选择对应的 nomo。 点击预览,我们可以看到生成的图片呢,他会基于我们提供的参考图片 生成了一张他的发线题图,那么这个模型的作用呢?它在于它可以还原你表面凹凸的一个细节。我们可以看到下面这个参数,他是他是用来调节我们生成的发线图的背景细节度的一个参数。 比如我们可以把它调到最低,然后点击生成,我们可以看到生成的图片呢,连同着他的背景一并生成了僵硬的凹凸的纹理。如果我们把背景预值拉到最高,我们再点击预览,我们可以看到 他生成的法线贴图呢,会出现一种类似于抠图的效果,他只保留了最前方的主体的轮廓, 其他的背景做一个平化的一个处理法线 t 图模型呢,和我们之前看到的 candy 图和 h e d 图不同,他们呢是保留参考图的边缘线, 轮廓线而发现贴图呢,它是保留参考图表面的凹凸的一个高度和一个肌理。通过这张对比图,我们可以发现由毛绒玩具生成的发现图, 可以把毛绒玩具的表面的那种毛绒的感觉完美的复刻到其他生成的图片上。我们选择下一个易处理器 openpose, 这个是非常重要的一个处理器模型,也要选择对应的 oppose, 我们点击预览处理结果。呃,现在呢,我们就可以看到生成了这个模特的一个骨骼图,那么通过喷 pos 生成的这个骨骼图呢,就能够精准的引导我们生成图片的人物的动态,无论是一个人还是一群人, openpose 都可以很好,他把动态还原出来。这样做的好处是,如果我们想要输出的图片的人物做出这些动态的话,仅靠写提示词是几乎完成不了的,但是通过 openpose 就可以很好的完成这个任务。我们接下来看 oppos 的下面的姿态及手部检测模型。模型的话也同样选择 oppos 点击生成,我们可以看到这回生成的 oppos 图,他连你手部的动作都一块生成了,这样的话我们就 再也不怕生成那种肢体扭曲,手指造型不对的图片。接下来我们看下一个很重要的预处理器与意分割,那么搭配他的呢,就是这个模型, 我们点击生成,我们可以看到生成好的模型呢,他是基于不同的主体被赋予了不同的颜色,比如说主体人物,他是呈现这种红色。马路呢,他是一种灰色 背景的树呢,它是一种绿色,天空呢,它是一种蓝色。它这个模型呢,在训练的时候就是用不同的颜色去代表不同的主体, 我们就能通过这样的剪影图去精准的生成图片当中的每一个物体。以上呢就是所有的模型,包括参数的一个 讲解,由于时常关系,看戳 nit。 生成图片的实际操作将在第二节课做一个展示,我准备了很多关于 aigc 方面的资源,请大家三连之后私信我领取吧!

sd 目前已经可以对手指进行精准的控制了,你可以看到左边的骨架图完美还原右边动画的动作,甚至在复杂的姿势还有动作上也能比较准确的识别,每一根手指的骨骼图都清晰可见。今天就给你们带来新版的 openpose 处理器。 来到 cable dpusen, 找到下面的 ctrl 论插件,请确保你更新后的版本和我一样,不然没有新的预处理器。上传一下测试的图片,我找了一个复杂的手指和姿势, 勾上完美像素,还有允许预览。点击这里的 openpose 后,预处理器和模型都会同步。预处理器先选择旧版本的复合检测, 接着点这个爆炸图标,预览处理后的图片,可以看到旧的预处理器常常检测不出复杂的手部和姿势。我们把预处理器换成新版本的 dw、 oppo 看看。同样点击爆炸图标预览,是不是很强,手指全部检 测出来了,骨架姿势也识别很精准。点击这个箭头,把图片的分辨率同步上去,因为原图分辨率太小,所以锁住分辨率,按照比例拉大分辨率。采用方法选择一个适合写实的,因为我的底膜是写实类的。最后选上画图的起手式就可以开始生成了, 不是我打码的,是他自己生成的。可以看到生成的结果是完全按照骨架图去控制手部看起来还行,再生成一张看看。 总体来说手还是控制的比较好,不会像以前崩坏那么厉害。这时候你肯定会说,这些都是巧合,我呢,当时是真的拖了好吧,再跑一张。以前要画出这样的姿势,估计显卡都抽炸了,现在再去测试一下 版的风衣处理器,对比一下,以后可以不用这个了,手检测不出来,点击生成。 嗯,可以对比一下两个预处理器的控制,很明显 dw oppo 强很多。当然新版的预处理器也不是万能的,更复杂的姿势也会识别错误, 当你发现识别错的时候,你可以点击这里的编辑,如果你出现这个提示,你只需要点击下面的这个去原装插件即可。进到编辑器里面后,可以自己根据图片编辑骨架图,非常方便。你觉得差不多了就可以点这个发送到 controller, 你编辑好的骨架图就会同步到预处理结果预览。最后我讲一下怎么更新, ctrl 内的到我这个版本,点开秋叶启动器,再点版本管理,再点这里的扩展,最后点右上角的一键更新就行了。还有 有一个需要注意的是,更新好可能出游乐之后第一次使用新的 dw 预处理器,会在控制台自动下载需要的模型,大部分人可能因为网络原因都会提示错误,这些问题我都为你们考虑了, 我会把模型放在视频下方,还有粉丝群。最后是我做的一些图,关注我,让你在 ai 的学习上少走弯路。

大家好,我是灰灰老师,这节课我们接着讲一下 open post 插件 posix posix 安装方法还是跟上节课一样,打开扩展,点击可用加载字,在下方列表中找到 posix 或者快捷键 c t r l 加 f 快速搜索 posix, 点击 install 快速下载安装,安装好后需要重启 vibui 另一种方式,从网址安装,输入网址, 点击安装,我们打开网址,看到绿色按钮,找到 download zip 下载压缩包, 下载好后解压。将 posex 文件夹复制到 extensions 文件夹里,记住,安装好插件都需要重启 vip u i 在随机种子下方我们就可以看到 posics 插件了。打开 posix, 勾选,将此图像发送到 control net, 就可以看到。骨骼图 posex 相较于二 d 平面版的 open pose 编辑器更加方便好用,可以三百六十度旋转,还可以自由缩放。如果大家安装好 posex 后没有出现谷歌图界面,需要在 webui 启动界面这里左侧找到版本管理,切换到最新版本再次启动就可以了。 接下来我们看一下 posics 的相关参数,如果大家的界面没有显示出骨骼图,可以点 all reset 就出来了。 reset camera 如果我们转到其他角度,点击它就可以回到初始角度。 reset pose, 当调节某个点位错位后,点击它 就可以回到原始状态。 add 可以增加多个骨骼图, 再点击 remove 就可以删除下面的画布大小可以调节尺寸。背景参考图,这里可以添加图片。点击 set, 我们添加一张参考图, 可以根据参考图调节骨骼姿态, 我们恢复到原始状态。这里的 copy 可以复制当前骨骼。 download 下载可以将调整好的姿态下载为图片。 save pose 保存骨骼姿态图这里我们随意调整一个 pose, 将它保存下来。点击 save pose, 我们命名一下 下方预览中就可以看到我们自定义的 post 图了。勾选上方的,将此图像发送到 control net, 勾选启用这里默认使用的就是我们刚才发送的骨骼图与处理器。选择无模型,选择 openpose 这里的尺寸调整一下,将高度先改为八百,其他先默认。 输入一组我们常用的 tag 先生成看一下可以看到画面人物按照我们设定的姿态生成了图,有点崩。我们将上方参数调整一下,使用常用参数,将每批数量改为四生成 看一下, 可以看到每张都是按照设定的 pose 生成的结果。 open pose 插件的功能很强大,我们下期继续分享。

这个今天讲一下用 s d 外部 u i 来进行这个服装模特的绘制。首先打开这个这个 s d 外部 u i。 好的,今天我先用这一组案例,我就用这一组案例来示范一下怎么把这个客户给的这个,这个这个他用的一个时装模特,塑料模特套上他们的衣服,然后把它绘制成一个呃,正常,正常人穿的这样一个模特的照片。 好,呃,可以看到这里一个从后背拍,一个从侧面拍,一个正面拍,然后就这三张我将演示一下。首先呢咱们这个线 在目前的这个用 s d y u i 呢来画这个服装模特,主要比较可行性的,可以很好的保留这个服装细节的方法,主要就是靠图声图套上蒙版,然后对蒙版以外的部分进行重绘。呃,大概大概的效果呢?咱们可以先演示一下, 比如说咱把这个图片拖到图像图这里,呃,我套一下这个 tag, 先把一些通用的 tat 写上去。对于我用的模型是这个 mix through a row mix row s d 二一,它其实跟那个 chart max 差不多。 呃,叉 t max 它是基于这个 s d 一点五模型,这个是基于 s d 二点一模型。呃,我的使用体验呢是差不多,我就先用了这个,把一些 一些通用的这个 tag 写上去呢。然后主要的思路就是用这个局部重绘的这个工具,比如说我们要保持这个衣服不变,我们就哎一点一点的把这个衣服给涂上去,我先粗略的涂一下啊, 后面还会介绍有几种比较精确的方法,这种呢是属于这个比较比较容易理解,而且不需要任何什么插件的,得先粗略的涂涂一下。 你看到我把这个咱们需要保持不变的衣服的部分呢,给他涂上,然后剩下的咱们需要把这个石膏人、塑料人给他换成一个真人,咱们就需要在这点一个重绘非蒙版那种,因为我刚刚涂的是衣服的部分,咱们需要画重新画衣服以外的部分。嗯,我在这里看一下这个原图的分辨率, 原图的分辨率是一二八零乘以二八四四,但是呢,这个分辨率对 s d 来说它有点大,咱们可以给它等比它缩小一下,比如说一二八零 rap, 那就是六四零,然后竖向的分辨率是二八四四,我这也给它除以二一四二。 注意检查一下这个数是不是八的倍数,因为他不是八的倍数的话会报错,点一下这个上下按钮,取取一个跟他数值接近的就可以,他就自动给了一个八的倍数。这里呢,咱们先差不多设置好参数重回复录,我这写个幺六六吧, 采用步数稍微拉高一些。呃, type 这里需要修改的呢,因为它是一个面朝后的一个一个人,我在这里加一个 from behind, 咱们先上场试一下, 可以看到吗?这个就是比较粗略的这样一个生成,他出来的一个效果 可以很明显的看到问题。他这里在你涂上蒙版的部分,他都是保持不变的,但是在你蒙版以外,他会呃这个很正常的给你自动补充上的一些东西,比如说这本来的后背特别加上了这些, 哎,这就是多余的布料。但是呢,整体咱们需要生成的这个胳膊手,还有一个朝后的一个脑袋, 他们都有这元素,呃,都相应的元素都有,这问题怎么解决呢?如果你的蒙版营图的足够精确的话,要想解决这个他多余布料的问题,主要就是靠多次尝试。这里我先哎让他一下 生成四个,看看多生成几个,看看就是能不能得出来差不多 a e 呢?它的原理呢,我也不做解释,主要是有一些大模型呢,它如果没有 v a e 的话,它生成的图案会非常的发灰,它主要是一个,嗯, 就是模型生成的最后一步,他这个有一些调整图像的一些作用,调整生成图像的一些作用,但是如果没有他呢,有一些模型会发发挥,但是你现在有一些模型,比如说 child max 呢?还有这个我用的基本上没有 v a e, 他也是效果是一样的,他里边可能已经自带的 v a e 的效果, 这个如果没有的话,或者遇到咱们生成的图比较发灰的话,就下一个 v a e 给它装上去,那我这里没有 v a e 也是差不多。嗯,然后呢我们检查一下刚刚生成的图, 可以看到 刚刚生成的这几组这一张其实还差不多啊,这里是我多图的一部分,其实可以不用管他,他只是在这里多了一点点布料,然后呢就是其他的部分呢,基本上上还可以,咱可以把这张图片给他拉过来,然后局部进行精修一下, 你一涂,但是这样的方法呢,他很有可能你他本来这底下是有一块布料的,你给他一涂,他这个整体的把这一块布料都给你画上了,咱们先看一下他会不会这样搞,这个是有很大的几率在的,他有可能把这一块画成一个这个镂空的部分,也有可能整个弧上 ai, 他并不清楚你这个衣服到底是想要做成是什么样,他会根据他觉得合理的样子来给你生成。这个我选错了,因为点这个重绘名版内容,所以咱们尝试几次看到,看看他出的出来的结果是什么样的呢? 可以在这里尝试更改他的这个重绘幅度,比如说,哎,你看这里他就出来的差不多。嗯,他当他产生了差不多的结果呢,咱们就在这个基础上可以继续尝试一下,比如说咱们继续哎,继续描描一下,这一次的重绘幅度就可以拉低一些 啊,他这里就差不多了,可以检查一下, 但是这里呢刚刚涂上,但是他没有完全的把多余那块给消掉,而是他用他自己的方式把它融合在一起了,这一块就是他多画出来的部分。 呃,然后呢,咱们是接下来看一下这个,看一下半我们生成的这个图。 呃,出现这种情况呢, 这个咱们可有的选项,一个是就是刚刚演示的把这一部分再涂掉,让他重新画,他是有概率有几率,呃,用皮肤来覆盖这一部分,也有更大的几率用他自己生成布料来这个补足这一部分。呃,还有一种方法呢,可以选择用画笔,比如说这个 s d 内部就这个自带的这个画笔,我们用这个画笔工具来试一下,选这个局部重绘手涂蒙版,然后呢这个取一个颜色,取这个皮肤的颜色,然后画笔大小,调形,稍微往往一放大一下,然后,哎,把这个多余的部分布料给他涂,涂上, 比较考验鼠标的这个功力啊,简单易图呢,大体一看,哎,跟原来差不多。然后再点一下这个局部重绘,把你刚刚涂上的这个给他描一下, 毕竟是涂的色块吗?他不是很自然给他描一下,然后重回辅助拉低生成一下,看 好这一次这边的基本上就差不多就是咱们要的样子,你看一下,这是刚刚的图,这个是他生成的, 大体上就可以。然后这是我今天介绍的第一种方法,这一块咱们就先忽略啊,因为这一块咱们涂蒙版的时候比较比较粗略,如果涂的精细一些的话,他应该不会有这样的问题。然后呢,第二种方法,就是咱们本来之前是用手来涂这个蒙版,他毕竟会有一些这个精度上的问题,而且这个,呃比较考验这个手工。 介绍一种新的方法呢,也是用这个 s d 自带的这个插件,再叫这个,叫这个去除背景。这个功能呢,你装安装这个 s d 的整合包的时候,一般是自带的,叫这个 remove。 嗯, background, 如果没有的话呢,就在扩展这里找一下,扩展这里它是有的,我们搜索一下 r e m p g 在这个扩展这里安装一下就出来 这个,这个插件怎么用呢?在附加功能这里,下面会出现一个 remove background, 它有几个选项,这个 u r you tonight 呢,它就是把人抠出来,这个 p 是这个,下面这个 p 是 you tonight 的清亮版,其实效果是一样的。 第三个呢,胸闷 set 就是单独把人抠出来,第四个 closed segue 就是把衣服抠出来,咱们今天要用就是把这个 closed set 点一下,看, 把这个原来的这个素材图拖进去,缩放比例,我们这里不需要缩放,就把缩放比例调到一,然后 close set 生成一下,可以看到它这里只给了一个 cos, 为什么不给人呢?这出现了一些问题啊。 in a seg 一百个 t or seg 重新来一次, 可以可以看到。刚刚是什么情况?刚刚可能是我没有点开这个图片来放大,所以只看到中间的裤子点开了这个呢,可以看到,哎,他发了发了两部分,上面是把这个上衣单独的扣出来的,下面把下衣单独扣出来的。 我们这里需要用到一个什么呢?用到这个它自动生成的蒙版,就点这个 return mask, 好,这里出来了,上面衣服,下面这个裤子,然后呢,咱们在它生成的这个目录里边找 doll, 找到刚刚他给生成的这个东西, auto post extras, 好在这里这个就是这个 png 文件。咱们现在就需要打开 the soft, 这些操作的主要目的是什么呢?就是让它自动的这个生成一个衣服的蒙版,然后我们一会给他直接用这个他们自动生成的蒙版给他套进去,所以打开 a t s 一个空白的,哎,不错,有空白的画布,把刚刚的这个东西给他拖进去 比例,不用动它,它这个插件呢是给,嗯,给这个平均分了三份, 咱们现在需要把它给切开,切回原来的比例,把空白的像素给它去掉。然后呢这里有一个切片工具,切片选择工具,选择这个,咱们点一下图片,然后这里有一个划分 水平,划分为三个动向片,他就会给三个分配,然后呢哎,选择这一个点一下就是选择 ctrl c 复制 ctrl v 这个粘贴,他就 对,他就把这个单独的给切出来。咱们刚刚切的是上面这一个,然后呢下面这个也切一下,因为衣服和裤子咱们都要, 还是选择刚刚的一个切片,选择选择这,然后 ctrl c, 在图层这里 ctrl v, 后面 这个就可以不要,因为他没有在下面,但下面这个不知道是怎么回事,按理说他是呃给一个衣服和裤子在一起的,但是他这是黑的,没有给,没有给咱们就手动处理一下,现在这个就不要给他隐藏掉,然后呢上面衣服下面裤子把他们都放到同一个位置上, 这里是衣服,这里是裤子,好去除多余的像素。 这里呢它这个裤子的衣服部分呢,它是黑色的,衣服的裤子部分呢,它也是黑色,咱们需要把它这个放到一个图片里,让它给漏出来啊, 这里就简单的处理一下,比如说在这个裤子的头层,在这个衣服这里 你想一下切片可以去掉, ok, 我们还有一个划算的框台制作, 反正 a d 搞一下, 把这个图层的点黑色这一部分把它删掉,就会露出这个上面的衣服 中间这里有一点空隙,咱们用橡皮擦稍微的擦擦一下。嗯,几条选择啊,还是选择你这个裤子头层,我们橡皮擦, 这样咱们这个现成的衣服蒙版就可以做好了,这里有一些瑕疵呢,就可以用画笔,比如说画笔这里选择黑色,把它一涂, 因为它 ai 生成的不一定精选,我们简单一图就好,我们修改一下,基本上这样就可以把这个图像导出, 我出到咱们刚刚的这个项目文件夹,回到咱们的图声图的这个页面,这里就不要了,选择这个局部重绘上传文本。 呃,前面课程之前的这个林同同学演示的这个上传蒙版的就是一个错误的示范啊,这个我现在来演示一下正确示范应该是什么样。他这里有上下两个,两个两个这个可以放图像的。 上面这一部分呢是这个原土是你要做的原土,我们的原土特技。下面这一部分呢,是你那个你你需要画的蒙版,这个蒙版的黑与白无所谓,因为什么呢?因为咱们黑的,咱们就如果他是选择重绘黑的这部分,咱们就重绘蒙版那种,如果他是选择重绘白的这部分呢,咱们就重绘这种被蒙版那种, 反正是我这个实践过程中呢,不管你这个上传蒙版,他不管是黑的还是白的,他都有可能给你随机选一个,但是咱们就按照他随机选的重新在这里选择一下就可以了。然后呢试一下把重绘幅度拉高,先选择这个重绘蒙版内容,试一下他看看生成一个什么样子, 好可以看到他是重新画的衣服这一部分,那么就把这个换成重绘飞蒙版内容,然后再来。嗯,可以看到这 这里有一些问题啊,重新画一遍,让他尝试验证一下这个问题到底在哪里?有可能是这个头像上半部分跟下半部分没有完全吻合在一起,那这种情况怎么办呢?就重新把这个圆头也拖进咱们这个 ps 里给他对应上,咱们手动的给他对应上, ok, 这个现在我把它这个透明度降低,可以看到,呃,几乎是对应上的哈, 应该没有问题,我们需要找一找问题出在哪里? 有可能是这个图像上面这层像素呢,影响了这个刚刚这个咱们导入的这个宽度, 仔细摸索一下,看看问题出在哪里。把这里稍微剪裁一下,我们像素去掉, 先导出一键 铺盖原来的头,然后把我们直播间的给也给他倒输。 现在回到咱们这个 s d 的页面,把咱们刚刚新生成的新剪裁的两部分给它重新走上去, 可以看到他这个位置有一些稍稍的变化,可能就是这一点细微的差别,可以这个影响他这后面的效果。但是我觉得他这个肩膀的高度差的没有这么大,可以理解成这个咱们 要重绘的这一部分呢,他实际上这个肩膀他没有是照着这个轮廓来给他画,他有可能是,呃,实际他自己按照自己的想法给他多画了一些。这种情况咱们首先最简单的一个处理方式,先拉低他的重绘幅度。 哎,拉低重配幅度以后呢,他生成的图就会更接近咱们之前这个原来的塑料模特的样子,但是呢也有一些这样的问题,咱们现在暂时先忽略,继续拉低一些,看看效果会不会好一些, 给他一下生成四个。这就又到了咱们之前讲的第一种方法的时候,哎,他这个后期会在他的布料中多添加一些他自己想要的元素的一些问题, 我们可以把这个蒙版模糊,稍微拉高或者拉低,我们都尝试一下。 but, 这里出来了四张图,嗯,可以看到这一张是稍微比较符合这个咱们的原图的哈, 但是明显的看到这里他就没有照着这个原图的版式来画,我现在怀疑呢是他这个蒙版呢,对,他这个蒙版确实是少了一块。这里不不用进 ps 就可以明显的看到这就是他这个这个模型,这个模型他本身没有生成的那么精确,咱们就手动来调一下, 比如说,哎,回到 ps 把这里的这个拉低,好像差不多 也还是差不多的哈,那应该就不用调,我们再回来继续在这边调一套参数 哦,可以看到呢,咱们把纯粹幅度又调低了以后,哎,他这个这一次的肩膀呢就给吻合上了。 呃,这就证明了刚刚他这个就是给他在上面额外的画出了这个,画出了不该有的多画的一部分肩膀。然后咱们把重位幅度调低呢,这个 ai 呢,他生成的图就会更贴近他原来这个图像的这样一个形状,你看到这里基本上就没有问题了, 可以挑一下。然后呢挑一张,挑一张到这里,或者呢?呃,比如说咱们现在生成的这一张大体都还可以照片,然后咱可想把 这个这张照片其他的细节呢,比如说这里比较模糊,咱们把它精修一下,咱们再给他走一遍图上图,但是图上图呢,我们还想要继续保留这个衣服的样子,咱就还回到这个图,上图这里,这个蒙版这里,然后把它这个刚刚生成的, 在这里刚刚生成的这张图呢给它保存下来。这个编号是哆嗦,是第二个,第二个是这张,咱们把这张拖过来,然后蒙版继续让他套上,然后继续稍微走一下重绘,这样他的让他其他的部分更加精细地调一下。 a 六不需要生成 p 四十四,让它生成一个就可以停下来。 好,可以看到他这里还是产生了一些瑕疵的。再来一遍, 把这个采用木梳拉勾啊蒙版模糊,把它拉到 t t, 这样它它的蒙版呢就更精确一些。 这个图片对比一下刚刚的这个,刚刚咱们采用的这个正常的操作,其实把叉补差, 不错不错。这里稍微修了一下,然后这个手的颜色还是不是很自然,这里的模糊呢稍微改善了一点点,咱们可以把这个重绘幅度稍微拉高一些, 我们再来看一看,你的脚呢,还是有一些问题, 看重回做的拉高,他这里又会自主的产生了一些不该有的东西。但是他把这个鞋呢稍微修复了一下, 然后手差不多这里戴上了,多戴上了一个项链,咱们就多让他试几下,多让他试几下,是一个相对比较好的一个结果。 好的,嗯,检查一下刚刚的产出,现在呢咱们衣服呢大概差不多已经可以达到满意的效果,我们挑一张稍微稍微比较好的,然后不满意的地方稍微给他一修,比如说这个鞋,我想让他重新修一下, 我找出这一张。第三张图,直接来到图中图局部重绘呢,就单独的把这个鞋给涂一下, 打一点,弄成自己重新幅度让他拉高一些。你选错了啊,直接重新来, 可以看到这一次的鞋比之前好了很多,基本上像是一个市面的流行款的样子。这里呢,还有一点瑕疵,咱们可以继续精修,可以重新走一遍, 这样一步一步的叠带,把不满意的地方呢,都差不多修一修啊啊,这个假设,假设这个鞋就是咱们差不多满意的结果。然后呢啊,比如说这个手,这个手的皮肤稍微有一些色差啊,这个手单独涂上, 呃,当然这里建议只把这个胳膊涂上,因为把手涂上呢,很有可能这个本来挺好的手都会给画坏。 咱就现在要修复这个胳膊的色差,就单独把胳膊涂一下,然后成分幅度拉低一些。 好,这里可以看到明显的自然的滤芯。

玩过 cable diffusion 的人大概都会有这样一个痛点,那就是 ctr net 自动生成的 open pos 图和原图的差距太大,所以我们在这里看到并不匹配的 pos 图的时候,还得专门的来到 open positit 这个插件里面去单独的调整,像这种方法的话其实太过麻烦了, 制作起图片来根本没有效率。但是自从安装了这个插件之后,我发现我可以直接的在 ctrl net 里进行 openpose 的编辑了。我们可以在这里将之前自动生成的并不合理的 openpost 图进行修改之后,然后可以直接的发送到 ctr net 里, 就能够把原来的图给替换掉,这样子就可以极大的提高我们的工作效率。那么想要安装这款插件呢?首先你要将你的 ctrl nice 升级到比较高的版本,然后我们点击小爆炸的图标生成预览图, 我们可以看到在这里有一个编辑两个字,我们点击他的话会跳出来这样一个网页,这是说我们少安装了一个插件,我们可以直接点击这个地方,他就会自动跳转到这个插件的位置, 我们点击绿色的扣子,然后点击这个地方复制一个地址,回到 ctrl defusion 在扩展页面从网址安装,把刚才复制的链接粘接进去,然后点击安装,当你看到下面出现这样一行字样的时候,就说明这个差价已经安装成功了,这个时候就需要你重载一下前端, 我们再把刚才的图片放进去,模型的话依然选择 openpose 版,然后我们再点击生成一张预览图,然后再点击这里的编辑,他就会直接的跳到这样一个页面,他一开始会出现很多这样子的爆错,但是我们这里千万不要慌,我们把它插掉 之后重新再点一下编辑,这样子的话就能够正确打开这个插件。打开之后呢,他会先出现一张图片的虚影,我们可以把它调整到和背景图完全的重叠,以方便我们做 openpose 的调整。 还可以按住空格键加鼠标的左键来拖动整个的画面。在这里我们就可以将自动识别到 pos 中不准确的地方给一一的做调整,比如说手腕的这个地方显然是没有到合适的位置, 在这个插件里面可以对 open pos 图进行全方位的控制,比如说我们用鼠标的右键点击这个点的话,就可以把这个点给他去掉,那么如何让这个点再回来呢?点击这里 有一行被划去的英文,这个地方就是我们刚才删掉的那个点,点击这个笔的话就可以让这个点重新恢复。甚至我们还可以在这个地方,比如说添加一只手, 我们可以看刚才点击了一个添加右手,这里就会出现一个手的 openpose 图,我们在左边的这个地方点击这个按钮, 就可以对于手进行一个比较细致的编辑,等到我们大致调到满意之后,我点击上面的发送姿势,就可以一键将刚才编辑好的 open pos 图发送到凯龙奈特里。有了这个插件,我们就再也不用担心生成的图片和原图的动态不像的问题了, 我们可以看到连手指的动态都有一个非常好的还原,包括你看这是刚才调整过的手,他和原图都是非常的相像,大家赶快去试试这个新的功能吧,但是一定要注意,你的 ctrl net 必须得是比较新的版本才行。

dw 喷 pose 预处理失败怎么办?一般来说就是模型问题,要么就是你的路径不正确,要么就是你的模型下载不完整,那一般出现错误,你的后台 boss 窗口都会有提示,你只要把它复制出来去翻译一下就可以知道是哪个文件有问题的。 那这边我以我的文件路径为准,因为我的预储力是成功的,大家可以参考一下。首先第一个路径是这个,你要保证你有两个上百兆的文件,在文件名是 body post model 和 hand post model。 第二个路径是这个里边放着 dw openpos, 他在预处理时候会自己自动下载的文件, 但是往往因为网络问题,我们下载的时候其实是不完全的,他是识别不出来的,别以为文件大小一致就没有问题,如果提示依然能出现这个文件的名字,那我建议你还是重新去下载,这样其实能解决百分之九十九的问题的。

本节课将为大家演示如何用 ctr net 去控制我们输出的人物的姿势,以及用多个 ctr net 去生成图片的步骤。比如说我们用这张图片, 我们可以生成他的一个 hed, 然后调节一下他的分辨率,然后在上面的模型的地方呢,我们可以使用一个偏动漫一点的模型,然后我们可以点击生成 好的,我们可以看到刚才通过 ctr net 引导生成的图片和我们刚才 给的参考。首先他的动态姿势,包括空间场景都是基于我们的参考图做的延展,甚至你可以看到生成图像的人物的服装和他 他的头发和我们提供的参考图都非常的类似。这就是说他能够将我们的参考图当中的细节最大部分的去保留到我们想要生成的风格的图片图片里。 有了这项技术呢,我们就可以尝试用同一个动态去生成多个不同的风格。比如我们选择一个偏三 d 效果的模型,再点击生成。 ok, 我们把刚才生成的三 d 风格的图片 和这种动漫风格的图片,还有我们的参考图片放在一起做一个比较,我们可以看见三者的动态包括场景都非常的相似。除了这个方法呢,我们还可以通过另一款插件来生成 openpose 图,来控制我们生成 人物的动态。我们来到扩展页面,搜索 openpose id 头,向下翻找到这款插件,然后点击安装,我们就可以在主页面的选项栏里面找到 openpose 的编辑器。通过这个编辑器呢,我们就可以自由的移动这些点的位置, 从而生成不同动态的 open pos 图。我们看下方的这两个按钮,这个按钮呢,他是说上传一张图片, open pos 会根据我们上传的图片的动态自动生成相应的动态图。 那么在生成的 openpose 图呢,我们只需要对于动态进行一个微调就可以直接使用,然后点击保存为 p n g 图片图,我们就可以看到动态图已经被下载下来了,然后就可以放到 ctrl net 里面去进行一个使用。那么这是一种自动生成谷歌图的方 方法,我们还可以通过这个按钮添加一张背景图片,那么通过这张背景图片,我们去手动的调节这个骨骼图,我们可以看到全选整个骨骼图的话,可以移动或者放大缩小。首先上面的两个点呢,是对应了两只眼睛, 这两个点呢是对应了两只耳朵,中间的点呢是代表了鼻子的位置,我们可以把画面放大一些再去进行编辑。 然后中间的这个点呢是代表了胸口,这两个点呢分别代表了肩膀的位置,这个这个地方就是胳膊肘的位置, 我们相应的去摆好它两边的是两个手腕的地方,千万不能放到手指。 然后下面的两个点呢是代表两个胯的位置,再往下呢是膝盖, 再往下呢是两只脚的脚踝的位置。那么这样子呢,我们就能把整个的动态图给他做出来,然后同样点击下面的保存为 p n g, 我们打开它,我们发现动态图已经下载下来了。回到主页面,我们把刚才生好的 openpose 图拽入到 ctrl net 里,然后点击启用和无提示死模式。由于我 我们直接提供了 open pos 图,所以预处理器直接选无。在模型里面呢选择 open pos, 然后我们调整一下参数。 模型方面呢,选择一个偏二次元的模型,然后然后点击生成,我们就可以看到用 openpost 图生成的图片的人物动态,可以很好的还原我们找到的参考。我们还可以使用多个 control night, 比如说用一个喷 pose 图加上一个 deps, 两个集合起来去使用的话,对输出画面的掌控力会更高。我们可以在设置页面这里可以看到有这个选项,这个选项呢,就是能够选择我们一次能够使用 有多少。 ctrl net 的选项,我们可以把它的数量提高到三,然后保存。设置之后点击重启,回到我们的首页,点开 ctrl net, 我们就可以发现多个 ctrl net 的选项卡已经出现在了首页上。接下来我们拽入 dips, canny 和 openpose, 点击启用和 d 显存优化,选择相应的模型,然后把画面的比例调节一致,最后我们选择相应的参数。点击生成, 我们可以看到生成的图片的画面效果是由 control net 的引导而生成的,包括空间关系,包括人物的动态。好了,那么关于本期的 control net 的课程就到此结束了。本期课程生成的所有的图片 连同其他的关于 aigc 的资源,我已经打包准备好了,请大家三连之后私信我领取吧。

大家好,今天给大家介绍一个比 open pose 人物控制更强的 g w pose 插件,特别是对手指的识别能力是非常强的。首先我们需要更新, ctrl n 到最新版本, 打开 cbod usern, 选择最后的扩展,点击检查更新,检查完所有插件需要更新的后面都会出现打勾,我们只选择 controller 进行更新,再点击左边的应用更改并重启, 重启之后再点击扩展,看创维更新到幺点幺点二三七版本,然后选择扩展,从网址安装,把我给大家的网址复制进去。安装 这一步如果安装正常,那安装就完成。如果像我这样出现故障无法安装,那我们就需要复制文件夹安装,找到 say body fusion 主目录,从文件夹,然后把我给到大 大家的 dw poseman 文件夹复制到里面,把原来 dw pose 文件夹删除,进行重启。 cable diffusion, 打开下面的 controller, 选择 openpose 预处理器,再点击预处理器,上面就出来一个 dw openpose 就说明安装好了,后面的模型还是选择 openpose 的,我们选择一张图来生成骨架图进行对比就明白了。 先用 gw open pose 来生成一张,生成了,我们放大看看,手指骨骼被精确的识别出来了,再用 open pose 来生成一张,生成了,来看看这部分手指没有精确识别出来,这个插件可以完美解决手部变形问题。好了,今天的视频就分享到这,谢谢大家。