今天,我将向您展示如何使用 control net 进行稳定扩散,以创建令人惊叹的图像。让我们开始转到您的扩展程序选项卡,然后点击加载搜索 control net 并安装它 前往这个 hugging face 链接,并下载您需要的模型。 目前,我推荐这些将它们移动到模型中的 control net 文件夹中。完成后,重新启动您的 ui, 转到您的网络用户界面。您将看到 control net。 我们要做的第一件事是单击此处,并找到要上传的图片。现在,让我们看看这里的所有选项。单击,启用和允许预览。让我们从我们的第一 个模型 kenny 开始。 kenny 检测图像中对象的边缘。通过单机预览图标,您可以看到 kenny 预处理器的作用。此外,启用 pixel perfect 选项,因为它会自动调整您的控制网络分辨率。 我正在使用逼真的模型将这个游戏角色变成一个逼真的人。您获得的生成图像是 control net 和您的提示的混合体,现在让我们尝试不同的空间类型。 openpose 是比较有用的模型之一, 它检测人体上的关键点,允许您在图像中重新创建人体字。如果您查看预处理器,您将有五个不同的选项。让我们从 open pose 开始。它试图检测输入图像中的所有主要点。现在,让我们尝试根据我的参考图像 生成图像。我将粘贴我的提示并生成。如果我还想根据参考图像重新创建手部位置,我会使用 openpose hands。 它是手部检测和 openpose 的组合。您可以轻松复制参考图像中显示的准确手和手指位置。 open pose face 包括面部和身体,而 open pose face only 仅包括面部。这些适用于人像和特写镜头。最后一个 open pose full 结合了他之前的所有部分脸,身体和手。如您所见, open pose 也适用于多人。 接下来,我们有深度预处理器,这对于定位事物很有用,但在此过程中会丢失更精细的细节。 depth 目前有四种不同的预处理器,但略有不同。较浅的 阴影表示近距离物体,而较暗的阴影表示距离较远。 normal 根据我们的输入图像生成法线贴图。法线贴图适用于使平面看起来有纹理的图像。总的来说, normal 背对于前景和背景都更好。 m l, s d 是一种直线探测器,可用于重建建筑物和室内设计。所有曲线和更精细的细节都将被忽略。 line art 是一种非常有用的工具,可以为您的数字或手绘图着色。 有多个预处理器,但略有不同。对于这一代,我使用的是 line art realistic 预处理器,这是生成的图像。还有两个。接下来让我们谈谈 soft edge。 这是一种与 candy 类似的已知检测算法,但总体而言,边缘更柔和。但是它仍然可以帮助您保留细节,并使生成的图像接近参考。最好在不希望轮廓过于严格时,使用 涂鸦预处理器将您的图像变成粗糙的涂鸦。 head 和 pytamat 为您提供粗略的轮廓,而 x, d, g 为您提供精细的轮廓 分割。为图像中的每个识别对象分配一种独特的颜色。您可以在电子表格中查找颜色代码,在编辑应用程序中更改或添加颜色,允许您将新对象引入图像中。 在这个新图像中,我将放置带有绘画的窗口,并添加一个新人。随机播放会扭曲和随机播放 输入图像的颜色打乱后的图像提供了生成图像的起点。他对于复制配色方案和主题非常有用。这里有更多不同主题的图片。 p to p 或 pixar picks 会根据您的指示更改您的图像。它没有预处理器,您只需要下载模型。我真的不觉得它有用,因为生成的图像质量不是很好。 接下来我们有参考。您会注意到它不需要模型,只需要预处理器。 style fidelity 滑块作用不大,所以我将其保留为默认值。现在让我们谈谈预处理器。 reference only 擅长创建参考图像的微小变化。我发现 reference only 是最好的,因为它遵循您的提示和您的参考。 add in 加 attention 的结果与 reference only 非常相似。您可以尝试两者看看哪种更适合您的图片。 reference aiden 在保持整体构图的同时忽略了颜色和细节。他也深受提示的影响。 最后,我们有 multi control net。 他允许您一次使用多个 control net。 要启用此功能,请前往设置。 control net。 multi control net 我要选择二并重新启动我的 u i。 您现在可以访问多个 control net 选项卡。对于我的第一个 control net, 我使用的是 open pose。 如果你已经像我在这里一样拥有经过预处理的图像,则必须将预处理器设置为无。 对于我的第二个 control net 我使用的是 m, l, s, d, 并且我再次获得了预处理图像。我们将再更改一个选项及控制重量。 他决定了 control net 对生成图像的影响程度。我打算将其设置为零点五,这样他就不会对我的主题产生太大影响。如您所见,生成的图像混合了两种 control net。
粉丝16获赞1536

大家好,我是灰灰老师,之前课程我们已经学习了如何安装 control net 插件,但是想要使用 control net 除了安装插件,还需要进行模型的安装。模型分为两种,一种是预处理器使用的模型, 一种是 control net 使用的模型。预处理使用的模型通常会自动下载,如果没有的话,打开屏幕上这个网址,可以看到这些都是预处理模型,点击这里进行下载。 下载好后,把这些模型放在对应的文件夹下, 如人体动作检测的 body post model c h e hand post model c h e 放在 open pose 文件夹下。 control net 使用的模型目前常见的有两种,一类是完整版,一类是经典版。打开这个网址,来到完整版模型下载界面,可以看到一共有八个,都是五 g 多的模型。 经典版打开这个网址,上方的这些就是经典版模型。两种版本作用结果相差不大,但是经典版加载时间、运算时间较短,占用的硬盘空间更小,大家可以自行选择 下载好的 control net 模型,放在下方目录文件夹下, 回到 web u i, 在扩展中点击这个按钮,进行重新加赞, 等待加载完毕,就可以看到在 control net 中模型。这里已经由我们刚刚安装的模型了,现在使用文声图来看一下怎么使用 control net 首先正常写提示词, 调节参数,然后打开 ctrl net 上传一张图片, 勾选启用按钮,这样 control net 才会参与到会图中。如果显存低于八 g, 还需要勾选低显存优化按钮。预处理器选择 carney 模型选择和预处理器对应的 control carney 下方这些参数先默认,点击生成按钮, 就可以得到一张和原图的构图细节大致相同的图片啦,我们下期见!

今天为大家带来 controlner 保姆级教程,分为插件安装、模型安装、使用及体验三步。 首先进行 ctrl 内插件安装,点击扩展,点击可用,点击加载字,再输入框内输入 ctrl 内 进行搜索,找到 ct rlnet, 点击安装。由于我这里已经安装过了,这里就显示已安装,等待安装完成后点击应用并重启用户界面,这样 ctrl net 就安装完成了。 nice 接下来我们安装 control net 模型,打开 hugging face 模型页面,这里都是 control net 的模型, 比如 openpods, 作用是姿势识别,点击保存,保存完成后把模型放到这个目录下就可以了。最后我们使用并体验一下效果吧,复制并导入提示。 至此,点击 control net 选项,上传姿势图片,选择启用遇处理器选择 openpose 姿势及首部检测模型,选择 control openpose。 最后点击生成。稍等两秒钟 生成了四张图片,我们看下效果吧,是不是跟参考图完全一致?视频中所有资料都进行了整理,需要的朋友请评论区留言,欢迎点赞关注!

一、插件安装确保 sd webui 是最新版本。你可以在启动器的版本管理本体中选择最新的稳定版本,或是在版本管理扩展中更新。 control net 启动 sd webui 后, control net 后显示幺点幺 x x x 便是更新成功。 二、检查预处理器一般在插件更新后,预处理器也就随之下载好了。打开文件夹 extensions sd web we control net models 里面扩展明 yamod 文件便是预处理器。 点开 s d 为 f u i 中 ctrl net 中的预处理器列表,刚才文件夹中的各个预处理器都在这里。 三、下载模型这是 control net 模型下载地址。在这个列表中,我们只需要十四个扩展名为 p t h 的文件,并将其复制到钢材存放与处理器的文件夹中。之后点击模型右侧的蓝色刷新按钮,所有的模型就都在列表中了。

上次给大家带来了 cable diffusion 图声图功能的介绍,本期我们来介绍 control overnight 功能。 control overnight 功能能够让你更好地控制图形的生成方向,给 ai 抽卡提供更加准确的框架要求。再给大家提供的 v 四整合包中已经自带了 control overnight 文件, 大家可以根据之前的视频回顾文章方法,软件完全免费下载方法,放到视频最后加入社群会获得更加专业的资料哦。来到 ybui 界面,向下滑就可以找到 ctrl nine 选项,大家请记得使用时必须勾选上启用,不然的话会发现设置好了所有的参数,点击生成却没有任何反应。 来到 ctrl net 布局界面,我们先来看看这里的按钮。点击新建画布,按钮会根据你想要的尺寸生成一张空白的画布,这个画布可以用来随意绘制。点击打开摄像头,就可以打开自己电脑的摄像头, 反转摄像头,也就是字面意思。用的比较多的是这个。将尺寸传送到 sabot fusion, 如果你不知道你要处理的图片的尺寸,这里就可以直接获取输出代替。界面中我们导入一张图片,点开预处理器以及模型,就可以看到一大堆的选项,其实原理是一样的,就是通过额外添加的条件来生成图像, 而预处理就是这个额外条件。由于预处理内容较多,我们仅选取几个预处理功能来作为展示。第一个点击预处理中的开逆边缘检测, 无形则选择汉域处理,名字一样的刊即可。点击允许预览,再点击预处理器右侧的花火图案,就可以看到图片被识别的线稿,新生成的图片则会受到线稿布局的限制,我们只写一些描述清晰度的 tag, 利用大模型的画风生成新的图片,让 ai 自己炼丹。为了更好的随机性,把重绘幅度调高,点击深 层可以看到新深层的图,任务形态都是保持一致的,改变的只是衣服和其他元素,这就是 ctrl nine 的基础用法了。这张玉处理的图是可以从分辨率调节来控制强度的,需要得到很好的效果就需要通过不断的调整来做到。 需要注意的是,分辨率调整的越高,越是显存,大家可以根据具体的效果来进行调节。和看地类似的还有害模糊检测,官方说是可以保留更多的细节。还有一个是 pd 膜检测,它能够很好的检测到边缘。 这三个域处理模式大同小异,至于用哪个就看各位小伙伴自己的选择了。代不深度信息估算,用颜色的深浅来表示空间的距离关系,白色在前,黑色在后。 处理风景环境图可以选择这一个,因为这个与处理器处理人像效果很难做出立体感,单独使用就用风景或者是能表现众生关系的图就可以了。 同样由此功能的还有 list, 只不过算法会更加平滑一些。我们以一张房间图为例,生成出来房间架构不变,但是画风已经完全大变样了,混合了很多种风格, 而且完全是由 ai 自由发挥的结果,并没有加任何导向性的太提示词。莫斯线条检测适合于四四方方的场景建筑物,生成出来的线条能够很好地把透视关系提取出来, 简直是建筑设计师提取灵感的福音。我们不加任何泰格生成就可以看到一样透视关系,但是风格大变样的建筑图 非常给力。再介绍一个 open pose 姿势检测,我们以一张女模特图片为例,预处理后就是图像人物中的对应动作,我们同样放一些不带导向的提示词,可以看到新生的图,人物骨架被固定住了,其他的元素都在发生改变。但是模特的手部仍然有瑕疵,所以可以使用新更新的 open post 汉的预处理 器,可以更好提取到手部的关节,动作不会出错。 ctrl net 的使用方法就是这样。还有其他的预处理器,各位小伙伴可以一个个进行尝试,一定会有你想要的惊喜。因为上期视频有小伙伴反馈想要我的插件库,所有文件 我已经打包好了提供给大家。关于下载链接还有不知道的小伙伴可以看往期 stable defusion 介绍视频或者在评论区获取。感谢大家看到这里,后面我们将会解锁 stable defusion 更为强大经验的视觉效果,大家下期见。

你肯定见过仅靠几条细线就成就了高楼大厦,仅凭几笔粗糙线条就生成了精美的图片。这就是 ctrlona 的能力,在他出现之前, sd 完全不配当 mj 的对手,而当他出现后, 对不起, mj 是谁?没听过。正是因为他,我们可以复原兵马俑,创造 ai 艺术字,甚至修复老照片等等。有了它, ai 变得更加可控,一切都可以基于我们的想法来进行操作。 所以姜子接下来将会分几期给大家介绍这款插件,建议大家先关注不迷路,学习 ctrl, 那需要一定的基础,没有基础的家人请一步入门教程。 本期视频先给大家简单介绍下 controline 这个插件,然后教大家安装 controline 以及使用时常见的报错问题处理方式。所以 controline 是什么?它原理是通过控制神经网络快的输入条件来调整神经 网络的行为。听不懂没关系,我也听不懂,你只需要知道他能基于你给的图片提取图片的某些特征后,控制 ai 根据这个特征生成你想要图片,这就是他的强大之处。 control 内由三部分组成,分别是一预处理器、二预处理器模型。 三、 controller 模型。域处理器安装插件后自带文件是 rm 后缀一到二 kb 域处理器模型用于提取照片特征,共约两 g, 首次使用会自动下载 controller 模型,控制 ai 生成我们想要的图片。 p t h 后缀共十 g, 需要手动下载 其他内容,时间关系就不一一展开。今天先教大家如何安装 controlled, 如果你是安装的最新秋叶版安装包,请先查看这个位置,看有没有 controlled, 如果有,那恭喜你,你已经安装好了。 第一步,如果没有,我们打开拓展选择,可下载,在这边搜索 ctrlna 就会自动弹出,点击安装,然后重启即可。 第二步,下载 ctrl 那对应的模型,大概有实际需要模型的家人可以评论模型,也可以在姜子的资源库里面自行下载。下载后放到根部录 models ctrl 那里面。第三步,检验,我们打开 ctrl 那看下这两边是否都有对应的模型, 然后放入一张图片,选择 canny, 点击预览,这样就表示安装成功。需要提醒下的是,部分处理器首次预览需下载对应模型,可以在运行器处查看进度。 最后,姜子遇到不少家人在安装和使用 contronat 过程中遇到各种各样问题,给大家做一个简单的解答。一、如何使用多个 controlnet? 只需打开设置,找到 controlnet, 调整控制数量,重启即可。二、使用 ctrl 内对电脑有要求吗?建议显卡内存至少大于六只以上。 三、为什么我预览深度图显示报错?因为你缺少处理器对应的模型,建议手动下载添加,需要的家人联系我。关于 ctrl 内的安装,姜子也整理了一份文字版,放在我的资源库里, 里面还有 s d 万字教程,需要的家人关注我哦。今天的分享就到这边,我是 ai 姜子,谢谢大家。

大家好,今天来跟大家分享目前觉得比较好用的 open pose editor。 之前的影片,曾经介绍过三种 open pose editor 的,比较有 open pose editor 三 d open pose, 还有这边的 pose x。 这三种 open pose 各有其优缺点。不过当 controllate 更新到一点一以上的版本后,多出了另一个简单易用的 open pose。 让我们先来安装这个 open pose。 第一部分,安装 open pro ctr for control net 点开 control net 点这边,随便开启一张图,把这四个选项打勾。 点 preview 按钮, 当 preview 出现时,在这边会有一个 app 按钮,如果你没有出现这个按钮,请更新您的 control net 如果您的这个按钮中间没有一杠,那表示你已经安装过这个 extension。 如果您看到的跟画面的一样, itt 按钮中间有一杠,就继续跟住做下去。点 itt g 杠按钮,点这边的连接, 点 coat 下拉式选单,点复制,按照网址按钮关闭这个网页。回到 stable defusion web ui, 点这边的叉关闭, 将画面往上拉。点 extensions, 点 install from url。 点这边把刚刚复制的安装网址贴上,点 install, 当出现这串文字时,就表示下载完成。点 installed, 点 apply and restart your, 按按钮 来试看看有没有安装成功。跟刚刚的流程一样,先暂入一张图, 选择 openpoint, 再把这两个选项打勾。点 preview 按钮, 如果这边出现没有一杠的 attend, 恭喜您已经安装成功。第二部分, 喜欢使用教学点压对探钮,这边有简单的操作说明,压住空格键或 f 键,再拖动滑鼠,可以移动画布。滑鼠的滚轮是放大和缩小,滑鼠的右键是隐藏关键点,像这个样子, 不过隐藏起来后不知道要如何打开,也找不到 undo horido, 所以干脆关掉再打开一次。 再来这边是画布的尺寸调整,可以重受画布尺寸缩放,也可以自行调整画布大小。再来这边有一个上传图片的按钮,可以上传多组图片。 下方这边可以让您管理您上传的图片,这边可以删除上传的图片。这边可以更改图片的缩放比喻, 来让您的图片大小更符合 controlled 侦测出来的姿势。也可以用滑鼠将整个姿势选取起来,来摆到更符合图片的地方。 再来是这边的添加人物,可以添加多个不同的人物姿势,点,眼睛可以隐藏或显示人物姿势 一样点差是关闭关键点的调整,就跟其他的 open pose 不一样,用滑书点姿势,关键点可以拖拉。 这边就稍微将人物姿势调整一下, 调整完毕后点发送姿势到 controllight, 这样就完成这个人物姿势。老阿贝觉得这是目前和 controlled 整合度最高的卧盆破灾的 操作,也非常的简单。来跑一张图是看看把 enable 打勾 prompt 正向提示词这边老阿贝偷懒一下,有反推的,先把图载入进来, 就会自动开始反推图片的正向提示词。趁反推时,先来查询一下图片的尺寸大小。点图生图,把刚刚的图片载入进来。 点尺寸按钮,把宽高尺寸系起来。点文商图,输入刚刚的尺寸, 输入完毕后,反推正向提示词应该也推完了,看起来没什么问题。也删除 tax to image。 点翻译软体,将英文翻成中文,删除不要或重复的关键字, 加入骑手画面提示词, 加入反向提示词, 选择您常用的 employee method, 调整 employee steps, 打勾脸部修复,再检查一下参数, 没问题后就可以跑一张图来测一下。 看起来是有符合索要的姿势,不过头部这边被裁剪掉了,把高度设高一点, 这样就可以简单的解决这个问题。 老阿贝想要的是室外公园先加上这些 prompt, 再稍微调整一下人物的 的姿势, 这样就改变了。觉得比之前那三个 open pro 加 deter, 操作上更加与 controlled 融合,操作上也很简单,再随便来调整姿势, 设定 cd, 人物姿势有点怪怪的,再调整一次, 这样就正常一点了。如果只需要简单的调整人物姿势,目前老阿贝最推这个 open pose editor extension, 之前分享的那三个应该就可以退役了。以上就是今天的分享, 如果今天的影片分享对您有帮助的话,再记得帮老阿贝订阅分享加按小铃铛,有闲又有空的话也帮忙看一下广告呦,谢谢大家,祝健康快乐!老阿贝下台一鞠躬!

今天教大家如何正确安装 control net 避免出现 control net 无法使用的情况出现需要最新的全套 control net 模型及预处理器文件的同学,可以进粉丝群公告领取 包含支持 s d x l 的 control net 模型,大家根据自己的需求进行下载。安装一共分为三步,分别是安装 control net 插件,下载 control net 模型给予处理器, 最后将下载的文件放到指定的文件夹内。首先是第一步,安装 control net 插件,打开 stable diffusion, 直接在扩展中搜索 control net 进行安装。你也可以通过扩展网址或者压缩包进行安装。 安装后记得更新下 control net 插件,到最新版本,可以直接在启动器的版本管理中进行更新插件。第二步,然后下载我整理好的文件夹, 有常用版 gsdxl 版供大家进行选择,常用版为常用的 control net 组件,包含光影模型以及最新的重上色模型。 s d x l 版则是增加了支持 s d x l 的 control net 模型组件,需要注意 s d x l 的 control net 模型只能支持 s d x l 大模型使用,不能向下兼容,大家根据自己的电脑情况及需求进行下载。 第三步,将下载的文件放置到指定的文件夹内,按照我文件夹的名称将文件放到对应的 sd 的文件目录中,然后就可以打开 sd 试验一下,查看是否按照成功了哦。

哈喽,大家好,我是 aa 小王子 ctrl。 net 现在正式可以兼容 st xl 的模型了,所以今天我就教大家如何更新最新的 ctrl。 net 并且教大家如何下载最新的模型和一些让 ctrl net 兼容的一些部署设置。如果你想把黑白的老照片变成一个带有色彩的照片, 如果你想把你的线稿变成一张有色彩的图片,如果你想把你的照片生成同风格、同类型、同构图的图片,那么建议你先点赞收藏,以免错过。这期也会实操给大家看一下在 你的设备上生成一个和别人设备上相同图片的一个使用方法。接下来我就为大家讲解先用 s t x l 模型的 ctrl。 net 新出了哪些超好用的功能。首先呢,我们要来到 gap 这个网站,今天所有用到的网站还有一些模型的下载 包啊,我都会放在视频简介啊, ok, 首先我们看一下这边的 major update, 讲到就是 ctrl night 一点一点四零零这个版本,这边展示的是所有可以兼容 sdxl 的新 ctrl 耐模型。 这边讲到两个是不需要控制模型的,一个是 revision 和 reference, 大家如果想自己手动去下载的话,可以点击这个网址,就是这个。这里这么多模型,大家具是否要全部下载呢?嗯,如果你的储存空间够大, 你全部下载是没有问题的。如果你的储存空间有限呢?我教大家下载哪个?这边一个 candy 模型就有三个版本,这三个模型肯定是负的,效果是最好了,但是如果你的现存或者内存不足的话,你可以下载这个密的, 它效果也是还 ok 的,但是和副比的话还是差了一些,最大的这个需要二点五 gb, 所以大家这三种啊,根据自己的内存来看,内存足够多就下载, 内存非常非常少就下载 small 这三个选择一个下载就行,然后这也是 depth, 下载其中一个就 ok 了。然后接下来这个 recolor 啊,还有后边这个 ip, adapter 等等等,等到这些 co 呀,建议大家都下载,因为这些是他们的一些新功能, 而且占的内存不是很大。然后接下来是 saxl, cany 这些这些呢,建议大家去下载带有二五六这个数字的版本啊,因为他们是一样的,只不过二五六他的精度会更高一些。然后剩下的所有模型啊,大家都可以去下载,占用的空间也不是很大,如果你的内存足够高啊,几 tb, 十 tb 的话, 你就全部下载就好了。那这些具体下载到哪里呢?我们到 y b u i 的根目录,然后找到 extensions, 然后找到 control night, 找到 models, 把它们全部下载到这里。下载完成之后呢,在使用的时候可能还会 需要你再下载一些模型,当然都是在使用的时候自动下载的。大家如果下载时遇到网络不好,或者懒得一个一个去下载,你们可以直接下载我网盘里的文件就 ok 了。我已经给大家准备好了下载网盘这个 downloads 文件夹,然后把 downloads 文件夹放到这里,直接代替你原来的 downloads 文件夹就 ok 了。 这是怎么去下载?那怎么去更新呢?请看我的上节课啊,这个有具体跟大家讲,然后就是 ctrl nine 这个插件也要更新到最新版本,到我们的版本管理扩展,然后点击一键更新,然后确定一下就 ok 了。如果你是 automati one one one one 的话,我们就点击扩展检查更新, 然后应用更改并重启就 ok 了。怎么让那些显存低的那些人使用到 s d x l 呢?如果你是 automatic one one one one 部署的话,我们到根部路往下拉,找到 y v u i, 点 user, 点我们右键点击编辑。如果你的显存是在四 gb 到六 gb 的话,你就在这里边写,杠杠 low viram, 这两个不要同时写啊,你写其中一个就好了,根据自己的显存四到六 gb 写 刚刚的 low virum, 八到十二 gb 写这个。那有的人问了,那我是启动器怎么办?启动器的话我们直接在这里选就行了,这边大佬已经帮大家改好了,就是仅 sdxl 中等选择 就代表 mat viram 杠 s d x l, 然后显存不足,低显存的话我们就选择这个低显存就 ok 了。 这边实际币的话,我是选择这个的,我们选择完之后就可以点击一键启动了, ok, 启动过后我们就开始看到了我们美丽的 ybui。 然后上节课有跟大家讲过,怎么让你本地电脑渲染的图片和别人本地的电脑渲染的图片一模一样的,我们讲到一个 n nv 这个选项是他们唯一点六新更新的,对不对?当时我没有跟大家演示,但是今天跟大家演示一下啊,比如说这张图片啊, 我们如何一比一的完全复刻在我们本地跑出来跟 stability ai 这个官方出了图片一模一样呢?第一点,你是 v 一点六版本,我们更新完了过。第二点,我们要用的模型是 s d x l base 一点零,当然是这个就是 s d x l 的官方一点零模型, 这个我会放到网盘里面啊。第三点,我们要到我们的设置里边,然后先点击显示所有啊,因为这样子方便我们去搜索。第一点,我们要搜索 random 这个单词,我们 ctrl 加 f 啊,右上角会出现一个框框,我们输入 random r a d o m, 输入 random 这边之后呢,我们要把它变成 c p u。 所以说我们现在型号的显卡可能跟对方使用的显卡信号是 不一样的,所以我们如果想在不同型号显卡产生相同图像,就点击 cpu 这个选项。然后接下来我们要再 search s g m, 我们输入 s g m, 然后找到这个选项,我们要勾选这个,使用 s g m 勾选,打勾勾就证明你就对了。然后接下来我们搜索 deterministic, deterministic okay, 这个选项是不勾选的啊,不勾选这个选项, ok, 一个是选择 cpu, 一个是勾选 s g m, 最后是一个不勾选这个,保留 d p m 加加 s d e 这个选项。 我们如果都完成之后,我们点击保存设置这边,因为我更改过了,是零 setting changed, 如果你之前没有更改过,这边会显示一些文字。 ok, 点击保存设置之后,我们点击重载 yby, 就是这个按钮啊, reload ui, 重载完之后, 我们就开始看一下今天的重头戏了啊, ok, 我们来直接复制一下这边呢是他的 metadata, 就是原数据, ok, 原数据,我们把这些全部复制到这边,之前我可能没有跟大家讲,我们直接点击这个键,他就能把所有的 关键词啊,负面关键词、参数、迭代步数、采样器全部复制到这边。 ok, 你看已经复制过来了之后呢,我们直接点击生成,看一下他做出来图片是否会跟这个一模一样,好吧, ok, 图片出来了,我们看一下,我们做一个对比啊,左边是我做的,右边是 stability ai 官方做了这个图片可以看出来啊,我们把所有原数据 copy 过来之后,几乎是一模一样的,当然了有很多微小的不同, 可以玩找不同啊,这个反光点上的线是不一样的,当然这些不同都是很微小的,那么这点我们能看到什么呢?之前很多 小伙伴找我啊,就问老师,为什么我比如说 c 站上面看到的图片,我把他们的所有正片,关键词,采样器啊,种子等等复制过来,然后到我的本地上出的图片就是完全不一样的。未来的模型网站上,不管 cbt, ai 啊,还是正合我们国内的模型网站,有了这个功能之后呢,几乎大家可以 一比一的复刻他出了一些图片了,这是一个新的小技巧啊,接下来我们看一下,官网也有讲到,如果你是使用 confu i 具体怎么操作, 他这边也会告诉你,然后这边他就是告诉你 automati one one one 和 confi ui 的一些具体的一些表现,区别在哪里,大家有兴趣的话可以看一下这边啊 这个页面啊,大家一定要好好看看。他讲了几乎所有新的 ctrl net 模型的具体使用方式,还有一些小技巧,下面我给大家讲一个这个,这边讲到 就是一些 xl 的这些 ctrl nine 模型啊,不只是这个 ctrl nine lores, 这个里可以理解为还是在实验阶段,而有的时候 give fight result。 这里翻译成并不尽人意的一些结果。其实我们给他了很多的负相关键词, 比如说这个啊,我给大家举个例子,把它直接复制过来,然后我把这边复制一下。这边他给的这个小技巧还是很有意思的啊,好好听一下。然后我们到这边找到他的抗生耐模型,这边用的 canning, 然后 s a i x l 这边用的 canning s a i x l ok, 这个还是 no, 这边 s a i x l kenny 二五六了啊, ok, ok, 这个时候我们生成一下,看他的图片是什么样子的, ok, 我们看一下,我们的关键词是一个女人在街上走路的照片, 天,然后负面关键词是 enemy drawing, 我们主要写这个 drawing 就是不想让他变成绘画的形式,然后 bad ugly, 但是他最终还是变成了一个绘画的形式。那么这种情况大家如果遇到了,怎么解决他呢?首先你可以把你的 control mode 改为 ctrl net is more important, 就是把控制模式改为更偏向 ctrl net 但是大家要知道啊,如果你改成更偏向 ctrl net 的话,那你一定要把这个 cfg skill 给调小调低一些,要不你的图片会出来的会稍微怪改到三,然后我们再试一下, ok, 像这张就会好一些,对不对?所以如果你在使用 ctrl nice 的时候也遇见了相同的问题,可以试用一下这样的方法去解决它, ok, 然后下面如果说你在使用 sd xl 的模型的时候,比如说 这个模型 diffuser xl deps 负它这个模型是非常大的,如果你的显存啊是在八级币或六级币左右的话,你一定要把这个 low v room 勾选上,如果没有勾选上的话,你可能会报显存, 因为在前两天我做测试的时候,可能后台打开的程序比较多,我那会是爆显存了。如果遇到这种问题,你先把外部 uik 重启一下,然后再勾选到这个低显存模式,再出图会好一些。然后接下来我们看一下其他的一些模型啊,我们看下这个 revision 是干嘛的?在使用 revision 的时候,这个 revision 会自动帮你下载一些东西,你不需要主动下载,它会自动下载 revision 怎么用呢?它就是让你的一张图片,你在不使用任何关键词的情况下,生成一张类似的一些图片,比如说我们把这个复制过来啊。模型,我们用这个 revision ignore prompt, 他这 这个专门的模型就是在你使用 ctrl night 的时候,不需要使用任何的 prompt 就能给你出一张图片,我们点击生成一下, ok, 做好了,大家可以看到,就是没有任何 prompt, ai 自动识别到这张是一个狗的图片,呃,并且整体的颜色色调也是很像的,比如说狗身上的毛啊,毛发呀,还有耳朵怎么垂的很像, 我这张属实有点像一个秃头的人了。所以这个 ignore prompt 可能还需要更多的一些间接。当然了,我们使用 ai, 特别是 sd 的时候,我们 肯定是会用到 prompt, 如果我们再稍微加一些 prompt 的话,把这个模型换成这个 revision clevision 的话,会好很多很多。这是它这个 revision 模型的一个介绍。然后接下来我们看一下这个 t r i adapter, 它就是让你的线稿 成图,比如说这张线稿你放进去之后,使用这个 t r i adapter xl kelly 模型,它就会把它变成一个有色彩的图片,就是线稿生图。 接下来讲一下 ip adapter 这张的话,就很适合那些做漫画的一些人使用,比如说我们把这张图片拖过来, ok, 这边就要使用预处理器啊, ip adapter keep, 这个在使用的时候,如果是第一次使用的话, 还是需要下载这个模型的,它会自动下载啊,文件是非常大的。我们这边改成 sd xl, 这边也改成 xl。 这个模型我们看一下它的神奇之处,就是让 ai 参考这张图片的所有细节,然后生成一个全新的图片,并且细节和色彩、构图等等都是很相似的。 ok, 我们看一下左边是原图,右边是新出来的图片,我们可以看到整体的盔甲几乎是很相似 的,对不对?当然你你要找这些细节,这边有个键,这边没有键,的确是不一样的,但是整体盔甲质感呢,颜色是不是都是很相似的,并且构图也是很像,就是当我们想用一张图保留他的完全细节,但是换一张脸的话,而且这个脸并不是指定的话,你就可以用这个 下巴,这个 stable diffusion 一点五,他是做了一个对比啊,具体效果我觉得还是 xl 的效果会更好一些,大家这个可以去对比一下,然后接下来这个 reference only, reference only 的话也是有点像,就是还是从原图的基础上生成一个不同人物的图片,相似构图,相似场景,相似细节,这就是他的特点。 ok, 下面给大家讲一下这个 recolor 吧。 recolor 还是比较有意思,这个模型可以让你的黑白照片上色,我们直接拿它作例子,然后把关键词复制一下,然后模型这边选择 recolor loominess, 然后 sai xl, ok, 然后我们点击生成。 ok, 我们看一下是不是右边的图片,直接就给左边图片上色了。所以大家如果在家里有一些父母或者爷爷奶奶一些黑白的老照片想给他们上色的话, 其实大家就可以用这个 recolor 这个功能,这个大家下去一定要试一下啊,这下面就讲的 recolor 一点五和 xl 的一个区别啊, xl 做的会更真实一些,一点五它的饱和度会更饱满一些, 根据自己的需求去使用,好吧, ok, 今天主要是大概的跟大家讲一下兼容 sd xl 的 ctrl nine 一些新的模型的使用方法。 其他的 open pose 呀都是跟以前是几乎是差不多的,只不过说他们会有一个新的模型兼容到 s, d, x, l 而已。比如说我们在使用 open pose 的时候,这边还是往 往常一样的右边呢,我们就可以使用这个 openpose xl 这些模型,只要是模型里面带 xl 的,都是可以兼容 xl 模型的。 接下来给大家讲一下很重大的事情,第一点就是我现在云端镜像正式部署了 rtx 四零九零的云端镜像,并且我为大家争取到了 ai 小王子的专属优惠,只要是通过我的邀请码注册的用户,现在不只是可以获得优惠券,并且额外可以收到两张满减券, 在包月四零九零的时候,会有一九九零减两百的优惠,比八折还更猛一些。所以如果你的朋友或者身边的人也有云服务需求的话,可以把我的邀请码分享给他们。目前四零九零啊,全网只有我一个人不说, 怎么去添加呢?如果你已经有了青椒云的客户端的话,我们点击华南五,然后点击新增云桌面,找到这边的定制产品, a igc 超全部署 ai 小王子 g 专属定制,因为这四零九零他们的数量是有限的,目前只能包天,不可以包时,包周是六百五,包月是一千九百九十九,然后或者包月计时, 如果你要使用的话,其实用包月计时还是比较划算的啊,然后我们换到西南,西南这边也是一样的啊,我们点击新增云桌面往下拉找一下 ai 小王子 j 专属定 这边的话就是三零六零的一个显卡,所以相对于 a 四千会便宜一些,两块二一小时,他们包天的话是三十七块钱,包月计时是五百。具体怎么注册和使用教程可以看一下我的这期视频,然后注册连接呢?我会放到我的视频简介里边供大家去使用, 所有都给大家部署的非常全非常好,大家一定要上去体验一下。大家有的时候在使用一个服务器的显卡的时候,他可能会遇到这个当前人数过多,无法 打开的问题,原因就在于使用人太多了,所以你要不晚点试,如果你着急用的话,你可以切换到其他有我镜像的服务器,比如说有华南寺或者西南都可以, ok。 第二个 ai 小王子非常重大的更新,就是 ai 小王子 qq 频道今天正式上线了啊, 目前我还没有做推广,所以在看我视频的朋友,你们是第一批人看到的,大家进来之后看一下城堡重要公告啊,因为讲解了每个频道的一些使用方法,具体是怎么使用,可以在这里看到我的其他平台的账号,然后交流区啊, 早安午安问候问候区,我给大家创建的,如果大家有任何关于 ai 的问题的话,到这里交流,希望大家在这个社区里一起交流,互帮互助,如果大家遇见了别人问的问题,你也遇见过的话,希望大家伸出援手啊。然后这边还有交 交流大厅,模型炼丹,然后吐槽 ai。 我每天都会在这个交流群里边,然后希望和大家一起交流,然后这边还有模型分享,模型推荐。然后这边就是一些皇家 ai 资源分享,这个和我的 disco 城堡一样,也是勇士身份才可以解锁了,有这个 me journey 资源很多很多, 然后 stable diffusion 资源,拆 gpd 资源,还有其他 ai 相关资源,我都在这里边汇总了很多啊。然后想要成为勇士的话,可以看一下这个频道,我想成为勇士解锁资源。 接下来下边呢,就是一些建议区,比如说我想让 ai 小王子做的更好,这两频道我会经常关注的,因为我希望大家多给我提些意见和建议,让我在 ai 自媒体的道路上做的更好,比如说视频哪方面要做 家呀等等等等。这边社区建议和意见相就是说,比如说你想开创一个新的频道,或者说如果你在这个频道 qq 频道里边交流, 有的时候遇到哪些人恶语相向啊,污言秽语等等等等,说了一些不该说的词汇等等,你都可以在这里边跟我讲,然后我会做出相应的决定,给他踢出去或者禁言等等等等。 大家在这个社区里,我希望这个社区是一个美好的社区,大家互帮互助啊,友好交流,好吧,进入之后记得点击一下上方的加入频道,不点击的话你就会自动退出来,记得来这个友好交流大厅讲一句话啊,跟我打个招呼,好吧, ok, 那今天就讲到这里啊,菠萝蜜让你轻松掌控 ai。

stable diffusion ctrl 耐力一点一更新了,更新了一大堆模型,效果就一个字,太酷了!但是我有一个朋友安装了一整天都没有装好 以前的插件,只要网络安装一键粘贴就可以了,这次还是有点难的,猴哥做个教程,大家一定要仔细看,赶紧收藏。这是一个系列教程,这就是 ctrl nine 的一点一详细安装教程。首先是插件的安装,这里要说一下,这次插件的安装就特别烧脑,很容易出错,思路一定要清晰。这里一共分三个部分, 一装插件,二装预处理器模型三 ctrl net 模型第一,先看一下装插件,找到扩展,从网址安装,输入这个地址,点击安装,安装完成重启界面,如果你以前装过这里点检查更新。另外还可以从网上下载放进目录里,这种方法很多人容易放错地方,还是推荐用这个在线方法安装。 如果你用的是秋叶整合包,在启动界面,点击版本管理扩展,在右边点刷新,一键更新就 ok 了。欧耶,你以为这就完成了吗?年轻人还是太年轻了呀!第二步是下载预处理器模型,下载地址是这个,这里有大有小,全都下载。 然后重点来了,就是在你的插件目录的这个位置当烙的文件夹里,要手动的建立左边这些名字的文件夹,然后把右边相对应的名字的模型放进去。 说实话就建立文件夹,这个操作就对伸手党来说实在是太难了,就高考都没这么难过,就你做插件,你不能建立好文件夹让大家下载,直接放进去不就好了吗?其实很多人都卡在了这一步,就猴哥的建议是,如果你用的秋叶整合包,就直接跳过这一步, 就是在你用对应的预处理器的时候,他会在线下载,他会自动的建立文件夹放进去,这里时间最长的就是这个 zoe 模 行,他有一点四四个 g, 在你下载的时候,你可以看这个后台,他有个进度条,等他下完就 ok 了,还是整合包比较傻瓜一点好。来到第三步,下载数据模型,他的下载网址是这个,这个地址呢,有一大排的一点四五 gb 的模型,就都点击这边的下载打包带走,都下载之后放在自己的这个目录下面, 注意看自己目录下面有没有这个点, yaml 文件,秋叶整合包里是有的,如果你没有,就连这个一起下,这个非常小。另外呢,有些教程里呢,有些地址是这个半精度模型,这种七百兆的模型,建议直接一点四 g 搞起哦,安装完毕。好,下集我们说 controlled 一点一怎么用?

ctrl net 最新一点一版本带着新增的多种域处理器和模型更新了。跟着我带你轻松更新到最新一点一版本以及最新的十四种模型。 首先是直接在 webui 扩展或者启动器版本管理扩展中直接检查更新,但有小伙伴可能会发现无法进行更新,显示非 git 安装,这时就需要到 github 中搜索 control net 复制网页地址到 webui 中安装,或者下载压缩包,手动解压到插进文件架,网络不好的小伙伴也不用担心,都给大家准备好了。 下载好插件本体后,还需要下载对应的新版模型,并放入指定文件,加重老规矩已打包。最后进入 wibui 就能看到一点一版本新增的多种新功能算法了。

大家好,我是灰灰老师。今天我们讲一下如何安装 control net 插件。 control net 是基于 ai 绘画工具 stable defusion 推出的一款功能强大的王炸级插件。 他为图声图功能引入了新的控制方式,可以额外控制人物的具体姿势、景深、线稿、上色等等,可以更稳定的控制画面。 大家看一下这张图,左侧是文声图生成,右侧是使用 control net 插件根据左侧生成的类似图片,中间则是原图的限稿图。 图中同一张脸换了不同的发色、画风。等。我们再来看一组左侧是网上随意找的线稿图,后两张是用 control net 处理后的图片。如图所示, control net 可以让 ai 根据线稿精确绘制效果图, 还可以根据底图生成同样姿势的不同人物。 control net 插件的强大之处远不止于此,接下来我们教大家如何安装插件,这里会讲到两种方法,大家自行选择即可。一、打开 git code 网站, 进入主页后下拉我们找到 control net 插件, 返回页面上方点击克隆。根据自己的操作系统选择下载原代码类型。 windows 系统选择 zip 格式进行下载, linux 则选择其它三个选项之一下载。 我选的是 zip 下载。下载好后,打开文件夹,先将文件解压, 解压完后把该文件夹拷贝到你的 sd 安装目录下, 双击 a 启动器进行启动。这时进入 vip u i, 在文生图界面的随机种子下方就能看到 control net 插件,点击箭头就可以使用插件了。也可以进入到扩展,在已安装列表中查看到插件已经安装成功。 第二种方法打开 vip y, 点击扩展,在可用下方点击加载字按钮, 这时候页面下面就会出现一系列的可用插件。快捷键查找 control net, 找到 control net 插件并点击安装。 安装完成后,插件面板会显示已安装,需要重启。下界面。 在已安装列表中查看到插件,代表已经安装成功。也可以返回主界面。在随机种子下方确认 control night 是否已存在。 大家有任何安装问题,可在评论区留言,随时解答,我们下期见。

上期视频中我们讲到 control 内的安装和一些注意事项,本期视频开始给大家分享 control 内常用的几个板块之一,限稿轮廓篇。在 control 内里面,处理器种类共计有近二十种,每种细分下去多达四十四种。初学者乍一看可能会直接看蒙,但实际上当你熟悉了之后,你会发现其实就几类。 而我们今天要讲的也就是包含类型最多的一类,也就是线稿轮廓类。在这边,姜子把硬边缘、线稿、软边缘、涂鸦这四类归为一类,顾名思义就是捕捉图片的线稿和轮廓特征的处理方式。我把这四种处理方式在同参数下 简单的给大家列一下默认设置的对比效果。其实单看这个处理后的轮廓图,我们也能明显感觉到线稿是最接近原图的,硬边缘和涂鸦线条则偏硬朗,对细节捕捉不明显,软边缘则适中。而从出来的图片我们也能在 再次感觉到细节也是有区别的。一般来说,如果你希望 ai 生成的图片和导入的图片越像,那我们就选择线杠或者软边缘即可。而如果你只想让 ai 参考下你的图片, 那我们可以选择硬边缘或者涂鸦。总而言之,我们可以通过灵活切换,点击爆炸图标预览效果图来对比不同的图片,最终选择最适合你想要的效果。当然,说到这,可能有小伙伴会问,每个处理方法里面还有选项要怎么区分?造孽。 为了方便大家使用,姜子推荐用线稿模式来,以不变应万变。话不多说,给大家看下线稿模型里面的几个选项,我们可以明显感觉到粗线稿和之前的软边缘很像。 其他几类比如动漫线稿就是专门处理动漫风格的照片,写实则适合我们。这张图标准线稿就是比较通用全能,那我们如何去区分使用呢?首先 第一要义就是看哪个现搞出来的效果更满足你的需求。然后我们再可以结合 controlnat 权重来进行调整,这就是在权重唯一情况下布写正面提示词生成的效果。图片, 这是权重零点八,这是权重零点五,这是权重零点二。这里我没有写任何提示词来限制 ai, 我们可以看出随着权重的降低,生成的图片和参考图越不像。按这种逻辑,我们就可以去通过微调权重来调整画面的细节,也就可以代替一开始我们介绍的硬边缘和涂鸦的效果了。当然我还是建议你多去尝试和替换使用,来找到最合适自己的办法。下一期我们将继续更新深度图片,大家点赞关注起来。最后 在视频的结尾处给大家带来了姜子亲手写下的万字 s d 教程,需要的话请关注我哦!

ctrl net 预处理模型整合包哈喽,大家好啊,呃,我前面帮大家总结了一下 ctrl 报错的原因和解决的方法啊,有同学想让我打包好这个预处理模型发出来,那我今天就打包好发出来了,但我也希望咱们换一种方式来说这个话好不好。 那首先,如果我们遇到的是这种爆错,那我们就可以先下载我打包好的网盘文件啊,网盘链接在简介里,或者你也可以在我的粉丝群里找到, 我们确保已经更新了。 control net 然后打开外表 ui 跟目录 extensions control net annotator 文件夹,把我网盘里的 downloads 文件夹啊整个拖到这个文件夹,它会覆盖你原来的 downloads 文件夹啊,所以这里就选替换目标文件, 然后我们再去用这些玉处理器就都可以了啊,其他的教程都可以在我主页找到。那我们下期见,拜拜。

这是 controlnet 最强大的模型,最近刷屏的游戏装备高清重绘、光影、文字生成艺术二维码、二次元、 coser 转真人都用到了这个模型,而这只是他的冰山一角。跟着我,一分钟带你系统掌握强大的泰欧模型,使用 tao 是瓷砖的意思。他的原理可以概括为,将一整张图片分割成一个个小块进行分别处理, 能对每个分块图片的内容进行识别,控制构图和颜色,补充局部细节,还能避免全局提示词对每个分块的污染,以解了原理。下面我将介绍三种经典使用力。第一种,对低分辨率图片修复,选择与修复图片画风接近的模型 提示词,对图片内容进行描述,设置你要修复的宽高分辨率,把要修复的图片传入 controlness, 启用 tail, 点击生成即可。第二种,根据参考图对构图色彩控制,实现文字融合、二次圆转写实等图片效果。想要对颜色更好的还原,可以选择 tile、 下划线、 color fix 这两个预处理器。此外,如果要保持构图不变,实现人物场景、画风变化,可以添加要变化的提示词描述模式选择 prompt is more important, 点击生成即可。 第三种,对图片高清放大,把要放大的图片上传到图声图同绘幅度零点四左右。 control net 上传原图 脚本,选择 ultimate sd xq, 选择放大倍数和放大算法,点击生成即可。这种结合 tile 的分块高清放大方式,不仅显存占用低,而且重回复度可以设置较高,画面细节更丰富。我是局大,分享更多 ai 干货!

ctrl net 带来了全新模型 ip adapter, 这款模型的效果与大家熟知的名人九点电图呢很相似,但功能更加强大。 ip adapter 主要有三大核心应用,纹身图、图身图和局部重绘。而这还只是开始,你还可以结合其他控制器如深度信息来控制造型, 或者添加提示词来获得更丰富的细节。更酷的是,你还可以和第二模型结合,创造出独特的风格混合效果。 下面我将通过一个实际案例为大家展示如何运用 ip adapter。 首先呢,确保你的 ctrinet 和 obui 都是最新版本。接着访问哈根 face 网页,点击这里下载 ip adapter 模型, 打开未必 y 界面,选择 s d x l bass 模型。为了最大化 i p a w 的潜力,我这次不使用提示词,采用选择三 m s d e carras, 步数设置为三十。别忘记点击 refiner, 使用 s xr refiner 模型来增强图片信息分辨率为幺零二四乘幺零二四,输出四张, 进入 ctrl net 上传你的风格参考图,点击启动和完美像素,选择 ipadat 作为控制类型。这里要记得选择与 sdxl 匹配的处理器和模型。再打开一个。 ctrl net 上传一张图片,这里选择 dett 控制类型,利用深度信息作为造型参考。 点击生成,我们就成功的将珍珠少女的风格迁移到第二张图片上了。是不是很简单,个人体验下来呢?感觉 ipadapper 有增强版的 reference 的意思,现在相信你也可以轻松做到这一切了。感谢大家观看我是夏深,探索 ai 在各领域应用前景的夏深。

今天我们来说一下我们 contonize t two i color 模型的使用,我们的这个 color 模型呢,可以根据我们的素材图片生成这种颜色色块的这种控制模型,来帮助我们 生成真实人物场景的图片。它的原理呢是提取素材图片的颜色进行猜测模式,加上我们提示词的描述,进行一个结果的生成。提示词的描述呢,一定要描述你想生成的结果, 比如说我们缩在图片上红色的衣服,你提示词里面呢,将红色衣服还有红色的裙子给他描述准确, 并且加上一些权重,能够达到模仿原素材图的这种效果。如果你想更改原素材图片上的效果,比如说想给他用,想给他用红色的衣服,想给他用白色的衣服, 白色的裙子呢,你再提示四个的修改描述就可以了。这是我用 ps 在随便找了一张背景的图片,在前面呢大概 用色块画了一下人物颜色的一个形状,我们来看一下生成的这个结果,背景感觉非常的好看,但是呢,他这个背景图片呢,和我们素材采用的素材图片啊,有一些出处有些不一样, 当然这个风景还是挺好看的。 那么左上角呢,有时候也会给我们随机生成一些人物, 你只需要描述一下我们画的这个人物是男是女,他穿着一件 黄色的什么衣服啊,或者 t 恤啊,或者是衬衣啊都可以。那么至于生成人物的这个样子呢,主要取决于你选择 chickpoint 模型是哪种真实人物模型。好了, 那么今天的分享呢就到这里,觉得有帮助到大家的话,那么请点击关注加三连,我们下期再见。

大家好,我是猴哥,上集说了怎么安装 ctrl net 一点一没有安装明白的看上一集,这节我们说一下 ctrl net 一点一怎么用 ctrl net 正确安装之后,这里会有个选项,点开当这里就是插件面板了,上面是参考图窗口,拖入参考图像, 左边就是预览图,下面有个启用,把它勾选,第一选择优化就跳过先看最后面这个叫允许预览勾选。哎,中间这里呢就会出现一个爆炸图标 设计真的是匪夷所思,这是哪个小机灵鬼想出来的?预览就不配有按钮吗?预览骑士感觉就是临时加上去的设计,估计后面还会改。点击这个爆炸图标,右边就生成这个预览图。好,我们回来再看这个完美像素,这是一个新加出来的选项,名字就很神奇。 本来呢,这下面有一个拉杆生成与卵图的分辨率,拉杆往右就会更精细,但是需要更多的时间和显存,默认是五幺二,我们生成一张图, 再拉到八百,我们再生成一张图,我们看到这个图呢,就比之前的要大,要更精细。然后我们点一下这个完美像素,他的结果就是和五幺二是一样的,所以这个五幺二为什么就是完美的呢?如果你的显卡一般可以勾选这个选项,下面的拉杆就是眼不见心不烦, 头显卡直接拉满。再往下看,生成预览图的策略控制模式,第一个是平衡,第二项呢是更偏重提示词,第三个更偏重于 ctrl net 生成的图像控制,一般来说就选这个平衡就可以了。 另外,这 controlled 一点一的模型命名的规则非常的复杂,其实根本不用管他,只要注意后面这个绿色的部分他是什么模型就可以了。好,下集我们说一下 controlled 一点一的 candy 模型怎么用详解。

接下来是 open pose, 也是大家经常用到的一个功能,简单的说就是判断主图主体的骨骼肢体动作,然后将动作附加在我们要出的图上。我们在使用这个功能的时候,一般配合另一个插件 open post editor, 这个插件可以让我们自由设置人物的动作。我们呢先介绍一下这个插件,这个呢就是这个插件的界面宽度和高度啊,就是调整我们这个画幅的大小。 添加就是添加我们画面上要有几个主体人物啊,点一下就是添加一个模型,点两下就添加两个模型, 就这样子清空画面,正常的清空文件。加载就是如果我们有从朋友拿 那里搞来的这个动作图啊,我们就通过这个地方,点击这个地方来进行加载。三个是图片识别,从图片识别动作,我们选一张图片, 稍微等一会啊,他就会识别出我们的这个动作来,但是他这个识别动作多少有一点 bug 啊,给大家演示一下,他在这个半身图的上面 经常会出这个问题啊,你看我们大家看这个腿这一部分就翘起来了啊,那么我们就手动的把它拉下来就可以了。 第四个呢是添加一张底图,可以让我们按照这个底图的模式,这个样子来摆这个,来摆这个造型, 行啊,在这里呢,我说一下 one pose 的这些彩色点位所代表的人体关节是一一对应的,大家呢也可以大概地看一下,大概记一下它的这些颜色和这些点位代表的含义。 比如中间这两个紫色,粉色就是两个眼睛,两边呢就是两个耳朵,蓝色点位代表鼻子,大家把这个大概要看一下,因为可能有的时候我们需要多个这个人物出现在一张画面上,可能画面就比较乱。 最后呢是这个纹身图和图声图啊,我们需要这个动作去拿,我们就接下来呢,我们就用这个动作来生成一张图片,在生成图片之前我们需要注意啊,这个 openpose 在检测完这个原图的动作的时候,或者是我们从插件导过来的时候,这个 处理这块要选捺啊,要选无,然后模型这块依然保持 open, 我们点击生成 啊,大家看到这个图片就和这个造型基本上是一样的,我们再换一张图来看一下效果。

大家好,我是灰灰老师,这节课我们来学习。 control net 中域处理器的不同功能,先来简单看一下这些域处理器的结果,根据这些域处理结果,我们可以将这些功能大致分为线条、深度、姿态、色块、风格五类。 第一类,线条, canni 边缘检测,能提取出精细的边缘轮廓,常用于生成线稿线稿上色。 h 特边缘检测,保留更多边缘细节,类似手绘效果,适合重新着色和风格化。 m, l, s, d 线条检测,检测直线,适用于透视结构明显直线和棱角多的场景,例如建筑、室内设计等。 pyteed net 边缘检测,像素差分网络配合 h 特模型,生成的线条 较粗壮,类似雕刻效果。 scribo 涂鸦,主要用于对草稿的处理。 fix creable 伪涂鸦,生成类似涂鸦效果的草图线条,可以用于材质细节上的调整。 第二类,深度 depth medas 深度信息估算,省略细节,生成深度图,表达前后的远近关系,越白的越靠前,越黑的越靠后。 depth layers larry's 深度信息估算与 medas 相似,但是会保留一些细节。 normal map 法线贴图,生成记录物体表面凹凸信息的法线贴图。第三类,姿态, open pose 姿态检测,提取人物骨骼姿势,生成骨架图,控制角色的姿态动作。 open pose hand 姿态及手部检测,增加了对手部骨骼的检测。 第四类,色块, color 色彩检测,参考图中色彩的分布情况,生成色块图。 segmentation 语意分割,用颜色把不同类型的物体进行区分,每个颜色都代表固定的物体。 b, n a。 提取黑白稿,把图片变成黑白两色。 第五类风格, clip vision 风格转移没有预览,把参考图的风格转移到生成图上。 现在我们通过实际操作来看一下 kenny, ached, scribo 之间的区别。先填写提示词,调节参数, 勾选启用按钮。首先是 canny 模型选择 control canny 选择与处理器后会发现这里出现了三个 canny 的特有参数, annotator resolution 与处理器分辨率。数值越高越精细, 数值太低生成的线条会很粗糙。 kenny low threshold kenny high threshold kenny 的最低和最高。预值值越高,检测到的细节越少,值越低细节越多。 这三个参数一般使用默认值就可以出现不错的效果,有更高要求的小伙伴可以多做尝试,根据使用情况进行调整, 然后调整下画布宽度,高度和上方的宽高保持一致,点击生成。 现在再来试一下 ached 模型选择 control ached, 这里也出现了三个参数, ached resolution 与处理器分辨率也是数值越高越精细, 越低越粗糙。 我们这里就使用默认值。 与 canny 不同的是它的 threshold a, threshold odb 是不可以调整的,点击生成 可以看到它的处理结果和 canny 不同, h t 有更多边缘细节,是类似手绘的效果。 最后我们来看一下 scribble, 这里同样出现了三个参数, annotator resolution 与处理器分辨率和之前相同,我们这里使用默认值,它的 threshold a, threshold b 也是不可调整的。 使用 scrabble 时,我们可以直接用这个空白画布进行涂鸦, 或者直接上传草图。记得勾选反色模型,选择 control s d。 十五 scribo。 我们先预览一下预处理结果,可以看到它是一种草稿的风格。生成图片, 我们将生成的三个图像放在一起进行对比。可以看出来, candy 主要是检测轮廓,会很精准地还原线条,轮廓与权重进入时机重绘幅度配合可以达到锁定效果。 h t 会在边缘保留更丰富的细节,更接近参考图。 scribo 则主要用来直接处理线稿,一键上色。这节大家自己实操去对比一下,我们下期见。

五分钟学会给你推 point! 哈喽,大家好啊,今天给大家展开讲讲 sd 最牛的插件之一 ctrl net 的用法。呃,我们在画图的时候可能用题词或者各种模型都达不到我们想要的这个样式,那我们就可以选择用 ctrl net 来控制。 我先用一个例子来帮大家理解一下 controllight。 那现在我说,呃,我模仿一个人的提示词和 lora 画了一张图,但是呢,怎么都不像 这个姿势啊,轮廓呀啊,都挺有差距啊,也不好看。那我们就在下面啊,展开 ctrl nine 插件,我们在预处理器这边选这个 line art realistic, 右边的模型呢,选 选蓝二特,然后把它的图拖进来,勾选启用,选择完美像素模式,再去生成一遍图试一下。 哎,我们看这回我们说就跟他的图比较像了,我们点这个允许预览,然后点这个爆炸的这个按钮,预处理的图就出来了 啊。其实这张参考图呢,就是先经过了这个这个预处理啊,被提取了限稿,然后限稿图呢,再被送入右边的模型,这样来控制我们出图的样子。 所以我们这张图其实是在模仿他线稿的啊这个样子,然后颜色啊,质感这些,我们可以用自己的题词词或者其他什么的去控制了,对吧? 那其实这就是 control net 的一个基本的或者说抽象的一个原理,抽取参考图的某一特征,然后用这个特征去控制出图。 那我们知道这个原理之后,我们的其他的需求就可以通过其他的预处理器和右边的这个模型 去满足了。那这些预处理器呢,都各有强项,比如我们想模仿这个人的姿势,那我们就选这个 dw open pose 预处理器 啊,那生成的图像就这样的,那我们发现他提取了参考图的姿势骨架图,然后模仿,对吧?但是其他的东西那不归他管,那如果我们想模仿他的景深,就用 depth, 然后我们换一个二次元的模型,那出来的效果是这样的,这个模型呢,更适合对整体的构图去复刻,而且他还很适合换背景。 方法就是我们点这个爆炸的图标啊,这个景山图就生成了,然后点这里的下载,把那个图存到本地, 用 ps 抠一下啊,简单抠一下,换一个黑色的背景,再把这个新的净身图拖到左边这个面板里,然后记得关闭预处理器,因为这图已经不用预处理了。 我们在提示词里面描述一下海滩的背景,然后生成。那现在图片换成海滩背景了,那其实其他的与处理器也都是同理 啊,你是可以去这样自己去修改这个图的。那有同学说,呃,我也不知道具体要模仿哪个方面啊,就想整体都模仿,那我们就选这个 tao v 三 pro。 好,我现在画一个 one go, 然后模仿这张图, 那出来的就是这样的效果,那这就是整体的模仿。还有个比较特殊的,比如说我们要模仿建筑图的结构,可以用这个 m l s d 发现贴图,我们拿一张建筑图来模仿,然后提示词描述一些我们想要的风格,那出来的效果是这样的。 那其实这个与处理器是比较擅长提取图片中的直线的啊,他对曲线不是很敏感,所以在建筑图 图里面啊,他有奇效。那其他的预处理器和模型大家可以自己再去试一下,效果呢?跟这上面这些差不多, ok, 再说一下其他的参数都是干嘛的啊?首先这个 unit 单元这里呢默认四个单元,就是说我们可以同时使用四个 ctrl night 啊,要用哪个就在哪个里面勾选启用就可以。然后这个低显存模式,比如我们显存就四个 g 啊,那这个还是打开吧, 你要六个 g 或者八个 g, 可以不用开这个完美像素模式,是控制预处理的精细度啊。举个例子,我把这个先关掉,然后在下面我就可以手动调了。那调个低一点的分辨率呢?他预处理出来的就是这张啊,比较比较 粗的,然后高分辨率就是这种扣的很细节,然后控制权重,这个就很好理解,我们看刚才那张图啊,在高低权重下的一个对比。 再就是这个介入引导时机和退出引导时机。那这个呢,是默认从零,也就是从刚开始就开始控制,后面是一,就是一直控制到结束。我举个例子,我们想让他去模仿一个基本的构图和色彩,然后再去 呃自由发挥,那就把结束的时机提前生成出来,就是这种效果。如果说想先按提示词构图,然后再去让 ctrl night 控制一下颜色和细节,那就把介入的时机往后调, 对不对?那这出来就是这个样子来,我们说画风和颜色比较像,但是构图呢,没有按照 controlled 的控制来,因为它比较晚才开始控制啊。 下面这些配置顾名思义了,我就不展开说了。好吧,觉得我们讲的还不错的话,希望大家点赞关注支持一下,谢谢大家。 然后我们说一下安装啊,秋叶整合包的同学自带这个插插件哈,那更新一下就可以啊,如果说没有这个插件呢? 我放一个安装链接,安装方法啊,去我那个 s d 插件安装教程看一下就行。然后就是这些个模型啊,我们去这个地址里面下载啊,我放到简介下载这些个文件啊, p t h。 还有这个鸭毛后缀的啊,都要有。然后放到这个路径。那我们第一次用 ctrl night 的时候呢,要科学上网,因为它会自动给你下载预处理的模型,下载失败的话就切换节点再试一下。好吧, ok, 那我们学会了 control night, 我们多多发挥想象力啊,活学活用。好吧,那我们下期见,拜拜。