哈喽,大家好,我是老陈,最近呢一直都在用一点一的新版的 controller 啊,实在是太强大了,稳定输出商业级的图片呢,就变得非常的容易,什么手啊,脸啊这些曾经的痛点呢,都不再痛了,可以真正的去解决商业的需求, 像我们的 ai 绘画团队,这个月已经对接了二十多个商家,都取得了挺不错的效果。今天呢就先跟大家来聊聊最新的 control net。 一点一的版本的一个使用,在新的版本中增加了很多新的模型,模型的名字也定了一个新的标准, 我们先来看一下这个标准,首先我们来看一下名称的开头,第一个呢就是 ctrl, ctrl 就代表着这是一个官方提供的版本。第二个呢就是 v 幺幺,这个呢就说明我们的这个是一个版本,那 v 幺幺呢就是一点一的版本,这 里的我们可以看到它后面会追加一个单词, p, p 的意思呢就代表着是可以正常去使用的一个版本。 e 呢就代表着现在还是处于一个实验阶段的版本。 u 呢就代表着这是一个未完成的版本。如果我们看到是 f 的,比如说 v 幺幺 f e 的话,那这就意味着这是第一个修复了的修复了 bug 的版本。目前新出的模型呢总共包括十四个模型, 十一个已经准备好可以直接用的一个模型,还有三个呢是实验性的模型,预处理的模型就更多了,多达三十多个。 使用的方式呢也很简单。首先的话从这个 hocking face 模型页面呢把模型下载下来,那在这里的话,我已经给大家准备了百度的云盘,方便下载,在哈 defense 下载的时候,大家一定要记得点击下载按钮来进行一个下载,并且呢不要忘记下载它的配置文件,也就说模型文件 p t h 和这个配置文件 y a n l 都要一起下载下来。下载好了呢,我们一定要升级一下我们 stable diffusion 的 control net 过展, 那扩展的话,我们可以直接在扩展这里,然后点击检查更新来进行一个更新。更新好之后呢,一定要记得点击应用并重启用户界面, 如果你是使用的是秋叶大佬的部署包的话,那么也可以直接点击我们的版本管理,在本体和扩展这里切换到扩展,然后点击一键更新到最新就可以了。更新好扩展之后呢,我们就要把我们所下载好的这些模型放到我们的 defusion 的目录下面的这个扩展文件夹,扩展文件夹下面有一个呃 stable defusion 的 web ui ctrl net 这一个目录我们要点进来,然后呢这里有一个 model 文件, 把我们所下载的文件全部丢到这里来就可以了。接下来我们来看一下新版本的用法,这里我们点击 ctrl。 net 打开这个 type, 然后呢我们在这里可以放入我们 ctrl net 需要处理的文件, 比如说我们现在要去仿照的这个美女图片来去生成一张图片,那这边的话我们还是一样点启用那 d 显存优化的话,就是在你点存小于等于八 g 的时候,那么就开启它,那这里的话我是二十四 g 的显存,所以的话我就可以不用点。 然后呢这里的话是像素的适配,那我们直接点击这个勾选就好了,那这里的话它会自动去匹配我们的这 里图片的像素,一般我们最好就把它勾选上,然后呢我们可以点击允许预览,允许预览的话就是在预处理器之后呢,我们点击一下就可以看到预览的效果, 那我们现在就来看一下预处理器,预处理器呢现在已经有三十多个了,我们首先看到第一个呢是色相的翻转,这一个色相翻转啊,就跟我们之前的那个在这里直接勾选色相翻转是一样的,在这里呢我们可以直接点击一下,哎 运行预处理器,点击之后呢,我们就可以在这里可以看到预处理之后的一个效果。这项的翻转呢一般应用于黑白线条的转换, 例如说我们有一些图片,他可能背景是黑的,线条是白的,那么通过我们的这个色相的一个转换,那就会变成黑色是线条,白色是背景。当然的话 在这里的话我们也可以拿图片来进行转换。转换之后呢我们也可以比如说利用一些模型搭配着使用,比如说我们可以拿一些软阴影的模型,比如说这个我们来跑一下,我们直接输入一个弯勾, 可以看到也别有一番风味。这里需要注意一下的是,在我们使用预处理器的时候,那么我们可能是需要去下载注视器, 那这里的话,当我们看到控制台有这个注视器的一个下载进度条的时候,如果我们进度条卡住了,或者是下载实在是太慢的时候,那么大家可以直接在这个链接里面 去直接把这个注视器下载并放置到他这个控制台输出的这个对应的目录下就可以了。那具体的大概目录呢?是在扩展啊,我们的 control net 目录下面的 这个注视器目录下,然后这里呢有一个 downloss 就放到这里面去就可以了。一般预处理器要跟对应的模型搭配才能更好地去使用, 那么我们可以看到预处理器呢是有三十多个,而模型只有十几个,怎样才能让他对应起来呢?在这里的话我们很简单,其实我们主要看后缀跟我们预处理器的里面所携带的一些关键词就可以一一匹配了。 比如说如果是模型是 candy 的话,那你就可以找 candy 的预处理器,那这个的话主要适用于我们的这个描边,然后如果是 n l s d 的话,那你就去找 n l s d 的这个预处理器啊。然后如果是深度的话,我们可以看到, 呃,像深度的话,他的这个预处理器的模型呢有好几个,当然的话,不同的这个处理的话,他的效果是不一样的。 等会的话我们来一起看一下它有什么区别,以及如何区分在什么样的一个场景下去使用它。首先来看一下边缘检测, kenny 在一点一版本中的话,对 kenny 是进行了一个增强, 从整体的生成效果来看,总体来说都没有什么太大问题。但是由于这是一个边缘检测技术,我们可以看到很多的边缘是没有检测到的,那所以的话像这个手他也是没有办法去分辨 这个手到底是头发中的一部分呢还是手,所以的话这里的这个手指生成还是有一定的小问题,能够直接生成这样子已经很棒了,但是我不建议在 复杂的人物动作或者是姿势以及手指的动作里面去直接去使用边缘检测技术,像这类型的描边技术呢,我不建议使用 candy 更推荐最新的建稿模型来完成人物图像的描边。我们从预处理器可以看到 最新的线稿模型的预处理器呢,有一二三四五,像我们这种照片类型的比较逼真的, 你真的,那么我们就使用 realistic。 好,那我们现在来尝试着使用一下它。这里呢我们选择线稿模型,通过输入 one go 这个提示词,我们最终生成的效果就是这个样子。那我们可以看到预处理的效果里面呢,我们可以看到细节是更加的丰富, 基本上还原了整个图像各部分的内容,深层的图案呢也几乎跟这边是一模一样,包括我们的手指可以看到也非常的完美,可以看到这个戒指呢也依然在这里非常好的处理了。我们接着再来看一下其他的线稿的 一些效果,比如说标准,然后我们直接生成来看一下,那这里的话我们就可以看到他的这个线条呢是相对来说比较粗的,但是呢他细节还原就没有那么多了,所以的话,如果你只是想整体的话,那你可以使用这一个,但是如果你想要很逼真的去还原照片级的效果的话,就用刚才那一个。 然后我们再来看一下这个也是粗线条的一种方式,不过这种粗线稿呢,就是像我们画画的时候啊,多画了几笔,我们为了让这个边缘更加的粗,对吧?我们就会多画,所以的话你可以看到不是图粗的,而是画出来多画了几笔画粗的, 哎,就是线条,多画了几条线条来形成这样子的一个效果。我们经常需要将照片转化成二次元的风格,那这个时候的话,我们就可以使用线稿的动漫的这种这 一个预处理器模型的话,也是使用它就可以了。那在这里呢,我们先来看一下预处理之后的一个效果,那我们可以看到整个细节还是蛮丰富的,那么我们可以看到这里有个格子,格子的效果,那这个其实际上那不可能会出现在我们平时的 照片当中,对吧?在,但是在动漫当中的话还是,呃,有经常会有这样子的一个背景,当然我们不同的这个预处理器和模型啊,你要搭配好 对应的这个风格的大模型,才能够出现比较好的一个效果。比如说我想出这个动漫的风格,那这个时候的话呢,那你可能就要选择使用动漫风格的大模型来进行一个生成, 那这是我们生成之后的一个效果,那在这里的话是没有做任何调色啊,或者是光照的一个设置 啊,那整体的话它就是这样子的一个风格啊,因为我们就只有一个弯钩啊,这样子的一个设置,整个细节和风格都展现的还不错。然后这里的这个线稿的话,还有一个去掉这个噪声的 啊,比如说我们用它来生成一下,我们可以看到他会把那些呃很多皂点的都给他去除掉,哎,你可以看到他会比较清晰,所以的话如果你是想要 一个去掉噪点的,也就不要那么多细节的,你就可以使用这个 denois 来进行一个预处理。接着我们也可以直接给动脉线稿直接上色,比如说 我们网上啊都有很多没有上色的这个动漫,对吧?那我们希望就是我想看上色动漫,怎么办呢?那我们可以自己给他上色,那在这里的话我们把这个去掉,然后我们直接拖过来。 好,那这个说话我们选择一下细节的,对吧?接着我们在提示词里面稍微写一下这个场景,比如说 女孩长着长长的白头发,然后站在绿色的花丛中,然后稍微写一下我们粉色的裙子,那么我们就可以生成这样子的一张漂亮的图片了。新版本的内容还是很多的,看来一节根本讲不完,那我们先把胎儿先讲了, 剩下的我们后面再分几节来讲。太阳模型的话,它目前还是一个实验阶段的模型,但是呢非常的强大,它主要的作用呢就是可以帮助我们去忽略图像中的细节,然后去生成一个新的细节。比如说我们这里有一张小狗的图片, 那这个小狗呢?他现在因为放大的一个原因啊,导致他图片虽然放大了,但是整个的弧 掉了,那这个时候的话,我们想要让这个图片增加细节,对吧?去忽略掉他这个弧的细节,那这个时候话我们就可以把这个图像拖过来,然后呢这边我们选择 还有采样,这边的话我们也是选择拍啊,我们选择这个预处理器的时候,这下面有一个采样率啊,这个采样率呢就是说我我们不是说把每一个像素都给他采样到,我们只需要采样一部分,因为一些细节是我们自己给他去生成,对吧?所以的话我们不需要把每一个像素都拿到, 那所以的话我们实际上我们要,比如说我们要多少倍来采样,对不对啊?那我们这里的数值越大呢?就是,呃,比如说我五个像素采样一个,对吧?六个像素采样一个,或者是一个像素就采样一个,那当然话我们一般肯定不是一个像素采样一个,比如说我们直接八个像素采样一个, 我们来看一下效果,我们先直接运行一下采样后的一个效果,可以看到这张图现在就变得非常的小,非常的糊了啊,因为我们其实就是说从八个像素里面去采样啊,一个像素点,然后呢放到这里来,接着我们设置一下文字,这里的话我们就说 一只小狗在我们的草地上,由于我现在的大模型呢是一个卡通风格的大模型,所以的话深层的这个画面呢也是偏向卡通,那如果我们给他去设置一个比较真实的大模型的话,那么他的这个效果呢就会比较真实。 好,我们可以看到这个效果非常的好,对吧?是不是很强大呢?多种 ctrl net 结合,还可以拥有各种各样的玩法。 后面呢我再跟大家详细的讲解一下,在商业级的业务里面如何使用 control net 来完成对应的需求?好,那我们今天的话就先分享到这里,我们下一节我们再来继续讲剩下的 control net 功能的使用。
粉丝4171获赞1.7万

上次给大家带来了 cable diffusion 图声图功能的介绍,本期我们来介绍 control overnight 功能。 control overnight 功能能够让你更好地控制图形的生成方向,给 ai 抽卡提供更加准确的框架要求。再给大家提供的 v 四整合包中已经自带了 control overnight 文件, 大家可以根据之前的视频回顾文章方法,软件完全免费下载方法,放到视频最后加入社群会获得更加专业的资料哦。来到 ybui 界面,向下滑就可以找到 ctrl nine 选项,大家请记得使用时必须勾选上启用,不然的话会发现设置好了所有的参数,点击生成却没有任何反应。 来到 ctrl net 布局界面,我们先来看看这里的按钮。点击新建画布,按钮会根据你想要的尺寸生成一张空白的画布,这个画布可以用来随意绘制。点击打开摄像头,就可以打开自己电脑的摄像头, 反转摄像头,也就是字面意思。用的比较多的是这个。将尺寸传送到 sabot fusion, 如果你不知道你要处理的图片的尺寸,这里就可以直接获取输出代替。界面中我们导入一张图片,点开预处理器以及模型,就可以看到一大堆的选项,其实原理是一样的,就是通过额外添加的条件来生成图像, 而预处理就是这个额外条件。由于预处理内容较多,我们仅选取几个预处理功能来作为展示。第一个点击预处理中的开逆边缘检测, 无形则选择汉域处理,名字一样的刊即可。点击允许预览,再点击预处理器右侧的花火图案,就可以看到图片被识别的线稿,新生成的图片则会受到线稿布局的限制,我们只写一些描述清晰度的 tag, 利用大模型的画风生成新的图片,让 ai 自己炼丹。为了更好的随机性,把重绘幅度调高,点击深 层可以看到新深层的图,任务形态都是保持一致的,改变的只是衣服和其他元素,这就是 ctrl nine 的基础用法了。这张玉处理的图是可以从分辨率调节来控制强度的,需要得到很好的效果就需要通过不断的调整来做到。 需要注意的是,分辨率调整的越高,越是显存,大家可以根据具体的效果来进行调节。和看地类似的还有害模糊检测,官方说是可以保留更多的细节。还有一个是 pd 膜检测,它能够很好的检测到边缘。 这三个域处理模式大同小异,至于用哪个就看各位小伙伴自己的选择了。代不深度信息估算,用颜色的深浅来表示空间的距离关系,白色在前,黑色在后。 处理风景环境图可以选择这一个,因为这个与处理器处理人像效果很难做出立体感,单独使用就用风景或者是能表现众生关系的图就可以了。 同样由此功能的还有 list, 只不过算法会更加平滑一些。我们以一张房间图为例,生成出来房间架构不变,但是画风已经完全大变样了,混合了很多种风格, 而且完全是由 ai 自由发挥的结果,并没有加任何导向性的太提示词。莫斯线条检测适合于四四方方的场景建筑物,生成出来的线条能够很好地把透视关系提取出来, 简直是建筑设计师提取灵感的福音。我们不加任何泰格生成就可以看到一样透视关系,但是风格大变样的建筑图 非常给力。再介绍一个 open pose 姿势检测,我们以一张女模特图片为例,预处理后就是图像人物中的对应动作,我们同样放一些不带导向的提示词,可以看到新生的图,人物骨架被固定住了,其他的元素都在发生改变。但是模特的手部仍然有瑕疵,所以可以使用新更新的 open post 汉的预处理 器,可以更好提取到手部的关节,动作不会出错。 ctrl net 的使用方法就是这样。还有其他的预处理器,各位小伙伴可以一个个进行尝试,一定会有你想要的惊喜。因为上期视频有小伙伴反馈想要我的插件库,所有文件 我已经打包好了提供给大家。关于下载链接还有不知道的小伙伴可以看往期 stable defusion 介绍视频或者在评论区获取。感谢大家看到这里,后面我们将会解锁 stable defusion 更为强大经验的视觉效果,大家下期见。

用过 sd 的人肯定对肯窗内这个插件多多少少都有了解,他所能制作的的有效生产力超越我们的想象。但是你真的都用明白这十四个控制模型和三十个预处理器了吗?首先在讲解控制模型之前,聊一下在官方下载的模型名称的意义。 比如这样的名称可以把它以符号为分界,分成五个区域。第一个区域只要是官方下载都会带有 ctrl 字样,则其他第三方就很好区别了。第二个区域则是署名他的版本号,例如 v 一表示一点一版本, t 代表已开发完成, e 代表实验性, u 代表未完成。 第三个区域是配 sd 大模型的版本,例如 sd 十五等于 stable defusion。 一点五。第四个区域表示的是模型的控制方法,例如 canny, openpose 啊等等。第五个区域则表示文件类型,碘伏词是模型文件点, emo 是配置文件。 了解完这些后,就开始讲解今天的控制方法和预处理器的含义。 open pose 可检测人体关键点,例如头、肩膀、手的位置等。他对于复制人体姿势非常有用,而无需复制服装、发型和背景等其他细节。 reference 是一组新的预处理器, 总共有三个预处理器可以生成与参考图像类似的图像,图像仍会受到扩散模型和提示的影响。 看那一种通用的老式边缘检测器,他提取图像的轮廓,他对于保留原始图像的构图很有用。 dfe 处理器从参考图像中猜测深度信息。 总共有四种玉处理器。 lineart 是一种呈现图像的轮廓,试图将其转换为简单的绘图的处理器, maosd 是一种直线检测器,它对于提取直边的轮廓非常有用,例如室内 设计建筑物接近 normal max 法。线域处理器是指定每个像素所在表面的方向。图像像素代表表面面相的方向,而不是颜色。指 scrabble g 处理器将图片变成涂鸦,就像手绘的一样。 seven taste 与处理器标记参考图像中的对象类型,对建筑物、天空、树木、人和人行道都标有不同的预定与颜色。 沙否御处理器搅动输入图像,可用于传输参考图像的配色方案。 correct t i i adapter 域处理器将参考图像缩小六十四倍,然后将其扩展回原始大小, 最终效果是局部平均颜色的网格状斑块。 in painting 与处理器可在修复中使用高降噪强度来生成较大的变化,而不会牺牲整个图片的一致性。关注我,带你认识更多 ai 工具!

今天介绍一个神奇的 s d 预处理器,它可以将这张图片还有这张图片的元素合并在一起。这张图保留了第一张图的元素和第二张图的姿势,这个效果就是通过腾讯发布的 ip adapter 适配器完成的, 还可以和 control net 或者 t r i adapter 结合在一起实现结构控制。 先点个关注,以免日后找不到我了。把素材第一张图放到 sd 中反推提示词,将提示词发送到文声图中备用。 大模型和正反向提示词都在这里了,可以参考我的提示词。第一个 controlled 中选择 ip adapter 的预处理器和模型。第二个 controlled 中则选择 open post 的预处理器和模型。 然后通过多抽几张卡来获取我们结合后的图片。得到满意的图后,拷贝到 ps 中稍作处理,最终得到了这张图片。好了,赶紧去试一试吧!

你肯定见过仅靠几条细线就成就了高楼大厦,仅凭几笔粗糙线条就生成了精美的图片。这就是 ctrlona 的能力,在他出现之前, sd 完全不配当 mj 的对手,而当他出现后, 对不起, mj 是谁?没听过。正是因为他,我们可以复原兵马俑,创造 ai 艺术字,甚至修复老照片等等。有了它, ai 变得更加可控,一切都可以基于我们的想法来进行操作。 所以姜子接下来将会分几期给大家介绍这款插件,建议大家先关注不迷路,学习 ctrl, 那需要一定的基础,没有基础的家人请一步入门教程。 本期视频先给大家简单介绍下 controline 这个插件,然后教大家安装 controline 以及使用时常见的报错问题处理方式。所以 controline 是什么?它原理是通过控制神经网络快的输入条件来调整神经 网络的行为。听不懂没关系,我也听不懂,你只需要知道他能基于你给的图片提取图片的某些特征后,控制 ai 根据这个特征生成你想要图片,这就是他的强大之处。 control 内由三部分组成,分别是一预处理器、二预处理器模型。 三、 controller 模型。域处理器安装插件后自带文件是 rm 后缀一到二 kb 域处理器模型用于提取照片特征,共约两 g, 首次使用会自动下载 controller 模型,控制 ai 生成我们想要的图片。 p t h 后缀共十 g, 需要手动下载 其他内容,时间关系就不一一展开。今天先教大家如何安装 controlled, 如果你是安装的最新秋叶版安装包,请先查看这个位置,看有没有 controlled, 如果有,那恭喜你,你已经安装好了。 第一步,如果没有,我们打开拓展选择,可下载,在这边搜索 ctrlna 就会自动弹出,点击安装,然后重启即可。 第二步,下载 ctrl 那对应的模型,大概有实际需要模型的家人可以评论模型,也可以在姜子的资源库里面自行下载。下载后放到根部录 models ctrl 那里面。第三步,检验,我们打开 ctrl 那看下这两边是否都有对应的模型, 然后放入一张图片,选择 canny, 点击预览,这样就表示安装成功。需要提醒下的是,部分处理器首次预览需下载对应模型,可以在运行器处查看进度。 最后,姜子遇到不少家人在安装和使用 contronat 过程中遇到各种各样问题,给大家做一个简单的解答。一、如何使用多个 controlnet? 只需打开设置,找到 controlnet, 调整控制数量,重启即可。二、使用 ctrl 内对电脑有要求吗?建议显卡内存至少大于六只以上。 三、为什么我预览深度图显示报错?因为你缺少处理器对应的模型,建议手动下载添加,需要的家人联系我。关于 ctrl 内的安装,姜子也整理了一份文字版,放在我的资源库里, 里面还有 s d 万字教程,需要的家人关注我哦。今天的分享就到这边,我是 ai 姜子,谢谢大家。

今天为大家带来 controlner 保姆级教程,分为插件安装、模型安装、使用及体验三步。 首先进行 ctrl 内插件安装,点击扩展,点击可用,点击加载字,再输入框内输入 ctrl 内 进行搜索,找到 ct rlnet, 点击安装。由于我这里已经安装过了,这里就显示已安装,等待安装完成后点击应用并重启用户界面,这样 ctrl net 就安装完成了。 nice 接下来我们安装 control net 模型,打开 hugging face 模型页面,这里都是 control net 的模型, 比如 openpods, 作用是姿势识别,点击保存,保存完成后把模型放到这个目录下就可以了。最后我们使用并体验一下效果吧,复制并导入提示。 至此,点击 control net 选项,上传姿势图片,选择启用遇处理器选择 openpose 姿势及首部检测模型,选择 control openpose。 最后点击生成。稍等两秒钟 生成了四张图片,我们看下效果吧,是不是跟参考图完全一致?视频中所有资料都进行了整理,需要的朋友请评论区留言,欢迎点赞关注!

当你用心良苦写了一堆提示词之后,你发现你出的图是这样,这样, 还有这样,哈哈哈哈哈哈,那么你一定要使用一下我今天推荐的这款插件。 ctrl net ctrl net 的工作流程是先通过它的预处理器和模型来根据我们指定的参考图片去生成这种参数图, 再通过参数图去控制生成图片的细节。因此我们可以随心所欲的控制画面当中人物的姿势,人物的数量,甚至可以生成同一姿势的不同视角,杜绝开盲盒。 让我们来到首页,点击扩展,再点击加载字,然后按住 ctrl f 搜索 ctrl net 我们看到 ctrl net 的插件,然后在右边点击加载,等到加载完成后,我们回到。我们回到主页面,我们就可以看到下面多出了一个 ctrl net 的插件,这就代表插件已经安装成功了。 我们可以先简单的了解一下这里面的参数的作用。第一个是启用按钮,如果说我们想要使用 ctrl net 去对我们正常的画面有一个影响的话,那么我们必须点击这个按钮。第二个,反射模式, 他是说如果说我们的背景图是一个白底图的话,那么我们最好勾选成他,他才能保留更多的细节。第三个,法线贴图,这个按钮呢,我们一般用不到, 所以说先不用管它。第四个,低显存优化,这个是说你的显存如果低于四个 g 的话,那么我们需要点击它,让我们的软件运行过程当中不至于崩溃。 第四个,无提示词模式,这个是说你可以不用写提示词,完全把图片生成的过程交给 ctrl net 去做一个引导。假如说我们想使用这个功能的话,我们需要在在设置页面的 ctrl net 里 把这个选项基于启用 cfg 的引导,把这个选项给勾上才能使用这个功能。 那么想要使用 ctrlnet 插线,它还有一个必要的步骤,就是选择预处理器和与之对应的模型。但是这些模型的文件它并不是 ctrlnet 自带的,需要我们上到这个网站上面自己 去下载。我们可以看到每一个模型的体积都非常大,其实比较常用的呢,只有这几个模型。如果我们的硬盘空间不够,我们只需要把这几个模型下载下来就可以 点击这个按钮就能直接下载下来。下载下来之后呢,我们按照路径把这些模型拖拽到 ctrl net 的模型文件夹里就能可以使用。让我们回到主页面再次选择模型,比如我们选择第一个 canny 边缘检测算法, 那么模型呢,也是对照着第一个 candy 来选,这时候呢,我们只需要把一张我们想用来生成图片的参考图片拽进来,然后点击下面的预览处理结果。当我们第一次点击预览预处理结果按钮, 有的时候控制台会自动帮我们下载预处理器的模型,下载完成后就会帮我们生成堪尼图。 我们暂时跳过模型,先来讲解下面的参数。第一个权重,他是指 ctrl net 能够对我们所输出的图片的一个控制强度,数字越高, ctrl net 的控制强度就越高,数字越低呢,控制力就越低。 然后我们看到这一块,就是开始步数和一个结束步数,比如我们看到现在这个开始的步数写的是零, 它就意味着在最开始,在第零部的时候, ctrl net 就开始对图片的生成施加了了自己的一个引导。结束步数是一, 那就是说图片生成的最后一步 ctrl net 仍然是在做一个引导。如果说我们调一下开始的步数和结束的步数的话,这个意思就是说在开始生成图片后的百分之二十七到百分之七十五这个区间内。 ctrl net 对于我们的图片生成结果有一个影响,接下来是预处理器的分辨率,我们调节这个参数呢,就能让我们的画面的效果变得更加的细致。 后面这两个参数呢,等我们详细去介绍每一个模型的时候再去做讲解。那么下面就是画面的缩放模式,通常的话就选择他默认的这个扩展原图就可以。最下面的参数,画面的宽度和高度,这里的参数他不会影响你生成图片的尺寸, 而是说 ctrl net 会基于这样的一个比例关系来对我们的图片生成自己的一个判断。所以说我们这里的参数选择就要结合上面的这个高度和宽度的比例来进行一个选择。 现在呢,我们就来把我们的参考图片拽入到砍川带这里,然后,然后预处理器选择 canny, 模型也选择 canny, 我们点击预览处理结果,我们可以看到他生成了一个类似于线稿的图片,这个就是他所生成的 canny 图。 那么我们向下看,看到预处理器分辨率的选项,这个选项是说他能决定我们生成的开腻图里面的线条的粗细和一个精细的程度,比如说 我们把它拉到最高,然后点击预览处理,结果我们可以看到高分辨率生成的看你图明显的比低分辨率生成的看你图的线条要更加的细, 对于画面的描绘呢,要更加的有细节,这就是分辨率参数的一个作用。然后我们接下来看到下面的两个参数,是说堪尼的低域值跟高域值, 这两个数据呢决定了你所生成的堪尼图当中的线条的一个数量,比如说我们把地域值给拉高,然后点击生成, 然后我们把生成好的图片呢跟之前生成的图片做一个比较,我们可以看到有大部分的线条被省略了,然 然后我们把低预值恢复原状,把高预值呢拉到最低,我们同样的再生成一张图片,我们把刚才生成的图片呢和低预值图片做一个比较, 我们可以发现调节高于值生成的图片明显的比调节低于值参数生成的图片的线条的数量要更加的密集,而且在细节的表达方面要更加的出色,这就是这两个参数的一个具体的作用。 如果想让生成图片的细节更加接近参考图,就可以拉低高预值的数据,但是 ai 的发挥空间就不大,而且更占现存和算力,容易生出细节比较奇怪的图片,如果想让生成的图片在维持基本形状的前 下,让 ai 有更多的发挥,可以选择拉高低域值,那么我们现在换到第二个算法,深度信息估算,那么匹配的呢,也是 dips 这个模型, 我们同样点击预览处理,那么现在呢,生成的图片我们可以看到他是一个基于空间位置的一个图片,画面的主体变成了一个轮廓,他轮廓线里外的细节呢,进行了一个最大限度的省略。 那么如果我们使用这张图呢,我们能够很好的表达前后空间的一个关系,像我们现在选择 h e d 模型的话,也选择相应的模型,然后点击生成。我们我们可以看到用 h e d 生成的图片呢,相较于使用 candy 生成的图片,它的线条的感觉其实是没有那么严重。那么使用那么使用 h e d 生成的图片的好处呢?就是说 他可以更加接近于我们所提供的参考,因为我们看到 hd 生成的图片的这些边缘,他保留了更多的细节。下一个算法,我们使用线条检测算法搭配 mlsd 模型,我们点击生成, 我们可以看到虽然生成的也是一个线稿图,但是画面当中的关于曲线的部分都被刻意的省略了,所以说呢,这个算法他更加适合用在对于建筑物,对于室内陈设的一个参考上面。然后 我们转到下一个预处理器法线地图,同样的模型也要选择对应的 nomo。 点击预览,我们可以看到生成的图片呢,他会基于我们提供的参考图片 生成了一张他的发线题图,那么这个模型的作用呢?它在于它可以还原你表面凹凸的一个细节。我们可以看到下面这个参数,他是他是用来调节我们生成的发线图的背景细节度的一个参数。 比如我们可以把它调到最低,然后点击生成,我们可以看到生成的图片呢,连同着他的背景一并生成了僵硬的凹凸的纹理。如果我们把背景预值拉到最高,我们再点击预览,我们可以看到 他生成的法线贴图呢,会出现一种类似于抠图的效果,他只保留了最前方的主体的轮廓, 其他的背景做一个平化的一个处理法线 t 图模型呢,和我们之前看到的 candy 图和 h e d 图不同,他们呢是保留参考图的边缘线, 轮廓线而发现贴图呢,它是保留参考图表面的凹凸的一个高度和一个肌理。通过这张对比图,我们可以发现由毛绒玩具生成的发现图, 可以把毛绒玩具的表面的那种毛绒的感觉完美的复刻到其他生成的图片上。我们选择下一个易处理器 openpose, 这个是非常重要的一个处理器模型,也要选择对应的 oppose, 我们点击预览处理结果。呃,现在呢,我们就可以看到生成了这个模特的一个骨骼图,那么通过喷 pos 生成的这个骨骼图呢,就能够精准的引导我们生成图片的人物的动态,无论是一个人还是一群人, openpose 都可以很好,他把动态还原出来。这样做的好处是,如果我们想要输出的图片的人物做出这些动态的话,仅靠写提示词是几乎完成不了的,但是通过 openpose 就可以很好的完成这个任务。我们接下来看 oppos 的下面的姿态及手部检测模型。模型的话也同样选择 oppos 点击生成,我们可以看到这回生成的 oppos 图,他连你手部的动作都一块生成了,这样的话我们就 再也不怕生成那种肢体扭曲,手指造型不对的图片。接下来我们看下一个很重要的预处理器与意分割,那么搭配他的呢,就是这个模型, 我们点击生成,我们可以看到生成好的模型呢,他是基于不同的主体被赋予了不同的颜色,比如说主体人物,他是呈现这种红色。马路呢,他是一种灰色 背景的树呢,它是一种绿色,天空呢,它是一种蓝色。它这个模型呢,在训练的时候就是用不同的颜色去代表不同的主体, 我们就能通过这样的剪影图去精准的生成图片当中的每一个物体。以上呢就是所有的模型,包括参数的一个 讲解,由于时常关系,看戳 nit。 生成图片的实际操作将在第二节课做一个展示,我准备了很多关于 aigc 方面的资源,请大家三连之后私信我领取吧!

五分钟学会给你推 point! 哈喽,大家好啊,今天给大家展开讲讲 sd 最牛的插件之一 ctrl net 的用法。呃,我们在画图的时候可能用题词或者各种模型都达不到我们想要的这个样式,那我们就可以选择用 ctrl net 来控制。 我先用一个例子来帮大家理解一下 controllight。 那现在我说,呃,我模仿一个人的提示词和 lora 画了一张图,但是呢,怎么都不像 这个姿势啊,轮廓呀啊,都挺有差距啊,也不好看。那我们就在下面啊,展开 ctrl nine 插件,我们在预处理器这边选这个 line art realistic, 右边的模型呢,选 选蓝二特,然后把它的图拖进来,勾选启用,选择完美像素模式,再去生成一遍图试一下。 哎,我们看这回我们说就跟他的图比较像了,我们点这个允许预览,然后点这个爆炸的这个按钮,预处理的图就出来了 啊。其实这张参考图呢,就是先经过了这个这个预处理啊,被提取了限稿,然后限稿图呢,再被送入右边的模型,这样来控制我们出图的样子。 所以我们这张图其实是在模仿他线稿的啊这个样子,然后颜色啊,质感这些,我们可以用自己的题词词或者其他什么的去控制了,对吧? 那其实这就是 control net 的一个基本的或者说抽象的一个原理,抽取参考图的某一特征,然后用这个特征去控制出图。 那我们知道这个原理之后,我们的其他的需求就可以通过其他的预处理器和右边的这个模型 去满足了。那这些预处理器呢,都各有强项,比如我们想模仿这个人的姿势,那我们就选这个 dw open pose 预处理器 啊,那生成的图像就这样的,那我们发现他提取了参考图的姿势骨架图,然后模仿,对吧?但是其他的东西那不归他管,那如果我们想模仿他的景深,就用 depth, 然后我们换一个二次元的模型,那出来的效果是这样的,这个模型呢,更适合对整体的构图去复刻,而且他还很适合换背景。 方法就是我们点这个爆炸的图标啊,这个景山图就生成了,然后点这里的下载,把那个图存到本地, 用 ps 抠一下啊,简单抠一下,换一个黑色的背景,再把这个新的净身图拖到左边这个面板里,然后记得关闭预处理器,因为这图已经不用预处理了。 我们在提示词里面描述一下海滩的背景,然后生成。那现在图片换成海滩背景了,那其实其他的与处理器也都是同理 啊,你是可以去这样自己去修改这个图的。那有同学说,呃,我也不知道具体要模仿哪个方面啊,就想整体都模仿,那我们就选这个 tao v 三 pro。 好,我现在画一个 one go, 然后模仿这张图, 那出来的就是这样的效果,那这就是整体的模仿。还有个比较特殊的,比如说我们要模仿建筑图的结构,可以用这个 m l s d 发现贴图,我们拿一张建筑图来模仿,然后提示词描述一些我们想要的风格,那出来的效果是这样的。 那其实这个与处理器是比较擅长提取图片中的直线的啊,他对曲线不是很敏感,所以在建筑图 图里面啊,他有奇效。那其他的预处理器和模型大家可以自己再去试一下,效果呢?跟这上面这些差不多, ok, 再说一下其他的参数都是干嘛的啊?首先这个 unit 单元这里呢默认四个单元,就是说我们可以同时使用四个 ctrl night 啊,要用哪个就在哪个里面勾选启用就可以。然后这个低显存模式,比如我们显存就四个 g 啊,那这个还是打开吧, 你要六个 g 或者八个 g, 可以不用开这个完美像素模式,是控制预处理的精细度啊。举个例子,我把这个先关掉,然后在下面我就可以手动调了。那调个低一点的分辨率呢?他预处理出来的就是这张啊,比较比较 粗的,然后高分辨率就是这种扣的很细节,然后控制权重,这个就很好理解,我们看刚才那张图啊,在高低权重下的一个对比。 再就是这个介入引导时机和退出引导时机。那这个呢,是默认从零,也就是从刚开始就开始控制,后面是一,就是一直控制到结束。我举个例子,我们想让他去模仿一个基本的构图和色彩,然后再去 呃自由发挥,那就把结束的时机提前生成出来,就是这种效果。如果说想先按提示词构图,然后再去让 ctrl night 控制一下颜色和细节,那就把介入的时机往后调, 对不对?那这出来就是这个样子来,我们说画风和颜色比较像,但是构图呢,没有按照 controlled 的控制来,因为它比较晚才开始控制啊。 下面这些配置顾名思义了,我就不展开说了。好吧,觉得我们讲的还不错的话,希望大家点赞关注支持一下,谢谢大家。 然后我们说一下安装啊,秋叶整合包的同学自带这个插插件哈,那更新一下就可以啊,如果说没有这个插件呢? 我放一个安装链接,安装方法啊,去我那个 s d 插件安装教程看一下就行。然后就是这些个模型啊,我们去这个地址里面下载啊,我放到简介下载这些个文件啊, p t h。 还有这个鸭毛后缀的啊,都要有。然后放到这个路径。那我们第一次用 ctrl night 的时候呢,要科学上网,因为它会自动给你下载预处理的模型,下载失败的话就切换节点再试一下。好吧, ok, 那我们学会了 control night, 我们多多发挥想象力啊,活学活用。好吧,那我们下期见,拜拜。

没有米可以煮饭吗? s d 可以帮你无中生有,轻松扩图。用 s d 扩图只需三步。生成好图片以后,第一步,在正向题诗词里面写好背景的内容。第二步,修改画面的尺寸,锁定种子。第三步,把图给到 control net 勾选启用完美像素控制类型选择局部重绘与处理器选择 impact only lama, 把这两个选项也勾选起来。最后我们看一下生成的效果。 这三张图分别对应的是树,花园和花朵这三个背景。我是橘子,一起玩 ai 绘图。

经过前两期关于 ctrl 内的安装片和现稿片的介绍,相信大家已经对 ctrl 这个插件有所了解了,但是江子发现还有不少家人还不会使用它,所以紧急补上这条视频,也就是使用篇。 本期视频将会分别从 controller 的页面布局、处理、模型选择、权重和引导时机这四个方面来进行介绍。内容十分硬核,如果你还没看过 sd 入门合集,建议先学习基础内容再来实操 controlling。 话不多说,我们直接进入页面布局介绍。我们导入一张照片,这四个按钮分别是画布、摄像头、摄像头切换和发送图片尺寸,前三个一般用不上,建议不用管。点击发送图片尺寸,会把导入的图片尺寸自动发送到上方。 我们可以清楚了解图片的宽高,但是记得不要直接大尺寸生图,不然容易爆显存。然后我们再来讲下面的案, 如果你的显存低于八 g, 那这排四个选项我建议都打勾,打勾预览,就会弹出预览页面,点击下面的爆炸图标就会显出预览效果。 我们可以选择限稿模式,再进行预览,就能看到图片的限稿了。如果你在这里预览时候报错,那大概率是因为你缺少处理器模型,建议查看我之前的安装篇教程。讲完了页面的基本布局, 我们接下来给大家讲解处理器如何选择使用。我们可以用两种方法,第一种用上面的控制类型来自动选择,点击即可切换。 第二种就是直接在预处理这边手动选择,这样不好找,不建议。需要提下的是,预处理器和模型要选择一致的名称才能生效哦。接下来就是权重,权重就是参考图对输出的图片的影响,权重越高影响越大,这就是在权重唯一情况下不写正面提示词生成的效果图片,这是 权重零点八,这是权重零点五,这是权重零点二。这里我没有写任何提示词来限制 ai, 我们可以看出随着权重的降低,生成的图片和参考图越不像。最后就是引导介入和引导中指时机,这个我们可以理解为生效区间介入,零中指一表示 controlling 全程生效。 那如果是零点三到一,我们以五十步迭代步数为例,这就表示 ctrl 内前百分之三十,也就是前十五步不生效,只生效第十六到三十五步 引导时机可以理解为更精准的控制 ctrl nine 的方法,大家可以根据自己作图需求来进行调整。最后还有一个就是如何才能开启和使用多个 ctrl nine 的, 我们打开设置,在左侧列表,找到 controlled, 然后调整 controlled 的用了的数量,建议三到四个就行,然后保存并重启微步即可。最后在视频的结尾处给大家带来了姜子亲手写下的万字 s d 教程,需要的话请关注我哦!

ai 绘画里可以参考图片姿势生成一样的动作,但是如果我们想改变部分动作该怎么办呢?大家好,我是 ai 姜子。这期视频我们就来聊聊 controlled obenpose 骨架图,不知道如何安装和使用 controlone 的家人可以查看姜子前面的视频。我们打开 sd 的 controlled, 导入一张姿势参考图, 这四个选项全部给它打勾,控制类型,选择 openpose, 然后点击爆炸图标预览,就能得到一张骨架图。如果预览失败,那就是缺少预览模型,关注我领取。然后我们简单写下提示词,调整宽高比和参数,接着生成图片即可, 这样就得到了一张同姿式的图片。我们回到一开始的问题,如果我们这时候想要让他手抬起来怎么办呢?这里可以直接使用 controllnet 自带的 open pose 在线编辑器了。首先下载插件包,然后放到 extension 重启。我们回到先 前那张照片,打开局部重会,导入照片,和先前一样步骤,打开 open pose, 全打勾,选择对应处理器并预览生成骨架图。 接着点击骨架图的编辑,进入编辑页面,左下角打开 person, 删掉你需要修改的手,然后在图片中拖拽手臂,调整到对应位置,接着给他添加个手掌,点击左侧添加右手,调整手掌大小,回到顶部, 点击发送到 ctrl net 即可。我们就能看到这边的骨架图已经完成替换。然后我们涂抹重绘区域,记得两边都要涂抹。 接下来就是写上手臂手手指的提示词,负面就通用其他参数看我设置,这里重点要记住选择填充,然后调整宽高笔生成即可, 这样手臂就抬起来了,当然手指没画好,这里我们就不过多展开,大家能理解这个过程就好。今天关于骨架图的分享就到这边,我是爱爱江子,谢谢观看。

这是 controlnet 最强大的模型,最近刷屏的游戏装备高清重绘、光影、文字生成艺术二维码、二次元、 coser 转真人都用到了这个模型,而这只是他的冰山一角。跟着我,一分钟带你系统掌握强大的泰欧模型,使用 tao 是瓷砖的意思。他的原理可以概括为,将一整张图片分割成一个个小块进行分别处理, 能对每个分块图片的内容进行识别,控制构图和颜色,补充局部细节,还能避免全局提示词对每个分块的污染,以解了原理。下面我将介绍三种经典使用力。第一种,对低分辨率图片修复,选择与修复图片画风接近的模型 提示词,对图片内容进行描述,设置你要修复的宽高分辨率,把要修复的图片传入 controlness, 启用 tail, 点击生成即可。第二种,根据参考图对构图色彩控制,实现文字融合、二次圆转写实等图片效果。想要对颜色更好的还原,可以选择 tile、 下划线、 color fix 这两个预处理器。此外,如果要保持构图不变,实现人物场景、画风变化,可以添加要变化的提示词描述模式选择 prompt is more important, 点击生成即可。 第三种,对图片高清放大,把要放大的图片上传到图声图同绘幅度零点四左右。 control net 上传原图 脚本,选择 ultimate sd xq, 选择放大倍数和放大算法,点击生成即可。这种结合 tile 的分块高清放大方式,不仅显存占用低,而且重回复度可以设置较高,画面细节更丰富。我是局大,分享更多 ai 干货!

深度图是 i 提取图片的物体特征,进而估算画面中每个物体的前后关系而形成的类似超声图的一种图片。然后 ai 再根据这个画面的深度关系进行绘制,生成你想要的效果图。 这就是进阶片 ctrlny 的第四张深度图片,还没看过进阶课程其他内容的家人,请一部姜子前面的教程视频,当你遇到过这种情况,借助现搞出来的图片和原图相差甚远,这种时候利用深度图就能更好识别空间关系。我们打开 ctrlnut 导入照片,这几个选项都打勾, 选择深度图跌屏模式,点击爆炸图标预览深度图。左边有四种深度图处理模型,我给大家简单介绍下。第一种,跌 player 和跌 player 加加,这两个功能是一样的,可以手动调节深度图 layers, 更捕捉画面的前景。跌 player 加加少用,很占内存空 空间。然后就是 mids 和 soy 这两个处理方式, mids 更聚焦于中间位置的景,而 soy 总体来说更加均匀。我们换一组对比给大家看下,这样就能直观的看到三种方式的效果了,建议自己多对比尝试。需要提一下的是,深度图的使用非常占用显卡内存, 所以显卡内存不够的记得适当调低图片尺寸。关于深度图的分享就到这边,我是 ai 姜子,谢谢观看。

本节课将为大家演示如何用 ctr net 去控制我们输出的人物的姿势,以及用多个 ctr net 去生成图片的步骤。比如说我们用这张图片, 我们可以生成他的一个 hed, 然后调节一下他的分辨率,然后在上面的模型的地方呢,我们可以使用一个偏动漫一点的模型,然后我们可以点击生成 好的,我们可以看到刚才通过 ctr net 引导生成的图片和我们刚才 给的参考。首先他的动态姿势,包括空间场景都是基于我们的参考图做的延展,甚至你可以看到生成图像的人物的服装和他 他的头发和我们提供的参考图都非常的类似。这就是说他能够将我们的参考图当中的细节最大部分的去保留到我们想要生成的风格的图片图片里。 有了这项技术呢,我们就可以尝试用同一个动态去生成多个不同的风格。比如我们选择一个偏三 d 效果的模型,再点击生成。 ok, 我们把刚才生成的三 d 风格的图片 和这种动漫风格的图片,还有我们的参考图片放在一起做一个比较,我们可以看见三者的动态包括场景都非常的相似。除了这个方法呢,我们还可以通过另一款插件来生成 openpose 图,来控制我们生成 人物的动态。我们来到扩展页面,搜索 openpose id 头,向下翻找到这款插件,然后点击安装,我们就可以在主页面的选项栏里面找到 openpose 的编辑器。通过这个编辑器呢,我们就可以自由的移动这些点的位置, 从而生成不同动态的 open pos 图。我们看下方的这两个按钮,这个按钮呢,他是说上传一张图片, open pos 会根据我们上传的图片的动态自动生成相应的动态图。 那么在生成的 openpose 图呢,我们只需要对于动态进行一个微调就可以直接使用,然后点击保存为 p n g 图片图,我们就可以看到动态图已经被下载下来了,然后就可以放到 ctrl net 里面去进行一个使用。那么这是一种自动生成谷歌图的方 方法,我们还可以通过这个按钮添加一张背景图片,那么通过这张背景图片,我们去手动的调节这个骨骼图,我们可以看到全选整个骨骼图的话,可以移动或者放大缩小。首先上面的两个点呢,是对应了两只眼睛, 这两个点呢是对应了两只耳朵,中间的点呢是代表了鼻子的位置,我们可以把画面放大一些再去进行编辑。 然后中间的这个点呢是代表了胸口,这两个点呢分别代表了肩膀的位置,这个这个地方就是胳膊肘的位置, 我们相应的去摆好它两边的是两个手腕的地方,千万不能放到手指。 然后下面的两个点呢是代表两个胯的位置,再往下呢是膝盖, 再往下呢是两只脚的脚踝的位置。那么这样子呢,我们就能把整个的动态图给他做出来,然后同样点击下面的保存为 p n g, 我们打开它,我们发现动态图已经下载下来了。回到主页面,我们把刚才生好的 openpose 图拽入到 ctrl net 里,然后点击启用和无提示死模式。由于我 我们直接提供了 open pos 图,所以预处理器直接选无。在模型里面呢选择 open pos, 然后我们调整一下参数。 模型方面呢,选择一个偏二次元的模型,然后然后点击生成,我们就可以看到用 openpost 图生成的图片的人物动态,可以很好的还原我们找到的参考。我们还可以使用多个 control night, 比如说用一个喷 pose 图加上一个 deps, 两个集合起来去使用的话,对输出画面的掌控力会更高。我们可以在设置页面这里可以看到有这个选项,这个选项呢,就是能够选择我们一次能够使用 有多少。 ctrl net 的选项,我们可以把它的数量提高到三,然后保存。设置之后点击重启,回到我们的首页,点开 ctrl net, 我们就可以发现多个 ctrl net 的选项卡已经出现在了首页上。接下来我们拽入 dips, canny 和 openpose, 点击启用和 d 显存优化,选择相应的模型,然后把画面的比例调节一致,最后我们选择相应的参数。点击生成, 我们可以看到生成的图片的画面效果是由 control net 的引导而生成的,包括空间关系,包括人物的动态。好了,那么关于本期的 control net 的课程就到此结束了。本期课程生成的所有的图片 连同其他的关于 aigc 的资源,我已经打包准备好了,请大家三连之后私信我领取吧。

哈喽,大家好,今天我们来更新一下 stable diffusion 的新一期课程,很多伙伴一直让我讲 ctrl net 今天我们总算更新到了 ctr net 是 sd 里面非常灵魂的一个部分,而且也非常的 庞大,所以呢,这一期内容我们先带大家入门 ctrl net 但是不会进行单独的伸讲,如果你已经会初步的使用,想要寻找单独的某一种使用方法,那建议你再等一等我后续的课程,或者是去找别的一些单篇的课程。这一期是要让很多 售伙伴来入门到 ctrl net 的使用当中。首先第一个,如果你下载的是我群公告链接里分享的 sd 本体,那这个 ctrl net 插件是本身就自带的,所以我们不需要再安装插件。 但是呢,如果你是现在才跟我一起来学习,你下到我的链接之后,有可能安装完了。在版本管理这个地方,你会看到他可能不是最新版,所以我们需要更新一下。首先把这个本体这个地方刷新一下,然后在最新版这个地方点击一下切换,把它切 切换到最新版本。其次呢,在扩展这个位置点击一下刷新,如果你有很多红色的标签,说明就是有有这个更新的版本。然后我们再点击一键更新, 我这里在运行点了一键更新之后,点击确定他就显示更新完毕。到这一步我们再启动这个本体。更新完了之后,你启动可能会相对慢一点,我们耐心的等待一下,只要他不报错,你就可以等,等到他启动了之后,后续就变快了。那我们启动完之后,我们就可以在纹身图 或者是图生图的下方找到我们的 ctrl net 的折叠页面,点开它之后就可以看到整个的整个的界面。首先我们先来介绍一下这个界面,在第一栏我们可以看到这里 ctrl net 一二三四有四个标签栏,这个地方就代表 我们可以同时用几个不同的 ctrl net 对一次出图进行控制,但是这个后续我们在细讲。接下来这个地方会有一个上传图片的区域,这个插件其实是通过不同的纬度对图片进行控制,所以说这个地方一定要给 给我们上传图片的位置,让我们根据现有图片的某一项这个要素来进行控制。接下来的几个按钮,首先这里启用,如果我们要调用这个 ctrlat, 一定要把这个启用点上,否则无论是你上传的图片还是修改了下面的参数,只要不点这个启用,他都是无法生效的, 很多人在这里把它忽略了。第二个一,显存模式插件是比较吃显存的,如果你的配置不是特别高,那么建议你把这个开上。第三个完美像素模式会让这个 ctrl net 提取这个更加精准,精度会更高一点,通常情况下我们建议开启。最后就是允许预览,当我们点击它之后,旁边会多出一个框,在这个位置会呈现出不同控制纬度下的一个预处理的图片, 后面我们就知道他到底是什么意思。然后在下面这个区域呢,我们放到最后讲,因为他是后产生的一个快捷方式。我们主要先来看这里也是 ctrl nice 最重要两步,第一个是预处理器,这个预处理器我们点开,我们应该自带了所有的预处理的选项,这个地方我们可以把它理解成一个施工图,当我们要用 ctrl 对他进行控制的时候,先有一个图质的规划,然后右边这个模型呢,就代表我有了图形之后,我需要对他进行施工,落地模型就代表如何去真正的操作他,这两个是缺一不可的。那我们初次下载之后,预处理器这里应该是全部都有的,但是模型这里大家应该都没有,这个时候呢,需要打开我分享在群公告里的链接,链接当中我放了所有的 ctrl。 net 模型, 大家可以看到这些一点多 g 的,我们可以把它全部下下来,这个六百多兆,这个是比较老一些的版本,一点多 g 的是新一些的版本啊,大家可以只下这个新的, 它下载完之后我们放到哪里呢?我们把它放到这个根目录当中,找到 extensions, 然后在里面再找到 ctrl。 net 然后继续找到 models, 在这个位置我们可以看到原本我们应该有很多这种 yaml 这个格式的很小的文件,这个就是预处理器 应该是自带的。然后呢我们没有这些大文件,我们就需要把下载的这个大模型全部拷贝到这里,拷贝之后我们在这个地方点击刷新,所有的模型就已经出来了。当我们使用的时候, 左边选哪个预处理器,右边就要对应到它的模型,那比如说这个模型怎么看呢?看起来都差不多,主要看它最后一个单词,比如说这里的 dips 深度模型,当我在这边选择深度的 处理与处理器的时候,这边就需要选择到深度模型,这个时候我们就要用到上面说的这个地方,这个地方是一个快捷的方式,比如说我们想要用这个 canning 这个方式,我直接点击这里,他会自动把下面的 处理器和模型都给我匹配上。那如果我们旧版的和新版的全部模型都下了,在这个位置我们可以手动切换一下新版的,包括预处理器。其实这里有多种方式,比如说当我选择深度模型的时候,他在这里面会有几个不同的算法,我们也可以手动来进行选择, 然后再到下面控制权重。这个地方很简单,就代表我让这个 ctrl net 控制性有多强,这个越低它的控制性就越弱,越高的话控制性就越强。一,一般我们把它默认为一,后面这个引导介入时机其实也很好理解,当我选择为零的时候,比如说这张图 生成的迭代步数为二十步,当我进入时机为零的时候,也就是说从一开始绘画的时候,他就被这个 ctrl net 牢牢的控制住,然后一直到中指时机为一的时候,一直到最后。那比如说这个地方我调成了零点五,也就代表总体的迭代步数。如果是二十步,那就是在第十步的时候,我才开始用 ctrl net 来 介入控制。在之前他还是随机的,但是一般来说为了效果会比较好,我们让他在一开始就介入,但是我们可以让他提前停止控制 后面的部分,我让他随机再发挥一些,这个大家可以灵活来调整。在下面这个部分呢,会根据控制纬度的不同,他会有不同的参数,后面我们会逐一介绍到 在下方,这里就更简单了,控制的模式我们是让它均衡一点呢?还是权重更偏向于我的提示词,还是权重更偏向于 ctrl? net 然后在下面这个部分,当我们上传的参考图和原图的比例不同的时候,直接拉伸它呢?还是来裁剪它的比例,或者是来播放?一般来说这里和原图的尺寸应该是保持一致的,所以这个地方可以忽略掉它,这个就是 一个大概的使用界面。接下来我们就介绍一下 ctrl net 会有哪些维度的控制,其实它后面这个视野写的非常清楚,我们来介绍几个比较好用的。比如说第一个,这个 candy 是我们经常用到的一个边缘检测,当我们想出一张图,让它完全按照这个图片的轮廓来进行, 我们选择了这个预处理器之后,然后点击这个爆炸按钮,我们就可以预览预览它的结果,看到没有,我们直接就把这个图片提取成它的限稿模式, 也就是说我下一张图可以利用这张图提取的线稿来把它的紧紧的限制住。那具体怎么用呢?首先我们在这选了预处理器之后, 这边的模型我们也要手动对应,或者直接在我们这个地方选择快捷方式,让它自动来对应,我们选择更新的版本,接下来在这里点击启用,正常情况下建议勾选完美的像素模式,我们先对比看一下,我不启用它的状况下,我直接写一个简单的指令,我们可以看到它的出土就完全是随机的,但是当我启用了这个 ctrl net 用这个边缘轮廓来控制它这个 手,再点击生成。调用了 ctrl nice 之后,出图的速度也会相对慢一些,尤其是首次使用的时候,他需要加载模型,可以耐心等待一下。这个时候我们看到他会给我们两幅图,一幅呢是我们预处理的结果,另一幅是我们生出来的图,我们发现这样出来的图,他的这个边缘轮廓几乎和原来的图是一模一样的。在这里面呢,我我们可以写更多的啊 提示词,比如说红色头发,甚至我可以把它写成一个男人,但是只要我用了 ctrl net 边缘控制,他的整个轮廓一定是不会变的,可以看到这个效果,这个是其中的一个。还有其他比如说这个深度,深度的算法,当我们的主体和背景有明显的这个紧身的关系的时候,我们可以用这个深度模型来控制。他 可以看到这个图,他把靠近我们近的部分变成了白色,稍微远一些的部分用黑色代替。那这个图层就代表着他记录了这个图像中哪些是离我们更近的,哪些是离我们更远的。通过这个深度的控制,能很好的区别于我的前景和后景啊,在一些这个室内设计当中 非常的好用。还有比如说这个动漫线稿的提取,我们可以看一下它的效果和这个 canning 有什么区别,可以看到它的边缘没有那个 canning 那么硬。还有什么呢?比如说这个 ml sd, 这个是专门用在室内设计当中的 一个模型,他会检测画面中所有的直线线条,曲线的线条他是无法检测的,刚好可以用在我们室内的设计当中,有些细致末节的我们可以忽略掉,只要只要提取他的大框架就可以。然后呢, openpose 就是我比较出名的一个人物动作的一个控制, 他可以直接把这个人物提取他的骨架结构来限制他的动作,还有其他等等的,比如说新出的这个 reference, 在某些程度上要求不那么高的时候,甚至可以代替训练模型。然后以及这个这个也是室内设计当中用到的一个羽翼分割,非常的神奇。后期我们都会单独来进行讲解, 今天主要内容呢就是带大家入门一下。 ctrl net 后面我们会逐篇的进行细讲,如果有等不及的伙伴,现在可以去搜一下抖音或者其他平台的一些单篇教程,我觉得入了门之后你再去学习这些是没问题的,但如果一开始就上去直接来学习操作的话,是很难这个举一反三的,所以这期内容就到这里,大家赶紧去尝试一下吧。

你是不是费尽心机写了很多的提示词,却仍然控制不了画面的细节和色调? 今天教会你使用 ctrlnet 的太偶模型,只使用两个词就能够产生这样丰富细节的效果。首先我们来到利不利我 ai, 在这里找到一个合适的大模型,然后点击这里将它加入到模型库中。 加入之后,在上面点击在线 stable defusion, 我们就可以来到一个原汁原味的线上 stable defusion 的页面,在这里就可以找到刚才我们放入进去的大模型。 然后来到 png 图片信息,将一张图片儿载入进去,最后点击发送到文生图。因为我们要使用的是 ctrl net 的 tail, 所以说它的提示词根本不需要这么多,我们只要把主体给留下,就 比如说就留下来一个女孩,然后下面的副项提示词里面也是我们要删除绝大多数的,让提示词尽可能的精简。然后下面的放大算法,我们可以选择最后一个 ultra shelf, 下面打开 ctrl nice 与处理器的话选择 tile, color fix。 然后模型的话,同样的我们选择太阳模型, 使用 tar 的话,他的权重一定要给他拉低点,我们可以先给到零点三五,然后下面的变换,这个参数可以拉高一些,我们可以拉到最高三十二。 然后我们将使用这张照片作为 tail 输入的图片,然后我们来到最上面,点击开始生成。我们可以看一下生成的图片和原本 tail 的图片的对比,可以看到 生成的图片当中是借鉴了很多太阳使用的图片的一些元素,比如说他的一些植物,还有一些下面的花的一些关系,因为太阳模型本身,他就会将这张图片进行向下采样,也就是说首先把这张图片变得更小, 然后 ai 在这张图片里面给他添加更多的细节,包括画面的颜色。可以看到两张图片是有一定的课程关系的,我们使用太阳模型的话,可以让我们只使用很少的提示词,就能够达到很丰富的画面效果。 那么接下来我们还可以尝试使用这张图片,把它作为 tile 的一个参考图片,看一下生成的效果。那么从生成的图片当中,我们可以看到,它依然是借鉴了 tile 的参考图 片中的一些元素,比如说中间的这个蓝色的东西成为了人物当中的衣服的主色调,包括画面当中的这种曲线, 他形成了在人物背后的背景的这个地方。从整体的色调来看呢,两张图片的色调是基本上一致的,那么我们可以尝试使用更多的图片作为 tal 的参考图片,看看能不能出现更多神奇的效果。 保留相同的提示词和参数不变。 tile 的参考图选择一盘式子,可以看到生成的图片 和原图的构图和色调依然保留了很大的关联,他好像是把中间的这几个式子变成了一个人。再来看这一组图像,依然保留了太偶参考图的色调和细节。我们使用太 模型的话,确实可以让我们只使用很少的提示词,就能够做出很高细节度的图片。如果你电脑的硬件水平没有那么好,或者暂时没有办法用电脑做图,可以考虑来到利不利沃 ai, 使用他的在线 style titution 的功能。 它不仅可以使用多个 control net, 而且它的功能还算是比较齐全,比如有涂装图或者后期处理等。 他每天可以免费生成一百张图片,基本上一天是用不完的。喜欢什么模型,还可以一键添加到模型库里,方便我们调用。 大家可以多试一下。泰欧的这两个预处理器,真的很好用,使用他的话,记得要把权重给他拉低一点,效果才会更加明显。

哈喽大家好,我是薯片 ai, 就在九月五日 ctrl net 迎来了幺点幺点四版本的更新,此次更新加入了一些新的控制类型。本期视频我们就一起来对这些新控制类型进行一一测评,看看这些类型都能干什么 和有哪些有趣的玩法。由于模型较多,时间有限,本视频先介绍 s d 一点五的控制类型, s d x l 的放在下一期介绍此次基于底膜 s d 一点五的 control net 模型新增的有,一、 recolor 重上色。 二、 ip adapter。 一、 recolor 重上色该模型顾名思义就是对图片进行重新上色。该模型的玩法可以分成两种,一、黑白照片上色。二、指定元素换色。在使用该模型之前, 我们还需要单独下载 recolor 的模型,这个模型在更新时的自动下载中是没有的。我们先来看看黑白照片上色怎么玩。首先我们找一张黑白的图片,然后稍微描述下关键词, 当然你不描述也可以。 control net 把这张黑白照片上传,勾选启用和完美像素模式,然后选择 recolor, 可以选择图片强度或者图片亮度进行去色。我们一般默认用 luminance 就可以了,其他参数默认即可。然后我们生成就会看到原本的黑白照片进行了上色,这样就对于我们修复一些老照片来说非常方便。 另一个玩法是指定元素换色,如换头发颜色,换衣服颜色。这个有点像我们之前用的 in painting anything, 而这个模 行省略掉了分割的步骤。选择 recolor 后,预处理器分为 intensity 和 luminance, intensity 会更加黑白,不过我们默认 luminance 就可以了。然后我们就可以换成粉色头发、蓝色头发等对图片元素进行换色。二、 ip adapter ip adapter 是腾讯 ai 实验室在八月十三日开园的一个模型。我们在用 ai 绘图的时候, 提示词是一个非常重要的角色,它关系到我们生成图片的内容。但是俗话说意图胜千言。这个模型的目的就是让我们用上传图片替代提示词来影响我们出图的内容。 玩法就是可以配合我们原本的 prompt 和其他的 control net 把一张图片的整体风格迁移到另一张图片上, 我这里演示,就去网上找了些提示词写上这里部署二十,选择最新出的 restart, 开高清修复。因为要绘制人脸,所以开下 attale。 第一个 control。 net 我们上传一张想要的图片风格,启用加完美像素模式,然后选择 ip adapter, 下面参数默认即可。接着第二个 control。 net 我们上传一张图,然后选择 depth, 其他参数默认即可。为了凸显树的形状,我把权重拉到一点二。最后我们生成图片会发现我们第一张图水下的效果 已经迁移到了第二张图的树形状。这就是这个模型最大的用处。我是薯片 ai, 关注我,分享更多 ai 内容!

用 s d 精准控光只需三步。第一步,使用祖传配方生成你需要的图像。第二步,使用 ps 把你期望发亮的地方绘制成白色。第三步,来到 ctrl net 把绘制出来的这张图给他勾选,启用完美像素 在这里,模型选择 brightness 控制权重推荐设置为零点五左右。引导介入时机推荐设置为零点二左右。引导终止时机推荐设置为零点六左右。接下来就是抽卡时间, 在这里如果你有这样黑白的光束图也可以给到他。我是橘子,一起玩 ai 绘图。

哈喽,大家好,我是 aa 小王子 ctrl。 net 现在正式可以兼容 st xl 的模型了,所以今天我就教大家如何更新最新的 ctrl。 net 并且教大家如何下载最新的模型和一些让 ctrl net 兼容的一些部署设置。如果你想把黑白的老照片变成一个带有色彩的照片, 如果你想把你的线稿变成一张有色彩的图片,如果你想把你的照片生成同风格、同类型、同构图的图片,那么建议你先点赞收藏,以免错过。这期也会实操给大家看一下在 你的设备上生成一个和别人设备上相同图片的一个使用方法。接下来我就为大家讲解先用 s t x l 模型的 ctrl。 net 新出了哪些超好用的功能。首先呢,我们要来到 gap 这个网站,今天所有用到的网站还有一些模型的下载 包啊,我都会放在视频简介啊, ok, 首先我们看一下这边的 major update, 讲到就是 ctrl night 一点一点四零零这个版本,这边展示的是所有可以兼容 sdxl 的新 ctrl 耐模型。 这边讲到两个是不需要控制模型的,一个是 revision 和 reference, 大家如果想自己手动去下载的话,可以点击这个网址,就是这个。这里这么多模型,大家具是否要全部下载呢?嗯,如果你的储存空间够大, 你全部下载是没有问题的。如果你的储存空间有限呢?我教大家下载哪个?这边一个 candy 模型就有三个版本,这三个模型肯定是负的,效果是最好了,但是如果你的现存或者内存不足的话,你可以下载这个密的, 它效果也是还 ok 的,但是和副比的话还是差了一些,最大的这个需要二点五 gb, 所以大家这三种啊,根据自己的内存来看,内存足够多就下载, 内存非常非常少就下载 small 这三个选择一个下载就行,然后这也是 depth, 下载其中一个就 ok 了。然后接下来这个 recolor 啊,还有后边这个 ip, adapter 等等等,等到这些 co 呀,建议大家都下载,因为这些是他们的一些新功能, 而且占的内存不是很大。然后接下来是 saxl, cany 这些这些呢,建议大家去下载带有二五六这个数字的版本啊,因为他们是一样的,只不过二五六他的精度会更高一些。然后剩下的所有模型啊,大家都可以去下载,占用的空间也不是很大,如果你的内存足够高啊,几 tb, 十 tb 的话, 你就全部下载就好了。那这些具体下载到哪里呢?我们到 y b u i 的根目录,然后找到 extensions, 然后找到 control night, 找到 models, 把它们全部下载到这里。下载完成之后呢,在使用的时候可能还会 需要你再下载一些模型,当然都是在使用的时候自动下载的。大家如果下载时遇到网络不好,或者懒得一个一个去下载,你们可以直接下载我网盘里的文件就 ok 了。我已经给大家准备好了下载网盘这个 downloads 文件夹,然后把 downloads 文件夹放到这里,直接代替你原来的 downloads 文件夹就 ok 了。 这是怎么去下载?那怎么去更新呢?请看我的上节课啊,这个有具体跟大家讲,然后就是 ctrl nine 这个插件也要更新到最新版本,到我们的版本管理扩展,然后点击一键更新,然后确定一下就 ok 了。如果你是 automati one one one one 的话,我们就点击扩展检查更新, 然后应用更改并重启就 ok 了。怎么让那些显存低的那些人使用到 s d x l 呢?如果你是 automatic one one one one 部署的话,我们到根部路往下拉,找到 y v u i, 点 user, 点我们右键点击编辑。如果你的显存是在四 gb 到六 gb 的话,你就在这里边写,杠杠 low viram, 这两个不要同时写啊,你写其中一个就好了,根据自己的显存四到六 gb 写 刚刚的 low virum, 八到十二 gb 写这个。那有的人问了,那我是启动器怎么办?启动器的话我们直接在这里选就行了,这边大佬已经帮大家改好了,就是仅 sdxl 中等选择 就代表 mat viram 杠 s d x l, 然后显存不足,低显存的话我们就选择这个低显存就 ok 了。 这边实际币的话,我是选择这个的,我们选择完之后就可以点击一键启动了, ok, 启动过后我们就开始看到了我们美丽的 ybui。 然后上节课有跟大家讲过,怎么让你本地电脑渲染的图片和别人本地的电脑渲染的图片一模一样的,我们讲到一个 n nv 这个选项是他们唯一点六新更新的,对不对?当时我没有跟大家演示,但是今天跟大家演示一下啊,比如说这张图片啊, 我们如何一比一的完全复刻在我们本地跑出来跟 stability ai 这个官方出了图片一模一样呢?第一点,你是 v 一点六版本,我们更新完了过。第二点,我们要用的模型是 s d x l base 一点零,当然是这个就是 s d x l 的官方一点零模型, 这个我会放到网盘里面啊。第三点,我们要到我们的设置里边,然后先点击显示所有啊,因为这样子方便我们去搜索。第一点,我们要搜索 random 这个单词,我们 ctrl 加 f 啊,右上角会出现一个框框,我们输入 random r a d o m, 输入 random 这边之后呢,我们要把它变成 c p u。 所以说我们现在型号的显卡可能跟对方使用的显卡信号是 不一样的,所以我们如果想在不同型号显卡产生相同图像,就点击 cpu 这个选项。然后接下来我们要再 search s g m, 我们输入 s g m, 然后找到这个选项,我们要勾选这个,使用 s g m 勾选,打勾勾就证明你就对了。然后接下来我们搜索 deterministic, deterministic okay, 这个选项是不勾选的啊,不勾选这个选项, ok, 一个是选择 cpu, 一个是勾选 s g m, 最后是一个不勾选这个,保留 d p m 加加 s d e 这个选项。 我们如果都完成之后,我们点击保存设置这边,因为我更改过了,是零 setting changed, 如果你之前没有更改过,这边会显示一些文字。 ok, 点击保存设置之后,我们点击重载 yby, 就是这个按钮啊, reload ui, 重载完之后, 我们就开始看一下今天的重头戏了啊, ok, 我们来直接复制一下这边呢是他的 metadata, 就是原数据, ok, 原数据,我们把这些全部复制到这边,之前我可能没有跟大家讲,我们直接点击这个键,他就能把所有的 关键词啊,负面关键词、参数、迭代步数、采样器全部复制到这边。 ok, 你看已经复制过来了之后呢,我们直接点击生成,看一下他做出来图片是否会跟这个一模一样,好吧, ok, 图片出来了,我们看一下,我们做一个对比啊,左边是我做的,右边是 stability ai 官方做了这个图片可以看出来啊,我们把所有原数据 copy 过来之后,几乎是一模一样的,当然了有很多微小的不同, 可以玩找不同啊,这个反光点上的线是不一样的,当然这些不同都是很微小的,那么这点我们能看到什么呢?之前很多 小伙伴找我啊,就问老师,为什么我比如说 c 站上面看到的图片,我把他们的所有正片,关键词,采样器啊,种子等等复制过来,然后到我的本地上出的图片就是完全不一样的。未来的模型网站上,不管 cbt, ai 啊,还是正合我们国内的模型网站,有了这个功能之后呢,几乎大家可以 一比一的复刻他出了一些图片了,这是一个新的小技巧啊,接下来我们看一下,官网也有讲到,如果你是使用 confu i 具体怎么操作, 他这边也会告诉你,然后这边他就是告诉你 automati one one one 和 confi ui 的一些具体的一些表现,区别在哪里,大家有兴趣的话可以看一下这边啊 这个页面啊,大家一定要好好看看。他讲了几乎所有新的 ctrl net 模型的具体使用方式,还有一些小技巧,下面我给大家讲一个这个,这边讲到 就是一些 xl 的这些 ctrl nine 模型啊,不只是这个 ctrl nine lores, 这个里可以理解为还是在实验阶段,而有的时候 give fight result。 这里翻译成并不尽人意的一些结果。其实我们给他了很多的负相关键词, 比如说这个啊,我给大家举个例子,把它直接复制过来,然后我把这边复制一下。这边他给的这个小技巧还是很有意思的啊,好好听一下。然后我们到这边找到他的抗生耐模型,这边用的 canning, 然后 s a i x l 这边用的 canning s a i x l ok, 这个还是 no, 这边 s a i x l kenny 二五六了啊, ok, ok, 这个时候我们生成一下,看他的图片是什么样子的, ok, 我们看一下,我们的关键词是一个女人在街上走路的照片, 天,然后负面关键词是 enemy drawing, 我们主要写这个 drawing 就是不想让他变成绘画的形式,然后 bad ugly, 但是他最终还是变成了一个绘画的形式。那么这种情况大家如果遇到了,怎么解决他呢?首先你可以把你的 control mode 改为 ctrl net is more important, 就是把控制模式改为更偏向 ctrl net 但是大家要知道啊,如果你改成更偏向 ctrl net 的话,那你一定要把这个 cfg skill 给调小调低一些,要不你的图片会出来的会稍微怪改到三,然后我们再试一下, ok, 像这张就会好一些,对不对?所以如果你在使用 ctrl nice 的时候也遇见了相同的问题,可以试用一下这样的方法去解决它, ok, 然后下面如果说你在使用 sd xl 的模型的时候,比如说 这个模型 diffuser xl deps 负它这个模型是非常大的,如果你的显存啊是在八级币或六级币左右的话,你一定要把这个 low v room 勾选上,如果没有勾选上的话,你可能会报显存, 因为在前两天我做测试的时候,可能后台打开的程序比较多,我那会是爆显存了。如果遇到这种问题,你先把外部 uik 重启一下,然后再勾选到这个低显存模式,再出图会好一些。然后接下来我们看一下其他的一些模型啊,我们看下这个 revision 是干嘛的?在使用 revision 的时候,这个 revision 会自动帮你下载一些东西,你不需要主动下载,它会自动下载 revision 怎么用呢?它就是让你的一张图片,你在不使用任何关键词的情况下,生成一张类似的一些图片,比如说我们把这个复制过来啊。模型,我们用这个 revision ignore prompt, 他这 这个专门的模型就是在你使用 ctrl night 的时候,不需要使用任何的 prompt 就能给你出一张图片,我们点击生成一下, ok, 做好了,大家可以看到,就是没有任何 prompt, ai 自动识别到这张是一个狗的图片,呃,并且整体的颜色色调也是很像的,比如说狗身上的毛啊,毛发呀,还有耳朵怎么垂的很像, 我这张属实有点像一个秃头的人了。所以这个 ignore prompt 可能还需要更多的一些间接。当然了,我们使用 ai, 特别是 sd 的时候,我们 肯定是会用到 prompt, 如果我们再稍微加一些 prompt 的话,把这个模型换成这个 revision clevision 的话,会好很多很多。这是它这个 revision 模型的一个介绍。然后接下来我们看一下这个 t r i adapter, 它就是让你的线稿 成图,比如说这张线稿你放进去之后,使用这个 t r i adapter xl kelly 模型,它就会把它变成一个有色彩的图片,就是线稿生图。 接下来讲一下 ip adapter 这张的话,就很适合那些做漫画的一些人使用,比如说我们把这张图片拖过来, ok, 这边就要使用预处理器啊, ip adapter keep, 这个在使用的时候,如果是第一次使用的话, 还是需要下载这个模型的,它会自动下载啊,文件是非常大的。我们这边改成 sd xl, 这边也改成 xl。 这个模型我们看一下它的神奇之处,就是让 ai 参考这张图片的所有细节,然后生成一个全新的图片,并且细节和色彩、构图等等都是很相似的。 ok, 我们看一下左边是原图,右边是新出来的图片,我们可以看到整体的盔甲几乎是很相似 的,对不对?当然你你要找这些细节,这边有个键,这边没有键,的确是不一样的,但是整体盔甲质感呢,颜色是不是都是很相似的,并且构图也是很像,就是当我们想用一张图保留他的完全细节,但是换一张脸的话,而且这个脸并不是指定的话,你就可以用这个 下巴,这个 stable diffusion 一点五,他是做了一个对比啊,具体效果我觉得还是 xl 的效果会更好一些,大家这个可以去对比一下,然后接下来这个 reference only, reference only 的话也是有点像,就是还是从原图的基础上生成一个不同人物的图片,相似构图,相似场景,相似细节,这就是他的特点。 ok, 下面给大家讲一下这个 recolor 吧。 recolor 还是比较有意思,这个模型可以让你的黑白照片上色,我们直接拿它作例子,然后把关键词复制一下,然后模型这边选择 recolor loominess, 然后 sai xl, ok, 然后我们点击生成。 ok, 我们看一下是不是右边的图片,直接就给左边图片上色了。所以大家如果在家里有一些父母或者爷爷奶奶一些黑白的老照片想给他们上色的话, 其实大家就可以用这个 recolor 这个功能,这个大家下去一定要试一下啊,这下面就讲的 recolor 一点五和 xl 的一个区别啊, xl 做的会更真实一些,一点五它的饱和度会更饱满一些, 根据自己的需求去使用,好吧, ok, 今天主要是大概的跟大家讲一下兼容 sd xl 的 ctrl nine 一些新的模型的使用方法。 其他的 open pose 呀都是跟以前是几乎是差不多的,只不过说他们会有一个新的模型兼容到 s, d, x, l 而已。比如说我们在使用 open pose 的时候,这边还是往 往常一样的右边呢,我们就可以使用这个 openpose xl 这些模型,只要是模型里面带 xl 的,都是可以兼容 xl 模型的。 接下来给大家讲一下很重大的事情,第一点就是我现在云端镜像正式部署了 rtx 四零九零的云端镜像,并且我为大家争取到了 ai 小王子的专属优惠,只要是通过我的邀请码注册的用户,现在不只是可以获得优惠券,并且额外可以收到两张满减券, 在包月四零九零的时候,会有一九九零减两百的优惠,比八折还更猛一些。所以如果你的朋友或者身边的人也有云服务需求的话,可以把我的邀请码分享给他们。目前四零九零啊,全网只有我一个人不说, 怎么去添加呢?如果你已经有了青椒云的客户端的话,我们点击华南五,然后点击新增云桌面,找到这边的定制产品, a igc 超全部署 ai 小王子 g 专属定制,因为这四零九零他们的数量是有限的,目前只能包天,不可以包时,包周是六百五,包月是一千九百九十九,然后或者包月计时, 如果你要使用的话,其实用包月计时还是比较划算的啊,然后我们换到西南,西南这边也是一样的啊,我们点击新增云桌面往下拉找一下 ai 小王子 j 专属定 这边的话就是三零六零的一个显卡,所以相对于 a 四千会便宜一些,两块二一小时,他们包天的话是三十七块钱,包月计时是五百。具体怎么注册和使用教程可以看一下我的这期视频,然后注册连接呢?我会放到我的视频简介里边供大家去使用, 所有都给大家部署的非常全非常好,大家一定要上去体验一下。大家有的时候在使用一个服务器的显卡的时候,他可能会遇到这个当前人数过多,无法 打开的问题,原因就在于使用人太多了,所以你要不晚点试,如果你着急用的话,你可以切换到其他有我镜像的服务器,比如说有华南寺或者西南都可以, ok。 第二个 ai 小王子非常重大的更新,就是 ai 小王子 qq 频道今天正式上线了啊, 目前我还没有做推广,所以在看我视频的朋友,你们是第一批人看到的,大家进来之后看一下城堡重要公告啊,因为讲解了每个频道的一些使用方法,具体是怎么使用,可以在这里看到我的其他平台的账号,然后交流区啊, 早安午安问候问候区,我给大家创建的,如果大家有任何关于 ai 的问题的话,到这里交流,希望大家在这个社区里一起交流,互帮互助,如果大家遇见了别人问的问题,你也遇见过的话,希望大家伸出援手啊。然后这边还有交 交流大厅,模型炼丹,然后吐槽 ai。 我每天都会在这个交流群里边,然后希望和大家一起交流,然后这边还有模型分享,模型推荐。然后这边就是一些皇家 ai 资源分享,这个和我的 disco 城堡一样,也是勇士身份才可以解锁了,有这个 me journey 资源很多很多, 然后 stable diffusion 资源,拆 gpd 资源,还有其他 ai 相关资源,我都在这里边汇总了很多啊。然后想要成为勇士的话,可以看一下这个频道,我想成为勇士解锁资源。 接下来下边呢,就是一些建议区,比如说我想让 ai 小王子做的更好,这两频道我会经常关注的,因为我希望大家多给我提些意见和建议,让我在 ai 自媒体的道路上做的更好,比如说视频哪方面要做 家呀等等等等。这边社区建议和意见相就是说,比如说你想开创一个新的频道,或者说如果你在这个频道 qq 频道里边交流, 有的时候遇到哪些人恶语相向啊,污言秽语等等等等,说了一些不该说的词汇等等,你都可以在这里边跟我讲,然后我会做出相应的决定,给他踢出去或者禁言等等等等。 大家在这个社区里,我希望这个社区是一个美好的社区,大家互帮互助啊,友好交流,好吧,进入之后记得点击一下上方的加入频道,不点击的话你就会自动退出来,记得来这个友好交流大厅讲一句话啊,跟我打个招呼,好吧, ok, 那今天就讲到这里啊,菠萝蜜让你轻松掌控 ai。

大家好,我是木心,今天我们把 cpc 标准中的 ctrnet 的其他表现效果再演示一下,让大家先混个眼熟,等需要用的时候就能够有个印象,然后再来跟着操作。上一期视频,我们通过 ctrlnet 中的太阳模型完成了慢行风格到现实风格的迁移,但 ctrlnet 的效果远不止这一种。 首先我们需要了解 controlled 的模型和他们能够实现什么样的效果。每次打开 controlled, 在控制类型中,我们都能看到当前版本所包含的控制效果。 效果最为直接的就是 canny, 它的效果就是提取图片的线稿,然后将线稿传输给 saveddiving, 让他根据线稿进行创作。 我们来演示一下,当我们拿到一张图片,把它放到像素框中,点击小三角进行预览,我们就能看到凯妮为我们提供的线稿。然后我们点击生成看一看,新生成的图片完全是按照线稿进行绘制的,除了颜色之外,其他的地方几乎一样,这就是凯妮提取线稿的效果。然后我们看一下地步功能,预览之后的结果,我们能 看到模型分析了画面的景深层次,但背景的颜色是黑色的,这样我们生成的效果。画面中的人物景深是固定的,但背景会发生一些变化。我们点击生成看一下效果。我们来对比一下同样的景深背景是有一些变化的,因为这里我运用了一个高峰海报的 lower 和相同的关键词,所以看起来区别不大,只有细微的变化。 我们换一张图片,效果会更清晰,因为这个景神更多的是运用在建筑层面,所以我们选择一个楼阁的图片,然后给他一个景深的 ctrl night, 当我们点击生成,然后我们看到这里的楼阁山脉之间的层次是被控制的, 云朵和天空是发生了变化的,那我们要怎么样去运用这个地步功能,我们给大家做一个演示,还是这个楼阁的图片,我们给他换一个季节,换成冬天,我们在提示词中加入冬天,然后我们加入雪,然后我们点击生成看一看,生成的结果就是把季节转换成了冬天,然后给画面增加一些雪的景色, 但是画面的层次并没有发生变化,这只是地方一个比较小的应用,大家主要还是了解他是怎么样实现这些效果的,然后搭配自己的需求进行使用。今天的视频到这里就结束了,我来总结一下,我们今天讲了两个内容,看你和地方 堪比是用来提取画面线稿的,地方是用来提取画面景深的,景深的提取在建筑方面有更显著的效果。大家有任何问题都可以在评论区进行提问,或者在后台私信我,我会以主题视频的形式为大家进行解答。我是木心,我们下期再见。

大家好,欢迎大家收看我的 sd 系列教程。嗯,今天我们讲一下 sd 的一个境界的一个东西,一个插件,这个插件也是我们 sd 的灵魂所在啊。 嗯,几乎我们绝大多数的操作都需要用到这个插件啊,这个插件就是我们大名鼎鼎的 ctrl net 首先,如果你是刚装的 sd 的话,可能他是没有,你的界面上是没有 ctrl net 选项的,那这时候我们需要先安装一下 ctrl net 我们选择这个扩展插件这个选项,然后选择从网址安装,然后将给你的这个网址复制一下,粘贴到对应的选项里面, 然后点击一下安装,他就会自动帮你安装了。当你安装好了之后,点击这里的应用并重启用户界面 之后,你就可以在你的 stable dv 选的界面里看到 ctrl。 net 这个选项了。好,我们现在先介绍一下 ctrl。 net 当你安装好了 ctrl。 net 并重启之后,你的主界面上应该会就会多了一个这样的 ctrl。 net 的选项,我们先把它打开。首先第一个他是让你放一张图片进来,这时候我们可以选择一张图片 之后下面有几个选项。第一个叫启用,勾选这个启用之后,这个 ctrl net 这个插件才会使用,不然他是 生效的。然后第二个是低显存模式,就是如果你的显存较低的话,你就要勾选这个模式。第三个呢叫完美像素匹配,就是勾选了这个之后,你的图片生成出来的结果会更好一点。然后第四个是允许预览, 就是你点击,点击了这个允许栏之后,你看这个图片这个框里面就会多出一个现实框,他会显示你这个预数率细处理完这个图片之后的一个结果, 然后下面就是几种我们的基本的预处理器了。呃,我们常用的只有几个,我今天就先简单介绍其中几个,我们接下一个讲。第一个是那个 canning, 就是他的作用是将你的这个图片的线稿给绘制出来,我们可以 就是先尝试一下,让他处理一下,你看这边他们就他就生成了你这个图片的一个线稿,他会把颜色什么都去掉,只把你的图片的轮廓线给描出来。 然后如果你用这个 ctrl 去控制你生成图片的话,你之后生成出来的图片都会按照这个轮廓线去绘制。我们可以试一下, 我们还是输入一个女孩的 ts, 然后我们直接生成。 大家可以看到啊,就是虽然他其他的颜色包括颜色、衣服材质什么的都和我们的主要图片不一样,但是他其实他的轮廓 是和我们的这个原始图片是几乎是一模一样的,这就是肯定这个与处理器的作用。然后我们现在看一下下一个这个叫深度,也是 diss, 它的作用就是描描绘出我们这个图片的前后紧身关系。 就比如说如果要两个人物一前一后的站着,那我们通过普通的方法是这个程序是没办法识别他是哪一个在前面,哪一个在后面的, 因为我们图片的是一个二位的,但如果你用了紧紧身这个这个选项的话,他会帮你识别出前后。 我们可以看一下 对他生成的是一张计算图,你看前 面这个里面这个亮布的地方就是他就是这个程序帮你判断出来他是更靠前的,然后后面的暗部就是程序判断出来更靠后的地方。 然后下面一个比较重要的就是 openpose, 就是我们的骨骼, 然后我们可以再试一下,选择 openpose 之后,他会在预览里面生成一张以你人物动作为为基准的一个骨骼图,大家可以看到这个骨骼之后,你生成了左边人物的姿势,全部会按照这个骨骼来生成,然后我们还是简单生成一下, 大家可以看到他的动作其实就按照我们这个骨骼来了。然后 呢我们还可以去编辑一下这个骨骼,就是我们可以手动的去控制一下这个骨,你看我们这个骨骼是这样的,那这时候我们如果比如说我们想把这个手举起来,我们把这个手移动移动一下位置, 然后我们发送到 ctrl net, 这时候我们再生成一遍, 大家可以看到这个角色的手也相应的抬起来了, 然后我们看下一个 tell, 然后它的作用其就是在不改变我们图片大致结构的情况下,去增加图片中的一些细节。然后我们 自己确实可以试一下吗? 就大家可以看到就是原本的我这我这边这个图片他的这个裤子上是没有这个花纹的,然后他的这个衣服上也是没有这个这个商标的,然后我们在用 tail 处理的时候,他就会就是为我们增加了这些细节, 因为刚才也讲到了这个 tail 的主要作用是增加我们图片的细节嘛,那所以其实 tail 在常规应用中主要就是用来给图片放大,就是高清化, 因为很多分辨率很低的图片,他就是丢失了很多细节嘛,我们就会使用 tail 这个预处理器去放大这个图片,同时去给这个图片 补充一些细节。那我们现在实操一下,我们现在有一张小猫的图片,但是他他的分辨率很低,如果我们想把它高清修复一下,那么就可以用太阳模型。首先我们找到那只小猫, 这是我刚刚生产的一个商贸,它分辨率远低,它的分辨率是六十四乘六十四的,那我们现在要把它高清化修复一下。首先打开我们的 ctrl net, 我们把这只猫给拖进来,点击启用,点击完美匹配像素,然后选择跳分块这个模这个运输率系,然后我们选择高清修复,选择一个算法,然后开始生成, 大家可以看到这一只猫就生存好了, 对比原来的低分辨率的这只猫,这是高分辨率的猫,他增加了很多细节,同时也被放大成了一零二四乘一零二四,这就是太阳玉储率系的主要用法。然后其他几个玉储滤芯呢?其实我平时也用的不是很多,就我就简单给大家讲一下它的作用吧, 就比如说这个 normal, normal 其实就是他可以绘制一个发现贴图,然后你可以看到他,可以他就是把你这个图片中的明暗部给区分出来了,然后你通过一些关键词可以控制,可以调整这些东西, 嗯,然后这个直线其实包括这个后面的 liar, 然后还有 soft h, 然后这些其实都是和 candy 比较像的,就是它是一个边缘检测的一个东西,但 可以自己去试一下。然后后面这个涂鸦其实跟我们之前前面讲过的那个图声图那个涂鸦是比较像的,大家也可以自己试一下。然后这个语音分割呢?他其实我用用过,其实用起来不是很好用, 你点击一下,他就是把你图像里面东西分割成了不同的颜色,就比如说这是红色的,他就把分别分割成了一个猫, 然后网网上有一个这种颜色和物体的对照表,大家如果有兴趣可以自己去查一下。然后这个打乱,就是把我我现有这个图片的颜色和形状打乱,然后重新组合,大家可以看到就是一个很风格化的东西,很抽象。