ipadapter新版怎么用

今天来看一下 ip adapter 模型，它支持 stable diffusion 的 control net 插件，它的作用是把你上传的图片作为提示词来进行画面风格的转换和微调，并且支持 s d 一点五。和 s d x l 相比， reference 它更轻便而高效，具有出色的放化能力，并且与文本提示兼容。 ip adapter 出自腾讯 ai 实验室，它的使用方法也很简单。首先把 ctrl net 升级到一点一点四以上版本，然后就是下载 ip adapt 模型，打开这个网站，找到这三个模型，可以都下载下来。下载下来，把模型放到 stable diffusion vabioi extensions control net 插件 models 文件夹里，然后重启一下 y b y， 重启后找到 control net 这里上传一张图片。 选择 ip adapter 模型，根据需求选择。 如果你上面大模型用的一点五的模型，这里就选择对应一点五版本的。如果是 s d x l 模型，那就要选择 s d x l 版本了， 最好用它这个 plus 版本的模型，效果会更好一些。然后可以把高清修复，打开一下关键词，写一个负面通用的 正向的，简单写一下或者不写也行，然后点击生成。第一次使用后台会下载一个预处理模型，如果下载失败的话，可以到我的网盘里找一下。我已经上传网盘里，这个功能就是把上传 传的图片当做提示词来使用了。根据上传的图片生成了一张新的图片，当然可以结合 tiny， deps， open post 等一起使用。我上传一个这个风格的图片，在第一个 unit 里选择 ip adapter， 然后在第二个 unit 里上传一张图片，这里选择一下 openpose 来提取一下它的动作， 然后最上面简单写上一些关键词，生成一下来看下效果。 ip adapter 总体来说效果还是很不错的。

ctrl net 带来了全新模型 ip adapter， 这款模型的效果与大家熟知的名人九点电图呢很相似，但功能更加强大。 ip adapter 主要有三大核心应用，纹身图、图身图和局部重绘。而这还只是开始，你还可以结合其他控制器如深度信息来控制造型， 或者添加提示词来获得更丰富的细节。更酷的是，你还可以和第二模型结合，创造出独特的风格混合效果。 下面我将通过一个实际案例为大家展示如何运用 ip adapter。 首先呢，确保你的 ctrinet 和 obui 都是最新版本。接着访问哈根 face 网页，点击这里下载 ip adapter 模型， 打开未必 y 界面，选择 s d x l bass 模型。为了最大化 i p a w 的潜力，我这次不使用提示词，采用选择三 m s d e carras， 步数设置为三十。别忘记点击 refiner， 使用 s xr refiner 模型来增强图片信息分辨率为幺零二四乘幺零二四，输出四张， 进入 ctrl net 上传你的风格参考图，点击启动和完美像素，选择 ipadat 作为控制类型。这里要记得选择与 sdxl 匹配的处理器和模型。再打开一个。 ctrl net 上传一张图片，这里选择 dett 控制类型，利用深度信息作为造型参考。 点击生成，我们就成功的将珍珠少女的风格迁移到第二张图片上了。是不是很简单，个人体验下来呢？感觉 ipadapper 有增强版的 reference 的意思，现在相信你也可以轻松做到这一切了。感谢大家观看我是夏深，探索 ai 在各领域应用前景的夏深。

哈喽大家好，我是薯片 ai， 就在九月五日 ctrl net 迎来了幺点幺点四版本的更新，此次更新加入了一些新的控制类型。本期视频我们就一起来对这些新控制类型进行一一测评，看看这些类型都能干什么 和有哪些有趣的玩法。由于模型较多，时间有限，本视频先介绍 s d 一点五的控制类型， s d x l 的放在下一期介绍此次基于底膜 s d 一点五的 control net 模型新增的有，一、 recolor 重上色。 二、 ip adapter。 一、 recolor 重上色该模型顾名思义就是对图片进行重新上色。该模型的玩法可以分成两种，一、黑白照片上色。二、指定元素换色。在使用该模型之前， 我们还需要单独下载 recolor 的模型，这个模型在更新时的自动下载中是没有的。我们先来看看黑白照片上色怎么玩。首先我们找一张黑白的图片，然后稍微描述下关键词， 当然你不描述也可以。 control net 把这张黑白照片上传，勾选启用和完美像素模式，然后选择 recolor， 可以选择图片强度或者图片亮度进行去色。我们一般默认用 luminance 就可以了，其他参数默认即可。然后我们生成就会看到原本的黑白照片进行了上色，这样就对于我们修复一些老照片来说非常方便。 另一个玩法是指定元素换色，如换头发颜色，换衣服颜色。这个有点像我们之前用的 in painting anything， 而这个模 行省略掉了分割的步骤。选择 recolor 后，预处理器分为 intensity 和 luminance， intensity 会更加黑白，不过我们默认 luminance 就可以了。然后我们就可以换成粉色头发、蓝色头发等对图片元素进行换色。二、 ip adapter ip adapter 是腾讯 ai 实验室在八月十三日开园的一个模型。我们在用 ai 绘图的时候， 提示词是一个非常重要的角色，它关系到我们生成图片的内容。但是俗话说意图胜千言。这个模型的目的就是让我们用上传图片替代提示词来影响我们出图的内容。 玩法就是可以配合我们原本的 prompt 和其他的 control net 把一张图片的整体风格迁移到另一张图片上， 我这里演示，就去网上找了些提示词写上这里部署二十，选择最新出的 restart， 开高清修复。因为要绘制人脸，所以开下 attale。 第一个 control。 net 我们上传一张想要的图片风格，启用加完美像素模式，然后选择 ip adapter， 下面参数默认即可。接着第二个 control。 net 我们上传一张图，然后选择 depth， 其他参数默认即可。为了凸显树的形状，我把权重拉到一点二。最后我们生成图片会发现我们第一张图水下的效果 已经迁移到了第二张图的树形状。这就是这个模型最大的用处。我是薯片 ai， 关注我，分享更多 ai 内容！

今天呢，给大家介绍一个非常棒的技术，叫做 ip adapter， 这个呢是由腾讯研发的一个新的 ai 模型，准确的来讲呢是一个 ctrl night 模型。那为什么叫 ip adapter？ ip 是什么意思呢？就是 image prompt， 也就是图片提示词，说白了就是用图片来代替提示词，这个跟我们之前讲的那个风格融合模型的有点像，但是呢效果比那个要好很多， 所以我决定后边的半年呢，我就靠这个模型混了。目前最新版本的 stupid fortyn web ui 和我们的康费 yui 呢，其实都支持这个模型，所以说呢，我们会花两期视频呢给大家介绍。今天我们先来看一下 stupid fortun 外 bui。 首先呢，你需要将 ctrl net 呢升级到最新版本， 然后在他的大模型下载列表里边呢，你会发现这样一种模型，我们把它下载下来，放到 ctrl net 的模型里边就可以了。 那这次实验呢，我们使用的主模型呢是 photo v e。 那下面呢，我们打开 ctrl net 上传一张非常漂亮的苹果的图片。顺便说一下，这张图片呢是由 mid 之内生成的。在启用 ctrl net 之后，我们将这个控制器的分类选择成 ip adapter， 然后由于我们现在使用的是 s d 一点五的模型，所以说这个预储利器呢，我们选择的是 ip adapter cleport vision 模型呢，选择 ip adapter plus。 ip adapter plus 呢，可以认为是 ip adapter 的加强版， 那权重呢，我们设为一，我们不加任何的提示词啊，直接生成。这个时候你发现你生成了一张非常完美的苹果的图片，那准确来讲呢，应该是刚才那张图片的盗版图片，但是这个盗版的质量真的非常的棒。下面呢，我们加入 提示词叫 moon， 也就是月亮。那这个时候你生成的时候，你会发现你得到的依然是一张苹果的图片，那是不是提示词不起作用啊？其实也不是，只是因为这个控制机的控制能力呢太强，所以说呢，我们建议把这个控制器的权重稍微的降一点， 建议的值呢是零点三左右，这呢我改成零点三五，我们再次生成，你就会得到一张非常漂亮的月亮的图片。 下边呢，我们将这个参考图改成一个月饼的图片。提示词呢，改成 mooncake， 权重呢依然是零点三五啊，点击生成的这个月饼呢也非常的漂亮，而且和这个参考图呢也非常的像，但是呢，并不完全一样。 下面呢，我们再来换一个杯子来做参考啊。提示词呢，我们暂时留空，点击生成，你会发现生成的这个杯子和这个参考足的风格呢，也非常的像。如果我们将 十四改成 cup， 也就是杯子，你会发现生成的这个图片呢就更像我们的参考图了。那如果你希望这个图片生成的细节更多一点的话呢，你可以将这个分辨率稍微的调大一些，比方我们将五幺二改成七六八，那你会发现生成的这个图片呢也会有更多的细节。下面呢，我们测试一下人物。 我们将参考图呢换成这个老太太的图片，提示词呢，我们留空点击生成，哎，也是一个非常棒的盗版图。那假如我们将提示词改成 a beautiful girl， 那你会发现生成的这个图片呢，依然是一个老太太，那即便是你强行指定年龄，比方说是十八一而所有的，那你会发现这个老太太的确年轻很多，但是呢依然是个老太太。最后呢，我们上传一张油画，你会发现生成的这个图，不管是构图和风格呢，和参考图呢都非常像。然后我们加上提示词 a go 为则 dog， 这个时候生成的图片呢，会更加的精细。下面呢，我们尝试另外一个特殊的控制器啊，叫做 face plus， 那这个控制器呢，主要专注在脸上，它的效果呢，有点像换脸，但是呢又不完全一样。比如在这我们上传一个美女的人脸作为参考，然后加入下面的提示词， 点击生成，你就会得到一个类似于换脸的一个效果。然后你可以尝试其他的模型，比方我们使用 brav 六，然后呢，需要尝试不同的权重，经过不断实验，我认为零点六是一个不错的权重选择。 那你生成的图片既会有参考图的特色啊，也会有自己提示词的一些风格。下面我们尝试一下用两个 ip adapter， 那启用第二个 ctrl light 上传一个中国风的水模画来作为参考图。那如果我们将模型的权重调整为一的话呢，会得到一张盗版图，而且效果呢也会非常棒。我们可以通 如果降低模型的权重呢，就会得到不一样的融合效果，比如这个女孩，她这个时候是在这个水里边。当然这个逻辑构图呢，会稍微有一些问题啊，因为这个比例呢，不太合适。怎么样， ipioduster 和传统的 ctrlnet 是不是不太一样呢？ 而且我可以告诉你，在康快有爱当中，他的玩法呢会更多。那具体会有怎样的玩法，我们下期视频再说。还等什么，赶紧自己试一下吧，关注我，让知识编的更有意思。