怎样使用自己的电脑做网站,wordpress 网上商城,wordpress 两栏主题,网站配色主题但是 IPAdapter-FaceId 目前只在 SD 1.5 模型上表现较好#xff0c;SDXL 模型上的表现较差#xff0c;不能用于实际生产。可是很多同学已经在使用SDXL了#xff0c;而且SDXL确实整体上出图效果更好#xff0c;怎么办#xff1f;
这篇文章就来给大家介绍一个在SDXL中创作A…但是 IPAdapter-FaceId 目前只在 SD 1.5 模型上表现较好SDXL 模型上的表现较差不能用于实际生产。可是很多同学已经在使用SDXL了而且SDXL确实整体上出图效果更好怎么办
这篇文章就来给大家介绍一个在SDXL中创作AI写真的稳定方法使用 InstanID。
InstantID翻译为身份标识这是一个ControlNet模型其核心能力是由国内的小红书团队开发的。InstantID可以提取人物的面部信息然后在生成的人物图片中使用此面部。只需要人物的一张正面照片就可以生成此人物的多种风格图片正适合来搞AI写真。
效果展示
废话不多说还是先看效果大家可以猜猜此人是谁文中会揭晓答案 更多带生成参数的图片下载请看文末。
安装方法
文末领取一键安装包
使用InstantID
这里以 Stable Diffusion WebUI 为例ComfyUI 的使用示例见下文。
因为 InstantID 仅能在 SDXL 模型下使用所以本文将使用 SDXL 模型进行演示。
基本设置
打开“文生图”页面首先我们需要选择SD基础模型模型下载方式见文末、设置提示词和负向提示词。 然后我们简单设置下生成参数如下图所示。 你可以直接使用我这几个参数的值简单介绍下
1、采样器DPM系列在在采样质量和效率上都比较高是目前效果最优秀的反向扩散采样算法之一。
2、调度类型用于控制采样过程中的噪声水平 这是 WebUI 1.9.0 之后从采样器分离出来的参数可以单独设置使用更灵活。Karras 噪声计划在初始采样步骤中的噪音水平较高而在结尾采样步骤中的噪音水平较低实验表明这样有助于提高生成图片的质量。
3、采样步数一般设置为20-30可根据具体效果调整。
4、使用SDXL模型时宽度和高度需要设置为1024以上这里是一张垂直图比例为3:4。
5、生成次数和每次数量一次多生成几张方便选择。生成次数是独立的生成几次消耗时间根据次数加倍每次数量是单次生成内的输出图片数量比较消耗显存。
6、提示词引导系数对于InstantID不要设置的太高3-5最佳根据实际情况选择。
7、图像生成种子-1代表随机数每次生成都会产生新的变化。
ControlNet设置
InstantID 是通过 ControlNet 发挥作用的我们重点看下相关设置。
这里需要两个 ControlNet一个用于控制面部特征另一个用于控制面部姿势可选。
先看第一个ControlNet上传一张参考图片勾选“启用”和“完美匹配像素”。“完美匹配像素”用于控制从参考图片中提取的特征信息的分辨率以更加匹配生成图片的尺寸无脑勾选就是了。 “控制网类型”勾选Instant-ID注意第一个ControlNet中的预处理器和模型选择需要是instant_id_face_embedding 和 ip-adapter_instant_id_sdxl它们用于提取参考人物的面部特征并应用到生成图片中。其它参数默认即可。 再来看第2个ControlNet它是用来控制生成图片中人物的面部姿势的。我们可以选择其它人物的图片这不会影响面部特征的控制仅影响人物的头部姿势。注意不是人物整体的姿势当然人物的头部姿势也会对整体的姿势产生一定的影响。注意这个 ControlNet 是可选的没有它也不影响人物的面部控制。 注意这里的三个参数
预处理器instant_id_face_keypoints脸部的关键点或者说面部姿势。
模型control_instant_id_sdxl。
控制模式以ControlNet为主不选这个生成图片的线条会比较粗糙。 最后我们只要点击“生成”静待写真图生成就好了。
使用ComfyUI工作流
我在 ComfyUI 中也测试了 InstantID 的生成效果制作了两个工作流一个和WebUI中的能力类似另一个还结合了IPAdapter可以提取参考图片的风格。 在 ComfyUI 中使用 InstantID 时需要安装一些插件不方便访问外网的同学可以到文末下载我整理的资源。
资源下载
AI写真用到的大模型、LoRA模型、修脸修手模型、ControlNet插件和模型以及生成的图片可提取提示词等生成参数我都已经整理到了网盘中需要的同学可以到文末下载我整理的资源
写在最后
感兴趣的小伙伴赠送全套AIGC学习资料包含AI绘画、AI人工智能等前沿科技教程和软件工具具体看这里。
AIGC技术的未来发展前景广阔随着人工智能技术的不断发展AIGC技术也将不断提高。未来AIGC技术将在游戏和计算领域得到更广泛的应用使游戏和计算系统具有更高效、更智能、更灵活的特性。同时AIGC技术也将与人工智能技术紧密结合在更多的领域得到广泛应用对程序员来说影响至关重要。未来AIGC技术将继续得到提高同时也将与人工智能技术紧密结合在更多的领域得到广泛应用。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理形成各个领域的知识点汇总它的用处就在于你可以按照下面的知识点去找对应的学习资源保证自己学得较为全面。 二、AIGC必备工具
工具都帮大家整理好了安装就可直接上手
三、最新AIGC学习笔记
当我学到一定基础有自己的理解能力的时候会去阅读一些前辈整理的书籍或者手写的笔记资料这些笔记详细记载了他们对一些技术点的理解这些理解是比较独到可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频看视频学习是最快捷也是最有效果的方式跟着视频中老师的思路从基础到深入还是很容易入门的。 五、实战案例
纸上得来终觉浅要学会跟着视频一起敲要动手实操才能将自己的所学运用到实际当中去这时候可以搞点实战案例来学习。
