人工智能绘画能否用现有的角色图片(正面)生成其他姿势？

例如：

输入图：

姿势参考图：

输出图：

你可以看到�AI生成的图片，从正面输入图到侧面图。

实现此功能的，InstantID插件。这是小红书与北京大学团队合作的AI工具，Stable可以作为插件部署。
在Diffusion上。（文末扫码可免费获得插件安装包）

InstantID在本地部署和安装。

如果您的计算机显卡超过16G，甚至24G󿀌恭喜你�可在当地安装部署。

当然，如果只有12G࿰，c;也不是不可能使用，只是不能顺利使用所有功能。这篇文章的换脸还是可以跑的。

（一）WebUI。

1、controlnet升级#xff0c;至少要到1.1.440版。

2、下载Controlnet使用的模型，模型分为两类。

https://www.123pan.com/s/ueDeVv-v1uI.html。

（1）ControlNet模型。

分别是ip-adapter_instant_id_sdxl.bin和control_instant_id_sdxl.safetensors。

下载后复制到extensionssd-webui-controlnet\models，例如，我的WebUI安装在EE中:\sd-webui，需要复制到：

E:\sd-webui\extensions\sd-webui-controlnet\models。

PS，也可以复制到。

E:\sd-webui\models\ControlNet。

（2）面部识别模型。

总共5个，复制到以下目录（我的WebUI在E:\sd-webui）

E:\sd-webui\extensions\sd-webui-。
controlnet\annotator\downloads\insightface\models\antelopev2。

（二、#xff09;comfyUI。

1、首先在comfyUI管理器中安装节点。

搜索instantid，找到ZHO-ZHO-ZHO大神插件。

然后安装。

这个插件需要大量的模型，在这里安装只是第一步。

2、安装相关模型。

（1）IP-Adapter模型。

IP-Adapter是腾讯团队开发的适配器模型，可与Controlnet很好地结合使用，控制人物的姿态。

共有两个，SD1.5和SDXL分别使用。

将ComfyUI复制到Comfyuimodels\instantid。

ip-adapter.bin。

ip-adapter_sdxl.bin。

需要注意的是，，由于训练集的原因，一些SDXL大模型，还需要使用ip-adapter.bin，IP-Adapter模型可以在遇到报错提示时更换。

（2）ControlNet模型。

将ComfyUI复制到Comfyuimodels\controlnet。

control_instant_id_sdxl.safetensors。

（3）人脸识别与分析模型。

antelopev2模型，安装路径：ComfyUI\custom_nodes\ComfyUI_InstantID\models\antelopev2。

insightface模型和其他换脸插件是通用的，多两个，insightface模型安装路径：ComfyUI\models\insightface。

安装这些模型󿀌最基本的功能可以运行，如果您的显卡小于16G，不需要安装其他模型，因为不能跑！

（4）模型下载。

https://www.123pan.com/s/ueDeVv-WYuI.html。

InstantID在WebUI下的使用。

内置Instantid使用的所有插件和模型！

我们选择SD1.7全插件版开机󿀌WebUI界面启动后，可直接进入配置界面开始使用。

在Controlnet的配置界面，两个页面需要配置。

第一页：

首先上传需要输出的面部原型，比如一个很熟悉的美少女。

注意相关参数。

（1）选择启用。

（2）Instant_ID。

（3）选择instant_预处理器id_face_embedding。

（4）模型选择ip-adapter_instant_id_sdxl，如果模型在这里是空的或错误的，需要检查下载模型是否复制到指定位置。

第二页：

这里上传想摆姿势，不需要换脸的画面。instantid将分析这张照片的姿势，然后根据这个姿势适应第一张脸，但不是简单的换脸，除了姿势，完全不同�相当于重生。

（1）请注意，如果您的显存不到16G，所以这里要选择低显存优化󿼌否则会爆发存。

（2）和第一页一样󿀌Instant_选择Instant_ID。

（3）选择instant_预处理器id_face_keypoints，选择control_instant_id_sdxl。

4、输入提示󿀌然后点击“生成”。

需要注意的是，，提示不要太复杂，#xff0c;过于复杂的提示词很容易使Instant_ID失效。

例如，我输入提示词：

a girl,HDR,UHD,8K,best quality,masterpiece,ultra-fine painting,extreme detail。
description,Professional,summer dress,light_smile,

是不是很面熟？#xff1f;

另一张姿势参考图：

提示词不变󿀌生成如下：

好了，让我们来看看一个看起来像仙女姐姐的女孩！

在comfyUI下安装和使用InstantID。

ComfyUI优化显存更好，因此，强烈建议在ComfyUI下使用InstantID插件。

创建基本工作流。

添加节点–InstantID–Apply InstantID。

创建节点后，与大型模型和采样器分别连接。

Instantid处，拖出Load InstantID Model，模型选择ip-adapter.bin（或ip-adapter_sdxl.bin）。

insightfacec;将InstantID拖出来 Face Analysis，建议选择CPU。

control_net处󿀌拖出Controlnet模型，control_选择control_instant_id_sdxl.safetensors。

image连接加载图片，这里连接的是面部照片。

分别收到正反提示词的提示词。

image_kps连接加载图片，这里连接的是参考姿势，如半身，侧身，在提示词的基础上࿰生成的图片c;参考这张照片的姿势。

放一个完整的工作流（#xff09基础版࿰。

1、美人鱼特别像仙女姐姐。

提示词：

1girl, underwater, afloat, soft natural lighting, orange hair, off-shoulder。
dress, aesthetic, film grain texture,analog photography aesthetic,visual。
storytelling, dynamic composition,looking at viewer,eye contact,

2、一个很像范爷的女孩。

提示词：

26 y.o. alt girl, eyeshadow, long eyelashes, (messy hair:0.6), film。
photography aesthetic, long black hair, dynamic composition, skin texture,
full body, sharp focus, hard shadows。

文章中使用的AI绘画SD集成包、模型、InstantID插件、提示词、AI人工智能学习资料已打包放入网盘，需要的小伙伴文末扫码自行获取。

但是因为AIGC刚刚爆炸，#xfff00c;网上相关内容的文章博客多种多样，好坏参半。要么凌乱、分散、碎片化，看着就连不上，或者内容质量太浅󿀌学不到干货。

这里和大家分享一份Adobe大神整理的AIGC全家桶学习笔记，相信大家会对AIGC有更深入、更系统的了解。

有需要的朋友，可长按下方二维码，免费领取！

AIGC各方向的学习路线思维导图。

这里为您提供了一般的路线图。它的用途在于，您可以根据上述知识点找到相应的学习资源，确保自己学得更全面。如果下面的学习路线可以帮助你将人工智能应用到自己的工作中，然后我的使命就完成了：

AIGC工具库。

AIGC工具库是利用人工智能技术生成应用程序代码和内容的工具集合，使用AIGC工具库，能更快地�准确地帮助我们学习AIGC。

有需要的朋友，您可以点击下面的卡片免费获得#xff01;

精品AIGC学习书籍手册。

阅读书籍永不过时󿀌阅读AIGC经典书籍可以帮助读者提高技术水平，开阔视野󿀌掌握核心技术和xff0c;提高解决问题的能力，也可以借鉴别人的经验，结合自己的案例融会贯通。

AI绘画视频集。

我们在学习时，书籍源码往往难以理解，阅读困难󿀌此时，视频教程教程非常适合，生动的形象加上案例实战󿀌只有科学有趣，才能更方便地学习。

有需要的朋友，长按下面的二维码，免费接收！