AI之路 | IPAdapter + ControlNet实现真人转多种风格化图像

新闻

作者：微信文章
01.
今天测试一下真人图像的风格化头像。
起因是，小孩让我画个头像。（这我哪会嘛）
但去试一下生成还是可以的。
人脸一致性可以直接炼个Lora，但是比较费劲。
PuLID算是目前用得比较多的用来控制人物一致性，但都是基于真实人像的情况下，转非真人的风格还没测试过。

IPAdapter配合ControlNet可以达到本次测试的需求。

photomaker V2也测了一下，然后就知道为什么现在没多少人用了。

02.先看下photomaker V2吧。
参考图：


生成图：













提示词：1 girl img,owo style，chibi,Blonde hair, blue eyes, light gray background, dark brown trench coat, paired with a white shirt, looking at the audience, artistic, portrait, close-up, fashionable, minimalist, contemporary, warm lighting, shadows, elegance, fashion, skin, sunset tones, smooth textures, high contrast, high quality, symmetrical composition, dramatic lighting,
1girl img，img为固定后缀，owo style,chibi，是Lora触发词。
其余为人物相关描述词。
测试效果：① 同一个提示词出来的图，整体的一致性还是挺好的。② 对参考图要求比较高，底图如果拍摄偏模糊，出来的效果图很不理想；③ 无法保持原姿态，只能保持人脸的神态；④ 整体画面通过提示词来控制；⑤ 风格通过大模型和Lora控制。
比较适合：对人物姿态无要求。

03.看下IPAdapter配合ControlNet。
原图：


风格参考图：




效果图：






测试效果：① 自行上传需要参考的四张风格图，最终风格参照这四张图。② ControlNet可以很好地保持动作的姿态。
比较适合：想要自己控制风格，并且希望保持原姿态。

04. 目前的这几个技术已经很成熟了，各个云端也有相关工作流，感兴趣的可以尝试一下。
photomaker V2风格头像：https://openart.ai/workflows/shalacai/style-avatar-with-photomakerv2/wNT8mznn1RAg8I5lIfi1
IPAdapter + ControlNet风格化头像：
https://www.runninghub.cn/post/1823604325620060161/?inviteCode=bsqvxyg2
找不到的话，需要相关工作流可以私信我。
本地部署，模型需要自行安装。（作者里面有备注模型地址）
用AI提效，用AI实现自己想做的事。
它并不能替代你，只是让你有更多选择。



恭喜你遇到一个极其矛盾的综合体 ↓↓↓