一、介绍
今天分享一个一键创意工作流,只要提供一张照片就可以做出很可爱的四格背景+贴图。
先来三张看效果
二、工作流说明
工作流不是很复杂,先来看下整体
用户只要上传一张自己的照片即可,即可一键出图。
我们来拆解下这套工作流用到的技术流程
- 提示词处理
- 遮罩处理
- PuLID换脸插件接入
- Flux文生图,核心接入关键的Lora
2.1 提示词处理
提示词这边先通过图片反推,这里用的Florence2插件来获取简单的描述,然后和另外一个核心提示词拼接起来
提示词如下:
The background is 4 real photos, and in the middle is a cartoon picture summarizing the real photos,
背景是 4 张真实照片,中间是概括真实照片的卡通图片。
这里我测试的时候有尝试把提示词反推换成很详细的那种,但是出来的效果不行,所以提示词尽量简单写,这样让AI自己去发挥创意比较好。
2.2 遮罩处理
这里我使用的是SAM2这个遮罩提取插件,处理的效果比较好,把脸部 head 区域都提取出来了
这个遮罩会作为后续提取脸部区域用,然后接入到PuLID换脸使用
2.3 换脸插件接入
这里用了PuLID插件,来实现换脸操作,上一步提取的脸部范围图片,就作为参考图接入的
2.4 Flux文生图,核心接入关键的Lora
最后就是常规的Flux文生图流程,这里核心是要接入一个一键创意模板的lora,地址如下
https://huggingface.co/Shakker-Labs/FLUX.1-dev-LoRA-One-Click-Creative-Template/tree/main
最后再来看几张我测试的效果图
三、总结
以上就是一键创意贴纸工作流的拆解,用到的节点都是基础的,但是搭配起来就有很不错的效果,大家都来玩玩吧。
在线lib运行:https://www.liblib.art/modelinfo/563004f91a82423ca1fe492cb4b6d637
技术的迭代是飞快的,要关注最新的消息才不会掉队。
关注嘟嘟,每天分享最新的ComfyUI技术前沿。
今天介绍的工作流和lora模型也整理好了,大家自取
网盘链接:https://pan.quark.cn/s/d31efb33670f