第三期 黏土自由
⌛️ 活动时间：2024年5月20日至下2024年5月26日
🎯 活动目标
- 了解lora,controlNet,WD题词反推,IPadpter的基础用法
- 生成黏土风格图片
📝 活动内容
- 生成黏土风格的图片,视频
- 题材不限,如:可以用微信头像,给自己做一个黏土风格的头像
- 文生图,图生图,视频转绘的流都有
- 想了解animatediff的,可以尝试下视频转绘
- 给出的流是基础的,大伙根据需要完善.
🎫 参与方式：
- 使用SD，生成黏土风格图片。
- 作品直接发送至SD学社微信群。
🗂️ 作品收集：
- 创建一个在线文档，用于收集大家的作品.
🆚 评选方式：
- 5月26日（周日），将举行群内投票，每位群成员均可参与投票。
- 投票将选出前三名最受欢迎的作品。
📢 注意事项：
- 请确保您的设计是原创的，不得侵犯他人的版权或商标。
- 提交的作品将被视为允许在群内公开展示。
- 请在截止日期前提交作品。
工作流
doxcnM7D4t8EwjRxbnJPz9HvCod
lora下载地址
可以多个lora组合使用, 但是需要以一个为主,其他的强度在0.5或者以下,防止冲突
CLAYMATE 黏土lora(SDXL1.0)
https://civitai.com/models/208168?modelVersionId=236248
lora触发词 claymation
迪福森博士的黏土动画风格(SDXL1.0)
lora触发词 made-of-clay
https://civitai.com/models/181962/doctor-diffusions-claymation-style-lora
Clay style(SD1.5)
https://civitai.com/models/121119/clay-style
Clay world
https://liblibai-online.vibrou.com/web/model/b8053c33f4834062808a0f4504a112b8/20240507-1715095286083-0009.safetensors?attname=%E7%B2%98%E5%9C%9F%E4%B8%96%E7%95%8CSD1.5_v1.5.safetensors
提示词写Clay world，lora权重0.5-0.8，重绘幅度0.3-0.5，大模型自己挑一个。
大模型下载地址 迪士尼真实卡通混合(SDXL1.0)
DisneyRealCartoonMix
https://civitai.com/models/212426/disneyrealcartoonmix
这个模型与黏土配合测试下来还不错,可能是因为迪士尼的浓眉大眼风格和黏土比较搭吧.
模型触发词:
modisn disney, modisn disney style
大家也可以选择不同的模型测试比如:
Playground AI's Playground v2.5 1024px
https://civitai.com/models/325263/playground-ais-playground-v25-1024px
模型可以自由选择
这里我们用SDXL来做实验
如果不熟悉comfyui的小伙伴,可以先从文生图开始,再到图生图
文生图
图生图
需要用到的插件
如果提示缺失节点, 就通过管理器安装一下.
- 提示词反推WD14-Tagger
https://github.com/pythongosss/ComfyUl-WD14-Tagger 首次使用会自动下载模型(需要网络环境)
- 处理人物一致性
IPAdapter：https://github.com/cubiq/ComfyUI_IPAdapter_plus
也可以用instantID,这里我们使用的是IPadpter, 后续很多地方也会用到,建议大家也可以先用起来
关于IPAdapter的使用,之前有写了一篇文章介绍,不熟悉的小伙伴可以先看下. ComfyUI IPAdapter
因为作者新版本重写了代码,所以新版一定注意模型的放置位置, 这样后续使用统一加载,会方便不少.
- controlNet
预处理的插件
comfyui_controlnet_aux https://github.com/Fannovel16/comfyui_controlnet_aux
controlNet模型
XL-CN模型下载：https://huggingface.co/lllyasviel/sd_control_collection/tree/main
1.5模型下载：https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main
controlnet不熟悉的小伙伴,同样也可以看之前写的一篇文章,快速上手.ComfyUI中controlNet使用
视频转绘视频转绘
有了上面的图生图基础, 上点强度,来做V TO V, 只需要在上面的基础上加入animatediff, 同样,不熟悉的小伙伴也可以看之前的介绍.ComfyUI AnimateDiff
Hyper-SDXL-8steps-lora.safetensors 加快生成的时间,使用方法与lora一致,使用后可以适当降低采样步数.
https://huggingface.co/ByteDance/Hyper-SD/blob/main/Hyper-SDXL-8steps-lora.safetensors
AnimateDiff节点和模型
AD源项目(非官方是分支更全)：https://github.com/Kosinkadink/ComfyUI-AnimateDiff-Evolved
AD模型下載：https://huggingface.co/guoyww/animatediff/tree/main
作品
群内投票前三
作者 慧根
作者 随便两点
作者 冰糖雪李
作者 超楠
作者 程Ling
作者 DAi
作品收录
作者 三维小智
作者 程Ling_
作者 超楠
作者 慧根
作者 阿度
作者 随便两点
作者 DAi
作者 冰糖雪李
作者 迷茫在SD中
作者 雅米
