跳转到内容

工具教程:Kolors 开源模型

🚀

原文:Kolors 开源模型知识库

快手文生图大模型可图(Kolors)正式开源。该模型基于数十亿图文对进行训练,支持 256 的上下文 token 数,支持中英双语,以下为可图的详细介绍和部署教程资源清单

Kolors: Effective Training of Diffusion Model for Photorealistic Text-to-Image Synthesis

开源代码 https://github.com/Kwai-Kolors/Kolors

模型权重 https://huggingface.co/Kwai-Kolors/Kolors

官方页面 https://kwai-kolors.github.io/

企业页面 https://kolors.kuaishou.com/

Kolors 模型简介

模型能力简介 | 官方图例 | 技术报告 PDF | 商用授权申请书 | 加群小助手微信 18008889980

🎉 官方新闻

📑 官方开源计划

Kolors (Text-to-Image Model)
Inference
Checkpoints
LoRA
ControlNet (Pose, Canny, Depth)
IP-Adapter
ComfyUI
Gradio
Diffusers

延伸阅读 | 🔥 延伸阅读 官方Kolors-IP-Adapter-Plus模型公布 07/17

Kolors 社区资源

✈️ 资源清单

♨️ 模型及组件包

百度网盘链接:https://pan.baidu.com/s/1od2-kb5x8LjcxAfQnzXTKg?pwd=AIGC

提取码:AIGC

--模型目录已建立好,请按照正确路径存放Diffusers格式模型(非商用)

🤖 魔搭社区(Modelscope)在线体验

Kolors 魔改小组

👨‍💻 社群新闻 🔥

  • 7.6 kolors 开源正式发布
  • 7.8 Liblib.AI社区发布可灵开源模型
  • 7.9 Kijai 单文件封装版本模型放出/4-8-16bit GLM3
  • 7.10 MinusZone 的 nodes 支持原生采样
  • 7.10 ModelScope魔搭社区发布可灵开源模型
  • 7.11 网友提供的 IPA 接入方式可以用了
  • 7.12 小志 Jason 开发的第三方训练器可用 小志Jason训练器常见问题解答
    • LoRA 训练和底模操作已经可以了!
  • 7.13 楚门的 AI 世界实测 XINSIR 控制网可用!
  • 7.14 KOLORS 社区训练底模第一弹!
    • 图真 alpha v0.1 真实系可图 小志 Jason https://civitai.com/models/575948
    • 图真开源至huggingface https://huggingface.co/lrzjason/RealisticKolors-alpha
  • 7.14 @MinusZone 节点包更新V2版本,并新增MZ_KolorsControlNetPatch节点
  • 7.15 kolors魔改小组迎来ComfyUI-Kolors-MZ作者 @MinusZone
  • 7.15 kolors魔改小组迎来T2ITrainer训练器作者 @小志Jason
  • 7.15 SD炼丹阁忠忠大佬 kolors国风描金插画 Lora发布!
  • 7.16 Kolors魔改小组发布 Kolors开源模型知识库
  • 7.17 @小志Jason 发布Comfyui-Kolors-Utils组件,支持Kolors UNET权重合并存储!
  • 7.17 @MinusZone 节点新增支持IPAdapter_plus的加载器和高级应用节点

    MZ_IPAdapterModelLoaderKolors,MZ_IPAdapterAdvancedKolors

    https://github.com/MinusZoneAI/ComfyUI-Kolors-MZ

  • 7.17 Kolors开源模型知识库同步至Way2Agi社群超级知识库 感谢!@AI建筑研究室 波大波吗🎗
  • 7.18 InstantID正在训练Kolors专属模型。权重需要大量的计算能力,目前正在迭代过程中。

    模型训练完成后将开源。The latest checkpoint results are referenced in Kolors Version.

  • 7.18 经过与吐司社群平台沟通,确认tusiart.com平台已支持Kolors在线生图!

🏇 社群进度

Kolors (Text-to-Image Model)
Checkpoints 加载器(原生采样)
LoRA 支持(MinusZoneAI 加载器)
Distillation 蒸馏加速支持(加速器LoRA支持)
ControlNet 支持 (UNION、MistoLine)
IP-Adapter 支持
Trainer 小志Jason T2iTrainer
UNET Merge 小志Jason Comfyui-Kolors-Utils
Kolors官方IPAdapter模型支持 (MinusZoneAI 加载器)
ComfyUI 支持
Diffusers 支持
TensorRT 支持
原生应用
提示词增强器 Prompt Enhancement Model
对话式生成及修图 Dialog Generater
分区构图 Partial Composition
WEBUI 支持
StableDiffusion XL生态融合
SDXL LoRA支持
SDXL ControlNet

🔥 延伸阅读:SDXL ControlNet模型应用在Kolors模型上的效果实测

知识库外链

🚣 教学视频

📣 信息矩阵

不玩“期货”的快手接棒 Stability AI,国产之光可图大模型 Kolors 领跑开源生态

👨‍💻 延伸阅读

🔥 延伸阅读:SDXL ControlNet模型应用在Kolors模型上的效果实测
🔥 延伸阅读:官方Kolors-IP-Adapter-Plus模型公布