前言
ComfyUI
—三步速成秘籍—
嘿,小伙伴们!
我是一个刚刚踏入GEO AI实验室的新鲜面孔,
一个对AI设计充满无限好奇的新手。
在这个充满创意和科技感的实验室里,
我只用了短短三个步骤,
就掌握了ComfyUI 。
你可能会问:这怎么可能?
但事实就是这样,我做到了!
并且,
我迫不及待地想要和大家分享
我的速成秘籍。
请看~
所有的AI设计工具,安装包、模型和插件,都已经整理好了,👇获取~
**STEP 1
**
首先,从GitHub下载ComfyUI,解压安装即可开启你的AI设计之旅。
网址:https://github.com/comfyanonymous/ComfyUI/
完成后,我们可在文件夹中选择,第一个是通过CPU计算,第二个是通过NVIDIA的显卡计算。
接着,来了解一下各个模块的意义。
01
Load Checkpoint
想象一下,这个模块就像是一个书架,上面摆满了各种已经训练好的模型。当你需要用到某个模型的时候,就像从书架上挑选一本书一样。
推荐网站:
①https://www.liblib.art/
②https://civitai.com/
02
Clip text encode
这个模块就像是一个超级学霸,能够从文字中学习到图片的特点,把两者联系起来,实现一种跨领域的理解。
然后,这些信息会被送到KSampler模块的正向和负向节点。为了方便理解,也可将正向节点标上绿色,负向标上红色哦~
03
KSampler
这个模块就像是AI的“试衣间”,你可以在这里调整各种参数,比如采样方法和CFG步数,来找到最适合你的“衣服”。
04
VAE Decode
这个模块就像是AI的“魔法师”,能够把这个潜空间的图像变回我们能够看到的像素空间的图像。
了解这些后,便可以按照每个模块之间的联系,或者是小点之间的颜色来连接我们的工作流啦!
**STEP 2
**
01
文生图
首先我们尝试的是最基本的文本到图像(文生图)的操作。比如,可以通过指定诸如“a dog”等提示词作为输入,并利用如SDXL或SD1.5等底模。
通过切换使用不同的模型,可以探索并生成多种风格、主题类别的图像。
02
**LoRA 模型
**
当我们探讨文生图的进阶应用时,不得不提及LoRA模型。它允许我们在不改变原始模型大部分参数的情况下,通过添加少量的参数来定制模型的行为。
我们可以使用同一个底模,加载不同的LoRA权重,来生成具有不同特征的图像,实现更加精细化和个性化的图像创作。
03
图生图
我们更可以通过引入Load Image节点,实现图像到图像的转换功能,从而极大地拓宽图像创作的边界。
原图
写实
动漫
**STEP 3
**
最后,我们可以试试AI动画的生成。安装如下AnimateDiff所需的节点以及下载运动模型和专属运动镜头lora模型。
01
文生视频
通过加入AnimateDiff Loader节点,会根据所选的运动模型和配置参数,实现动画视频的输出。
也可以在生成过程中预览动画效果,并根据需要进行调整和优化。
02
图生视频
在AnimateDiff+openpose的应用中,通过Load Images节点引入包含目标动作的图片文件夹,能够生成动态摆出相应动作的人物动画。
03
复现工作流
最后可以在一些网站上,下载你想要的工作流,安装缺失的节点即可实现运行。
推荐网站:
①https://comfyworkflows.com/
②https://openart.ai/home
如下是我根据动物的种类和实物图片生成动画风格的动物。
这就是我三步速成ComfyUI的过程,
这段旅程充满了惊喜与收获!
现在,
我想邀请你一同踏上
这段奇妙的探索之旅,
亲身体验这款工作流界面的
AI设计应用的无限魅力!
为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取
一、ComfyUI配置指南
- 报错指南
- 环境配置
- 脚本更新
- 后记
- …
二、ComfyUI基础入门
- 软件安装篇
- 插件安装篇
- …
三、 ComfyUI工作流节点/底层逻辑详解
- ComfyUI 基础概念理解
- Stable diffusion 工作原理
- 工作流底层逻辑
- 必备插件补全
- …
四、ComfyUI节点技巧进阶/多模型串联
- 节点进阶详解
- 提词技巧精通
- 多模型节点串联
- …
五、ComfyUI遮罩修改重绘/Inpenting模块详解
- 图像分辨率
- 姿势
- …
六、ComfyUI超实用SDXL工作流手把手搭建
- Refined模型
- SDXL风格化提示词
- SDXL工作流搭建
- …
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取