【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)

京东云开发者
• 阅读 171

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)

现如今在AIGC大环境的推动下AI生成的工作也不断的在进化,从起初的MJ到SD,从WebUI到现在的ComfyUI。每一次变化都再不断的提升AI方向的质量和效率。今天就带大家把最近火圈的ComfyUi用起来!!!同时这次也将提供给大家所有基础的工作流,以及定制JOY工作流

这次分享会帮大家把ComfyUI的基础使用和学习成本降到最低,降到最低,降到最低!!! (tip:后续将会分享更多好用的工作流,所以快学起来吧)



先来看看ComfyUI相比WebUI最大的优势在哪里

1、效率升级:ComfyUI**提供了工作流的创建**(WebUI的参数配置可能需要10-15分钟不等,ComfyUI的工作流只需要1秒,拖入即用)

用大白话来说,也就是可以把造轮子这个过程保存下来作为模版,当下一次要造轮子的时候这个过程将根据你设定的模版自动执行。

2、创意升级:ComfyUI的**工作流可以随意组合**(WebUI无法线性完成基础生成+高清+N)

你可能创建造轮子的工作流程,可以创建造电脑的工作流程,最后你可以把造轮子和造电脑的工作流程合并,你将会创造一个会用轮子跑的电脑。



如果有同学记得之前分享的WebUI生成流程,应该已经体验到当时带来的生产效率了,但我想说今天的ComfyUi将重新刷新你的认知

(如果不记得话可以回顾一下:首个Joy 模型诞生!!!全民生成Joy大片



看看实际效果吧(下载分享的工作流,导入环境即可生成)

 【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI) 

1、准备工作(在开始之前,请大家下载好本次生成需要使用到的模型)

1、大模型:下载链接

2、京东Joy-Lora模型: 下载链接 (⚠️非京东同学禁止下载或商用,以免被追法律责任)

3、基础工作流+Joy定制工作流:下载链接(⚠️非京东同学禁止下载或商用,以免被追法律责任)



2、ComfyUi云端部署

1、打开云端地址:https://www.autodl.com/home

 【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI) 

2、注册登陆后,点击算力市场 【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)

3、选择按量计费、重庆A区或内蒙A区(RTX3090、RTX4090均可)

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI) 

4、点击社区镜像

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)

5、输入Comfyui,找到框内的版本

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)

6、点击立即创建 【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)

7、点击JupyterLab,进入启动器

 【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI) 

8、点击加速符号,进行配置

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)



9、当看到蓝色的URL时,则表示运行成功了,然后返回AutoDL自己的服务器

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)

10、点击“自定义服务” ,然后根据他的提示,选择自己的系统(window 或 Linux/Mac) 并进行操作

linux/Mac: (1、打开终端)——(2、复制第一行命令,黏贴到终端,然后回车)——(3、回答yes)——(4、复制第二行密码,黏贴到终端,然后回车)——(5、点击最后一行链接)

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)

Window: (1、下载AutoDL-SSH-Tools)——(2、打开下载的工具)——(3、复制ssh和密码到工具中,代理端口保持默认)——(4、点击开始代理)——(5、点击底部出现的链接)

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI) 

11、恭喜你打开了ComfyUI界面



3、模型放至

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI)

1、大模型:autodl-tmp/models/checkpoint

2、京东Joy-Lora模型:autodl-tmp/models/lora

3、工作流不需要放置:等启动后直接拖到ComfyUI界面中(想用哪个拖哪个)



4、拖入工作流,见证奇迹

下载的工作流拖进ComfyUI的界面中,所有的配置就会已经为你设置好了(前提是模型都已成功放置到目录中),然后点击Queue Prompt,Joy的生成图就生成完毕了,你没有听错就是这么简单!

【AIGC】 0成本学习:AI工作流生成Joy(ComfyUI) 

以上这些就是作为新人可以直接上手生成图的流程,那如果你想要改变一下画面该怎么操作呢?

你可以找到CLIP绿色和红色的2个模块,对画面的关键词进行修改(建议关键词不要太多,会互相污染),这样你就可以得到一些不一样的画面了(新人不用去改其他模块的参数,因为所有的参数在我设置的工作流中已经调优过)



5、新人小伙伴的一些小问题

· 生成不出图:你需要检查大模型和LoRa有没有放到正确的目录里,模型有没有正确上传(进度要读完才算上传成功)

· 参数调乱了:如果你在使用过程中把参数调错了,不要担心,因为你可以再次把我提供的工作流拖到ComfyUI中,这样就能恢复了



6、for有SD-WebUI基础的小伙伴

ComfyUI里的模块和WebUI的功能其实是一致的,让我来帮你快速对应上(详细WebUI功能介绍可以康康之前分享的文章)

· basic模块中主要运用到的模块有:大模型调用、LoRa调用、VAE调用

· first模块中主要运用到的模块有:正负向提示词、图片尺寸、批数、采样器、图片预览

· second模块中主要运用到的模块有:放大算法&模型、放大倍数&尺寸、采样器、图片浏览

如果你是有SD基础的小伙伴,那这些参数你一定很熟悉了,你一定知道怎么通过参数来调整画面~





ComfyUI是未来工作中必不可少的工具,目前我已经制定了非常多实用的工作流,本次分享只是分享了一些基础的部分。如果你已经使用了工作流或对工作流感兴趣,可以在评论区和我交流,后续将会分享工作流如何搭建,以及进阶版的工作流模版,敬请期待吧!!!

点赞
收藏
评论区
推荐文章
基于AIGC的京东购物助手的技术方案设想 | 京东云技术团队
随着AIGC的爆火,ChatGPT,GPT4的发布,我作为一个算法工作者,深感AI发展的迅猛。最近,OpenAI的插件和联网功能陆续向用户公开,我也在第一时间试用了这些最新的功能。在OpenAI的插件市场上,我被一个可以帮助分析食谱,并生成购物清单的功能所吸引。
高耸入云 高耸入云
10个月前
“AI技术变革编程世界:教你如何利用人工智能生成代码,成为高薪AI工程师“
​AIGC,也就是人工智能生成代码,是自动或半自动生成可执行程序的过程。在我为你提供的教学资源中,你将针对这一核心技能展开深入学习。无论是深度学习、神经网络,还是机器学习,你都可以在我们这里找到最详尽的教学内容和实践项目。随着AI的普及,AIGC的应用也越
高耸入云 高耸入云
8个月前
【OJAC近屿智能】想要成为AIGC大模型工程师, 如何搭建你的知识体系框架?
📖更多AI资讯请👉🏾AI不会取代你的工作,会取代你的是会AI的人,如何提升自己与他人的知识壁垒,如何学习AIGC?相信在过去2023这个AI爆发的元年,我相信也是很多人的疑问,好像不懂使用点AI工具,例如ChatGpt、Midjourney或者SD,
高耸入云 高耸入云
4个月前
近屿智能独家发布:AIGC大模型工程师和产品经理详细学习路径图(附完整版学习路径图)
AI不会取代你的工作,会取代你的是懂AI的人,如何提升自己与他人的知识壁垒,如何学习AIGC?相信在刚刚过去2023这个AI爆发的元年,我相信也是很多人的疑问,好像不懂使用点AI工具,例如ChatGpt、Midjourney或者SD,就好像被淘汰了一样,更
高耸入云 高耸入云
7个月前
近屿智能独家发布:AIGC大模型工程师和产品经理学习路径图,AI技术不再难懂!
随着人工智能技术的飞速发展,AI取代人工的现象在各个行业和领域变得日益普遍,不少人因此忧心忡忡,担心自己的前途受到AI的冲击。实际上,AI不会取代你的工作,会取代你的是懂AI的人,如何提升自己与他人的知识壁垒,如何学习AIGC?相信在刚刚过去2023这个A
京东云开发者 京东云开发者
4个月前
ComfyUI 完全入门:ControlNet 使用教程
大家好,我是每天分享AI应用的萤火君!今天继续给大家分享ComfyUI的入门必备技能:ControlNet。ControlNet提供了十几种生成图片的控制方式,有的可以控制画面的结构,有的可以控制人物的姿势,还有的可以控制图片的画风,这对于提高AI绘画的质
京东云开发者 京东云开发者
4个月前
AIGC在保险场景中的视觉应用
在AI的大变革时代,AIGC作为一匹腾空而出的黑马,为我们的创意设计工作带来了革命性的变化。以下为京东保险UED团队目前在AIGC领域的探索与成果总结,希望可以再接再厉,推动更多的AIGC工具在更多的设计领域的应用与革新。