ComfyUI > 工作流 > Flux & 10个In-Context LoRA模型

Flux & 10个In-Context LoRA模型

此Flux In-Context LoRA (IC-LoRA) 工作流程提供10个强大的LoRA模型，用于使用扩散变压器进行任务无关的图像生成。这些模型涵盖了广泛的创意应用，包括情侣档案设计、电影故事板、字体设计、家居装饰、肖像插图和摄影、PPT模板、视觉效果（沙尘暴和烟火）以及视觉识别设计。每个模型利用DiTs的上下文学习能力，仅需小型数据集即可进行高效的任务特定调整。

In-Context LoRA (IC-LoRA) 项目由Lianghua Huang、Wei Wang、Zhi-Fan Wu及其在同义实验室的合作者开发。所有荣誉归团队所有。要了解更多关于他们的工作并访问他们的资源，请访问GitHub上的官方仓库。

ComfyUI Flux In-Context LoRA 工作流程

Flux In-Context LoRA: 10 LoRAs for Diverse Image Tasks

想要运行这个工作流吗？

完全可操作的工作流
没有缺失的节点或模型
无需手动设置
具有惊艳的视觉效果

ComfyUI Flux In-Context LoRA 示例

ComfyUI Flux In-Context LoRA 描述

由Lianghua Huang、Wei Wang、Zhi-Fan Wu及其在同义实验室的合作者开发的In-Context LoRA (IC-LoRA) 项目，代表了一种使用扩散变压器(DiTs)进行任务无关图像生成的突破性方法。他们的创新框架通过引入最小调整和简化的流程，利用DiTs的上下文生成能力，允许使用小型数据集进行高效的任务特定调整。要了解更多关于他们的工作并访问他们的资源，请访问上的官方仓库。

1. 关于In-Context LoRA (IC-LoRA)

In-Context LoRA (IC-LoRA) 是一个强大且灵活的框架，使现有的文本到图像扩散变压器模型能够以最小的额外训练执行各种图像生成任务。In-Context LoRA背后的关键理念是通过提供精心策划的训练数据和使用简单而有效的微调方法，利用这些模型固有的上下文学习能力。

以下是In-Context LoRA的工作原理概述：

图像拼接：IC-LoRA不是生成单个图像，而是将一组相关项目拼接成一个大的复合图像。这使得模型能够学习所需的关系和一致性。
提示工程：集合的文本提示也被拼接成一个单一提示。这个提示从集合的总体描述开始，然后是每个单独项目的具体细节。通过这样设计提示，模型可以理解高层任务以及低层需求。
低秩适应 (LoRA)：与对整个扩散模型进行微调（这将是计算密集型的）不同，IC-LoRA使用LoRA来适应每个特定任务的模型。LoRA仅训练一小组辅助参数，保持原始模型权重不变。这使微调过程更加高效。
小型训练数据集：IC-LoRA的另一个关键见解是，您不需要大量数据集来触发上下文学习能力。每个任务只需20-100个高质量图像集即可获得令人印象深刻的结果。这大大减少了数据收集和计算负担。

In-Context LoRA的美妙之处在于它是一个任务无关的框架。同一方法可以应用于广泛的任务，例如故事板生成、字体设计、产品设计、视觉效果等。通过提供任务特定的训练数据，IC-LoRA可以适应每个任务，而无需对模型架构进行任何更改。

2. 10个In-Context LoRA模型及其推荐设置

任务	模型	推荐设置	示例提示
1. 情侣档案设计	couple-profile.safetensors	宽度：2048，高度：1024	这幅两部分图像描绘了一对穿着侦探服装的卡通猫；[左] 一只戴着帽子和风衣的黑猫握着放大镜向右看，[右] 一只戴着领结和帽子的白猫抬起眉毛，创造了一个有趣的黑色灵感场景，背景昏暗。
2. 电影故事板	film-storyboard.safetensors	宽度：1024，高度：1536	[电影镜头] 在一个充满活力的节日中，[场景-1] 我们看到<Leo>，一个害羞的男孩，站在热闹的嘉年华边缘，目光炯炯地注视着五彩缤纷的游乐设施和欢声笑语，[场景-2] 过渡到他勉强尝试一个大胆的游戏，朋友们为他加油，[场景-3] 最后他赢得了一个巨大的毛绒熊，脸上洋溢着自豪，举起它让所有人看到。
3. 字体设计	font-design.safetensors	宽度：1792，高度：1216	四幅图像展示了一种充满活力的泡泡字体，采用流行艺术风格。[左上] 显示"Pop Candy"，背景为亮粉色的波尔卡圆点；[右上] 展示"Sweet Treat"，背景为糖果插图；[左下] "Yum!" 以亮色展示；[右下] "Delicious" 背景为条纹，适合有趣的儿童产品。
4. 家居装饰	home-decoration.safetensors	宽度：1344，高度：1728	这幅四部分图像展示了一个乡村风格的客厅，温暖的木质色调和舒适的装饰元素；[左上] 以大型石壁炉为特色，木架上摆满了书籍和蜡烛；[右上] 展示了一张复古皮沙发，上面铺着格子毯，配以各种纹理的靠垫；[左下] 显示了一把木制扶手椅，旁边的桌子上放着一杯热气腾腾的咖啡和一本经典书籍；[右下] 捕捉了一个舒适的阅读角落，窗台座位上有一个柔软的毛毯，装饰木块整齐堆放。
5. 肖像插图	portrait-illustration.safetensors	宽度：1152，高度：1088	这幅两部分图像展示了从现实肖像到充满艺术风格的插图的转变，捕捉了细节和艺术魅力；[左] 照片中展示了一名女子站在繁忙的市场中，戴着宽边帽，穿着飘逸的波西米亚风格连衣裙，背着皮质斜挎包；[右] 插图面板夸大了她的配饰和特征，波西米亚连衣裙被描绘成丰富的图案和大胆的色彩，背景被简化为抽象的市场摊位，使场景充满动画和生机。
6. 肖像摄影	portrait-photography.safetensors	宽度：1344，高度：1728	这幅[四部分]图像展示了一位年轻艺术家的创作过程，在一个明亮而鼓舞人心的工作室中；[左上] 她站在一幅大画布前，手握画笔，为未完成的画作添加鲜艳的色彩，[右上] 她坐在杂乱的木桌旁，在笔记本中草绘想法，周围散落着各种艺术用品，[左下] 她后退一步，仔细观察自己的作品，若有所思地调整眼镜，[右下] 她通过直接在调色板上混合颜料来尝试不同的纹理，她专注的神情展现了她对工艺的投入。
7. PPT模板	ppt-templates.safetensors	宽度：1984，高度：1152	这幅四部分图像展示了一个乡村风格的PowerPoint模板，用于烹饪工作坊；[左上] 介绍"Farm to Table Cooking"，使用温暖的土色调；[右上] 组织工作坊部分，如"Ingredients"、"Preparation"和"Serving"；[左下] 显示季节性农产品的成分列表；[右下] 包含厨师简介和简短的个人介绍。
8. 沙尘暴视觉效果	sandstorm-visual-effect.safetensors	宽度：1408，高度：1600	[沙尘暴-PSA] 这幅两部分图像展示了一名骑自行车者通过沙尘暴视觉效果的转变；[上] 上半部分展示了一名身穿鲜艳装备的骑自行车者，稳步骑行在一条开阔的道路上，背景是宁静的天空，强调专注和决心，[下] 下半部分将场景转变为骑自行车者被狂风暴雨般的沙尘暴包围，沙粒在自行车和骑车者周围猛烈旋转，背景阴暗暴风雨，强调混乱和力量。
9. 烟火视觉效果	sparklers-visual-effect.safetensors	宽度：960，高度：1088	[真实烟火叠加] 这幅两部分图像生动地展示了由烟火叠加所转变的森林求婚场景；[上] 第一部分描绘了一名男子在黄昏的森林空地上单膝跪地，手持订婚戒指向他的伴侣求婚，光线温暖自然，[下] 而第二部分引入了发光的烟火，形成一个心形围绕着这对情侣，增强了浪漫和欢乐的氛围。
10. 视觉识别设计	visual-identity-design.safetensors	宽度：1472，高度：1024	这幅两部分图像展示了一家农产品品牌的快乐识别，左面板展示了一个微笑的菠萝图形和品牌名称“Fresh Tropic”，采用有趣、休闲的字体，背景为浅青色；[json LEFT] 而右面板则将设计转换为一个可重复使用的购物袋，菠萝标志为黑色，由市场中的人携带，强调品牌的亲和力和环保理念。