元峰AI笔记 · AI绘画与视频

120 亿参数背后,Flux.1 如何击败 AI 绘画界的三巨头?附免费使用方法

大家好,我是元峰。这几天,大伙都被 Flux 给刷爆了吧?这个 Flux.1 一出来,把 AI 画画的水平又提高了一大截!看看上面 3 张图,你敢信这是 AI 画的?

120 亿参数背后,Flux.1 如何击败 AI 绘画界的三巨头?附免费使用方法

120 亿参数背后,Flux.1 如何击败 AI 绘画界的三巨头?附免费使用方法

这是一位金发女士的形象,她手持黑色麦克风,脖颈处佩戴着印有“DASS”“VDEH”字样的绿色挂绳,挂绳下的白色胸牌标注有“ANTRIDO”。她身着深蓝色带亮片装饰的服装,右手比出三根手指。背景中可以看到带有“V-Ray”“Autodesk”等字样的标识,结合上下文可知,该图片未关联Flux.1相关内容,可能是与行业活动、技术展示相关的人物画面,和该AI绘画技术相关文档无直接关联。

图片展示了一位女性在台上演讲的场景。她身着深色西装,佩戴绿色挂绳,手持黑色麦克风,面带微笑,神情自信。背景为白色屏幕,上面有多个品牌标识,如ViRay、Vitra等。该图片与上文提到的Flux.1在开源AI画图界立新标准的内容相关,可能是在介绍Flux.1背后的团队或相关活动,直观呈现了其在行业中的影响力。

图片展示了一位在舞台上表演的女性。她身着闪亮的银色上衣和黑色皮质短裤,搭配黑色长靴,手持麦克风,左手高举,面带微笑。背景为舞台灯光效果,有紫色和蓝色的光束,以及类似火焰的图案。这张图片与上文提到的Flux.1在开源AI画图界立新标准的内容相呼应,可能是在展示使用Flux.1进行AI绘画时的场景或效果。

大家好,我是元峰。这几天,大伙都被 Flux 给刷爆了吧?这个 Flux.1 一出来,把 AI 画画的水平又提高了一大截!看看上面 3 张图,你敢信这是 AI 画的?

Flux.1 它可真是在开源AI画图界立了个新标准。你们想,它那 120 亿个参数,画出来的图质量和效果,把 Midjourney V6、OpenAI 的 Dall-E 3 还有 Stability AI 的 SD3 Ultra 这些巨头都超越了。

什么是 Flux.1?

LUX.1 是一个全新的 AI 图像生成模型,在图像细节、指令遵从性、风格多样性和场景复杂性等方面,为文本到图像合成定义了新的最先进水平(state-of-the-art, SOTA),由 Stable Diffusion 的原班人马创立的黑森林工作室推出。这个模型在开源文生图模型领域引起了广泛关注,被认为有可能取代 Stable Diffusion 成为新的领头羊。

图片展示了FLUX.1在成本与创意能力方面的不同版本。横轴为成本,纵轴为创意能力。FLUX.1 [schnell]成本较低,创意能力一般;FLUX.1 [dev]成本中等,创意能力较强;FLUX.1 [pro]成本较高,创意能力最强。该图与上下文介绍的FLUX.1为文本到图像合成定义新SOTA水平,且有不同版本的内容相呼应,直观呈现了其在成本与创意能力上的差异。

Flux 有3个版本

FLUX.1 [pro],全新的 SOTA 文生图模型,具有极其丰富的图像细节、极强的 prompt 遵循能力和多样化风格。目前可以通过 API 使用,只开放商用权限。

FLUX.1 [dev],FLUX.1 [pro] 的开放权重、非商用变体,基于后者蒸馏而成。该模型的表现优于 Midjourney 和 Stable Diffusion 3 等其他图像模型。推理代码和权重已经放在了 GitHub 上。

开源的 FLUX.1 [schnell],它是超高效的 4-step 模型,遵循了 Apache 2.0 协议。该模型在性能上与 [dev]、[pro] 非常接近,可以在 Hugging Face 上使用。

Flux.1 背后团队的故事挺有意思的。这帮人就是 Stable Diffusion 的开发者,也是潜在扩散(latent diffusion)的发明者。在 Stability AI 内部出现一些问题后,关键团队成员离职,成立了一家名为 Black Forest Labs 的新创公司。

所以这次的模型发布也覆盖了商用、开源权重到完全开源,能力最强的提供商用和企业合作的机会,基础版权完全开源。

跟 Stable Diffusion 不同的是,这次 Black Forest Labs 和 xAI 进行了合作,为 Grok 2 提供了图像生成功能,怎么说,算是一个双赢的合作,不管是吸引更多用户,还是积累更多数据进行数据飞轮。

图片展示的是一个社交媒体界面,用户@dreamingtulpa发布了一条指令,要求生成一张iPhone近距离拍摄的性感Instagram模特在家卧室的照片,拍摄于2015年,自然光线透过窗帘,模特全身赤裸躺在床上,头发为红色。下方显示由Grok生成的图片,为一位红发女性躺在床上的场景。该图片与上下文紧密相关,直观呈现了Grok图像生成功能的实际效果,是上下文提到的“Grok 2提供了图像生成功能”合作成果的示例。

这张图片展示了一条社交媒体相关内容,先是MindBranches官方账号发文,标注生成的图像为唐纳德·特朗普与卡玛拉·哈里斯牵手的形象,该内容发布在Grok平台,账号标识显示为@grok,下方附有对应的图像:身着西装的特朗普与穿黑色西装的哈里斯手握在一起,背景有美国国旗。结合上下文,该内容体现了Flux.1模型被用于Grok生成图像的合作情况,呼应了文档中Black Forest Labs与xAI合作为Grok提供图像生成功能的内容。

图片展示了一张由Grok生成的图片,用户Gigi B @ Gianluigi Ballarani要求生成“elon musk as a ninja turtle”,即“埃隆·马斯克作为忍者龟”。图片中呈现了埃隆·马斯克穿着忍者龟的服装,背景为夜晚的城市街道场景。该图片与文档中介绍Flux.1的内容相关,展示了其图像生成能力,体现了与xAI合作为Grok 2提供的图像生成功能。

FLUX TED 演讲

但仅过去一周,装载了真实版 LoRA 后,TED 用 Flux 掀起了一场“真人演讲”比赛。

图片展示了一位女性在台上演讲的场景。她身着黑色带有白色图案的上衣,手持麦克风,侧身面向观众,似乎正在介绍或演示。背景为蓝色和橙色渐变的屏幕,屏幕右下角有“FLUX”字样。台下观众部分可见,画面整体色调偏暖。此图与文档中介绍“FLUX”TED演讲的内容相关,可能是该演讲的一部分画面。

图片展示了一位女性在TEDxMermaidLagoon活动上演讲的场景。她手持麦克风,面带微笑,身着带有花卉图案的无袖连衣裙,佩戴着蓝色挂绳和白色证件。背景中隐约可见“TEDx”字样。该图片与文档中“FLUXTED演讲”内容相关,可能是对文中提到的由Runway Gen 3和Flux生成的视频和图像中人物的展示。

是的,这不是真人,而是由 Runway Gen 3 和 Flux 生成的视频和图像。仔细看,嘉宾卡上的 Google 字样与真实的 logo 毫无区别。

图片展示的是在TED演讲中的一位男士。他身着深色西装,内搭浅色衬衫,佩戴眼镜,胸前挂有证件。背景为红色的“TED”字样。该图片位于介绍FLUXTED演讲的上下文之后,可能是用于展示演讲者或与演讲内容相关的场景,与上下文提到的FLUXTED演讲相呼应。

图片展示了一只坐在红色地毯上的棕色狗,戴着绿色项圈,项圈上挂着一个黑色标签。背景中有一个红色的“TED”标志,旁边有一根黑色的线缆。该图片位于介绍“FLUX”TED演讲的上下文之后,可能是在展示演讲现场的场景,与上下文提到的由Runway Gen 3和Flux生成的视频和图像等内容相呼应,体现了AI技术在图像生成方面的应用。

图片展示的是在FLUXTED演讲中的一位女性演讲者。她身着黑色西装外套,内搭白色衬衫,下穿蓝色牛仔裤,胸前佩戴着绿色证件牌。演讲者面带微笑,左手自然下垂,右手抬起,手指张开,似乎在做手势表达。背景为红色,隐约可见“FLUX”字样。此图与上下文紧密相关,是对FLUXTED演讲场景的直观呈现,展示了演讲者在舞台上的风采。

这张图片呈现了一场TEDx活动的现场场景,一位女士身着酒红色西装外套、白色内搭,站在舞台上做出手势,似乎正在进行演讲。她身后的黑色背景板上,亮着醒目的红色“TEDx”字样和蓝色的“Ai Search”字样,结合上下文可知,这是与Flux相关的FLUX TED演讲现场,图中展示的正是该演讲的舞台与演讲者,符合文档中关于Flux相关TED演讲的内容描述。

这张图片呈现了一位戴眼镜的男士,他身着西装外套搭配白色衬衫,站在带有TED标识的舞台上,看起来正在进行演讲。背景屏幕上,红色的“TEDx”字样十分醒目,下方还有白色的“AI Search”字样,结合上下文可知,这是和Flux相关的FLUX TED演讲现场,该图片是由Flux生成的内容,对应文档中提及的由Flux生成的相关画面。

比 Midjourney 更强?

据研究人员称,Flux.1 Pro和Flux.1 Dev在以下每个方面都超过了Midjourney v6.0、Dall-E3和Stable Diffusion 3 Ultra等热门模型:

  • 视觉质量
  • 指令一致性
  • 尺寸和长宽比的多样性
  • 排版
  • 输出多样性

这张图片是Flux.1模型与Midjourney V6.1生成效果的对比展示图。左侧是Flux.1生成的单虎眼极端特写,直接正面视图,图中虎眼效果清晰自然,符合对应的提示词要求。右侧是四组对比图,均为虎眼相关内容,标注了“MJ V6.1”的部分为Midjourney V6.1生成的效果,其余标注“FLUX”的部分为Flux.1生成的效果,可直观体现Flux.1在该类生成任务中的表现。

*提示词: *单个虎眼的极端特写,直接正面视图。详细的虹膜和瞳孔。重点关注眼睛的纹理和颜色。自然光捕捉真实的眼睛光泽和深度。 “FLUX”一词以大而白色的笔触绘制在其上,具有可见的纹理。

图片展示了Flux、Midjourney V6.1和Midjourney V6.1.1在处理“乐高厨师小人仔为无家可归者做饭的特写”这一提示词时的生成效果对比。左侧为Flux生成的图像,乐高厨师小人仔面带微笑,手持餐具,背景有食物和厨房用具。中间和右侧分别为Midjourney V6.1和V6.1.1生成的图像,厨师小人仔同样手持餐具,但背景中食物和厨房用具的细节和数量有所不同。该图片直观呈现了不同AI绘画模型在处理相同提示词时的生成效果差异。

*提示词: *乐高厨师小人仔为无家可归者做饭的特写。专注于乐高手使用餐具,展示烹饪技巧。温暖的厨房灯光,清晨的气氛。佳能 EOS R5,50mm f/1.4 镜头。捕捉复杂的烹饪技巧。背景暗示慈善背景。灵感来自 Paul Bocuse 和 Massimo Bottura 的风格。定格食物准备的瞬间。通过场景细节传达同情心和利他主义。

图片展示了Flux和Midjourney V6.1生成的海滩场景对比。左侧为Flux生成的图像,画面中有一个戴着墨镜、身穿夏威夷衬衫的大土豆躺在沙滩巾上,周围有沙滩球、人字拖等,背景有灯塔沙雕、冰淇淋车等。右侧是Midjourney V6.1生成的多张图像,大土豆姿势和周围环境与左侧类似,但细节和色彩更为丰富。该图片直观呈现了Flux在AI绘画方面的表现,与上下文提到的Flux与Midjourney V6.1的对比相呼应。

*提示词: *一个戴着墨镜、身穿夏威夷衬衫的大土豆躺在沙滩巾上,周围环绕着色彩缤纷的沙滩球和人字拖。附近,拟人化的水果在打沙滩排球。在背景中,一座灯塔沙雕矗立在一辆带有巨大圆锥体的冰淇淋车旁边,为快乐的海滩游客提供美食。这个场景捕捉到了有趣、俏皮的夏日氛围,附近有海浪拍打的声音。

图片展示了Flux.1与Midjourney V6.1在生成图像方面的对比。左侧为Flux.1生成的图像,显示一位留着胡子、戴着红色墨镜的男子,背景是日落景色。右侧为Midjourney V6.1生成的图像,同样呈现该男子,背景为不同日落场景。图片通过对比两者的生成效果,直观呈现Flux.1在AI绘画方面的表现,与上下文提到的Flux.1与Midjourney V6.1等AI绘画工具的对比相呼应。

*提示词: *一个留着胡须、黑发、戴着红色太阳镜、穿着浅灰色巴塔哥尼亚羊毛夹克的男人的肖像。他表情严肃,直视镜头。背景显示了模糊的户外场景,岩石地形和充满活力的粉红色和紫色的日落天空。灯光使图像呈现出温暖的黄金时刻光芒。整体氛围粗犷而又时尚,带有一丝冒险的气息。

图片展示了Flux和Midjourney V6.1生成的拉布拉多图像对比。左侧为Flux生成的拉布拉多,站立于黑色森林中,背景有“FLUX”标识,狗毛为浅黄色,表情生动。右侧是Midjourney V6.1生成的拉布拉多图像,画面色调偏灰,有“MJ-V6.1”标识,狗为黑色,背景为森林场景。该图片与上下文对比不同AI绘画模型生成效果,直观呈现Flux在视觉质量、指令一致性等方面的优越性。

*提示词: *黑色森林中的拉布拉多,有黑色的树和黑色的叶子。

你觉得哪个效果最好?

据研究人员称,Flux.1 Pro 和 Flux.1 Dev 在以下每个方面都超过了 Midjourney v6.0、Dall-E3 和 Stable Diffusion 3 Ultra 等热门模型:视觉质量、指令一致性、尺寸和长宽比的多样性、排版、输出多样性。

这是两张用于对比AI绘画模型性能的雷达图,左侧图表对比了FLUX.1 pro、FLUX.1 dev、FLUX.1 schnell、SD3-Ultra、Midjourney-V6.0等多款模型的表现,右侧则对比了FLUX.1 schnell、SD3-Turbo、SDXL-Lightning等模型,二者的对比维度均包含Prompt Following、Visual Quality、Size/Aspect Variability、Typography、Output Diversity五项核心内容。从图中可见,FLUX系列模型在Prompt Following、Typography等维度的表现明显优于其他多数模型,能够直观体现出Flux.1相关模型在各项核心能力上的优势,契合文档中关于Flux.1击败Midjourney等热门AI绘画模型的内容表述。

如下图所示,这是 Flux.1 dev 不同模型版本之间的对比。

这张图片是Flux.1 dev不同模型版本的效果对比图,共分为四组,每组展示同一场景在不同模型版本下的生成效果。第一组呈现宇航员在丛林的画面,Flux1-dev-bnb-nf4版本生成的图像偏暗、细节简洁,Flux1-dev-fp8版本的画面色调更明亮、质感更细腻写实;第二组是女子在海上浮标的场景,两个版本均准确呈现人物主体与环境,细节表现略有差异;第三组是写有“FF6”“FF8”字样的书架摆件,两个版本都清晰还原了文字与物品质感;第四组是人物街景画面,不同模型版本的人物形象细节呈现也有所区别,直观体现出Flux.1不同模型版本的生成效果差异。

来欣赏一些用Flux.1 Pro生成的令人惊叹的示例图像吧。让我们从人物图像开始,重点关注发丝、皱纹、手指和四肢等细节。

这张图片展示了三位年轻女性站在城市街道的路口,她们都面向镜头,伸出手掌朝向观看者,做出类似暂停的手势。背景里能看到两侧的多层建筑、往来的行人与车流,氛围热闹,像是白天的户外街景。结合上下文可知,该图片对应的是Flux.1 Pro生成的人物示例图像,整体来看,该图像中人物的发丝、手指等细节精度表现都十分细腻,符合Flux.1在人物细节呈现上的效果。

图片展示了一位女性,她面带微笑,棕色长发披肩。她伸出左手,手掌心上用黑色字体写着“I AM NOT REAL”。背景为室内环境,左侧有门和挂钩,右侧模糊可见一些家具。此图位于介绍Flux.1 Pro生成人物图像示例的段落中,用于展示其在人物图像生成方面的细节精度,如发丝、皱纹和手指等。

图片展示了一位坐在车内的女性,她面带微笑,双手举着一张写有“我并不真实”的纸。背景中,另一位女性坐在后座,低头看手机。这张图片位于介绍Flux.1 Pro生成人物图像示例的上下文之后,用于直观呈现人物图像中人物特征如发丝、皱纹和手指等细节的丝滑程度,与上下文提到的Flux.1 Pro在人物图像生成方面的高细节精度相呼应。

人物特征如发丝、皱纹和手指的细节精度都非常丝滑。这效果有点哇塞?

下面这几张写实照片更炸裂,图像是如此逼真,logo 都非常完美。是在 X 上分享的一些最逼真的自拍肖像。如果我不讲,你能看出来它是 AI 吗?

这张图片是Flux.1生成的高写实度人物肖像作品,对应的内容是文档中介绍Flux.1生成效果的部分,该作品呈现的人物面部细节、服饰纹理都十分清晰逼真,完全贴合文档里“逼真到难以区分AI生成与真人照片”的描述,画面中的人物身着红黑拼色的无袖运动衣,背景是带有远山与水域的户外场景,整体效果和真人照片质感高度一致。

图片展示了一位站在海滩上的女性。她身着粉色运动背心,背心上有白色和红色图案,头发扎成高马尾,戴着白色太阳镜。背景是蓝天、沙滩和远处的山丘,还有其他人在海滩活动。这张图片与上下文的关系是,上下文提到“下面这几张写实照片更炸裂,图像是如此逼真,logo都非常完美”,此图可能是展示Flux.1生成的逼真写实照片,体现其AI绘画能力。

图片展示了一位站在雪地中的女性。她戴着一顶带有毛球的紫色针织帽,帽子上沾有雪花,穿着黑色羽绒服,羽绒服上有奥运五环标志。她的头发是金色的,披散在肩上,面带微笑,背景是模糊的雪地和远处的山脉。这张图片与上下文的关系是,上下文提到“下面这几张写实照片更炸裂,图像是如此逼真,logo都非常完美”,此图可能是展示逼真写实照片的例子之一。

使用 Flux 画一些有年代感的照片。

图片展示了Pietro Schirano在Twitter上分享的四张AI照片,配文称这些照片是用FLUX.1 pro制作的,是“2015年左右无聊的Snapchat照片”。照片中分别呈现了不同场景下的年轻女性,有在户外草地前、在教室里、在车内以及在室内自拍等场景,照片人物表情自然,背景环境清晰。该图片与上下文提到的Flux.1制作逼真写实照片的内容相关,展示了其AI生成照片的效果。

这张图片是X(原Twitter)上的一则AI生成内容展示,用户Kiri发布请求,要求生成2006年风格的emo类MySpace个人头像,AI平台Grok据此生成了对应图像。生成的图像是一位有着标志性黑色短发的年轻女生,坐在车内,妆容偏个性风格,佩戴带钻choker项链,身着带帽外套,整体风格契合2006年emo亚文化的MySpace个人头像特征,该图是Flux.1生成的逼真效果作品,体现出该AI生成工具的图像生成能力,与上下文提及的Flux能生成高度写实、契合特定年代风格内容的介绍相呼应。

图片展示了一位女性的自拍肖像。她面带微笑,头发扎起,穿着灰色印有红色和白色图案的长袖上衣。背景为室内环境,左侧墙面为浅色,右侧有白色门框。该图片位于文档中介绍Flux.1生成逼真写实照片的内容部分,用以展示其生成的逼真自拍肖像效果,与上下文提到的“是在X上分享的一些最逼真的自拍肖像”相呼应。

这张图片是一张人物肖像照,呈现的是一名留着短胡须、穿着灰色上衣的男性的脸部及上半身,整体画面清晰自然。该图片是文档中提及的Flux.1生成的有年代感照片实例,展示了AI绘画工具Flux.1所生成内容的写实效果,和文档中“使用Flux画一些有年代感的照片”的描述相呼应,体现了这款AI绘画工具的创作能力。

这张图片展示的是一位穿着粉色背心的女士,她手持带有后置三摄模组的深色智能手机对着镜子自拍,整体画面的光线柔和,人物神态自然。这张图是文档中提及的Flux.1生成的写实自拍肖像作品,该内容用于展示Flux.1能够生成逼真到难以分辨是否为AI创作的图像效果,契合文档中介绍Flux.1强大图像生成能力的相关表述。

也可以尝试训练不同年龄的Flux模型:

这张图片对应文档中尝试训练不同年龄的Flux模型的相关内容,图中是一名金发男孩,有着蓝色眼睛,身穿白色无袖上衣和深蓝色带破洞设计的裤子,他面带笑容,露出牙齿,一只手伸出,另一只手自然下垂,身处带有白色环形标线的灰色地面上,该模型训练生成的这一形象具备逼真的写实效果,符合Flux生成AI绘画的风格特点。

这张图片是由Flux生成的真实感极强的年轻男性肖像,该肖像五官清晰、细节逼真,和普通人的自拍效果几乎没有差别,连人物的浅棕色自然卷发、浅蓝色眼睛、洁白的牙齿都刻画得十分细腻。这一内容出现在介绍Flux.1的文档中,用来展现Flux生成的图像具备极高的写实度,契合文档中关于Flux生成逼真自拍照的相关描述,也能体现该AI绘画工具的高质量输出效果。

这是一张写实风格的中年男性肖像照,人物有着浅棕夹杂灰白的卷发,面部带有灰白胡须,穿着白色圆领上衣,整体形象自然真实。结合上下文可知,这是Flux工具生成的AI图像,这类AI绘制的肖像逼真度极高,几乎能以假乱真,以此展现Flux的图像生成能力,凸显其达到了远超常规AI绘画的写实效果。

这张图片展示了一名中年男性,他有着浅金夹杂灰的短发与灰白胡须,身穿白色圆领T恤,正温和地对着镜头微笑。这张图片是训练Flux模型生成的图像效果示例,能够体现Flux生成的人物肖像逼真度极高,甚至难以被分辨出是否为AI创作的内容,契合文档中所阐述的Flux.1能够生成写实逼真图像的特点。

作为一个尝试过各种AI绘画工具的人来讲,我可以自信地说,这些是我见过的最逼真的AI生成肖像。

只有图片哪够?我们还可以通过可灵或者 Gen-3 将图片转为动态视频,并开口讲话。看看下面这些视频案例:

用+ Flux + 可灵 + synclabs 做一个 100% AI YouTuber

UnionControlnet 模型

InstantX 发布了 FLUX 的 UnionControlnet 模型。

图片展示了关于Flux.1的ControlNet模型相关消息。上方是Frank (Haofan) Wang的推文,称为FLUX制作了精明的ControlNet(预览版),并附有链接。下方是huggingface/diffusers的GitHub Pull Request #9126,标题为[FLUX] Support ControlNet,由wangjixun发起,有18条评论、13次查看、11个文件,状态为+1528 - 3。图片与上下文紧密相关,上下文介绍了Flux.1的UnionControlnet模型,此图展示了其相关技术进展和社区支持情况。

这一个模型集合了 Canny、Depth、Pose、Tile 等多个 Controlnet 模型。

而且他们已经新建了 FLUX IPadapter 模型的文件页面,可能已经在训练了。

模型下载:https://huggingface.co/InstantX/FLUX.1-dev-Controlnet-Union-alpha

图片展示了Flux.1模型在不同输入条件下的生成效果。左侧为Canny、Depth、Pose、Low Quality等输入条件下的图像,右侧是对应的生成图像。如Canny输入条件下的生成图像为色彩鲜艳的女性肖像,Depth输入条件下的生成图像为带有光影效果的女性肖像等。该图与上下文介绍的Flux.1模型相关,直观呈现了模型在不同输入条件下的表现。

这张图片呈现了两处画面,左侧是一只橙白相间的猫咪,它在客厅环境中做出劈叉跳跃的动作,一只前爪举着一条小鱼,神态灵动;右侧是黑色剪影,为经典的篮球运动员扣篮造型,二者动作姿态高度相似,是将猫咪的趣味姿态与知名乔丹品牌剪影结合的创意对比图。

如何使用 Flux.1

对于那些渴望尝试 Flux.1 的人来说,有几个工具可以选择:

Replicate

Replicate是一个基于云的平台,允许用户运行和微调机器学习 (ML) 模型,包括开源和自定义模型。

要使用 Flux.1,请访问 Blackforest Lab 的 Replicate 页面,将在其中看到列出的三个 Flux 模型。选择你想要测试的一项。请注意,只有 Schnell 模型可以免费访问。

图片展示的是Replicate平台界面。左侧有“Dashboard”等导航栏,下方提示“Welcome to Replicate!”,并有“Set up billing”等操作选项。右侧列出多个模型,如“Flux.1”“Flux-pro”“moondream2”等,每个模型有图片示例和简要说明。下方“Recent predictions”部分显示了多个预测记录,包括预测ID、模型、状态、总时长等信息。该图与文档中介绍如何使用Flux.1的内容相关,展示了在Replicate平台上的操作界面及模型情况。

图片展示了一块装饰精美的黑森林蛋糕,蛋糕上用巧克力酱拼出“FLUX SCHNELL”字样,表面撒有糖粉。蛋糕周围摆放着草莓、蓝莓等水果,背景为模糊的灰色纹理。该图片与文档中介绍Flux.1模型的内容相关,可能是Flux.1模型在美食摄影领域应用的示例,体现了其在创意表达上的能力。

提示词:黑森林蛋糕拼出“FLUX SCHNELL”字样,美味,美食摄影,动态拍摄

Fal AI

Fal.ai 是一个面向开发者的生成媒体平台,为应用程序提供人工智能推理 API。它也是测试 Flux.1 等多模式模型的绝佳平台。最开始有一定的免费使用额度。

图片展示了HuggingFace平台上的Flux.1系列模型。左侧有模型类别、功能等筛选选项。右侧有多个模型缩略图,其中“FLUX.1 [dev]”“FLUX.1 [pre]”“FLUX.1 [dev] with LoRA”等模型被红色框突出显示。这些模型是Flux.1系列中不同版本,可用于图像生成等任务。图片与上下文关系紧密,直观呈现了在Hugging Face上尝试Flux.1时可选择的模型种类。

图片展示了在Hugging Face上使用Flux.1进行图像生成的界面。左侧为输入设置区域,有Prompt输入框,可输入描述,如“一个迷人的演讲者被捕捉到中段演讲,他有长长的、微微卷曲的金发,扎成马尾辫...”等;下方有Image Size、Num Inference Steps等参数设置。右侧是生成结果展示区,呈现了一位演讲者手持麦克风的图像。该图片与文档中介绍在Hugging Face上尝试Flux.1的内容相关,直观呈现了操作界面及效果。

HuggingFace

HuggingFace 是一个开源平台,允许用户创建、训练和部署机器学习 (ML) 和自然语言处理 (NLP) 模型。这是一个面向 AI 专家和爱好者的社区,类似于 GitHub for AI。

要在 Hugging Face 上尝试 Flux.1,请创建一个帐户并打开 Flux.1 Schnell 的空间。

这张图片展示的是HuggingFace平台上Flux.1 [schnell]模型的使用界面,核心区域是该模型根据提示词“一幅宇航员在太空中骑马的图像”生成的画作:身着白色宇航服的宇航员在宇宙空间中骑着棕色骏马,背景呈现出地球及宇宙星体,契合设定的太空场景。界面还显示该模型为120参数的改进型流变压器模型,支持4步生成,界面设有“Run”按钮可供执行生成操作,另有“Advanced Settings”选项,下方还提供了示例提示词。

提示词:一幅宇航员在太空中骑马的图像

Liblib

这是在 Liblib 中使用 Flux 的截图示例:

图片展示的是Liblib平台界面,用于AI绘画。界面左侧为参数设置区域,有主题、采样方法、FlaxMatchUser、自动采样、风格、图像数量、随机种子、Layer diffusion、ADetailer、ControlNet、Tiled Diffusion、Tiled VAE等参数选项。右侧是生成的AI画作,为一个站在窗边的20岁欧洲女孩,身着婚纱,画面风格精致,带有散景效果。该图片与文档中介绍如何在Liblib平台使用Flux的内容相关,展示了使用该平台生成AI画作的示例。

提示词:电影照片一个20岁的欧洲女孩,精致美丽,looking_at_viewer,cowboy_shot,<lora:婚纱: 1>,婚纱,.35mm照片,胶片,散景,专业,4k,高度详细,

ComfyUI | 仙宫云

这是在 仙宫云 中使用 ComfyUI 使用 Flux 的截图示例:

图片展示的是行者AI绘画视频ComfyUI镜像页面。页面上方有导航栏,显示“部署GPU计算容器”“镜像社区”“资源中心”等选项。镜像名称为“行者AI绘画视频ComfyUI镜像”,作者是行者,最后更新时间为2024 - 08 - 15,为仙宫云认证创作者。镜像大小为286.28 GB,价格为0.20元/镜像每小时调用。镜像内含ComfyUI(280G镜像)及多个常用工作流,如Flux、LivePortrait等,还内置了常用工作流,如女孩一生、老照片修复等。

图片展示了在ComfyUI中使用Flux.1 Pro生成图像的界面。左侧为参数设置区域,有Prompt、Stable Diffusion、Stable Diffusion 2等选项。中间是节点编辑区域,有多个节点和连线,如“Prompt”“Stable Diffusion”“Stable Diffusion 2”等。右侧是生成图像区域,显示了一位女性坐在桌前,背景为城市夜景。下方有多个生成的图像缩略图。该图片与文档中介绍如何使用Flux.1 Pro的内容相关,直观呈现了其操作界面和生成效果。

API

你也可以通过 API 访问 Flux.1 Pro。目前它处于预览模式,有一些限制:

只有特定合作伙伴的账户才能激活。

API 目前还不稳定,可能会有变动。

下面是一个Python代码示例:

import os
import requests

request = requests.post(
    'https://api.bfl.ml/v1/image',
    headers={
        'accept': 'application/json',
        'x-key': os.environ.get("BFL_API_KEY"),
        'Content-Type': 'application/json',
    },
    json={
        'prompt': 'A cat on its back legs running like a human is holding a big silver fish with its arms. The cat is running away from the shop owner and has a panicked look on his face. The scene is situated in a crowded market.',
        'width': 1024,
        'height': 1024,
    },
).json()
print(request)
request_id = request["id"]

请注意,向 /v1/image 发送请求的并发数限制为 12 个。如果超出限制,API 会返回 429 状态码,你必须等到之前的任务完成才能继续。

商业用途和许可

现在,有些人可能会问,我可以出售或发布这些图像用于商业目的吗?答案是可以,也可能不行,取决于你使用的模型版本。

Flux.1 Pro:** 支持 Flux.1 Pro 的商业使用**,但目前只能通过 Replicate 和 Fal.ai 等平台,由特定合作伙伴访问该模型。

Flux.1 Dev:图像的使用仅限于非商业目的,这意味着你不能销售或发布该模型生成的图像来获取商业利益。

Flux.1 Schnell:在Apache 2.0许可下公开发布,使用上更加灵活。你可以将 Flux.1 Schnell 用于个人和商业用途,只要遵守Apache 2.0许可的条款即可。

总而言之,如果你想将 Flux.1 模型用于商业目的,Flux.1 Pro 和 Flux.1 Schnell 是最佳选择。Flux.1 Pro 通过特定合作关系提供最高质量,而 Flux.1 Schnell 在开源许可下提供了更方便的使用方案。


祝各位玩的开心,如果本文对你有帮助,欢迎点赞。

参考链接:

https://x.com/BenjaminDEKR/status/1822076680858378481

https://x.com/levelsio/status/1823471315635888210

https://x.com/skirano/status/1819444885943914688