AI生图大洗牌,流匹配架构改变传统,同时接受文本和图像输入的模型
AI生图新突破!同时接受文本和图像输入的模型。
FLUX的新模型.1 使用流匹配架构的Kontext(Flow Matching),与以前的技术不同,文本编码器和扩散模型已经不同了。
Black是最受欢迎的。 Forest Labs,这次官方表示可以做到真正的前后文生成和编辑。

就编辑能力而言,著名的奥特曼尴尬地拍了一张小绿龙的照片。

就生成能力而言,有网友测试的猩猩打羽毛球细节也十分丰富。

特别是FLUX.1 Kontext有四个特点:
- 角色一致性:可以跨场景保留元素
- 部分编辑:仅针对特定部分而不影响其它部分
- 风格参考:以现有风格生成新场景
- 交互速度:迭代最小延迟
这次提供FLUX标准版两种模型。.1 Kontext [pro]更适合快速迭代,可以基于以前的编辑。
FLUX的最高版本.1 Kontext [max],跟踪提醒、文字排版和一致性都有所提高。
与此同时,官方试玩平台Flux Playground,可选择两种型号

另外,FLUX开放权重版.1 Kontext [dev]提供内测。
提示词技巧
FLUXX第三方平台Replicate.1 Kontext做了详细的测试,结论是4o效果比OpenAI更明显,而且更便宜,图像也不会偏黄。
测试报告还根据不同的功能提供提示技巧。

图像编辑
在编辑人物时,无论大小的变化,人物的身份特征都会得到保留。

对风格迁移任务,也可以保留人物的基本特征。

对于更复杂的变化,比如添加角色或者改变背景,需要分几个步骤来描述每一个变化,只要每一个变化都不是很复杂,就能取得好的效果。
风格迁移
风格迁移任务至少具体到“印象派绘画”或“水彩素描”,具体派系艺术家效果明显,如“文艺复兴”或“20”。 世纪 60 时代波普艺术”。
如果风格标签不够准确,描述“画笔清晰、色彩质感厚实、色彩深度丰富”等关键特征。如果你想保留一些元素,你也需要明确规定,比如“保持原始构图”。
总而言之,描述越具体,效果越好。

文本编辑
支持在图片上添加新文本,删除文本,甚至定位现有文本修改。
处理文本时的一些技巧:
使用易读字体,过于艺术化的字体表现不佳
明确规定要保留哪些内容。若保留字体效果非常重要,请务必提及
在编辑之前和之后尽量匹配文本长度。长度的巨大变化可能会改变布局

另外,根据网友的测试,FLUX.1 Kontext也可以删除文本,例如去除电影海报上的所有单词。

角色一致性
连续编辑时,首先要明确人物,然后指出哪些方面发生了变化,无论是场景、活动还是风格。
若要让同一个角色继续存在,需要注意哪些方面需要保留:面部、表情、服装或其它任何重要方面。

需要详细说明,在编辑背景和场景的同时,保持角色的一致性,以保持角色处于同一位置、比例或姿势。
短小的提示有时候会留下太多模糊的地方,比如“把他搬到沙滩上”,不如:
将背景改为海滩,同时保持角色的位置不变,保持相同的主体位置、拍摄角度、照片和角度。只需要改变角色周围的环境。
其他技巧
最后,Repilicate也使用了FLUXX.1 对Kontext的提示技巧进行了总结:
使用清晰详细的语言。准确命名颜色,准确描述视觉元素,选择直接动作动词。避免使用模糊的词语,如“让它变得更好”。
把复杂的编辑转换成更小的步骤。按顺序操作,更容易管理更大的变化。
明确哪些部分应该保留。保护关键元素,如“同时保持相同的面部特征”或“保持原始构图”。
使用描述性句子,如“留着黑色短发的女人”或“红色汽车”。避免使用代词。
在编辑文本时,使用引号,例如,“x’替换为‘y’”
明确控制构图 :对场景进行编辑时,明确规定是否要保留摄像机视角或取景框等内容。
谨慎选择动词 :“改造”之类的词表示完全改造。如果你想更准确地控制它,你可以使用更具体的操作,比如“换衣服”或“换背景”。
One More Thing
在AritificialAnalysis的排行榜上,我们再来看看文生图领域的情况,GPT-4o、Seedream字节 Recraft3.0 前三名V3。
Black Forest FLUXX是Labs上一代爆款产品.1已相对落后。
能期待FLUX吗?.1 Kontex的投票结果。

在线试用https://playground.bfl.ai/image/generate
参考链接:
[1]https://x.com/bfl_ml/status/1928143010811748863
[2]https://replicate.com/blog/flux-kontext
[3]https://huggingface.co/spaces/ArtificialAnalysis/Text-to-Image-Leaderboard
本文来自微信微信官方账号“量子位”,作者:梦晨,36氪经授权发布。
本文仅代表作者观点,版权归原创者所有,如需转载请在文中注明来源及作者名字。
免责声明:本文系转载编辑文章,仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布,请及时与我们联系进行审核处理或删除,您可以发送材料至邮箱:service@tojoy.com




