aiwillknow.AI 前沿观察每日 08:00 开始整理
3D 生成全文深读与原图讲解

EditAgent:多步图像编辑,先比较候选再继续

当“删掉火焰”同时删掉烛芯,编辑智能体怎样识别这种副作用?

IN A NUTSHELL

EditAgent将编辑拆成规划、工具路由、并行候选与带局部证据的判定。它把保留原内容也作为检验对象,适合视觉资产迭代流程;输出仍是二维图像,不等于三维材质编辑或物理正确重光照。

01

图解主要方法

当“删掉火焰”同时删掉烛芯,编辑智能体怎样识别这种副作用?

当“删掉火焰”同时删掉烛芯,编辑智能体怎样识别这种副作用?
原论文图3:计划、候选与证据核验闭环查看大图 ↗
EditAgent 作者团队,arXiv:2610.39664v1。引用方法讲解所需原图;原始插图以 PNG 格式呈现,图中内容未改动。 · 原始来源与图注 ↗ · 作者版权;arXiv非独占托管许可
  1. 1

    图3 A:把需求拆成可验证步骤

    规划器先排序操作,分析器结合定位与SAM2.1提取区域;工具池同时含通用编辑器、遮罩局部编辑、移除/移动、颜色及几何/光度操作。问题是选择合适能力,而不是反复向同一个生成器催促。

  2. 2

    B:从同一个步骤输入生成多个候选

    每轮最多三个候选、最多两次重试,各候选从同一源图开始,避免把失败尝试串成不可逆链。通用与专用工具并行,为同一局部目标提供不同失败模式。

  3. 3

    C:比较图像,还要比较证据

    评判器同时看源图、候选、差异图、ROI放大及颜色/几何测量,进行listwise选择;没有合格候选就反馈修订。图中蜡烛例说明移除火焰不应连烛芯一起毁掉,单看缩略图容易漏判。

  4. 4

    接受后更新工作图,并回查旧要求

    只有接受的候选成为下一步输入,还检查先前已满足约束是否被后续操作破坏。筛选出的轨迹可用于微调,但模型评判通过不能自动标成逐条人工验证的真值。

02

实验与证据

已阅读正文与工具、诊断和数据构建相关附录,核对实验条件与原图;未独立复现。

来源证据30编辑类型各20组,共600组、1995候选,五位修图者形成共识而非五份独立评分;81组无可用候选,剩519组中4组记录缺失,判断实验实际515组。通用工具失败256组,专用工具补救175组。 工具与判断诊断 ↗

我的解读样本过滤和人工共识协议必须保留;只在可用候选集合测判断准确率不等于端到端成功率。

来源证据Qwen判断从点对点71.6到列表73.6,加证据81.3;某增强类别仅列表比较降到36.8,加证据恢复80.3。EdiVal5723轮上FluxT由53.20到59.45、Qwen512由47.64到55.46。 证据与质量 ↗

我的解读并非多候选天然可靠,任务相关证据才是关键;编辑模型与评判模型相关性仍需独立人评。

来源证据Qwen总H100小时12.9对1.1,Flux6.3对.5;ComplexEdit中Flux内容保留7.304降到7.131。约25.7k筛选轨迹用于一轮微调,重写提示的起点分数也不同。 代价与退步 ↗

我的解读质量提升伴随约十倍级计算,并存在保留退化;不能把提示变化、筛选数据和训练效果混成单一增益。

03

开放情况与使用许可

论文方法与评估公开;本次未确认作者完整系统代码、筛选轨迹数据及微调权重的正式下载与许可。引用的第三方编辑框架不是EditAgent自身开源证明。

LICENSE作者版权;arXiv非独占托管许可

04

我的判断

独立分析 · 未复现实验

正方 · 为什么值得投入

把工具差异、局部证据和历史约束纳入闭环,比只按美观打分更接近实际素材修订需求。

反方 · 哪些结论还不够

计算开销较大,评判偏差、局部遗漏及后续破坏仍可能发生;二维光度调整不是去光照或基于PBR的重光照。

综合判断

适合作为高价值图片编辑的流程原型,暂不宜用自动通过标签代替最终资产审核。

我会先做的验证

未执行的验证方案:准备含文字、细线和固定品牌色的多步编辑集,用独立盲审测目标达成、非目标区域保持与跨步骤回退,并同时计入成本;三维用途另测UV与多视角一致性。

继续探索3D 生成