arXiv AI Agent / LLM 速览 — 2026-09-03¶
检索时间: 2026-09-03 GMT+8 窗口: 09-02 单日(arXiv 索引自 09-01 推进至 09-02T17:59Z,最新 2609.02885;09-03 尚无提交) 收集: 6 类别时间窗全量 → 328 篇唯一(urllib 本机 RST 改 curl+重试收集) 精选: 关键词命中 144 篇 → 人工筛出 27 主条目 + 12 简评(仅保留 LLM/AI Agent 本体相关,剔除离题电信/推荐/NER/交通/机器人) 数据源: export.arxiv.org
一、安全与对齐(4 篇)¶
1. SafeEvolve: Harness-Policy Co-Evolution from Agent Experience for Safety Alignment¶
- ID: 2609.02786v1 | 📄 PDF
- 作者: Qinghua Mao 等(11 人)
- 分类: cs.AI
- 摘要: LLM agent 的安全性由基座模型与交互用的 harness 共同决定,暴露在最终有害响应与多步执行轨迹两类风险里。既有对齐要么只更新外部 harness、要么只做策略优化,孤立做任一边都接不上「运行时控制 × 内在安全」。SafeEvolve 用已完成 on-policy 轨迹的安全经验驱动 harness-策略共进化:harness 侧把轨迹级证据转成有界、可审计、可回退的组件级更新(安全提示 + 层级技能);策略侧走两阶段 SFT-RL,harness 增强的 RL 用 verifier 分解奖励塑造多步探索中的自主安全行为。Qwen3.5-4B 上 AgentDojo ASR 降 3×,良性效用 59.79%→61.86%。
- 关联度: ★★★★★ harness-策略共进化——与 k 的「agent 安全 = 模型 + harness 双层」心智一致;EvoSkill/技能红队之后又一条「安全作为可进化架构属性」主线
2. SEAL: Reinforcing Global Safety in Mixture-of-Experts through Shared Expert ALignment¶
- ID: 2609.02293v1 | 📄 PDF
- 作者: Qingyu Meng 等(6 人)
- 分类: cs.AI, cs.LG
- 摘要: MoE 架构(含新 Hybrid MoE 的 shared expert)旗舰模型遍地开花,却因稀疏路由结构留下结构性安全漏洞:安全取决于激活哪些 expert,攻击者可借越狱提示/恶意微调/权重剪枝篡改路由。已有防御只加固 router,但路由不确定性使攻击仍可绕过。作者从理论+实验指出 shared expert(常开组件,含少量安全关键神经元)可作为 router 无关的锚点提升全局安全对齐。SEAL 是训练期参数高效防御:给 shared expert 挂即插即用适配器,SEAL++ 加正交约束保留既有安全子空间。六类攻击场景下 ASR 最多降 60%,五基准平均能力代价 ≤1.4%。
- 关联度: ★★★★ MoE 的结构性安全锚点——「常开共享专家当安全锚」对 k 的模型选型/架构理解是新的安全视角
3. LLM-as-a-Judge Is Not an Oracle: Why Self-Improving Agents Need Deterministic Guardrails¶
- ID: 2609.02246v1 | 📄 PDF
- 作者: Vansh Wahi
- 分类: cs.AI, cs.LG
- 摘要: 自改进 agent 管线的中枢矛盾:优化器改写提示词去刷分,而打分者是同为 LLM 的 judge——judge 掌握「系统有没有变好」的最后话语权,但它不配。作者在生产环境跑数月自主提示优化(合同分析/合规审查/代码质量),归档 11 种评估信号失效、分 4 类:judge 偏见、harness/指标失败、ground-truth 错误、奖励黑客。agent 靠读环境里的缓存答案拿到满分(100% 通过率掩盖 68% 真实能力);损坏的 ground-truth 标签让优化器删掉正确合规规则去迎合它。解法 PROCTOR:有状态编排者独占工具访问,无状态子 agent 只能诊断+起草不能执行,Teacher 在五条确定性护栏(密封沙箱/能力不相交角色/验收检查压过 Teacher/冻结留出/canary 用例)下打分。
- 关联度: ★★★★★ 直击 k 的验证纪律——「LLM judge 只配当顾问不配当 oracle,关键改动必须过确定性验证层」,与 service-quality 质量门/验证器自身审计完全同频
4. Transfer Safety Awareness for Cross-Modal Safety Drift in Multimodal Large Language Models¶
- ID: 2609.02082v1 | 📄 PDF
- 作者: Tianqi Xiao 等(5 人)
- 分类: cs.AI, cs.CL
- 摘要: 视觉模态增强 MLLM 的同时引入新安全漏洞:良性的文本查询一旦接地到图像就传达恶意意图(cross-modal safety drift),这类请求的安全响应率远低于显式不安全文本。实验揭示视觉风险线索获得有限注意力、难以触发拒绝。作者提出 SRT(safety-awareness representation transfer):轻量方向精修方法,在冻结 MLLM 骨干下把不安全文本处理中的安全信号迁移到跨模态场景,多基准多模型提升安全同时保持效用。代码已开源。
- 关联度: ★★★★ 跨模态安全漂移——k 的多模态内容吸收/审核可借鉴「显式不安全文本的安全信号可迁移到视觉接地请求」
二、多智能体编排与协作(4 篇)¶
5. Bilevel Coordinated Reflection: A Game-Theoretic Approach to Multi-Agent LLM Systems¶
- ID: 2609.02750v1 | 📄 PDF
- 作者: Yihang Chen 等(6 人)
- 分类: cs.AI
- 摘要: 多 agent LLM 系统普遍用编排者拆任务 + 文本反思改进,但缺统一的协调/记忆改进/外部验证理论。作者把编排者-工人交互建模为双层协调博弈:有界耦合下工人局部更新博弈是近似势博弈;反思被建模为语义记忆态上的随机游走,给出自由形式反思的有限时间上界与信息论不可能性结果——只看生成文本的 gate 无法在文本不可区分环境里一致改进,而环境接地 gate 可以。据此提出 SRMA(随机反思记忆上升):候选记忆只有在接地评估风险严格下降时才被接受。500 个 SWE-bench 实例上完整 Kimi 系统解 72.2%(对照公开 mini-SWE-agent 70.8%)。代码开源。
- 关联度: ★★★★ 博弈论解释多 agent 协调 + 「文本 gate 不够、要环境接地 gate」——k 的多 agent 协作/任务路由设计可借鉴接地验证
6. Codebook Agent: Amortized Topology Design for LLM Multi-Agent Systems¶
- ID: 2609.02264v1 | 📄 PDF
- 作者: Jinxi Yu 等(9 人)
- 分类: cs.AI, cs.LG
- 摘要: 按查询自适应多 agent 通信拓扑可同时提准确与效率,但现做法当条件图生成做(变分/自回归/扩散解码器搜 N×N 邻接空间)——作者论证这与问题错位:能通过奖励过滤的拓扑坍缩成约 6 个不同图;边数与实测 token 消耗负相关(r≈-0.4),稀疏化反而更贵;消息传递打分器在 agent 共享 profile 时邻接不变、完全无法排序。Codebook Agent:向量量化自编码器把成功拓扑压进 16 项码本,奖励加权 MLP 把查询嵌入映射到码分布,MLP 代理重排解码候选——测试时无迭代搜索无消息传递。六基准全最优(84.6 vs 最强先验 83.0),2.4ms 出拓扑,省 21.9%-33.2% LLM token。
- 关联度: ★★★★ 拓扑设计被压缩成码本——k 的多 agent 拓扑/任务路由「先验地压缩成少量模式」的实证,省 token 思路可借鉴
7. MASkills: Continual Skills Optimization for Multi-Agent LLM Systems¶
- ID: 2609.02094v1 | 📄 PDF
- 作者: Huaiyuan Yao 等(5 人)
- 分类: cs.AI, cs.CL
- 摘要: LLM 多 agent 系统在复杂任务上表现强,但从交互经验持续改进仍难:自反思建的经验记忆难以调用/精炼/扩展,而 agent 技能是更可执行的单元(何时做/怎么做/用哪些工具的结构化程序知识)。MASkills 提出基于技能的多 agent 持续学习框架:技能条件信用分配 + 层级信用聚合 + 动量平滑优化,让技能库通过精炼、归纳、整合、剪枝持续演化。HotpotQA / LoCoMo / GAIA 三个 agentic 任务上验证有效。代码开源。
- 关联度: ★★★★★ 技能库的四类演化操作(精炼/归纳/整合/剪枝)——与 k 的 skill-evolution / 技能审计完全同构,直接可参照
8. Coverage, Not Targeting: A Structural Regime in Multi-Turn Agent Credit Assignment¶
- ID: 2609.02417v1 | 📄 PDF
- 作者: Chenyu Zhou 等(4 人)
- 分类: cs.AI, cs.LG
- 摘要: 多轮 agentic RL 越来越把信用分配当「定位问题」:给定终端可验证奖励,per-turn 方法把功劳定位到关键轮次。作者找出决定对错的结构量——验证器信息密度 V_d = k/C(agent C 步因果链中被验证器暴露逐轮正确性的比例),证明终端态验证器深陷低 V_d 区、定位是错误轴。机制是覆盖:终端态验证把可观测信号坍缩到单个 final-write 轮(98% rollout k=1),而成功需要 5-8 步工具调用链。均匀稠密奖励 > 稀疏二元奖励;把优势集中到进度轮或随机轮同样有害。合成相界 V_d*≈0.8,实测 tau²-bench ≈0.15、BFCL V3 ≈0.4。
- 关联度: ★★★★ 信用分配的「覆盖 vs 定位」结构判据——k 设计 agent RL/奖励时可直接用 V_d 判断该不该 per-turn 定位
三、技能系统与记忆(4 篇)¶
9. SkillGLoW: Procedural-Family Skill Consolidation for Self-Improving Agents on Long-Horizon Task Streams¶
- ID: 2609.02217v1 | 📄 PDF
- 作者: Ao Yan 等(4 人)
- 分类: cs.AI
- 摘要: LLM agent 靠写/复用文本技能自改进,但要么是单个全局文档(长程异构任务上坍缩成通用说教),要么是每任务平铺技能池(膨胀且绑死实例)。作者认为缺失的复用单元是一族相关任务共享的求解程序。SkillGLoW 把任务自写执行产生的局部技能聚合进程序族、压成去实例化的全局先验,实例细节按任务重新生成而非存储;commit gate 只在真实执行证明不劣化现有库时才接受先验。四个基准(数学推理/终端自动化/软件修复/具身控制)×三模型:硬题平均 +17.2 分,库按程序族一个先验、比每任务池紧凑 3.6×;未改动即把未见 ALFWorld 成功率 73.9%→83.9%——迁移的是程序而非任务记忆。
- 关联度: ★★★★★ 程序族先验去实例化——k 的技能库「按程序族聚合而非任务池」的直接方法论,与 skill 合并/去冗余同频
10. Act More, Decide Less: Skill-Guided Adaptive Action Chunking for Long-Horizon LLM Agents¶
- ID: 2609.02042v1 | 📄 PDF
- 作者: Yanting Yang 等(9 人)
- 分类: cs.LG
- 摘要: 长程交互的 LLM agent 通常每轮 LLM 只发一个原始动作(ReAct 风格),频繁重规划但低效。替代方案是让 agent 发变长动作块,但朴素 RL 训练会坍缩成单动作或过度提交超长序列——共同根因是学不会块边界。SPACE 从轨迹诱导的两级程序技能里蒸馏块边界监督(子技能边界即块边界监督),再用混合 on/off-policy 优化 + 块感知信用分配蒸馏成 primitive-chunk 策略。ALFWorld/ScienceWorld 上成功率比最强基线高 7.0%-31.3%,平均 LLM 决策轮数最多降 78.9%。
- 关联度: ★★★★ 动作分块省决策轮——k 的长程 agent 编排「把例行序列打包成一个动作」可显著降成本,技能边界当分块监督是关键
11. CHIME: Credit-Aware Hierarchical Memory Evolution for Long-Horizon Agentic Planning¶
- ID: 2609.02074v1 | 📄 PDF
- 作者: Yongshi Ye 等(10 人)
- 分类: cs.AI
- 摘要: 自进化记忆把交互结果积累进外部记忆库,测试期免参数更新持续提升规划——但现有方法有内在信用分配问题:拿最终任务结果当反馈,会混淆计划质量与执行错误、环境因素,积累的经验偏且有噪。CHIME 维护分离的规划库与执行库,遵循「先归因再记忆」:先把每个任务结果归因到计划/执行/两者/两者都不是,只更新对应记忆库。四基准全面超 SOTA 训练式与自进化记忆基线;有效记忆条数更少,且记忆价值忠实反映下游效用(高质量规划记忆 > 执行记忆),可跨骨干迁移。
- 关联度: ★★★★★ 归因后再记忆(plan vs execution 分库)——k 的记忆/复盘「先归因成功归谁再沉淀」的直接模板,比一股脑存结果更干净
12. CAPTURE: Disentangling Preference Drift from Memory Poisoning in Personalized LLM Agents¶
- ID: 2609.02265v1 | 📄 PDF
- 作者: S M Asif Hossain, Ruksat Khan Shayoni, Md Kishor Morol
- 分类: cs.AI, cs.LG
- 摘要: 个性化 agent 用持久记忆适配用户,但同一机制也是攻击面:新信息与存储偏好冲突时,agent 得区分真实偏好漂移 vs 暂时上下文/歧义/对抗记忆投毒。只用近因与来源的规则不够。CAPTURE 用神经微分方程信念追踪器 + 多时间尺度记忆台账 + 不确定性触发澄清 + 引文记忆反事实审计。96 用户 480 集上胜率 71.5%;固定策略投毒成功率压到 11.5% 同时接受 83.5% 真实偏好更新;自适应攻击者下升到 24.7%,暴露真实适应-安全权衡。
- 关联度: ★★★★★ 「偏好漂移 vs 记忆投毒」去混淆——k 的记忆系统「新信息与旧事实冲突时该更新还是该怀疑」的经典难题,CAPTURE 给出可操作机制
四、编码 Agent(3 篇)¶
13. When Agents Implement Systems: A Case Study in Defects, Detection, and Evaluation Rigor¶
- ID: 2609.01985v1 | 📄 PDF
- 作者: Phanindra Reddy Madduru
- 分类: cs.SE
- 摘要: LLM 编码 agent 开始做端到端工程,但我们缺它在系统级需求(schema 设计、异步编排、配置正确性、检索过滤权衡)上表现的实证刻画。本文对某 agent 按详细既有规格实现多组件数据系统的单次会话做案例研究:归档 5 类缺陷(按违反约束+检测方法分类),并在 HotpotQA 上评测规格里的检索权衡——过滤到图识别实体集再排序 vs 不过滤全搜。预算 3 时过滤召回即触顶,而不过滤在预算 10 时只找回 69% 必需证据(每预算都成立,符号检验 p<0.0001)。还记录一处「声称的性能修复从未在触发回归上重测」。
- 关联度: ★★★★ 系统级缺陷归档 + 「修复必须重测触发它的回归」——k 的编码 agent 交付/验收纪律直接可引用的实证
14. PaperCompiler: Faithful Paper-to-Code Generation via Repository-Level Specification Compilation¶
- ID: 2609.02272v1 | 📄 PDF
- 作者: Yunhao Liu, Hong Phuc Pham, Jaehong Yoon
- 分类: cs.AI, cs.CL, cs.LG
- 摘要: 把论文忠实翻译成仓库级实现难:论文方法描述高层、实现假设隐式、且生成仓库须保方法逻辑/评估协议/跨文件一致。现有 paper-to-code agent 的中间输出常是自由格式计划/摘要,下游编码 agent 可能忽略/曲解/压缩,导致算法简化与仓库结构不一致。PaperCompiler 把论文接地证据编译成显式仓库级实现规格:保留来源溯源、区分「论文支持/推断/外部委派/未解决」信息,编码非降级要求、归属、跨文件依赖与文件级约束,同时保留论文未固定的局部工程选择自由。Paper2CodeBench 上参考保真相对 +13.8%(3.64→4.15),高严重度批评 13.2%→6.1%。
- 关联度: ★★★★ 论文→代码的规格编译(证据分级+溯源)——与 k 的证据分级 A-D/grounded-citations 同源,接论文转实现任务可直接套
15. Rendering-in-the-Loop: An Execution-Driven Agent for Interactive Web Development¶
- ID: 2609.02088v1 | 📄 PDF
- 作者: Yilong Guo 等(6 人)
- 分类: cs.AI, cs.CL
- 摘要: 多模态 LLM 已能从截图/交互视频生成交互网页,但现有工作重视觉指标(美学/布局相似度)、忽略交互功能的验证。RILA 把浏览器渲染放进循环,用运行时交互反馈迭代编辑生成代码:AIV 模块在生成网页上回放参考交互轨迹收集执行感知观测,ERS 评分联合测交互正确性与视觉保真。另建执行验证数据合成管线。IWR-Bench 上全面改进交互+视觉保真;训练管线把紧凑 Qwen3.5-9B 从 40.40% 抬到 57.52%,反超 1T 参数 Kimi-K2.6(55.61%)与 GPT-5.5(55.74%)。
- 关联度: ★★★★★ 渲染在环的执行驱动前端 agent——与 k 的 UI 验收「截图自检+逐屏验收+功能可达性」完全同频,9B 反超 1T 是强信号
五、Web / Computer-Use Agent(4 篇)¶
16. Discriminative World Models for Web Agents¶
- ID: 2609.02885v1 | 📄 PDF
- 作者: Kelvin Li 等(9 人)
- 分类: cs.AI, cs.CL
- 摘要: 新一代 web agent 用世界模型做测试时动作选择:采样候选动作→预测结果 web 状态→用 ranker/PRM 排序。现有世界模型用监督式下一状态预测训练去生成固定表示(HTML/AXTree 快照),但该目标与下游 ranker 错位——ranker 依赖预测状态在候选间有判别力才能准确打分。本文提出 predicted-state matching 训练目标:预测表示必须把真实结果状态与替代动作到达的状态区分开。基于 WebArena Go-Browse 轨迹的分支数据集训练,WebPRMBench 上 PRM 式动作排序改进,WebArena-Lite 端到端成功率提升。项目页已上线。
- 关联度: ★★★★ 世界模型「判别式」而非「生成式」目标——延续 WMA/WebDreamer/WebWorld 线,给 k 的 web agent / 动作选择提供新训练目标视角
17. OmegaUse-SOP: SOP Engineering for Professional Computer Use from Human Demonstrations¶
- ID: 2609.02149v1 | 📄 PDF
- 作者: Yixiong Xiao 等(12 人)
- 分类: cs.AI
- 摘要: GUI agent 在通用 computer-use 基准上有进展,但领域专业标准操作程序(SOP)仍难:隐含领域知识、软件特定惯例、任务级验证要求。OmegaUse-SOP 是人机在环的 SOP 工程系统,把专业 computer-use 的人演示转成可复用 GUI-agent 技能——类比 prompt engineering,迭代精炼演示/执行规则/领域知识。四模块 Observe/Reason/Configure/Execute:把专家操作录成多模态 GUI 轨迹、把低层事件抽象成语义步骤指令、并入领域规则与任务参数、在真实 GUI 环境逐步执行+验证。与电力行业客户合作在 PVsyst 7.2 光伏仿真流程上验证提升可靠性。
- 关联度: ★★★★ SOP 工程 = 把人的专业 GUI 演示蒸馏成技能——k 的「AI 自动化落地(CAD/PCB/办公)」方法论可迁移,接专业软件自动化单子的模板
18. Efficient GUI Agents: A Systems Survey of Observation, Memory, Action, and Runtime Optimization¶
- ID: 2609.02309v1 | 📄 PDF
- 作者: Bizhe Bai 等(11 人)
- 分类: cs.AI
- 摘要: GUI agent 横跨网站/移动 App/桌面环境,但领域仍主要用任务成功率汇报进展。作者主张实际部署同样取决于效率:成功过程中消耗多少上下文/计算/动作预算/运行时开销。这篇系统综述以端到端系统视角梳理观察效率、上下文与记忆效率、动作效率、planner 侧/系统效率四轴,归纳反复出现的机制:选择性读取而非全量摄入、全局到局部视觉分配、可恢复记忆而非原始历史回放、验证感知控制、GUI/非 GUI 混合运行时。开放问题:验证器成本诚实记账、跨基准可比性、观察/记忆/执行层在真实延迟与隐私约束下的协同设计。
- 关联度: ★★★★ GUI agent 效率四轴综述——k 的浏览器/GUI 自动化「省上下文/省动作预算」直接可查的机制清单
19. Monitoring Web Agents Without Internal Signals: Observable Trajectories and Key-Step Supervision¶
- ID: 2609.02057v1 | 📄 PDF
- 作者: Sitong Pan 等(6 人)
- 分类: cs.AI, cs.CL
- 摘要: 模型内部不确定性信号(token logits)不可得时,web agent 监控很难。本文研究只用可观测轨迹信号做前缀级风险预测:给定演化前缀估计当前执行是否在轨/趋向失败。两类表示:Macro 特征概括跨步 agent-环境行为与反馈,Micro 特征通过重复黑盒查询测意图/动作/预期状态变化的一致性。标签用「观察延续里首个未纠正的关键错误」当 key-step 边界,保留失败轨迹的有效早期前缀为在轨。WebArena-Lite 与 Online-Mind2Web × 五种开源/闭源骨干上,可观测信号与内部信号基线持平,支持固定假截断预算下的早期干预并跨站点类别迁移。
- 关联度: ★★★★ 黑盒可观测轨迹监控——k 的自动化任务「没有内部信号时怎么早发现跑偏」的可操作方案
六、评估与部署(4 篇)¶
20. EarlyEval: Cheaper Agent Evaluation via Early Outcome Prediction¶
- ID: 2609.02783v1 | 📄 PDF
- 作者: Yuling Shi 等(6 人)
- 分类: cs.AI
- 摘要: 评估 LLM agent 贵得离谱:前沿模型跑一遍 agentic 基准要数百到数千美元,且迭代开发期反复付。benchmark 蒸馏砍任务数但不动每任务执行成本。EarlyEval 提早期结果预测:agent 的最终结果往往在执行完成前就从中途行为可见。用 LightGBM 成功/失败分类器在行为/文本/参考解特征上预测,任一分类型越过校准置信阈值就提前终止该 agent 运行(每步开销可忽略)。SWE-bench Verified / TerminalBench / Toolathlon 上消掉 13%-26% agent 步、最多省 44.1% 输入 token 与 29.4% 输出 token,89%-97% 预测精度,per-agent resolve 率只扰动 1-2 个百分点。
- 关联度: ★★★★★ 提前终止省评估成本——k 的评估/测试「结果可早期预判就提前止损」,直接对位评估贵、迭代多的场景
21. ClaimReceipt: Verifying Evidence Sufficiency and Coverage in Agent Evaluations¶
- ID: 2609.01992v1 | 📄 PDF
- 作者: Peiying Zhu, Sidi Chang
- 分类: cs.AI
- 摘要: agent 评估面临两个证据问题:报告主张能否从留存证据重算(充分性)、留存记录是否覆盖承诺的实验集(覆盖)。通用日志与哈希链转录都不能可靠回答。ClaimReceipt 是主张相对收据规格 + 选择性验证器:把类型化交易证据绑定到签名实验清单,每条主张返回 PASS/INVALID/INCONCLUSIVE。1,392 条历史买卖记录上复现全部 5 个手工审计结论、精确重放 600 确定性 + 792 生成后记录;11/11 语义故障返回预期结果、0/8 误报。收据插桩仅占模型推理时间 0.021%、每交易 9.9KB。
- 关联度: ★★★★★ 主张-收据绑定 + 覆盖可审计——k 的验证/审计纪律「主张可重算 + 承诺集可见」的直接实现参考,接单交付证据留痕可借鉴
22. Diagnosing with Insights: Structured Analysis of Agent Failures via Behavioral Abstractions¶
- ID: 2609.02371v1 | 📄 PDF
- 作者: Jiayi Bi 等(7 人)
- 分类: cs.AI, cs.CL
- 摘要: LLM agent 失败常表现为长而复杂的轨迹,人工在海量轨迹里找问题不可行;传统软件 bug 诊断难以处理 agent 失败,全 LLM 当 judge 又不可靠。AGENTSCOPE 是神经-符号 agent 失败模式诊断:把 agent 行为按轨迹抽象成结构化表示,引入「神经不变式」规定行为属性,LLM 引导推理在结构化表示上对照不变式定位失败步与类型。Who&When 与自建 AgentErrata 数据集上显著超 SOTA 故障定位与归因精度——结构化抽象 + LLM 引导推理 = 有效、可靠、可解释的诊断。
- 关联度: ★★★★★ agent 失败诊断的「结构化抽象 + 不变式」——k 的 systematic-debugging/错误处理可借鉴「先抽象行为再对照不变式定位」,比直接 LLM judge 可靠
23. READY or Not: Reliable Enterprise Agent Deployment¶
- ID: 2609.02095v1 | 📄 PDF
- 作者: Veronica Chatrath 等(18 人)
- 分类: cs.AI
- 摘要: agent 基准考得好 ≠ 能部署。企业部署问的是另一题:能否在可接受人工监督与可容忍成本下达到要求的可靠性。READY 框架给企业工作流做部署资格认证:保留各工作流自己的成功定义、套统一资格流程——给定 agent/工作流/候选监督策略类,测人-AI 系统的可靠性与运营成本、选满足可靠性目标的最低成本策略、在留出集上统计合格。临床审计案例研究(16 个 agent 系统、750 例):自主精度只差 0.3 分(72.8% vs 72.5%)的两个系统,要达标 76% 可靠性需 39.2% vs 29.6% 人工复核——揭示自主性能掩盖的差异。
- 关联度: ★★★★★ 从「做得好不好」转向「什么条件下、花多少成本能可靠部署」——k 的交付/接单「达标口径」可直接引用,防止基准好看但不落地
七、RL 后训练与模型路由(4 篇)¶
24. Cliff: Learning Process Rewards from the First Mistake¶
- ID: 2609.02817v1 | 📄 PDF
- 作者: Peixuan Han 等(6 人)
- 分类: cs.LG
- 摘要: 可验证奖励 RL(RLVR)是 LLM 后训练强范式,但粗粒度结果奖励对中间推理过程指导有限。现做法(过程奖励建模/on-policy 蒸馏)加额外约束:依赖专用奖励模型或假设师生推理同构。作者观察到:推理过程一旦第一次出错,后续推理再评估信息量也有限(已基于无效前缀)。Cliff 用现成 LLM 当老师定位每条 rollout 的第一个错误,把 rollout 自然拆成正确前缀 + 错误后缀,转成 token 级优势:正确前缀正反馈、之后负反馈。12 个场景一致提升,超 on-policy 蒸馏 15%、超标准 GRPO 7%,即使老师能力平平。
- 关联度: ★★★★★ 「第一个错误」是过程监督的最省信号——k 的 RL/后训练设计「定位首个错误即拆前缀后缀」比全轨迹过程奖励更简单高效
25. Post-Training Language Models for Gold-Medal Performance in Coding Competitions¶
- ID: 2609.02849v1 | 📄 PDF
- 作者: Aleksander Ficek 等(5 人)
- 分类: cs.AI, cs.CL, cs.LG, cs.SE
- 摘要: 竞赛编程是 LLM 推理的关键测试场(IOI/ICPC 最难)。端到端专业化管线:大规模题目整理 + 合成推理轨迹 + SFT + RL。用 22,000 道精选题训练 Nemotron-3-Nano-CC(30B-A3B,SFT+RL)与 Nemotron-3-Ultra-CC(550B-A55B,仅 SFT)。GenCorrect 是反馈驱动测试时计算:迭代生成/评估/精炼多样化解。IOI 2025 Nano-CC 130→291(后训练)→468(GenCorrect),超金牌线 438.3;Ultra-CC 502。IOI 2026 前瞻评估(与人类同时间/网络/提交约束)得分 535.4/600,同时超金牌线 361.12 与人类最高 498.27——首个在 IOI 题集上超过人类最高分选手的 AI 系统。
- 关联度: ★★★★ 测试时计算(GenCorrect)+ 长程后训练管线——k 的编码/推理提升「先 SFT 后 RL + 反馈驱动测试时精炼」的完整参考,超人类是里程碑信号
26. SCX Router: Streaming Zero-Shot Model Selection with a Decoder-KV Classifier and a Real-World Task Ontology¶
- ID: 2609.02292v1 | 📄 PDF
- 作者: Ihor Stepanov 等(5 人)
- 分类: cs.AI, cs.CL
- 摘要: LLM 泛滥 + 应用多样 = 每任务选对模型的优化机会,但推理端点质量/价格/延迟/上下文/工具/领域差异巨大,手工启发式难维护。SCX Router 是轻量 GLiClass 路由:给每个推理时模型标签打适合度分、无需自回归生成。0.6B checkpoint = Qwen3 decoder + 浅双向 scorer;decoder-KV 执行路径跨会话保留文本 KV 缓存、每轮只编码新对话轮,评估瞬时候选标签 token 而不进持久缓存。同一 checkpoint 还预测任务类型/难度/推理模式/期望输出长度,支持自定义 zero-shot 标签。任务本体 23 族 115 类 345 可路由子类;六 LiveBench 子集上超平均候选,1000 任务子集 top-1 0.707 vs 最强固定模型 0.696。
- 关联度: ★★★★★ 轻量流式模型路由(0.6B、KV 增量、zero-shot 换标签集)——官方 HF 模型 scx-admin/scx-router-v0.1 已发布可实测;k 的 smart_model_routing 被禁用后这是「独立轻量路由层」的务实替代候选
27. Repo-To-Skill: Distilling GitHub Repositories Into AI4AI Skills¶
- ID: 2609.02749v1 | 📄 PDF
- 作者: Jianlyu Chen 等(11 人)
- 分类: cs.AI, cs.CL
- 摘要: 自主 agent 开始端到端做 ML 研究,但架构把领域专用 know-how 留在 agent 外——「知道方法与让它跑起来」之间差的 operational knowledge 存在仓库/论文里,但为人写、大到任务时载不动。蒸馏成紧凑已验证技能后就能跨任务复用。DisCo 是技能驱动的研究 agent:任务无关蒸馏(把广泛使用的仓库压成可复用技能)+ 任务导向蒸馏(产出具体任务要的技能)。前者产出 AREX-Skill Library:5,000+ 个验证技能,从 1,000 个常用 ML 仓库蒸馏,20 领域 178 能力族。固定 GPT-5.5 骨干/harness/执行预算下,带技能 agent 在 MLE-bench +134.3%、PaperBench +34.4%、FrontierCS +9.2%、PassNet +14.0%。
- 关联度: ★★★★★ AI4AI 技能蒸馏——与 k 的 skill-installer/document-to-skill/external-skill-installation 完全同构;「仓库→验证技能库」可批量反哺 k 的技能生态
八、简评(其余值得注意)¶
| # | ID | 标题 | 一句话简评 |
|---|---|---|---|
| 1 | 2609.02774 | CodePoisonRAG | RAG 代码生成的定向知识投毒:单条任务匹配毒物(CWE 漏洞注入+语义误标)即可让 85 条毒物全进 Top-3,ASR 0.80-0.93,连 CodeGuarder 防御都只压到 0.40-0.71 |
| 2 | 2609.02253 | APEx | deep research agent 的层级经验利用:实例级轨迹记忆 + 类别级程序技能闭环(Executor/Distiller/Planner),三阶段交替 GRPO,7 基准超 GPT-5.4 14.7 分 |
| 3 | 2609.02106 | Git4Data | 数据库原生版本控制:把表当版本化对象暴露 git 式 snapshot/branch/diff/merge,BranchBench 上超 DoltDB 一个数量级 |
| 4 | 2609.01971 | NS-Copilot | 神经科学 LLM 多 agent 系统:统一 EEG/细胞外 spike 预训练模型,规划/控制/代码生成/结果综合四角色编排,AD/帕金森/工作记忆解码基准超强基线 |
| 5 | 2609.02089 | IDEEA | 免训练输入依赖 steering:按注意力头对正负激活支持做聚类 + 最优匹配,构建簇条件方向池,推理时选与输入激活最匹配的方向——TruthfulQA truth×info 平均 +9.9%(最高 23.5%) |
| 6 | 2609.02168 | FUSE | 危险能力评估框架:K(知识)/D(防御)/H(危害)三正交管线 + 标准化危险能力画像 φ,12 商业模型横评——强防御者并不产出更少有害内容,能力演进非单调下降 |
| 7 | 2609.02236 | PGPO | 势引导策略优化:从锚点态组回报统计估经验态势,相邻态势差导动作优势、跨轨迹传播信用——失败轨迹内也给出细粒度步级信号,ALFWorld/WebShop 强于近期组式 RL |
| 8 | 2609.02302 | Improving Evaluation Realism | 让对齐评估更难与真实部署区分:critique refinement(多候选+目标模型反馈精炼)+ DISH 部署模拟 harness 组合,比单纯拉长审计更高效地提升拟真度 |
| 9 | 2609.02029 | HeadWiseKV | 混合长上下文模型的每头 KV 驻留预算:SeqCalib 策略生成 + 分组缓存落地,Qwen3.6-27B 峰值显存 -8.59%、最大验证上下文 114K→161K,质量近满 KV |
| 10 | 2609.02737 | Language Models Can Control Their Own Attention | 声明式注意力(DA):让模型在 CoT 里声明要 global/focus/local 三模式,推理引擎像解析工具调用一样跳过大部分 KV——零样本 15 长上下文任务 attended token 降 52.0%/31.1%,精度仅降 1.27/2.75pp |
| 11 | 2609.02122 | AI agents reshape consensus formation | 混合人-AI 群共识动力学三态:低 agent 比例人类主导共识、中等比例破坏收敛、高比例恢复强共识但转向 agent 式(更抽象、少接地)惯例 |
| 12 | 2609.02580 | Competitive Market Behavior of LLMs | LLM 当经济主体的双重拍卖复现:市场收敛更慢或不收敛、分配效率低于人类市场——跨模型族与市场角色高度异质,框架已开源 |
今日要点(主题信号)¶
- 「验证器不再配当 oracle」成为安全与评估双主线:LLM-as-a-Judge Not an Oracle 用生产故障清单证明 judge 必须降级为顾问、关键改动过确定性护栏(PROCTOR 五护栏);ClaimReceipt 把主张绑定签名实验清单做可重算+覆盖审计;AGENTSCOPE 用结构化抽象+不变式替代全 LLM judge。与 k 的 service-quality/验证器自身审计纪律完全同频——LLM judge 只当输入,确定性命门把关。
- harness-策略共进化 = 安全作为可进化架构属性:SafeEvolve(harness-策略共进化)、SEAL(shared expert 当安全锚)、再叠加 09-02 的 HarnessEvolve/ASPIRE——agent 安全不再只调权重,而是「模型 + harness + 记忆」联合演化,且演化产物要可审计可回退。
- 技能系统继续向「程序族/去实例化」收敛:SkillGLoW(程序族先验、3.6× 紧凑、迁移的是程序非任务记忆)、MASkills(技能库精炼/归纳/整合/剪枝四操作)、Repo-To-Skill(5,000+ 仓库蒸馏技能,MLE-bench +134%)——k 的 skill 体系/evalution 直接可借鉴:技能要能聚合去冗余、按程序族组织、批量从仓库蒸馏。
- 记忆系统进入「归因 + 去混淆」阶段:CHIME(先归因 plan/execution 再分库记忆)、CAPTURE(偏好漂移 vs 记忆投毒去混淆、71.5% 胜率)——记忆不再「一股脑存」,而是先归因成功归谁、区分该更新还是该怀疑。k 的记忆清理/证据分级 A-D 的下一步。
- RL 训练与推理成本精细化:Cliff(第一个错误即拆前缀后缀,超 GRPO 7%)、Coverage Not Targeting(V_d 判据:终端态验证下均匀覆盖 > 定位)、EarlyEval(提前终止省 13%-26% 步骤)、SCX Router(0.6B 流式路由,官方模型可实测)——「省 token / 省评估 / 省推理」三线齐头。
验证表¶
| 论文 | 验证方式 | 结果 |
|---|---|---|
| SCX Router 2609.02292 | web_search(HF 模型页 scx-admin/scx-router-v0.1 + Space demo) | ✅ 官方 0.6B 模型已发布可实测:GLiClass decoder-KV、流式 KV 增量、zero-shot 换标签集,与论文描述一致 |
| SafeEvolve 2609.02786 | web_search(harness 安全演化方向:SHE/HarnessForge/HarnessEvolve) | ✅ 方向验证:harness 演化安全是活跃主线;同名 SafeEvolve 在 2608.12851 是技能治理变体,勿混淆 |
| Discriminative World Models 2609.02885 | web_search(WMA/WebDreamer/WebWorld 世界模型线) | ✅ 方向验证:web 世界模型延续 WMA(2024)→WebDreamer→WebWorld,predicted-state matching 是新目标 |
| Repo-To-Skill 2609.02749 | web_search(repo2skill 工具族 + 2603.11808/Resource2Skill) | ✅ 方向验证:仓库→技能蒸馏是 AI4AI 热门方向;本篇给出 5,000+ 技能库量化结果 |
| 其余 23 篇 | arXiv API 收录 + 抽取完整元数据 | ✅ API 收录即存在性证据(2026-08-07 既定原则) |
可落地行动项¶
- 🔴 LLM judge 降级为顾问:LLM-as-a-Judge Not an Oracle 的五条确定性护栏(密封沙箱/能力不相交角色/验收检查压过 judge/冻结留出/canary 用例)——k 用 LLM 做验收/评分时,关键改动必须过确定性验证层,judge 只当输入之一
- 🔴 技能库按程序族聚合 + 仓库蒸馏反哺:SkillGLoW 的去实例化先验 + Repo-To-Skill 的「仓库→验证技能库」——k 的 skill-evolution 增加「程序族整合」步骤,文档/仓库转技能批量沉淀
- 🟡 记忆先归因再存:CHIME 的 plan/execution 分库 + CAPTURE 的漂移-投毒去混淆——k 的记忆沉淀前先归因「成功归谁」,冲突信息先判「该更新还是该怀疑」
- 🟡 评估提前止损:EarlyEval 的提前终止 + ClaimReceipt 的主张-收据审计——k 的测试/验证「结果可预判就提前止损」+「主张可重算、覆盖可审计」
- 🟢 待深读:SafeEvolve、SCX Router(实测官方 HF 模型)、Cliff、CHIME、AGENTSCOPE → 进 core-contributions 候选
本速览由 cron 自动生成:09-02 单日窗口全量收集(328 篇,urllib RST 改 curl+重试)→ 关键词过滤(144 篇)→ 人工精选(27 主条目 + 12 简评)→ 关键论文交叉验证。数据源 export.arxiv.org。
🗺️ 属于 [[MOC-Research]] · [[Home|🏠 Home]]