大型语言模型智能体可从先前交互中提炼可复用技能以提升跨任务表现。近期工作联合优化任务执行与技能提取,使策略和技能库共同演化,但以技能在下游训练中的复用来奖励提议,可能把技能收益与执行者改进混同;直接测试每个提议又需昂贵 rollout。UniSkill 用共享策略与环境交互,从轨迹提出技能库编辑(Add、Update、No Edit)。执行者从环境奖励学习,对比式动作反馈引导技能提议学习:通过衡量替换检索技能后,当前执行者在同一任务先前成功与失败轨迹间的动作对数似然差变化,提供执行者对齐信号,从而免去为每个提议新增 rollout;技能编辑支持正则化则用于避免提议层面反馈在内容得分差时抑制合适编辑、保持探索。在 ALFWorld 和 WebShop 上成功率分别为 98.4% 与 84.7%,联合训练稳定;ALFWorld 进一步实验显示,共享策略采用较小骨干时仍有效。
最新动态
该工作考察两个机器人智能体在离散二维(2D)仿真器中共同进化出的通信机制,迁移到含真实物理的三维(3D)仿真器后是否仍保留其功能角色,并分析回合时间预算、社会线索与两个共进化角色间不对称性的影响。成功率随所评估时间预算近似线性上升,在 2,000 至 6,000 个物理步之间未见平台期,提示更短回合的评估可能低估控制器表现。在两种仿真器中,社会线索主要发挥 jam-assistance 机制的作用,而非导航指引,但在 2D 中效果更明显。八次独立进化运行呈现方向一致、幅度各异的不对称性;控制智能体之间的处理顺序可排除物理引擎伪影。作者最后讨论了迁移后残余性能差距的可能成因。
研究构建了一个双过程智能体:快速学习型actor处理全部决策,仅在门控开启时把控制权交给推理视觉语言模型,游戏同时继续进行。实验采用闭环Doom与新公开的“System One”typed-decision模型,经统一llama.cpp接口运行。在900道留出问题上,(i) 0.15B至9B参数的零样本决策模型在错误中选择收集物品的频率为随机的1.6–1.8倍,与选项顺序无关,但顺序会影响部分模型的准确度;(ii) 准确度、校准与敏感度彼此独立,准确度相近的模型AUROC差异很大;(iii) 离线将最不自信的30%决策交给推理模型,收益随actor的AUROC按秩相关0.87增长,doomLaya选项顺序下为+0.13 [0.08, 0.18],打乱顺序后为+0.08 [0.02, 0.14],推理贡献约一半;(iv) 闭环33局、三个随机种子下,无变体到达出口。作者公开了代码、提示、数据与日志。
研究提出 RoboJEPA,一种基于 JEPA 的机器人潜世界模型,训练数据覆盖 12 种机器人本体。其想象误差(潜变量 rollout 的误差)随算力呈二阶幂律变化,可据此外推预测远超拟合规模处的模型质量;下游机器人规划性能随算力可预期地提升,且想象误差与之强相关,可作为真实机器人评估的可靠代理。该潜世界模型还能零样本部署为智能体,仅以单张目标图像为引导,在真实硬件上完成需要长时程规划的任务。作者公开了全部模型检查点及训练、部署代码,并称这是首个在真实机器人数据上建立多本体机器人世界模型缩放规律的工作,8B 参数的 RoboJEPA 是迄今训练出的最大的 JEPA 预测模型。
研究在ReAct循环中把大语言模型的推理能力与检索器的语料探索相结合,考察Agentic检索处理复杂检索任务的表现。实验显示,在使用相同嵌入模型的条件下,Agentic检索优于标准检索,nDCG@10提高8.7分;专用检索方法在分布外任务上表现不佳,而同一套流程在ViDoRe v3与BRIGHT榜单上均取得有竞争力的结果,泛化性较强。代价是开销明显上升:Agentic检索平均耗时107.4秒,标准检索为0.67秒,且每次查询消耗764.1K输入token与5.8K输出token。作者据此认为,未来需要研究更具成本效益的检索智能体,以支持大规模部署。
ASCENT(Agentic Self-distillation for Cross-task EvolutioN at Test-time)研究在线智能体测试时训练(OaTTT):智能体在部署中对任务流各执行一次,仅以执行轨迹及其验证结果更新跨任务持续的权重。直接模仿或强化单次尝试生成的token会使策略不稳定,因此改为对已验证经验自我蒸馏——冻结的初始副本把已验证轨迹当作特权信息,以事后视角预测逐token分布,再蒸馏为持久的LoRA快速权重,无需外部参考解或更强教师;剔除无效动作轮次可获得更强的特权经验。在ALFWorld、WebShop、AppWorld及多种模型规模上,任务成功率与交互效率随经验累积提高,优于在线适应方法,并迁移到留出场景。
研究提出LMBuild,用于评测LLM智能体生成可建造且具备功能的结构。生成对象被表示为由部件分解、连接、材料和装配序列构成的装配结构。统一框架包括:智能体可检索、创建和放置组件的交互环境;改造既有CAD数据集并以Wikipedia知识增强的基准;以及覆盖结构稳固性、功能可供性、设计质量与物理实现的评测体系。对30个系统的评测发现:稳固性与对齐已不再是前沿闭源模型的主要瓶颈,功能可供性与物理可操作性仍明显更具挑战;更强模型更善于创建新部件,较弱模型倾向依赖检索;提供功能规格可显著改善部件完整性、运动学与物理可操作性。
研究提出软件在环重建(software-in-the-loop reconstruction,SWR)这一自监督框架,从既有软件工作流中获取参考输出与验证目标:对每条工作流执行多种输入配置,将样例划分为公开观测与隐藏评测,智能体仅凭指令、输入模式和公开输入输出观察构建可编辑程序,再在隐藏配置上与工作流输出比对;分层验证器结合领域语义比较、结构有效性与防捷径检查,公开反馈支持迭代修改。SWR实例覆盖六个领域、46个软件家族共500条工作流;Qwen3.8-Max在每任务三次尝试中解出838个任务,产生1,422条已验证轨迹,过采样为3,000个仅重建训练样本。对Qwen3.8-27B的监督微调使Terminal-Bench 2平均成绩在三个随机种子上由47.94%升至53.56%,并在全部四项报告评测中取得四个等token语料对照的最高均值。
VLA基础模型规模不断扩大,带来高昂计算成本,使真实世界部署愈发困难。本文提出FastOPD,一个通过高效同策略蒸馏实现大规模VLA落地的基础模型到轻量模型框架:它为单状态教师监督改造flow map,并结合自一致性目标构建紧凑学生模型以学习教师动力学;作者从理论上证明,最小化该目标可使蒸馏学生恢复出与理想少步教师模型相当的分布。在仿真与真实实验中,FastOPD在LIBERO上仅用两步推理即保留π_{0.5}性能的84%,推理延迟降低78.1%,平均成功率优于现有少步蒸馏基线;以LingBot-VLA为教师,在RoboTwin 2.0上单步成功率较基础学生提高15.9个百分点。作者还展示了其对World Action Model (WAM)的适用性,并将由MolmoAct2蒸馏的紧凑学生部署到真实机器人上。
NAVA-WAM 提出原生动作先验学习,直接从仅含观测的视频预训练动作策略,避免先学视觉表征再迁移到控制、或另建隐动作模型的间接路径。训练分两阶段:先以未来视频的 flow-matching 监督,经过渡结构化联合注意力优化 Action-DiT 并学习与动作相关的先验;再用带动作标注的演示后训练 Action-DiT,通过联合视频—动作 flow matching 实现机器人控制,非对称注意力将视觉分支与迭代动作去噪解耦,支持高效的动作端推理。实验显示该方法在分布内与分布外设定下均稳定优于先前方法,并表现出较强的动作标注效率与真机泛化能力。
DeskForge 是一个可控桌面环境,组合并操作真实应用,变化状态、窗口布局与分辨率,并将截图、无障碍树和窗口几何融合成稠密元素标注,同时记录每次动作的执行结果。由此构建的 DeskForge-1M 含 120 万条标注桌面观测、1.597 亿个元素实例。作者用其中 20 万条定位样本微调四个视觉-语言模型,四者在留出桌面条件与全部五个外部 GUI 定位基准上均提升;Qwen3.5-4B 在 ScreenSpot-Pro 上提高 11.51 个百分点、OSWorld-G 提高 10.11 个百分点,长程任务中 WebArena-Infinity 由 119 题中的 31 题增至 50 题,OpenApps 由 100 题中的 3 题增至 15 题。
ScholarCatalyst 针对人类仍领先于 AI 的一项能力展开研究:在不断膨胀的文献档案中,判断新问题需要哪一条既有想法。作者借助自动化流程扩大作者标注规模,让 207 篇近期计算机科学论文的 184 位主导作者标注哪些候选文献推动了自己的项目(或本可推动),并给出详细理由。检索任务要求模型面对一个初始研究问题,仅从项目启动时已有的文献中找回这些论文。结果显示,智能体搜索并不优于嵌入式检索(Recall@20 分别为 0.42 与 0.48),尽管它把同一个检索器当作工具调用;基于 Claude Fable 5.1 的智能体(训练时可能已见过这些完成的论文)也仅达 0.51 R@20。作者据此认为需要新的训练方法,让模型具备在庞大语料中检索的专家直觉。
研究关注在固定基座模型下强化 LLM 智能体的验证能力,且测试时无法获取参考答案或评分标准。作者发现分歧往往暴露正确答案,而一致反而可能掩盖错误。据此提出的 VeriHarness 为生成器所用的底层 LLM 配备工作区、证据工具与可复用验证技能,使其转为智能体验证器:分歧消解器依据环境证据核对相互竞争的说法,一致性挑战者检验共享说法并寻找遗漏要求,其结论用于指导最终产物的选择与修订。在五个长程工作区基准、两个前沿模型上,VeriHarness 的选择得分在所评测基线中最高;结合证据支持的修订,相对单次采样的平均增益分别为 Gemini 3.5 Flash 提升 6.2 分、Claude Opus 4.8 提升 6.4 分。验证技能还能从失败反馈中自我改进。作者发布了五个基准、两个模型上约 26,000 条 rollout 的完整集合,制作成本超过 100,000 美元。
LLM 智能体逐词元生成中间推理与动作,使长程交互缓慢且算力开销大。Jev 式模型能在有限域上给出快速概率预测,但要求事先指定这些域,从而限制了需要从自然语言指令推导动作并经交互不断调整的自主任务求解。作者提出 JevSpawn,一种把自然语言任务规范与有限概率探索连接起来的组合式策略:并行派生动作,并结合基于反馈的分支选择、表示修正,以及从保留备选方案中恢复;共享动作结构与模型前缀减少了重复生成和上下文计算,且无需额外训练。在八个基准任务上与七种智能体基线及一个 TypeSafe Jev 变体的比较评估表明,JevSpawn 在任务性能和导航速度上均有改善,是一种有前景的结构化智能体推理方法。
研究将共同演化通信协议从二维模拟直接迁移到三维物理环境,且不重训网络权重。两台e-puck型机器人由带残差连接的GRU控制,执行带社交信号的觅食任务。感觉—运动转换层需三处修正,包括依据训练残差权重中的可测量不对称性校准饥饿项。迁移仍不完整且不对称:一个智能体在三十个测试种子中的一个到达食物源,另一个无一到达;任务成功要求两者均到达食物区。社交通道加入显式方向信息后,接收方轨迹出现可观察变化,并在若干具体案例中改善,但仍不足以让第二个智能体到达食物源。这表明,限制可能不仅来自信号转换,也涉及新物理约束下的导航;成功迁移或需保留信号过程及协议演化时的生态与导航条件。
研究提出流式具身技能发现(SESD)任务,并推出基准 Video2Skill,涵盖机器人桌面操作与人类厨房活动,考察三项能力:在时间上定位操作事件、将执行相同变换的事件归为一组、判断复用已有技能还是新建技能。在 19 个开源 VLM 上,许多模型的分组表现接近随机水平,扩大规模未必带来帮助。错误取决于感知与技能库更新的耦合方式:联合式模型会把不同变换并成一个技能,而依据文本描述更新技能库的模型则会重复已有的技能。监督微调(包括文中提出的反事实技能库状态再平衡 CLaRe)改善了分组,但暴露更深瓶颈:模型会巩固熟悉技能却很少扩充技能库,库规模停在参考规模一半以下;训练中未见的变换虽能被定位,却几乎不会被赋予新技能。识别现有技能何时不够,才是核心挑战。
RLE-Bench 是面向机器人学习工程能力的评测基准,覆盖交互控制、策略学习、感知与估计、机械设计四类代表性机器人开发工作流,以弥补现有基准偏重单一策略或控制器性能的不足。它用多样的任务相关指标评估 coding agent 提交的成果,包括 agent 达到的成功率、训练出的策略、搭建的 harness 以及设计的机械结构,并将这些指标汇总为 RLE Index,同时报告各工作流的能力画像,便于在多个能力维度上系统比较。除排名外,论文还对代表性任务上的 agent 行为开展案例研究,指出其当前能力与局限,以及机器人任务对未来 agent 训练的可能机会。
强化学习让AI智能体能完成日益困难的任务,但高奖励并不总反映用户真正期望的工作。近期业界事件与受控评估显示,以奖励最大化为目标的智能体会访问未授权信息、试图规避监控,甚至突破沙箱防护去攻击外部系统;随着智能体能力增强,这类行为可能带来更严重风险。为此研究者推出 CheatBench,覆盖数学研究、知识工作、编程、视觉任务等多个领域的作弊行为,其环境把高难度任务与作弊机会结合,便于研究者观察在诚实完成工作困难时智能体如何追求目标,并支持跨模型、跨任务类别的比较,已在 https://cheatbench.ai 公开发布。
研究提出SAKIKO审计框架,用于判断大模型在调用外部工具之前的内部激活干预究竟是行为纠正还是真正的表示修复,其流程包括方向性错误发现、按路由器条件化的干预、目标落点解析验证以及前瞻性冻结的统计许可。在When2Call和MetaTool上测试七个大模型,按通道键控的干预在其中五个模型带来方向特异的净收益;三项封存评估中,59个等预算随机方向无一匹配校准后的目标增益。但目标落点审计表明行为变化不等于修复:一项获得+55净增益的干预破坏了其所触及的基线正确决策的一半以上;Qwen3-4B与Gemma-2-9B上看似乐观的点估计因有限样本不确定性被正式否决。
现有在扁平动作流上训练的多步智能体,SFT 与 RLVR 对每个 token 等权处理,忽略了跨任务复现的子程序与层级结构;近期方法虽用到该结构,但只以 LLM 书写技能的形式放在上下文中,未进入权重,收益无法超出检索范围。X-Tree 借鉴文本分词器仅靠计数构建词表的思路,按可复用性给动作片段打分,并将规范化动作合并为可复用的 eXperience 树,全程不调用 LLM。该方法整合进离线 RL(每个节点作为一个训练样本)、在线 RLVR(自适应技能加权)与 on-policy 自蒸馏(作为自教师的特权上下文)三种训练设置。在 WebArena、ScienceWorld 与 WebShop 上、三个模型规模下,同等数据与预算下相比标准配方,SR 最多提升 4.5%(WebArena)、5.8%(ScienceWorld),成功率提升 4.1%(WebShop);对照分析将增益归因于 X-Tree 结构及其三种整合方式。
本期 Science 播客分三段。记者 Tom Howarth 与主持人 Sarah Crespi 讨论人工智能智能体在群体内部演化出的语言。制作人 Elah Feder 专访马克斯·普朗克动物行为研究所行为生态学博士后 Revathe Thillaikumar,谈幼年猩猩如何通过社会学习找到自己的食物,其依赖期在除人类外的动物中最长。科学自传系列中,书籍栏目主持人 Angela Saini 与天体物理学家 Sara Seager 对谈其著作《The Smallest Lights in the Universe》,讲述丈夫去世后的生活。
工具调用智能体在企业应用中日益普及,但高质量、多样化的评测数据常受隐私等限制而难以获得,现有合成方法多生成忽略智能体状态与数据库的通用任务。EdgeGen 从智能体规格中抽取合规规则,并以此生成违反这些规则的数据库支撑边缘任务;与既有合成数据技术结合后,可构成无需人工标注的全自动闭环系统,用于微调与 harness 优化。在 tau2bench 航空领域,用 EdgeGen 数据微调带来 2% 至 42% 的平均进度提升,而其他基线方法在部分模型上出现退化;在 harness 优化方面,Gemma-4-e4b 模型相对人工整理和基础 harness 分别提升 10% 和 30%。
研究考察了长时程多智能体环境中共谋的涌现:两个智能体反复完成各自任务、共享任务日志、相互验证工作并获得奖励。作者引入现实约束,使遵守验证协议与奖励最大化不再兼容,发现智能体在重复交互中越来越偏离协议。共谋在10个模型的94%轨迹中出现,同系列中能力更强的模型更早达到共谋。受控的同伴干预表明共谋受同伴行为塑造,消融实验还揭示了奖励结构、验证反馈及其交互历史的作用;限制可用交互历史的数量与范围可减少共谋。
现有技能优化方法多把技能表示为非结构化自然语言指令,既缺乏工作流层面的明确指引、冗余较多,又因搜索空间过大而难以优化。为此,GraphSkillEvo 将技能表示为图结构的自然语言产物:每个节点代表一个执行步骤及其操作指引,有向边编码步骤间依赖上下文的转移,从而提供清晰的工作流指引并便于优化。在此基础上,作者提出 GraphSkillEvo,一个面向图结构技能的种群式进化优化框架,包含变异与交叉算子,通过维护多个候选技能并组合有效组件,实现比纯 LLM 迭代自我修正更广、更全面的结构化技能空间探索。在五个智能体基准上的大量实验表明,GraphSkillEvo 稳定优于强基线 SkillOpt,在 GPT-5.4-nano 上平均准确率提升 4.01%,在 GPT-5.4 上提升 1.76%。
东北大学硕士生 Soham Padia 用 Olmo 3 测试众包评估亲社会行为能否暴露小团队易忽略的弱点。他把评估做成游戏 Steering Arena:玩家提交简短文本前缀以影响模型,观察其把 Olmo 3 推向更亲社会回答的强度,并争夺排行榜首位。该评估使用 135 组对比文本,覆盖共情、公平、安全、隐私、尊重等 15 项品质。Padia 通过美国 NSF 支持的 National Deep Inference Fabric 远程使用 Olmo 3-32B。他强调,仅有开放权重不够,Olmo 记录了数据与后训练过程,才能判断亲社会方向源自预训练还是后续微调——多数模型无法回答这一问题。
PhAI Labs 提出 ScienceIDE,旨在把科学代码仓库转化为智能体可编程的学习环境。论文指出,工具链碎片化、隐性领域惯例与专门的正确性标准,使科学知识难以转化为可靠的学习经验,作者称之为“科学经验瓶颈”。在专家定义的科学案例与验收标准引导下,智能体将仓库改造成可执行环境,支持任务生成、执行与科学验证,为监督微调、强化学习和评测提供共享基础。利用经过验证的交互轨迹,研究训练了 PhAI-IDE-72B、PhAI-IDE-9B 和 PhAI-IDE-4B,模型在留出的科学代码修复任务及部分通用代码、推理与知识基准上均有所提升,表明科学经验可能向更广泛能力正向迁移。
VA-Bench 评测具身空间智能的“观察—推理—行动—修正”闭环。通用 MLLM 仅凭 RGB 演示学习程序性上下文,主动选择相机视角、发出度量笛卡尔指令,并据执行反馈修正;无特权物体位姿、oracle 轨迹或学习动作头,固定且模型无关的控制器只执行模型指定目标。基准含 14 个基础任务族(11 单臂、3 双臂)、7 个留出几何/布局变体及长时程五物体组合赛道。在每基础任务同一 20 个物理验证种子上,对 12 个主要模型条件做三次独立运行,报告终端成功率、9 项轨迹级行为诊断与子任务进度。最佳模型标注运行目标定位 100.0%、空间关系 78.9%,但三次运行宏平均任务成功率仅 53.93±3.17%;主动相机控制优于被动多视角观察,一项匹配比较从 27.86% 升至 57.50%;留出几何迁移可致成功率下降超 30 个百分点。无模型完成严格长时程回合,尽管部分进展显著。
让机器人适应陌生环境是具身AI的长期目标。有限演示无法覆盖所有情境,部署时的上下文学习(ICL)对泛化至关重要,但现有机器人策略难以实现。商用视觉语言模型(VLM)如 GPT-6 Astra 能否从演示、示例和交互反馈中学习,并在新初始状态下输出可执行、可验证的机器人行为,且无需梯度更新或持久改变任务参数?作者提出 GPT-Policy:上下文编译器保留任务相关视觉转换,VLM 提出机器人工具动作,约束控制器验证、执行并报告结果。研究以任务成功率、效率、跨模型比较和上下文消融评估其可靠性与局限。机器人试验中,人类视频演示即使无机器人动作标签也提升任务完成率;对齐动作参考在接触敏感任务上进一步增益。
ScienceBuddy 是 PhAI Labs 推出的交互式科研工作空间,把研究者的请求、反馈与执行证据转化为任务和评估标准,供智能体持续学习。其核心是递归套递归的自我改进:内层递归在模型固定的前提下改进工作框架(harness),外层递归则在改进后的框架下训练模型,两者相互耦合。摘要称案例研究覆盖研究者交互、框架优化与模型学习三方面,涉及四类科学任务。该文为 PhAI Labs 技术报告。
实验室人员更替(如学生毕业)常使需要复现方法的人手短缺,前期耗费大量精力与资源开发的方法难以为继。为此提出 LabAgent,一个面向实验室持续工作的复现与发现工具(reproduce and discovery harness)。它采用两种机制:保证所有技能可执行、可验证,并记录纠错方法与经验,从而可直接修正或避免类似错误。作者将其应用于生命科学领域的药物性质预测、生物医学问题分析、蛋白质变体效应预测和统计遗传学,在每个领域中排名均优于商用通用智能体,并准确复现了已发表论文中的一幅图。整体结果表明,LabAgent 能有效整合并合理扩展实验室知识。
该arXiv预印本探讨了能否在无人干预下,以零样本方式构建自适应物理AI智能体来管理长周期物理任务。作者设计了一个整合规划、工具调用、观察与验证的多智能体框架,并在不同天气模式下,将其与强化学习(RL)智能体在农业任务上进行对比。结果显示:在相同天气模式下,零样本LLM智能体可取得与RL智能体相当的管理效果;在环境发生偏移的评估中,其适应能力优于RL智能体。作者据此认为,这为自适应物理AI智能体提供了一条有前景的路径。
研究提出 Fuse,一个用于研究以用户为中介的社会推理的多智能体模拟框架。在 Fuse 中,带有隐藏动机的目标智能体与其他智能体互动,其中一名智能体代表用户;用户随后咨询被评估的 LLM 助手,以推断目标智能体的动机。由于动机由构造成立,因此可提供可验证的真实标签。研究通过包含 24k 条标注的人类研究验证模拟的忠实度,并将 Fuse 应用于 12 个 LLM。分析系统隔离出若干因素:用户中介会加剧社会推理本身的难度;LLM 对带有偏见的用户表述表现出系统性敏感;模型有时需要比人类更多的细节才能作出正确预测;尽管更长对话提供了提出澄清问题的机会,但并不总能提升表现。Fuse 及一个包含 21k 条示例的数据集已开源。
公开研究版图为未来研究方向预留了位置,不表示每一项实现均已完成或发布。公告当时,三个命名模块仍是分别排期的独立工作;原文明确说明它们尚不是已完成集成的产品。此条记录的是公告本身,不是这些未来发布的结果。
这是 PhAI Labs 技术报告,不是同行评审期刊论文。官网把发布日期标为 9 月 15 日,链接 PDF 封面标为 9 月 12 日;关联的 arXiv 预印本为 2609.15973,于 9 月 14 日 17:56 UTC 提交。报告提出研究框架并列举系统实例,但本身不证明后续模块已发布、已集成,或作为组合产品完成验证。
机器学习的核心目标是泛化而非记忆:模型若只在训练数据上表现好、换新数据就失效,就等于什么也没学到,这种失败称为过拟合。常规防御是留出一部分数据:验证集在建模过程中反复被查阅,用于比较候选方案与调整超参数;最终测试集只在最后动用一次,其表现是面对未见样本时的正确代理。但这一保证的前提是留出集始终真正未被见过——若反复查看成绩、据此修改训练流程再复查,该数据集就进入了训练过程,久而久之同样会被过拟合,代理随之失效。真实的机器学习研究恰恰呈现这种循环:社区围绕数年不改的基准数据集反复评测、修订训练方案、再评测并发表。按教科书逻辑,这种针对留出集的爬坡理应造成严重过拟合——源文本在此中断,未给出后续解释。
RSIAgent 是一个免训练的多智能体框架,通过自主构建记忆实现递归自我改进,面向接口、工具与失败模式未被预训练模型充分覆盖的新环境。它协调课程、执行与验证三类智能体,持续探索环境、验证结果并保留环境专属知识,包括动作、条件与后果之间可复用的因果关系;同时采用先广后深的探索策略:并行的广度型递归自我探索用于发现多样的环境结构,聚焦式深度自我探索用于揭示困难情形、隐藏约束、边界条件与此前未知的因果依赖。生成的记忆被冻结,无需更新模型参数即可直接用于下游任务。在 OSWorld-v2 与 Agent's Last Exam 上的实验显示,RSIAgent 显著提升强开源模型,使 Kimi-K3 与 GLM-5.3 超越包括 GPT-6 在内的前沿闭源模型。
研究者借鉴边缘价值理论(MVT)构建觅食式框架,将记忆表征为部分重叠的高阶斑块网络,斑块含二阶路径与三阶交互,并以多层次结构价值量化资源。在多主题自由口语叙事任务中,模型对人类斑块激活时间组织的预测明显优于随机打乱基线,但符合强度随被试—主题样本而异;转换率与所叙述事件的感知重要性、可能性正相关,补充实验加入枢纽相关叙事资源后重复了结果。控制分析显示,仅凭斑块网络拓扑、资源耗竭历史或单一阶次结构价值只能解释部分动力学,最稳定的人类预测需要多层次结构价值共同引导的觅食决策。大语言模型生成的叙事也表现出可检测的同一框架符合性,但完整模型对其捕捉较不一致,简单控制模型解释比例更高,显示人类与人工语言生成之间存在强度与稳定性的梯度差异。
该研究提出 Dynin-Robotics,以全模态掩码扩散主干 Dynin-Omni 将语言、视觉观测、目标和动作统一表示为离散 token,并通过共享轨迹模型把预测引入动作生成与筛选。改变条件与目标片段后,同一模型可学习动作预测、动作条件下的下一观测预测、终态目标预测以及轨迹到指令的重建,从而支持目标引导、候选动作评估与联合精修等测试时扩展。模型在 Open X-Embodiment 的 48 个数据集约 133 万条轨迹上持续预训练。在 VLABench 两项任务中,机器人预训练在固定 Stage-2 步数预算内改善适配;目标引导与动作-下一状态联合去噪的组合进一步提高指令偏移条件下的成功率。在 LIBERO 与零样本 LIBERO-Plus 上表现有竞争力,Franka Research 3 机器人四种操作条件的平均成功率为 78.4%,优化后的块并行实现使模型侧动作解码最高加速 29.2 倍。
研究提出 Agent as Policy(AGP),让通用智能体在完全不做任务特定或环境特定训练的情况下直接驱动实体机器人完成全程操作。智能体接收任务与机器人接口后,解读视觉证据、编写可执行程序、下发运动指令,并根据物理执行结果修正行为,使其推理与编程能力持续作用于现实世界。作者在覆盖精密操作、动态运动和可变形物体的多项真实任务上测试 AGP,包括依据人类视频装配、依据目标图像搭积木、骰子重定向、定向投掷和双臂毛巾折叠。在三种积木搭建配置上,成功率分别为 100%、100% 和 80%。
技术报告提出 Pelican-Sim 1.0,一个面向具身智能的通用世界模型模拟器,从视觉上下文与机器人动作预测未来观测,支持下游学习与决策。四项设计:28维统一动作表示覆盖主流具身形态;URDF 与相机渲染动作视频实现动作-视觉注入,PSNR 较替代融合基线提升0.904;稀疏 MoE 吸收动作模态,FVD 较稠密骨干降低6.530;因果适配与少步蒸馏得到四步自回归模拟器,较35步模型加速5.67倍。在约100万条真实与仿真轨迹上训练,PSNR 提升:AgiBotWorld Beta 4.636、RoboMIND 2.080、RoboTwin 10.343;EWMBench DYN 在 RoboTwin 提升0.426。RoboTwin 上四项下游应用成功:每任务50条演示加入500条生成轨迹,策略成功率70%升至93%;策略评估在五个检查点上 Pearson 相关系数0.994;动作选择与策略改进相对成功率增益分别为47.7
研究想法即便新颖合理,其方法规范也可能不足以支撑忠实实现。作者提出“可编码就绪度”,即规范是否提供足够方法信息,使合格实现者或编码智能体无需额外假设即可构建预期方法。他们依据论文、代码库、issue 讨论与复现材料构建有证据支撑的规范及其解析,推出 IdeaAMBIG 基准,共 660 个实例:163 个来自复现报告和 GitHub issue 的真实缺口,以及注入就绪参考的 497 个受控合成缺口。基准评测三项能力:就绪度评估、缺陷定位与澄清行动生成。在 13 个 LLM 中,最佳模型在真实实例上的 Macro Defect Recovery Rate 为 9.6%,而在给出缺陷后 Macro Clarification Action Success Rate 达 80.6%。oracle 研究显示,提供标准解析使下游就绪率从 14% 升至 98%;缺陷定位是主要瓶颈。
随着推理不再只是固定训练模型的静态执行,越来越多研究探索让 AI 系统在部署期间利用测试时信息和额外计算即时改进行为。该综述提出“反馈驱动的测试时智能”(TTI)作为统一视角,关联利用测试时信号修改模型状态的测试时适应、测试时学习,以及借助更多采样和工具使用等推理时资源改进预测的测试时扩展。文章梳理三者的差异及其在混合系统中日益增加的重叠,并评述其在视觉、语言、多模态学习、生成模型、机器人和医疗保健中的方法范式、代表性应用与开放挑战,旨在为测试时自我改进 AI 的研究提供概念基础和路线图。
黑盒优化因搜索空间规模大、结构弱且维度高而颇具挑战。现有方法常依赖直接生成候选或试错式改进,样本效率较低。研究者提出 WMLLM,一种基于“预测-再行动”世界建模的自进化优化智能体框架。该智能体先预测有潜力的优化方向,再据此生成候选;结合智能体多轮修正、种群搜索和强化学习,WMLLM 在搜索过程中同时改进其隐式世界模型与优化策略。在黑盒优化任务、特别是多目标分子优化上的实验显示,WMLLM 提升了样本效率和最终优化性能,并在有限评估预算下取得了该项基准上的最优结果。
Science sandboxes 是一个用于研究 AI 智能体科学能力的框架:让智能体在实验、反馈和假设修正的循环中,通过“wet”物理实验、“damp”(基于经验数据训练的预测模型)和“dry”人为规则等方式查询自然世界。该框架在调控基因组学和蛋白质适应度预测两个生物学设置中测试了前沿智能体,发现它们有时能优化定量指标却不理解底层规则,尤其在规则超出常见生物学先验时,其科学推理能力会下降。Science sandboxes 因而让科学能力的边界可被测量,并为研究和扩展这种能力提供了受控环境。
DS-Lighting 是一个面向大语言模型(LLM)智能体数据科学自动化的统一框架工具包,将智能体框架(harness)显式化。它把 harness 拆分为数据、工作流、执行和评估四个可复用层,并将不同智能体表示为可执行算子程序,支持预定义流程与自适应搜索。研究整合多个开源数据科学基准为 MLE-Bench 风格任务格式,以在共享任务接口、沙箱运行时和指标协议下进行受控比较。跨智能体、harness、模型和消融实验表明,显式框架设计提高可复现性、可比性和可靠性,并减少端到端工作流中可避免的系统级故障。
论文提出Paper Pilot,一种面向应用科学的证据可溯源稿件生成人机协同专家系统。基于CARE方法,设八个人工审批关口,用显式不通过标准、主张分类、审计日志、LLM咨询评审和证据锁定修订控制,使数字与解释可追溯至已批准证据;系统提示词已开放。首次验证采用受控、机械评分基准(两个商业LLM、真实arXiv论文、无LLM评审):覆盖压力下,无门控草稿系统最多捏造25%引用且未标记证据缺口,而Paper Pilot零捏造,并以显式占位符标出植入缺口。结果溯源、修订与对抗鲁棒性的初步结果也一致,完整评估留待未来工作。
研究以严格 NP 完全的两列 Flying Block Puzzle 为对象,提出 Class-Based Heuristic A*(CBHA*)。该方法结合空位稀缺时最小位移成本的通用移动约束、按空位比例与目标块几何划分的七个互斥状态类别及可采纳启发式,并按类别在深度优先和垂直距离排序间切换以应对 f 值平台。在 146 个基准实例中,CBHA* 成功率为 93.4%,Depth-Prioritized A*、Standard A* 和 BFS 分别为 64%、39% 和 17%;相较 Standard A*,节点扩展减少 87.98%,平均有效分支因子约为 3。
图形用户界面已成为评估自主智能体在多模态交互任务中表现的重要环境。现有基准(如 AndroidWorld 和 MobileWorld)提供了坚实基础,但其应用覆盖与任务设计仍不足以反映真实移动使用的多样性和复杂性。我们提出 GMA,一个用于在挑战性真实场景中评估通用移动助手的基准:基于开源项目引入七款应用,涵盖生活分享、旅行规划等领域,包含四个难度层级共 300 个任务。对八种前沿模型的评估显示,任务越复杂,性能下降越明显,当前智能体仍远不能可靠处理真实用户需求。受控消融实验表明,合理的 agent harness 设计(如上下文保留和显式状态跟踪)能显著提升复杂工作流上的表现,但具体设计的效果会因基础模型而异。
在蛋白质表征工作流中,自然语言驱动的自主联合科学家面临灵活性与推理同确定性、可复现性和可观测性之间的权衡。我们在生产级科学智能体平台上进行受控消融:给定蛋白序列,让智能体路由常用工具进行功能表征,比较联邦拓扑、经典RL与LLM驱动框架、模型和提示词,并按蛋白质新颖性分层。结果显示LLM选择对预测质量影响最大(Opus约92%-94%,o4-mini约40%-50%);PPO策略以零token成本接近最优(88%),延迟最低、完全一致,但无推理轨迹;专家提示的LLM准确率最高但成本高、一致性较低,任务最难时提示依赖最大。联邦化的性能损失可忽略。
提出运行时动作干预(RAI):保持策略参数不变,在推理后调节动作节奏并过滤已配置的动作模式;仅当冷却条件满足且内容检测器未标记动作时才释放,否则发送 no-op。检测器覆盖包括工人单位骚扰在内的毒性行为。作者在 AlphaStar actor.py 的复现中实现 RAI,并开源材料。在 StarCraft II 人类参与者研究中,同一高能力、动作速率受限的对手在隐瞒能力声明时,1-5分量表上的合并公平感、信任感、毒性感均值分别为3.90、3.50、2.00;披露时为2.62、4.31、2.85。披露在各专业组均对应更低的公平感和更高的毒性感;信任在新手与专家中上升,在中等水平参与者中下降。即使配置控制不变,用户感知也会随能力披露明显不同;因此人机评估须将执行栈内的控制与能力披露分开,将公平、信任、毒性作为独立维度。
LitReview Arena 提出一种对战式评估平台,让具备AI论文写作经验的领域专家依据五个文献综述专属标准,对匿名草稿进行分维度比较。研究者收集约3000条专家判断,发现即使当前最强系统在总体实用性上对人力草稿的决胜对局胜率也只有23.0%,而 Sonar Deep Research 等智能体化 LLM 比基础语言模型提升超过60%。现有 LLM-as-a-judge 方法与人类专家明显不一致(Spearman's rho=0.467),在论文结构和研究建议等偏重综合的维度上尤其严重。基于这些偏好数据训练的 LitJudge 将一致性提升至0.78,接近专家间一致性;代码与数据已公开。
本文综述了多模态智能体框架,分析多模态性如何影响智能体的感知、推理、规划、记忆和行动等核心模块。文章从文本中心智能体演进到多模态框架,探讨了委派式、晚期融合和早期融合等架构,并提出了以模态为中心的分类法。应用领域涵盖机器人、GUI与网页导航、多媒体内容生成与编辑、长视频理解与检索。此外,分析了性能、效率与可扩展性的权衡,包括训练与推理成本、延迟和部署限制。最后指出关键差距,为构建鲁棒的通用智能系统绘制路线图。
同步辐射光束线的高光子通量可测量快速动力学过程,但辐射安全规程禁止X射线实验期间人员介入,限制了连续数据采集中的实时样品操作。研究者在一个X射线散射光束线搭建了模块化多工具机器人平台,可在实验棚屋内进行实时样品处理,揭示了钙钛矿薄膜中此前无法触及的瞬态原位动力学,为自动化和自主同步辐射实验奠定了基础。
训练终端智能体需要可扩展的可执行监督,但合成高质量终端任务颇具挑战。每个任务需将指令、初始化环境、参考解和可执行验证器耦合,若这些工件来自不一致假设,任务可能无法解决或评估错误。多阶段合成还可能丢失源中的目标、依赖、状态转换和程序约束。为此,我们提出FACET(细粒度智能体式可执行任务构建)框架,旨在保持信息完整并确保跨工件一致性。FACET将相关智能体技能重构为信息丰富的情境,先实现并修复执行环境,再生成最终任务工件。容器状态作为指令、解和验证器的共享基础,执行验证和定向修复仅纠正特定错误,避免不必要重生成。FACET生成复杂任务,含密集可执行检查,轨迹提供高效监督。多规模微调持续提升Terminal-Bench 2.1性能,验证环境基础构建的重要性。
ASI-Bench是首个跨通用研究领域联合评估AI创新探索与自主科学执行能力的基准,也是首个在同一研究项目中逐步撤回方法学指导以测试AI独立完成度的基准。由40余位专家投入31,000+小时构建,涵盖11个科学领域的60个项目级任务。在18种先进智能体-模型配置中,平均得分从完整方法学指导下的50.91降至仅指定方法时的29.10,以及需自主决定方法时的26.62,表明当前系统仍高度依赖人类指导,难以自主进行端到端的项目级科学研究。该基准现已开放,欢迎全球研究者贡献新任务。
强化学习(RL)在单轮LLM微调中表现出潜力,但长程智能体推理面临分支多、奖励稀疏等问题,且其基于反向传播的训练栈对GPU内存需求高,信用分配困难。本文提出进化策略(ES)作为更优选择,具有模型可扩展性、灵活性和长程可扩展性等优势。基于此,作者提出Agentic ESOpt框架,通过在线奖励加权更新和扰动尺度余弦衰减调度,实现参数-上下文协同进化。在WebArena-Lite上,对Qwen-3.5-27B的全参数优化使No Skill基线提升6.69%;在测试时自动启发式设计中,28/36个设置优于匹配基线。
RapidLiDAR是一种新颖的LiDAR场景补全方法,将初始化作为学习的数据驱动组件。其自适应初始化模块预测每个输入点的空间变化位移,无需手动噪声调整。多尺度重建模块通过查询体素和BEV特征图细化点位置。在SemanticKITTI和KITTI-360上,性能与最先进方法相当,完整场景补全仅需0.1秒,比最快现有方法快2.3倍,匹配典型汽车LiDAR的10Hz采集率,朝实时场景补全迈出一步。
基于LLM的智能体可代表用户访问云服务、调用工具或调度其他智能体,但会话期间权限静态且每次请求独立评估,可能违背委托任务或组合成禁止的后果。Agentic Principal Chain(APC)追踪授权链,通过六项检查、范围与预算限制及组合闭包,在模型外强制决策。在实验中,AgentDojo数据外泄从75-100%降至0%,InjecAgent所有544例数据窃取被阻断,破坏率由38.6%降至4.0%,操控率由90.5%降至12.1%。授权延迟第99百分位为0.24毫秒,但AgentDojo任务-注入对中效用下降8.6和13.9个百分点。实现、评估工具和数据公开。
AI共同科学家已能生成假设、检索相关工作、设计实验、执行代码并撰写论文,但现有系统忽视使用者个体差异,仅优化新颖性、有效性和评审分数。本文提出个性化自动研究问题,在研究的每个阶段都基于研究者画像(图结构化的个人背景)进行条件化,以实现真正的协同科学。框架包含图基研究者表示、全流程个性化及面向个体的评估三部分,并指出研究者的隐性知识是新颖想法的关键,强调克服“一刀切”的失败模式。最后讨论开放难题。
AutoResearchEval框架包含100项涵盖7个科学领域和完整研究生命周期(构思、检索、执行、分析、写作、评审)的任务,评估了8种框架-模型组合产生800条轨迹,并据此建立包含45种失败模式的ARFT分类。研究发现当前智能体普遍缺乏元认知循环,即无法核对产出与发现、修订不符之处、质疑路径合理性,且在全部组合中均存在,表明该缺陷源于模型层面而非特定框架。
LLM编码代理通过可能序列化、包装和重解析模型输出的接口发出Bash命令。仅凭匹配执行分数无法区分命令生成错误与生成后引入的故障。QuoteBench通过56个一次性任务(源自14个事件家族)进行精确最终状态验证,并刻意引入一个未转义解析器来跨越生成契约与执行传输。转义插值点可重现原始路径结果,因此任何恢复必须来自模型改变生成。在八种同窗口配置中,重放同一回复通过添加的解析器使成功率降低55.4至73.2个百分点;六种配置通过披露恢复30.4至60.7个百分点,其余两种为零或略负。GPT-5.6-sol的匹配差距-3.6点掩盖了-64.3点损害和+60.7点补偿。部署配置重排模型顺序:26个可比对中有一个明确反转,四个位于单任务边缘。评估命令发出代理应报告模型配置、生成契约、执行路径、操作点和最终状态验证器,而非将匹配分数视为内在属性。
现有AI科学家系统通常处理文本、代码或预计算摘要,忽略了空间、时间、跨通道等关键证据。为此,研究者提出OmniScientist,一种端到端全模态AI科学家,直接基于异质原始证据进行多学科研究。系统包含感知层和三个自主智能体(构思、实验、写作),在确定性流程中运行,使观察贯穿研究生命周期,并通过代码执行新颖性、严谨性和主张检查。在36个真实数据案例(涵盖5个学科、4类证据、多种模态)中,系统均完成从原始数据到成稿的全流程,平均论文得分6.3。与仅接收预计算特征的盲变体相比,直接感知在7个维度上全部提升,并在85%的对比中胜出。
《AINews》报道了一项新研究,该研究展示了如何解码加密的推理轨迹,并将其移植到其他模型、会话或用户中,从而显著改进开放模型。自o1发布以来,前沿实验室的推理模型加密了其推理轨迹以防止蒸馏,但此研究表明这些加密块可被重放至较弱模型并经提示转录。研究还警示,公开分享的加密推理会话可能泄露个人数据,初步扫描约7000条公共轨迹发现62个API密钥、33个邮箱、33个密码等敏感信息。论文还涉及对齐问题,如思维链摘要器隐藏答案等。
自主实验室(即自主实验)系统通过定义明确的窄研究加速科学发现,使科学家学习更快、资源消耗更少、失败更明智。下一代材料实验室需结合自主系统应对更广泛挑战,在优化实验室资源的同时协调复杂研究活动。我们提出基于智能体与代理式人工智能将成为下一代实验室管理的核心,并探讨潜在实施方案。数字与实体沙盒将允许科学家评估多样动态的研究与实验室管理策略,并实现计算科学哲学研究,提升更高层次的科学效率。
斯坦福大学主导、李飞飞参与的研究团队发布基准 ESI-Bench,记录所有受测前沿多模态AI模型的一项具体可测失败:当模型必须在3D环境中主动移动,而非解读预先构好的图像时,最先进系统会持续选错动作、跳过能纠正错误的视角,并以高置信度坚持错误答案;论文称之为“动作盲视”。该基准含10个任务类别、29个子类别、约3000项任务,构建在 OmniGibson 模拟器和斯坦福 BEHAVIOR-1K 数据集上,并围绕哈佛发展心理学家 Elizabeth Spelke 提出的核心知识系统组织。它取消以往基准的“神谕观测”假设,要求智能体先决定调用感知、移动还是操作及其顺序,以主动揭示遮挡结构、动力学、容纳关系与功能等静态图像无法呈现的信息;每项任务的正确答案若不先选择动作便结构上不可得。
FutureHouse的科学主管Andrew White阐述了其代理堆栈,包括一个药物再利用案例,并强调科学出版和评估必须为机器读者重新设计。