上海AI Lab、浙大、NUS团队:世界模型,何去何从?|轨迹|lab|上海市|agent_网易订阅
时间:2026-08-09 21:56:16 来源:不落俗套网 作者:热点 阅读:766次

人工智能(AI)行业一直在讨比如的上海世界b上世界模型(world model),下一步会走向何处?团队在主流范式中,世界模型常见根据目前状态和动作预测下一状态。模型从 Sora 引发“世界模拟器”讨比如,何去何从海市再到 Genie 3 实时生成可交互世界,轨迹讨比如的易订阅题仍然是如何把未来预测得更准、更逼真。上海世界b上如今,团队上海 AI Lab 、模型浙江大学和新加坡国立大学(NUS)团队,何去何从海市提出了一个「以 Agent 为中心」的轨迹世界模型新范式:世界建模的未来,是易订阅从预测世界转向服务 Agent。他们提出了以 Agent 为中心的上海世界b上交互式世界代理(World Proxy),在 Agent 与真实环境之间给予低成本、团队可控反馈,模型协助 Agent 的规划、学习和持续自我改进。比如文链接:https://arxiv.org/abs/2608.02713项目页面:https://worldbench.github.io/awesome-agentic-world-model详详见细而言,世界代理位于 Agent 与真实环境之间,根据 Agent 发起的查询、动作或干预,返回实施结荚、经验/技能、奖励或验明正身信号,并在推理、训练和共同演化三个层级协助 Agent 自我改进。图|以 Agent 为中心的世界代理的概念转向与设方式空间。探究团队表示,这项工作旨在建立以 Agent 为中心的新范式,为 Agent 更好规划、更快学习给予路线图。世界模型,关键以 Agent 为中心持续改进的 Agent 需超越静态监督,通过动态交互获得反馈。而真实环境交互成本高、错误操作难以回滚、反馈滞后,也难以大规模并行化。传统世界模型常见以未来物理状态预测为题,但对需可操作反馈的 Agent 而言,其建模范围仍然有限。在这项工作中,世界代理位于 Agent 与真实环境之间,在 Agent 提交真实动作前预测、检索或验明正身相关反馈,让 Agent 能够以更低成本获得可用于决策和改进的材料。详详见细而言,一个以 Agent 为中心的世界代理,需顺应三个需:1.协助 Agent 主动发起查询、动作或干预,并形成闭环;2.基于真实环境的数据、条件、轨迹或交互证据学习,保持环境锚定;3.以可操作的材料增益为目的,为规划、决策、探索和训练给予有效反馈,而不仅追求视觉真实感或状态预测准确率。详详见细步骤如下:1.发起交互: Agent 根据目前目的与上下文,主动提出查询、动作或干预。2.预测材料转移: 世界代理在目前材料状态与交互需下,预测或生成反馈。3.返回反馈: 反馈作为材料增益回到 Agent ,例如未来状态、预测观察、实施结荚、检索到的指导或验明正身结比如。4.用于改进: Agent 将反馈用于规划、决策、对策学习或持续改进。图|从世界模型到世界代理。单次运行时,世界代理只返回一次预测、检索或验明正身反馈。在多步往往代中,它的反馈会持续意义 Agent 之后的查询、动作与对策更新,并形成改进轨迹。一个好的世界代理,需给予环境锚定、可控、实用、可扩展且具有前瞻性的反馈。世界代理,如何改进 Agent世界代理对 Agent 的赋能,可以按介入改发展骤的深度分为三个层级。它既可以在推理时补充上下文,也可以在训练时生成改进信号,还可以与 Agent 一起随真实环境反馈持续更新。详详见细机制如下:图|用于 Agent 改进的 L1 至 L3 世界代理。L1 推理时引导(Inference-Time Guidance):最轻的一层介入。世界代理不改动 Agent 参数,只在推理时期给予记忆/技能检索、实施模拟或验明正身反馈,并将其并入目前上下文。步骤上,Agent 发起查询,世界代理返回引导结荚,Agent 再据此决策。这一层成本低、可回滚,但上限受限于 Agent 已有能力。它的好处是让 Agent 在目前回合内看得更多、推理更准、动作更稳。图|L1 通过世界代理开展推理时引导。L2 训练时改进(Training-Time Optimization):这一层中,世界代理的功能从目前决策延伸到对策训练。它会处理 Agent 的 rollout,如为轨迹打分、指出失败因素、生成合成轨迹或偏好对,也可以根据失败模式生成新的训练任务。这些信号随后被用于 SFT、DPO、PPO 或 GRPO 等训练,让 Agent 自己的交互流程成为改进对策的燃料。图|L2 由世界代理驱动的训练时改进。L3 Agent-代理共同演化(Agent-Proxy Co-Evolution):这是介入最深的一层。真实轨迹、失败案例和新发现会持续回流到世界代理中,使其随环境和任务更新;更新后的世界代理再反过来引导、验明正身和训练 Agent。这样,Agent 与世界代理在闭环中持续互相更新,共同提高。图|L3 Agent 与世界代理共同演化。除了 L1-L3 的介入层级,世界代理还可以按所建模的材料转移类型分类为六种功能形态。不一样形态返回不一样反馈,在实际采取中也常被组合采取。图|以 Agent 为中心的世界代理的功能形态。动力学形态:关注动作后的环境变化,最接近经典世界模型。它接收目前状态、历史观察和 Agent 动作,预测未来状态,必需时也可预测奖励。空间形态:关注从另一个视角会观察到什么。Agent 查询新的位置、相机位姿或视角,世界代理返回相应的观察或空间表征,让 Agent 在移动前先看一眼。实施形态:关注数字环境会返回什么。它模拟代码、命令、网页点击、API 或工具调用后的状态变化,以及 stdout、stderr、错误材料、测试结荚或页面变化。记忆/经验形态:关注目前决策所需的历史经验、失败案例或约束。它从过往交互、轨迹和失败中检索相关材料,并将这些经验反馈给规划流程。技能形态:关注目前任务可以采取什么技能。它根据目的、上下文和环境状态,提议可复用技能、工具采取步骤或动作先验。奖励/验明正身形态:关注表现是否正确、安全、可行,以及应当如何改进。它评估 Agent 的表现、轨迹、答案或方式划,输出奖励、批评、偏好或验明正身结比如。不足和未来方向然而,尽管世界代理能够减小真实环境中的交互成本,但目前仍存在以下不足:先,它反馈的逼真度和首先期可靠性有限。生成结荚可能看似合理,却违反实际动力学规律,错误还会在首先轨迹中不断往往积。未来需关注首先轨迹预测、误差传播和不选定性校准,而不仅是生成更逼真的结荚。第二,Agent 仍难以判断何时应该信任代理,何时需返回真实环境验明正身。过度依赖世界代理,可能导致难以按时发现的错误。未来需强化置信度评估、风险感知和真实环境回退机制。同时,当世界代理被用作奖励模型或验明正身器时,Agent 可能利用其判断盲点,产生奖励 hacking 和安全风险。之后探究需提高世界代理的鲁棒性,并引入对抗测试、独立验明正身和权限控制。最后,材料增益仍缺乏统一的评估原则。现有基准更多关注真实感、可控性、预测准确率或人类偏好,却频仍将世界代理与 Agent 分开评估。未来,仍需建立以 Agent 为中心的评测体系,研究世界代理反馈是否真正协助 Agent 规划、学习和持续改进。作者:夏千斯如需转载或投稿,请直接在本文章评比如区内留言
(责任编辑:知识)
最新内容
- ·彻底变天!俄老牌官僚全部下台,实战战将全盘掌控俄军兵权?|军事|战争|军队|战场|指挥官|副司令_网易订阅
- ·龙迅股份股价涨5.02%,中银基金旗下1只基金重仓,持有5.35万股浮盈赚取11.35万元_新浪财经_新浪网
- ·A股午评:超3700只个股飘红,三大指数集体收涨
- ·听说赵睿要回来?-CBA-广东华南虎-虎扑社区
- ·[赛后]IG 1-0 LNG:操作配合碾压对局,IG强势发挥轻取首局-英雄联盟丨LPL-虎扑社区
- ·京泉华股价涨5.53%,中海基金旗下1只基金重仓,持有79.53万股浮盈赚取102.59万元_新浪财经_新浪网
- ·杜兰特的意思是,詹姆斯加入了一支超级球队,和当年他一样-NBA-勇士专区-虎扑社区
- ·保立佳股价涨5.03%,建信基金旗下1只基金位居十大流通股东,持有73.21万股浮盈赚取44.66万元_新浪财经_新浪网
- ·TA:曼联引援异常平静也有合理之处,卡里克在打造稳定的阵容|英超|切尔西队|巴黎圣日耳曼|迈克尔·卡里克_网易订阅
- ·好评中国丨暑期出游,请带上“礼”出发_文明_旅途_敬人者
热点内容
- ·横滨冠军赛颁奖!陈幸同沮丧,张本兄妹全程开心并完成合影!|男女单|张本智和|张本美和|奥运会开幕式|张本(明朝尚书)_网易订阅
- ·“英国”这种清朝时期的错误译名就应该被淘汰,United Kingdom和“英”这个字没有任何关系,竟然还把清朝时期的错误译名延用到现-NBA-勇士专区-虎扑社区
- ·花旗:日本除抛售美债外尚有其他手段护盘日元_新浪财经_新浪网
- ·班主任说要录取通知书照片,我要不要给-步行街主干道-虎扑社区
- ·省事!15分钟3个懒人菜,老两口全光盘,无肉也欢!_茄子_鱼丸_丝瓜
- ·发个盘中,半导体,立讯全部清仓卖飞。尾盘应该接不回来了-股票区-虎扑社区
- ·花旗:微降百威亚太(01876)目标价至10.8港元 下调盈测_新浪财经_新浪网
- ·禾望电气股价涨5.03%,嘉实基金旗下1只基金重仓,持有1.81万股浮盈赚取2.57万元_新浪财经_新浪网
- ·威尼修斯续约官宣!全足坛解不开的熊龟死局,也就穆里尼奥敢硬啃|国际米兰|安切洛蒂|皇家马德里|何塞·穆里尼奥|圣地亚哥·伯纳乌_网易订阅
- ·“电影+”业态,激发消费新活力(解码·文化市场新观察)_万达影城_八仙_产业









![[流言板]迪马:罗马500万租借费+4500万选择买断报价波尔图中场莫拉-国际足球-国际足球资讯-虎扑社区](http://n.sinaimg.cn/translate/597/w800h597/20180826/h8UM-hifuvpf8984598.jpg)




