WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破

世界模型生成的视频足以「以假乱真」,为何机器人依然「有眼无脑」?

2026年2月13日,一则来自具身智能前沿的重磅消息引发学界与产业界震动:由清华大学、北京大学、香港大学、普林斯顿大学、中科院、上海交通大学、中国科学技术大学、新加坡国立大学等顶尖机构联合推出的 WorldArena —— 首个面向具身世界模型的「功能 + 视觉」统一评测体系,正式面向全球开源发布。

这不是又一套「比谁画得真」的榜单,而是一面照向世界模型本质的镜子。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破

爆点直击:视觉满分,任务零分?

WorldArena 首次撕开「美丽视频」的伪装

「很多模型的生成视频,人眼看几乎完美,但让它真正指挥机器人抓个杯子 —— 立刻露怯。」

WorldArena 研究团队直言:当前世界模型评测被「视觉内卷」绑架太久,谁的视频更清晰、更流畅、更像好莱坞特效,谁就得分高。但真实世界从来不是电影 —— 机器人需要的是物理规律的理解、动作轨迹的精度、多步决策的稳定,而非一帧帧精美的「幻灯片」。

WorldArena 首次用数据证明:视觉质量与任务执行能力,相关性仅有 0.36!

这意味着:一个模型可以生成奥斯卡级视频,却在真实任务中几乎「失能」。

核心创新:从「看起来真实」到「用起来可靠」

WorldArena 不是对现有评测的修修补补,而是一次评测范式的根本重构。

创新一:六维视觉评测,不止于「好不好看」

视觉不再是「单一审美」,而是拆解为视觉质量、动作质量、内容一致性、物理遵循性、3D 准确性、可控性六大维度。尤其是物理遵循性与 3D 空间理解,被提升到与画质同等重要的地位 —— 因为机器人不信「魔术」,只信物理。

创新二:三大具身任务,直接拷问「能不能用」

WorldArena 在全球范围内首次将世界模型置于真实的具身任务流水线中进行压力测试:

  1. 作为数据生成引擎:它合成的轨迹,能否训练出更好的策略模型?
  2. 作为策略评估器:它对环境动态的建模,是否与真实物理引擎高度相关?
  3. 作为行动规划器:它能否闭环执行长时序、多步交互任务?

结果令人警醒:多数视觉高分模型,在任务评测中「溃不成军」。而少数以动作条件建模为核心的模型(如 CtrlWorld),虽视觉非顶尖,却在策略评估相关性上高达 0.986,几乎媲美真实环境。

EWMScore:一个分数,对齐人类感知与模型能力

WorldArena 还推出了 EWMScore 综合评分体系,将多维客观评测指标统一映射为一个可横向对比的分数。更关键的是:EWMScore 与人类主观评估高度正相关 —— 它不再是一个「黑盒学术指标」,而是一个能反映真实人类感知的标尺。

学术深意:世界模型的「iPhone 时刻」还没到

「我们离真正可用的具身世界模型,还有一段关键的路要走。」

这不是唱衰,而是一次清醒的集体转身。WorldArena 用系统化实验向全球研究者发出信号:视觉生成能力已逼近天花板,但功能智能才刚刚破土。当模型能生成一杯「看起来很冰的可乐」,却不知道冰块会浮起、杯壁会凝水珠,它就仍然是「视觉模型」,而非「世界模型」。

开放共建,评测权交给全球社区

WorldArena 是一个完全开放、可复现、持续迭代的社区平台。

  • 项目主页:http://world-arena.ai
  • 论文已上线:http://arxiv.org/abs/2602.08971
  • 评测榜单实时更新:https://huggingface.co/spaces/WorldArena/WorldArena
  • 代码与数据全开源:https://github.com/tsinghua-fib-lab/WorldArena

「我们不是在造一个排行榜,而是在为具身智能建立一套‘驾照考试系统’。」
—— WorldArena 团队


评测细节

多维度视频质量评估

为了建立系统化的视觉评测标准,WorldArena 构建了六大核心维度,从感知真实到物理真实,全面刻画模型生成能力。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破
图 1 WorldArena 在六个关键维度对世界模型生成质量进行全面评估

1. 视觉质量

首先,我们评估视频是否「看起来真实」。通过图像质量、美学质量与 JEPA 相似性等指标,衡量生成视频在清晰度、色彩协调性及分布相似性方面的表现。这一维度主要刻画模型在感知层面的真实程度与视觉表现力。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破

2. 动作质量

仅有清晰画面远远不够,运动是否合理同样关键。我们通过动态程度、光流连续性与动作平滑性,分析视频中运动的强度、连续性与时间一致性。该维度用于刻画生成内容在时序层面的稳定程度与运动特征。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破

3. 内容一致性

真实世界不会「瞬间变形」。我们通过主体一致性与背景一致性指标,衡量对象与场景在时间与空间维度上的稳定性,分析是否存在结构漂移、身份变化或背景不连贯等现象。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破

4. 物理遵循性

对物理规律的遵循能力是连接「视觉」与「功能」的关键桥梁。通过对视频中机械臂和物体交互质量与轨迹准确性,评估机器人与物体交互的合理程度,以及动作轨迹与物理规律之间的匹配关系。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破

5. 3D 准确性

空间理解能力,是世界模型迈向具身智能的重要基础。我们通过深度准确性与透视一致性指标,刻画生成视频的空间结构是否符合几何与透视规律,分析模型对三维结构关系的理解能力。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破

6. 可控性

最后,也是最关键的一步:模型是否「听得懂指令」。通过指令跟随、语义一致性与行动跟随能力,评估模型对外部输入的响应程度,以及不同指令条件下生成结果的区分能力。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破

具身任务功能性评估

WorldArena 的另一项核心创新,在于首次系统性评估世界模型在真实具身任务中的「功能能力」。我们不再只问模型的视频生成得有多逼真?而是进一步追问:它能否真正参与任务执行?

为此,WorldArena 从三个关键角色出发,全面评估世界模型的能力:
1. 作为数据生成引擎,是否能有效补充下游策略训练数据?
2. 作为策略评估器,是否能准确刻画真实环境的状态转移?
3. 作为行动规划器,是否具备支持闭环执行与长期决策的能力?

传统评测往往停留在视觉层面,而 WorldArena 将评估延伸至下游具身任务本身。我们关注模型是否能够在动态环境中做出有效决策,是否能够处理复杂的多步交互,以及是否具备稳定的规划与执行能力。通过这种功能导向的评测框架,我们得以更全面地理解世界模型的真实能力边界,并判断它们是否具备走向实际具身应用的潜力。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破
图 2 具身下游任务评测体系(数据合成引擎、策略评估器、动作规划器)

EWMScore:统一的综合评分体系

为了让评测结果更直观、可横向对比,WorldArena 引入了统一的综合指标 EWMScore。该指标通过整合视频质量、物理一致性与指令遵循能力等多维度评测结果,将其映射为一个综合分数,从而为每个模型提供清晰、可比的性能刻画。实验表明,EWMScore 与人工评估结果高度正相关,能够真实反映模型的综合能力。这标志着世界模型的能力评估,正从“多指标碎片化比较”走向“统一、可解释、可对齐”的综合衡量体系。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破
图 3:14 个世界模型的 EWMScore 及不同维度指标对比

视频质量与功能之间的鸿沟:从视觉到执行的能力差距

WorldArena 的系统性评估揭示了一个关键现实:当前世界模型在视觉生成层面已取得显著进展,但在支撑具身智能任务与长期决策方面仍存在本质短板。

具体而言,尽管许多模型能生成高度逼真的视觉效果,但在复杂物理环境中的一致性与稳定性明显不足。尤其是在长时序、多步交互的任务中,模型往往难以持续遵循物理规律,容易出现动态漂移、目标偏离或策略失稳。这表明,仅依赖视觉生成能力,远不足以突破具身智能的核心瓶颈。

通过对数据引擎、策略评估、动作规划三类关键具身下游任务的系统评测,WorldArena 进一步验证了上述结论:当前世界模型虽能生成“好看”的视频,却尚未具备支撑真实具身应用的能力。

数据引擎任务为例,我们利用世界模型生成合成轨迹,用于补充下游策略模型(如 VLA)的训练数据。实验结果显示,部分模型确实能带来一定程度的性能提升,但整体来看,其生成的数据质量仍显著落后于真实数据,多数模型尚难以为下游策略学习提供稳定且可靠的增益。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破
表 2:以世界模型作为数据合成引擎,训练得到的 VLA 模型性能对比

策略评估任务中,我们通过衡量世界模型能否作为真实环境的有效代理来评估其动作控制能力。我们训练了不同能力水平的 VLA 模型,并让它们分别在真实物理仿真环境和世界模型环境中进行交互,获得两组性能评估结果。通过计算两者之间的相关性,可以判断世界模型是否准确刻画了真实环境的状态转移规律。

在 CtrlWorld 与 Cosmos-Predict 2.5 上的实验结果呈现出显著差异:CtrlWorld 的策略评估相关系数高达 0.986,几乎与真实环境评测结果保持一致,表明其在动态建模层面有效捕捉了真实环境的演化机制。相比之下,Cosmos-Predict 2.5 的相关性明显较低。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破
图 4:基于世界模型和物理仿真环境的策略评估结果相关性

动作规划任务中,我们将世界模型接入逆动力学模型,实现端到端的具身任务执行。实验发现,尽管部分世界模型能生成视觉上合理的未来预测,但在支持闭环控制,尤其是长时序复杂任务时,其性能仍显著落后于成熟的策略模型。

这表明,当前世界模型虽然在一定程度上捕捉到了环境动态,却尚不足以支撑稳定、可靠的自主控制行为,尤其在长期决策与复杂交互场景中仍存在明显短板。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破
表 3:基于世界模型进行动作规划的任务性能对比

这些实验揭示了一个关键挑战:世界模型的终极目标,不是生成漂亮的视频,而是成为可以支撑自主决策的环境代理。真正可用的世界模型,必须理解物理规律、精确刻画动作细节、在长时序任务中保持一致性,并且在复杂环境中持续稳定执行。否则,它们仍然停留在“视觉生成模型”的阶段,而非“具身智能基础设施”。

WorldArena 的结论很明确:世界模型正在逼近真实世界,但距离真正可用,还有一段关键的路要走。

评测与人类感知的高度对齐

一个关键问题是:模型指标好看,真的代表人类也觉得“真实”吗?

WorldArena 在评测设计中,首次大规模引入人工评估,与自动指标 EWMScore 进行深度对齐。我们在四个核心维度上开展了大规模人类评测:视频整体质量、物理规律符合性、复杂指令遵循能力以及模型间的相对优劣。

人工评估结果显示,商业化大型视频模型(如 Veo 3.1、Wan 2.6)在整体质量、指令遵循和物理符合性上表现优异,展现出强大的感知现实性与语义一致性。在具身世界模型中,基于动作条件的模型(如 CtrlWorld)显著优于基于文本驱动的模型,尤其在物理合理性方面表现更稳定。这说明,明确的动作建模是生成高质量视觉预测的关键。

更重要的是,EWMScore 与人类主观评估高度正相关,表明它能够有效刻画人类的综合感知判断。然而,当我们进一步分析 EWMScore 与具身任务性能的关系时,一个值得警惕的事实浮现:它与数据引擎任务的相关性为 0.600,与动作规划任务的相关性仅为 0.360。

这意味着——视觉真实,并不等于功能真实。即便模型在视觉质量上获得人类认可,其对真实任务执行能力的支撑仍然有限。尤其是在闭环控制场景中,视觉表现与功能性之间尚未建立强关联。

WorldArena:颠覆世界模型评测,从“视觉内卷”到“功能智能”的革命性突破
图 5:EWMScore 与人类评估、具身下游任务性能相关性分析

结语:从「生成世界」到「理解世界」,评测决定了技术进化的方向

WorldArena 的意义,远不止于一套新指标。它标志着具身智能评测正从“审美导向”走向“功能导向”,从“论文里的对比实验”走向“真实场景的能力验证”。

当世界模型不再比拼谁更“像电影”,而是谁更“懂物理、能干活、靠得住”,具身智能才真正开始。


关注“鲸栖”小程序,掌握最新AI资讯

本文来自网络搜集,不代表鲸林向海立场,如有侵权,联系删除。转载请注明出处:https://www.itsolotime.com/archives/21305

(0)
上一篇 2026年2月13日 下午12:49
下一篇 2026年2月13日 下午12:55

相关推荐

  • EverMemOS:为AI智能体注入“时间灵魂”的长期记忆操作系统深度解析

    在人工智能技术快速演进的当下,长期记忆能力正成为区分普通AI工具与高级智能体的关键分水岭。近日,EverMind团队正式发布其旗舰产品EverMemOS,这款面向人工智能智能体的世界级长期记忆操作系统,旨在成为未来智能体的数据基础设施,为AI赋予持久、连贯、可进化的“灵魂”。本文将从技术架构、行业意义、应用场景三个维度,对这一突破性系统进行深入分析。 **一…

    2025年11月16日
    27500
  • 生成涌现:从Gemini 3.0到蚂蚁灵光,AI如何重塑应用生态与创作范式

    2025年末,AI领域迎来一场深刻的范式变革。谷歌Gemini 3.0的预热不仅引爆了技术圈的期待,更揭示了一个关键趋势:AI正从单一模态的「线性输出」迈向系统级的「生成涌现」。这一转变的核心在于,AI不再仅仅是内容生成工具,而是能够自主构建复杂应用、界面乃至交互系统的创造性引擎。 当前,大模型的发展已进入新阶段。OpenAI GPT-5.1的迭代虽带来改进…

    2025年11月18日
    23700
  • DualSpeed:革命性双模视觉Token修剪框架,实现MLLM训练4倍加速与99%性能保留

    关键词:视觉令牌修剪、多模态大语言模型、高效训练、训练-推理不匹配、双模训练 近年来,多模态大语言模型在图像描述、视觉问答、视觉定位、多模态推理等任务中取得了显著突破,成为人工智能领域的重要研究方向。然而,随着模型规模不断扩大、视觉输入分辨率持续提升,MLLMs 的训练成本急剧上升,成为制约其发展和应用的关键瓶颈。 传统的效率优化方法主要聚焦于模型压缩、参数…

    2026年2月5日
    13400
  • 谷歌母公司330亿收购AI算力基建商Intersect,押注数据中心能源革命

    谷歌母公司Alphabet 330亿收购AI算力基建商Intersect,押注数据中心能源革命 智东西12月23日消息,谷歌母公司Alphabet宣布将以47.5亿美元(约合人民币333.85亿元)现金收购美国数据中心和能源基础设施公司Intersect,并承担相关债务。该收购计划于2026年上半年完成。 ▲Alphabet官宣公告(图源:Alphabet)…

    2025年12月24日
    24100
  • LoopTool:打破静态数据桎梏,实现工具调用任务的闭环数据进化

    在人工智能从“语言理解”迈向“任务执行”的关键转型期,大语言模型(LLM)与外部工具的协同能力已成为核心突破点。无论是API调用、多轮任务规划、知识检索还是代码执行,模型精准调用工具的能力不仅依赖其内在的推理逻辑,更需要海量高质量、针对性强的函数调用数据进行训练。然而,当前主流的数据生成与训练流程普遍存在“静态化”缺陷——数据在训练前一次性生成,无法感知模型…

    2025年11月19日
    22700