10 月 20-22 日上海黄浦江畔,2026 可持续全球领导者大会再度来袭。诺奖、图灵奖得主现场讲述科技未来与趋势,更有 " 解救 " 焦虑、内卷时代的网红教授——麦克法兰与项飙现场对话!名额有限,手慢无。让我们共赴可持续之约!【点击报名】
新浪科技讯 10 月 19 日晚间消息,今日,自变量发布 X2Real。其为一套可进化的仿真评测基准,旨在评估具身模型在真实物理世界中的性能。它提出三个设计原则:可信性、有效性和客观性,分别通过与真实硬件对齐的仿真、多维度的任务设计,以及自动化的评测与诊断流程,让仿真评测成为模型性能的可信标尺。
经测试,X2Real 仿真评测与真机评测的任务成功率相关性达到 0.96、进度分相关性达到 0.99,居于行业最前列水平,真正实现了 " 让模型能力可度量,让研发进步可积累 ",成为具身行业的关键基础设施。
在可信性上,X2Real 采用与真实硬件对齐的仿真标定,去校准仿真世界里的机器人视觉、物理和控制特性。经测试,X2Real 能够实现毫米级的轨迹一致性,标定覆盖了多种主流机器人本体,包括单臂 Franka、双臂 ArtiXon Arm-6A、ARX R5 和移动操作平台 Quanta X1 等。
在有效性上,X2Real 共设计了 10 个类别的 44 个仿真任务。其中 4 类推理能力包括泛化、视觉理解、语言理解、记忆;5 类操作任务包括精细操作、双臂协同、工具使用、动态物体操作、移动操作。此外还专门设计了一类挑战任务,包括堆叠积木、按指定颜色序列按键、解决汉诺塔。
在客观性上,X2Real 将任务拆分为外观条件、任务设置、具身条件三个维度分别随机化;严格分离训练与评测配置;并使用由英伟达 Isaac Lab-Arena 支撑的 Mana 仿真生态系统持续生成新考题。同时,X2Real 通过统一评测协议将模型接口差异统一翻译,开发者只需接入统一模型接口,平台就能在线完成评测判分和轨迹回放工作。


登录后才可以发布评论哦
打开小程序可以发布评论哦