
科技(深圳)有限公司发布仿线Real,可评估具身模型在真实物理世界中的性能。
该评测基准提出三个设计原则:可信性(Faithfulness)、有效性(Effectiveness)和客观性(Fairness)。基准通过与真实硬件对齐的仿真、多维度的任务设计,以及自动化的评测与诊断流程,使仿真评测能够可靠衡量模型性能。
此外,通过统一评测协议,X2Real可大幅降低评测门槛——开发者无需在本地搭建仿真环境,只需要接入统一模型接口、在本地运行模型推理服务,平台就能在线完成评测判分和轨迹回放工作。
自变量团队表示,建立持续可信的评测反馈机制,是具身智能实现长期持续进步的前提。当模型能力能够被持续验证,失败经验就能被系统地积累,数据、算力与算法资源就能投入到更有针对性的研究方向,提升模型研发效率。