Artificial Analysis · X

AA-Robotics v0.1 如何工作

Artificial Analysis说明AA-Robotics v0.1的评测机制:模型在隔离容器中经摄像头观察并写代码操控机械臂,任务零样本评分。局限是文中未公布任何模型成绩与更多硬件规格。

AA-Robotics v0.1 如何工作

➤ 模型在隔离的容器中运行,包含简短说明:如何到达机械臂,是哪一个机械臂(一个 Hiwonder NexArm,无进一步规格),以及如何提交尝试操作。

➤ 他们可以通过四台摄像头观察场景,其中三台安装在桌子周围,一台安装在手腕上。此外,他们还可以在容器中编写和运行代码,以规划并发送动作指令。

➤ 当模型提交任务进行审核后,最终状态会根据任务的通过标准进行评分。通过则得100分,如果任务未完成但部分成功,也会获得相应分数。所有任务尝试都视为零-shot。

原始出处

Artificial Analysis · X

内容说明

原始发布及相关权利归来源方。

机器翻译 · 请以原文为准