Skip to content

实测数据 ​

数据来自已完成的运行记录;下表与图由同一份可追加的数据目录生成。Async 对应 CLI 的 replace。

共同成功 9 个案例
5 种模式统一排除 task/episode:4/0。从现有记录重算,无需重新评测。

平均推理响应ms / 动作块
Orin 本机125.01
Thor 本机31.15
Sync134.03
Async113.14
Blend116.92

推理响应按完整动作块统计;首次调用的筛选规则见下方统计口径。

统计口径

推理响应包含预处理、计算、传输与动作转换。平均值与 p95 按每个 episode 排除前 N 次调用后统计;原始调用仍完整保留,未执行额外暖机。

所有时间、阶段耗时与动作指标均使用同一成功案例交集。总耗时包含首次推理等待;控制间隔不额外剔除回合内的慢间隔。筛选后的案例数不代表整体成功率。

  • orin · 本机:每回合排除 1 次调用。
  • thor · 本机:每回合排除 1 次调用。
  • orin · 协同:每回合排除 1 次调用。
  • 仅统计全部 5 种模式共同成功的 9 个案例;统一排除:task 4 / episode 0。
  • 使用现有原始记录重算,未重新评测。按 task ID / episode 匹配;均值与 p95 从保留调用和控制步重新汇总。
  • 共同成功样本数不代表整体成功率;完整运行的失败记录和成功比例保留在来源数据。
  • 推理均值与 p95 仍按每回合排除首次调用;任务总耗时包含首次推理等待,控制间隔不额外剔除回合内的慢间隔。
  • 同为 LIBERO Spatial、10 个任务各 1 次、seed 7、BF16、chunk 12。本机无墙钟限频,远程为 20 Hz 上限;远程重规划间隔 4 步、融合窗口 3 步、额外延迟 0。
  • Orin 本机成功 10/10、1002 步;Thor 本机成功 9/10、1118 步,task 4 失败。远程 Sync 同样在 task 4 失败;各模式轨迹与执行步数不同,总耗时差不等于纯模型加速。
  • 各次运行来自不同代码提交与运行时刻;本机 metadata 未记录 checkpoint SHA-256,不能仅凭文件名确认与远程权重一致。
  • Orin 板卡 metadata 为 Orin NX Engineering Reference Developer Kit,与项目 Orin Nano 标注存在差异,结果保留 Orin 泛称。

Async 对应 replace;未记录的指标显示为“未记录”。不同轨迹和执行步数的总耗时不作为纯模型加速比。

本机完整推理调用与协同推理各阶段的耗时对照,右侧列出平均值和 p95
本机为完整调用;协同分段均值相加等于响应均值。HTTP / 传输含接收等待与系统开销。
完整指标与逐任务记录
设备 / 模式共同成功案例数总耗时 / s推理均值 / ms推理 p95 / ms控制 p95 / mshold
Orin 本机971.40125.01127.70192.130
Thor 本机926.9531.1533.3655.830
Sync974.76134.03285.30167.400
Async965.72113.14235.4282.333
Blend965.94116.92226.7681.350
原始完整运行成功 / 总数
10/10(包含被排除案例)
配置
libero_spatial · bf16 · seed 7 · chunk 12
调用总数 / 过滤后
76 / 67
全部调用均值
151.03 ms(包含首次调用)
每回合首次调用均值
344.75 ms
原始板卡记录
NVIDIA Jetson Orin NX Engineering Reference Developer Kit
设备 / 功耗模式
Orin / NV Power Mode: 15W 0
PyTorch / CUDA
2.5.0a0+872d972e41.nv24.08 / 12.6
源代码版本
59a3ddab23a37b26d7fd08442b57b2a7933de61e(记录时有未提交修改)
权重 SHA-256
未记录
task / episode结果步数耗时 / shold
0 / 0成功767.810
1 / 0成功1118.520
2 / 0成功907.040
3 / 0成功806.180
5 / 0成功957.690
6 / 0成功1008.240
7 / 0成功1079.130
8 / 0成功967.470
9 / 0成功1139.330
来源与校验摘要

运行 ID、原始文件名与 SHA-256 保存在下方 JSON 下载中。

静态对照与下载 ​

¹ 推理响应时间的均值和 p95 均按每个 episode 排除前 N 次调用后汇总;N 见来源表。推理响应时间是从发起策略调用到收到整块动作的耗时;远程模式包含预处理、传输和服务端推理,不是每步耗时。— 表示原记录缺失。

下载当前数据 · 下载汇总 CSV

完整图表与明细

LIBERO Spatial · 实测对照 ​

共同成功 9 个案例 · 排除 task/episode:4/0

设备 / 模式共同成功案例数执行步数任务总耗时 / s平均推理响应时间¹ / ms推理响应时间 p95¹ / ms控制间隔 p95 / mshold 步
Orin local986871.40125.01127.70192.130
Thor local989826.9531.1533.3655.830
Sync990274.76134.03285.30167.400
Async / replace990065.72113.14235.4282.333
Blend989365.94116.92226.7681.350

LIBERO Spatial · 实测对照 四项指标

  • 仅统计全部 5 种模式共同成功的 9 个案例;统一排除:task 4 / episode 0。
  • 使用现有原始记录重算,未重新评测。按 task ID / episode 匹配;均值与 p95 从保留调用和控制步重新汇总。
  • 共同成功样本数不代表整体成功率;完整运行的失败记录和成功比例保留在来源数据。
  • 推理均值与 p95 仍按每回合排除首次调用;任务总耗时包含首次推理等待,控制间隔不额外剔除回合内的慢间隔。
  • 同为 LIBERO Spatial、10 个任务各 1 次、seed 7、BF16、chunk 12。本机无墙钟限频,远程为 20 Hz 上限;远程重规划间隔 4 步、融合窗口 3 步、额外延迟 0。
  • Orin 本机成功 10/10、1002 步;Thor 本机成功 9/10、1118 步,task 4 失败。远程 Sync 同样在 task 4 失败;各模式轨迹与执行步数不同,总耗时差不等于纯模型加速。
  • 各次运行来自不同代码提交与运行时刻;本机 metadata 未记录 checkpoint SHA-256,不能仅凭文件名确认与远程权重一致。
  • Orin 板卡 metadata 为 Orin NX Engineering Reference Developer Kit,与项目 Orin Nano 标注存在差异,结果保留 Orin 泛称。

调度与调用明细 ​

模式调用总数 / 过滤后首次推理平均响应时间 / ms首段后阻塞 / s推理与 env.step 重叠比例drain / s指令变化 L2 p95
Orin local76 / 67344.75————
Thor local78 / 6996.32————
Sync78 / 69169.409.2950.000.0050.199
Async / replace224 / 215117.500.00094.140.0120.211
Blend226 / 217135.290.00093.740.0760.199

重叠比例单位为 %;L2 是相邻六维相对指令差值,混合了平移/旋转单位,不是物理 jerk。

推理耗时构成 ​

本机完整调用与协同推理各阶段耗时

下载 SVG · 下载 PNG

本机显示完整调用;协同模式按同一过滤样本分解,各阶段均值之和等于平均响应。p95 独立统计。完整口径见数据维护说明。

协同模式Orin 预处理编码压缩Thor 解码/排队Thor 推理HTTP/传输其他开销
Sync6.996.872.7228.8188.410.24
Async / replace11.027.462.6827.9363.740.32
Blend10.357.282.6827.9568.360.31

单位:ms。HTTP/传输包含接收等待与系统开销;阶段不足或样本不齐时不推测分解。

数据来源 ​

来源运行配置每回合排除调用数
Orin 协同推理libero_spatial / bf16 / seed 7 / chunk 121
Orin 本机libero_spatial / bf16 / seed 7 / chunk 121
Thor 本机libero_spatial / bf16 / seed 7 / chunk 121

逐任务结果 ​

模式task IDepisode成功步数任务耗时 / shold 步
Orin local00是767.810
Orin local10是1118.520
Orin local20是907.040
Orin local30是806.180
Orin local50是957.690
Orin local60是1008.240
Orin local70是1079.130
Orin local80是967.470
Orin local90是1139.330
Thor local00是792.620
Thor local10是1183.400
Thor local20是952.540
Thor local30是872.510
Thor local50是932.850
Thor local60是1053.320
Thor local70是1133.500
Thor local80是942.660
Thor local90是1143.560
Sync00是806.300
Sync10是1148.900
Sync20是967.780
Sync30是867.530
Sync50是967.770
Sync60是1089.150
Sync70是1129.740
Sync80是947.220
Sync90是11610.370
Async / replace00是795.430
Async / replace10是1138.180
Async / replace20是997.040
Async / replace30是906.510
Async / replace50是906.560
Async / replace60是1048.050
Async / replace70是1128.433
Async / replace80是1047.300
Async / replace90是1098.210
Blend00是825.980
Blend10是1077.540
Blend20是976.710
Blend30是886.430
Blend50是947.090
Blend60是1057.950
Blend70是1138.930
Blend80是966.740
Blend90是1118.570

口径与更新方法 ​

见数据维护说明。页面与下载只展示当前对照,保留逐任务结果。来源运行 ID 和 SHA-256 记录在 JSON 中,重建网页无需访问原始文件。