Skip to main content
训练通过顶层 pixi 任务进行,用 --task 传入任务 ID。

训练

--agent.upload-model False 表示 checkpoint 只存本地。移除该参数并设置 WANDB_API_KEY,最后一次迭代的 checkpoint 还会作为 model artifact 上传到 W&B。无论是否上传,本地 .pt 都会在每个 save_interval 触发点写入。 Checkpoint 与 W&B 日志写入 logs/rsl_rl/<run_name>/。

任务配置

两个任务 ID 共享同一 MDP,在 GPU 显存与策略质量之间权衡。
如果 pixi run train 显存不足,切换到低显存变体:
WujiHand_Reorient_Light 可在约 12 GB 显存的 GPU 上运行,但收敛到较弱的策略,在较难的翻转上偶尔掉 cube、出现卡手。

回放与评测

在交互式 viewer 里回放训练好的 checkpoint,或在多次试验上跑成功率评测:
需要 headless、机器可读的输出(适合 CI 或 sweep):

编程式评测

评测核心可 import,因此可从 Python 直接驱动批量评测,无需走 CLI:

导出为 ONNX

部署消费一个 ONNX 策略,外加一个 sidecar JSON——记录导出时捕获的控制模式参数(action_scale、ema_alpha、warmup_time_s、control_mode、history_len、ctrl_dt):
Sidecar 让部署推理与产出该 ONNX 的仿真策略完全一致。继续到 Sim-to-real 部署 在真机上运行它。

开发工具