精读 ABot-AgentOS:给机器人装一套「Agent 操作系统」——边云双脑、图式终身记忆、失败驱动自进化
高德地图 CV Lab(阿里)《ABot-AgentOS》(arXiv 2607.10350 v3)精读,含小白开篇:先 5 分钟讲清「具身机器人大脑系统」是什么(VLA=小脑,大脑=听懂话/拆任务/调度/记忆/验证;OS 类比:技能=进程、记忆=内存、工具=文件系统),再进论文。系统五件套:①边云双 LLM(端侧 Tiny 模型管每回合,按需升级云端大模型)②Agent Harness——场景条件规划 + Skill Runner 程序化执行 + 三阶段验证(运行中/技能级/收尾)+ 感知推理循环 ③Universal Multi-modal Graph Memory——把对话/视觉观测/空间/时间/任务轨迹变成带类型节点边的持久图 ④失败驱动终身自进化——失败→诊断→带门控的 evo-assets 只准用于后续 split(防当前题泄漏)⑤可部署学生策略训练(文本环境+教师轨迹蒸馏 SFT + LLM-as-Judge 在线 RL + GiGPO 优势)。自带基准 EmbodiedWorldBench:16 场景(室内/室外/混合)× 4 难度 × 200+ 任务,指标 TSR/GCR,UnrealZoo NavMesh 执行。结果:同模型下架构使 TSR 49.97%→61.96%、GCR 57.95%→68.79%(+11.99/+10.84),换 DeepSeek-V4-Pro 再到 68.18%/74.62%;记忆基准 LoCoMo 87.5→88.7、OpenEQA 59.9→60.4、Mem-Gallery 88.6→89.0、NExT-QA Acc@All 76.5。逐张讲解全部 8 张插图。