导语:IROS 2026 最佳论文启示录:没有长记忆的机器人,终将被淘汰。
IROS 2026 最佳论文启示录:没有长记忆的机器人,终将被淘汰。 作者丨邓哲敏
编辑丨齐铖湧
本月初在匹兹堡闭幕的 IROS 2026 将最佳论文奖颁给了 LT-Mem,这项研究让机器人重访同一空间时,能完整保留每个物体的位置变迁史,而非仅仅记住最新一次看到的样子。评委会从近两千篇收录论文中选中它,想必不仅是认可其扎实的工作,也是代表学界宣告:具身长记忆(long-term embodied memory)已经从一个工程补丁,变成了机器人领域公认的科学问题。从实际角度考虑,通用机器人要规模化落地,需要以小时、天乃至周为单位持续运行,而不只是几分钟。没有长记忆,每次相遇都是初次见面,机器人只是一个个孤立的单次动作执行器;有了长记忆,它才能从一次性工具变成可以长期上岗的同事。但解决这件事远不是扩大上下文窗口那么简单:持续涌入的多模态数据既无法全部存储,也无法全部检索;现实世界还在不断变化,新的观察既不能简单覆盖旧的,也不能无序堆叠;更棘手的是,一条错误的记忆会在之后的决策里被反复调用,错误由此层层放大。记忆如何写入、如何留证、如何纠错,都是需要被正面回答的问题,靠调几个工程参数解决不了。AI科技评论(雷峰网(公众号:雷峰网)公众号)注意到,在这一方向被顶会加冕的数月前,国内具身初创公司贝塔无限就已坐上牌桌。今年五月,贝塔的联合创始人陶帅在采访中明确表示:长效、多模态、时空记忆的缺失,是他们首先要重点突破的方向。随后,团队陆续发布 BetaMem 全时空多模态记忆架构、世界动作模型 BetaWAM 0.1、首款机器人多米。10 月 20 日,团队把 BetaMem 的写入学习、证据管理和自我改进机制写成了系统的方法与实验,挂上 arXiv。论文交出的成绩单颇为亮眼:BetaMem 采用 9B 开源模型生成记忆,在 M3-Bench-robot、LoCoMo、OpenEQA 和 EgoLifeQA 四项代表性记忆基准的对比评测中均取得 SOTA 成绩。尤其在串联多次观察中的线索、回忆长时间跨度的事件、识别个人习惯等任务上,BetaMem 展现出明显优势——这些能力,正是机器人进入生活、持续积累对人与环境的了解所需要的。LT-Mem 从多会话建图切入,把问题收窄到干净、可评测;BetaMem 则从记忆如何形成、如何验证、如何从失败中学习的系统视角,搭建完整的记忆底座。一边是顶尖学术单点攻坚摘得顶会桂冠,一边是国内团队以产业落地为目标搭建完整记忆底座,学术和产业在此交汇,足以证明长记忆是整个领域正在收敛的核心方向判断。围绕机器人长期记忆,学界探索了许多方法。按年份罗列意义不大,AI科技评论(雷峰网公众号)想换个角度,看记忆回答了什么问题,还剩什么没回答。第一类关注空间侧的记忆,也就是“这里有什么”。Hydra、ConceptGraphs 等三维场景图把物体、地点、房间组织成可被语言查询的关系网,Khronos 把时间引入动态环境建图,DynaMem 让移动操作机器人在物体被挪动后继续更新记忆,真机上对非静止物体的取放成功率平均达 70%,是静态系统的两倍以上。这一支空间关系清楚,但记住的主要是当下这一版世界长什么样。第二类关注检测类的记忆,也就是“我见过什么”。ReMEmbR 把长时导航视频建成可检索的时空记忆,供智能体推理。但检索按相似度排序,取回的是过去的信息。五分钟前桌上确实有杯子,现在还在不在呢?检索不负责回答。第三类关注变化侧的记忆,也就是“它变了没有”。LT-Mem 正是这一思路。论文把现有系统的毛病命名为“时间性失忆”:要么用新观测覆盖旧状态,要么存下语义快照却没有跨次访问一致的物体身份。它用一个随物体习性变化的易变性分数,决定新观察该覆盖、保持还是并存。作者也坦承局限:测试只覆盖两个室内加一个室外场景、各 10 次访问,外观相似物体的身份关联依然困难。第四类关注操作侧的记忆,也就是“我做到哪了”。MemoryVLA 指出主流 VLA 普遍忽视时序上下文,补上工作记忆与记忆库后,长时程任务真实成功率比最强基线高出 26 个百分点;MEM 用视频承载短时记忆、自然语言承载长时记忆,可跟踪长达十五分钟的任务,同时提醒,设计糟糕的记忆会因放大虚假相关而损害性能。四支各答一问,拼在一起,仍然有三道题敞开。其一,空间侧与操作侧各自生长、很少碰头,前者可以跨周存在却不进入手的动作,后者进了动作但寿命以分钟计。其二,写什么、留什么、何时核对,多靠人工设计,文本 Agent 已用强化学习学会管理记忆,具身记忆还缺同等成熟的做法。其三,记忆能否追溯到证据?多数系统存的是描述,原始画面和声音在摘要之后就找不回来了。一条记录凭什么可信、出错后怎么复查,家庭场景里迟早被用户问到。有意思的是,学界目前分散留下的这三大空白,贝塔无限的 BetaMem 方案给出了一套完整对应的解法。从记住钥匙的去向到主动寻找并重新确认——BetaMem 将记忆构建、检索验证与规则改进串成完整流程BetaMem 的出发点,是把记忆看作机器人对世界的判断,而不是一份日志。论文把它落成三个互相关联的结构:时态状态图,记录现在认为世界是什么样;只追加的事件日志,记录状态是怎么变成这样的;有限容量的源数据档案,留存选定的原始图像与音频。三者共用实体、事件和来源标识。档案容量有限,哪些原始画面整帧保留,哪些裁剪、降质或删除,要在存储与读取预算下权衡。这样拆,等于把证据和状态分开。用法庭作比,证据是案卷,状态是判决,判决可以改判,案卷不能涂改。只存证据不估状态,系统知道看过什么,却说不清现在是什么样;只存状态不留证据,一次误判会被固化,出了错也无从归因。每条状态记录除内容外,还带着空间上下文(所在地点或容器、坐标系、地图版本)、置信度、来源和版本号,并标明状态:已观察、推断、冲突、过期或未知。时间分成三种:所述事情的有效区间、看到它的时间、写进记忆的时间。转变时间不确定就记成区间,超出直接观察的内容一律标为推断。这像一本带出处和保质期的台账,事后纠错不会丢掉原始拍摄时间。在此之上,记忆分为六层。L0 工作记忆装当前观察、任务阶段和动作历史;L1 空间、L2 实体、L3 情景三层互相引用,一次情景中的状态转变可以修订实体状态,并通过 L1 挂到具体的地点和地图版本;L4 经验记忆沉淀规律,L5 程序记忆存放任务前置条件、可调用技能、预期观察和恢复分支。事件日志和源档案贯穿六层,记忆经过整合与修订,出处也不会丢。以论文里的钥匙为例,拿起、交接、放入是三个独立事件,各自记录执行人,并链接到带时间戳的画面和音频;语音转写保留说话人,并链回原始音频。检索时,机器人分得清谁拿到了钥匙、谁把它放好,也分得清说出口的打算、转述的结果和亲眼观察到的变化。写入同样有门槛。每段观察先登记来源和采集时间,再切成窗口;模型输出带来源引用的实体、关系和事件提案,经外观、位置、时间连续性与已有身份比对,拿不准的就保留多个候选假设。提交前,还要核对来源证据、时效范围和所用记录的版本。通过后追加一条事件、更新状态,旧状态留在历史里。其中最关键的一条原则是,历史记录只是搜索线索,不是现状证明。钥匙最后一次是在抽屉里被看到的,机器人据此去抽屉查看,拿到新观察后,才追加新版本的状态。现在的真,要靠现在的观察来确认。这套思路与 LT-Mem 保守更新的逻辑相通,覆盖面更大,状态里不只有物体的位置,还包括任务进度、容器开合和动作结果。陶帅曾公开表示,记忆系统能复用他此前在千人千面推荐系统中积累的经验。把推荐系统处理不确定性、漂移偏好、过期判断的成熟范式迁移到机器人时空记忆,是一个很巧妙的跨界迁移,也让 BetaMem 的底层设计自带一套经过产业验证的不确定性治理思路。如果状态只服务规划器,仍然停在前文说的缝隙里。贝塔无限的做法,是让模型、Agent 和动作三层读取同一份状态,各取所需的时间尺度。BetaMem 与世界动作模型 BetaWAM 同在统一大脑 BetaBrain 内,原则是分工保留、状态共享,否则规划、控制和预测各缓存一份世界,会越走越偏。