机器人 单一来源
RePlanMem-VLA利用计划修正决定机器人保留哪些记忆
由 WORLDTECH 译自英文。事实、数字、名称和来源均与英文原文一致。 English
一篇列于arXiv机器人学板块的论文提出了RePlanMem-VLA,这是一种让视觉-语言-动作策略通过观察自身计划修正来选择存储哪些视觉观测的方法。作者认为,计划的改变可以标志着与任务相关的信息已经进入视野的时刻。
该方法如何决定存储内容
据arXiv页面信息,保留全部观测历史的计算成本高昂,且大量内容重复,这正是选择性视觉记忆的出发点。RePlanMem-VLA是Replanning-Guided Keyframe Memory for VLA的缩写,它将策略的计划修正转化为实时信号,用以控制写入记忆的内容。
该方法建立在滚动时域执行(receding-horizon execution)的基础上,相邻的动作块会对部分相同的未来步骤作出预测。当这些时间对齐的预测出现异常大的偏差时,该方法将这一差距解读为与任务相关的事件已经发生的信号。
记忆保持测试中的报告结果
论文报告称,以此方式构建的检测器ROC-AUC值达到0.981至0.997之间。在其评估的记忆保持实验中,RePlanMem-VLA在100%的回合中,都能使与任务相关的观测在较晚的决策点之前保持可用。
作者将这些发现视为证据,表明计划修正可以作为策略内部的信号,用于控制VLA模型的记忆。
待解问题
- 该方法在所评估的记忆保持实验之外的任务和机器人上表现如何?
- 所报告的结果是否已被独立复现?