MIT 提出的 UQ-DAAAM,核心思路就是在 VLM 查询次数有限的前提下,不给所有物体都额外调用模型,而是先算每个物体记忆的不确定性分数,只把宝贵的查询预算分配给不确定性高的对象,挑选质量最好的视角做补充核验,再融合多视角描述更新时空记忆,解决老版本 DAAAM 直接把视觉语言模型输出当成正确事实、分不清记忆对错、预算浪费在已经很确定物体上的痛点。传统机器人时空记忆不管画面清不清楚、角度好不好,看到物体就调用 VLM 生成描述,全部存进 4D 场景图,一旦光线差、遮挡、远距离误识别,错误记忆就一直保留,而且查询预算用完之后就没法再修正;UQ-DAAAM 在原有 DAAAM 框架上增加不确定性量化模块,用跨视角语义离散度计算分数,同一个物体不同角度描述差别越大,不确定性分数越高,超过阈值就标记为待优化,系统优先挑清晰度高、遮挡少的视角去消耗查询额度,不用盲目全部重跑,在预算固定的情况下最大化记忆准确率,实测里只补最多两个优质视角,92.3% 的高不确定物体就能降到安全阈值之下,时空问答准确率也从 71.1% 提升到 76.1%。整个流程是机器人一边移动采集画面,一边给场景里每个物体维护不确定性分数,预算优先倾斜高风险条目,选最优视角调用 VLM,融合多条描述后重新计算不确定性,达标就停止,预算耗尽也会终止,不会超额消耗算力,适合家用、工厂、医院这类长时间连续工作的实体机器人。
UQ-DAAAM 核心机制清单
- 物体级不确定性打分:计算跨视角语义离散度,衡量不同视角下 VLM 描述是否互相矛盾,生成统一不确定性分数
- 预算主动分配:固定 VLM 查询额度,优先分配给不确定性超阈值的物体,确定性高的物体不再额外调用
- 优质视角筛选:基于可见度、像素占比打分,优先选更容易降低不确定性的画面,减少无效调用
- 多描述融合:用 LLM 合并多个视角描述,处理冲突,控制幻觉,生成统一、稳定的物体记忆
- 动态闭环更新:每次补充查询后重新计算不确定性,达标就停止优化,节约剩余预算
UQ-DAAAM 和原版 DAAAM 对比
| 对比维度 | 原版 DAAAM | UQ-DAAAM |
|---|---|---|
| 不确定性判断 | 没有,默认 VLM 输出可靠 | 每个物体带不确定性分数,识别可疑记忆 |
| 查询预算分配 | 均匀或者随机分配,容易浪费算力 | 优先给高不确定物体,预算利用效率更高 |
| 视角选择 | 没有择优逻辑 | 按画面质量排序,优先选降噪效果最好的帧 |
| 记忆纠错能力 | 不会自动校验、修正旧描述 | 自动融合多视角,更新错误记忆 |
| 适用预算场景 | 预算充足、不限调用 | 查询次数受限、算力有限的机器人部署 |
关键实验数据
- 测试基准:OC-NaVQA 时空问答数据集
- 时空问答基线准确率:71.1%
- UQ-DAAAM 准确率:76.1%
- 优化效果:仅补充最多 2 个优质视角,92.3% 高不确定物体不确定性降到阈值以下
- 理论保障:视角选择策略具备概率保证,选出来的帧更大概率降低不确定性
【相关 FAQ】
问题 1:MIT 的 UQ-DAAAM 给时空记忆引入不确定性评估,是怎么在有限查询预算下提升机器人记忆可靠性的?
回答 1:UQ-DAAAM 先计算每个物体记忆的不确定性分数,只把有限的 VLM 查询预算分配给不确定性高的物体,再挑选画面质量最好的视角补充查询,融合多视角描述修正记忆,避免预算浪费在已经可靠的物体上,在预算不变的情况下提升机器人记忆准确度。
问题 2:UQ-DAAAM 的不确定性评估,是靠什么指标判断机器人记忆是否不可靠?
回答 2:核心指标是跨视角语义离散度,统计同一个物体在不同拍摄角度下 VLM 生成描述的差异程度,描述越不一致,离散度越高,不确定性分数越高,代表这条记忆越不可靠。
问题 3:UQ-DAAAM 是在哪个原有机器人记忆框架上扩展出来的?
回答 3:UQ-DAAAM 是 MIT 在 DAAAM 时空记忆框架上增加不确定性量化模块改造而来,全称是带不确定性量化的 DAAAM,专门解决原版 DAAAM 无法识别错误记忆、预算利用差的问题。
问题 4:UQ-DAAAM 给时空记忆做不确定性评估,适合部署在哪些机器人场景?
回答 4:适合算力、VLM 调用额度受限,需要长时间自主运行的实体机器人,比如家用服务机器人、医院配送机器人、工厂巡检机器人,这类场景很容易因为遮挡、光线问题产生错误记忆。
【参考资料】
[2026-11-11](有限查询预算下,如何让机器人记忆更可靠?MIT 提出 UQ-DAAAM 为时空记忆引入不确定性评估)智源社区
[2026-11-09](机器人记忆出错怎么办?MIT 让它学会自我纠错,补充两个视角,九成问题得到解决)麻省理工科技评论
[2026-11-05](Clearing up a robot’s fuzzy memory)MIT News
[2026-11-05](MIT 新系统帮机器人纠正记忆中的错误认知)至顶网
【免责声明】
本内容为 MIT UQ-DAAAM 技术科普整理,实验结果来自论文公开基准测试,实际落地效果受机器人传感器、算力、VLM 模型版本、环境变化影响;该方案属于前沿研究成果,不构成商用机器人开发方案承诺,技术落地请参考论文原文与实测验证。
本文来自作者[零矢映象人]投稿,不代表乌兰科技网立场,如若转载,请注明出处:https://www.wlcbnews.com/rgzn/202611/1704.html
评论列表(4条)
我是乌兰科技网的签约作者“零矢映象人”!
希望本篇文章《有限查询预算提升机器人记忆可靠性MIT UQ-DAAAM 给时空记忆加上不确定性评估》能对你有所帮助!
本站[乌兰科技网]内容主要涵盖:互联网行业的追踪与探索
本文概览:MIT 提出的 UQ-DAAAM,核心思路就是在 VLM 查询次数有限的前提下,不给所有物体都额外调用模型,而是先算每个物体记忆的不确定性分数,只把宝贵的查询预算分配给不确定性高的对象,挑选质量最好的视角做补充核验,再融合多视角描述更新时空记忆,解决老版本 DAAAM 直接把视觉语言模型输出当成正确事实、分不清记忆对错、预算浪费在已经很确定物体上的痛点。传统机器人时空记忆不管画面清不清楚、角度好不好,看到物体就调用 VLM 生成描述,全部存进 4D 场景图,一旦光线差、遮挡、远距离误识别,错误记忆就一直保留,而且查询预算用完之后就没法再修正;UQ-DAAAM 在原有 DAAAM 框架上增加不确定性量化模块,用跨视角语义离散度计算分数,同一个物体不同角度描述差别越大,不确定性分数越高,超过阈值就标记为待优化,系统优先挑清晰度高、遮挡少的视角去消耗查询额度,不用盲目全部重跑,在预算固定的情况下最大化记忆准确率,实测里只补最多两个优质视角,92.3% 的高不确定物体就能降到安全阈值之下,时空问答准确率也从 71.1% 提升到 76.1%。整个流程是机器人一边移动采集画面,一边给场景里每个物体维护不确定性分数,预算优先倾斜高风险条目,选最优视角调用 VLM,融合多条描述后重新计算不确定性,达标就停止,预算耗尽也会终止,不会超额消耗算力,适合家用、工厂、医院这类长时间连续工作的实体机器人。