ACCRUE: Continual Off-Policy Reinforcement Learning for Robot Foundation Models
用 off-policy 持续强化学习对机器人基础模型做后训练,在高效学新任务的同时抑制旧技能遗忘。直接面向 VLA 的 RL 精调与多任务在线部署,算法可复用。
用 off-policy 持续强化学习对机器人基础模型做后训练,在高效学新任务的同时抑制旧技能遗忘。直接面向 VLA 的 RL 精调与多任务在线部署,算法可复用。
世界动作模型(WAM)通常靠预测整帧视频表示未来,算力开销大;本文用 box 轨迹作为紧凑状态表示,降低预测成本。为世界模型策略提供更高效的状态建模路径。
Seunghun Lee et al. · 针对 VLA 易死记训练轨迹、难泛化到新任务与场景的问题,提出 Region-Aware Interaction Networks,将交互模式与场景配置解耦。为 VLA 任务泛化提供可复用模块。
Chenghao Yue et al. · 针对 VLM+扩散/流匹配动作专家这一主流范式在精密操作上不可靠的痛点,提出 Precision Forcing 提升细粒度操作的精度与稳定性。精确操作是 VLA 核心瓶颈,方法可直接复用。
Zan Huang et al. · 指出接触丰富操作中视觉/本体感受与力觉存在阶段依赖的信号冲突,提出按阶段局部化力觉专精的 DEFT-VLA。直击触觉/力觉 VLA 核心方向,阶段化融合思路可复用。
构建长程操作基准 LADDER,将任务时域与场景/物体多样性解耦,专门诊断策略在长时域下的性能退化。为长程 VLA 评测提供新的标准化手段。
交互式工具包,帮助快速完成操作任务的 Real2Sim 转换,处理接触力学、摩擦、形变等物理参数选择。为数据生成与 sim-to-real 流程提供工程工具。
Bince Qu et al. · 提出用执行 harness 让 LLM 在物理世界行动,声称在任务上超过 VLA 与世界动作模型。提供了一条区别于动作 token 生成的 embodied 控制替代路线。
Tuo Feng et al. · 综述具身 AI 跨层安全,以物理交互到数字层的四层参考架构组织网络物理风险。安全方向综述,供体系化参考。
Ryan Gao et al. · 研究在缺乏高质量状态估计的真实机器人上直接做强化学习,绕过依赖精确状态估计的瓶颈。面向真机 RL 的方法探索。
Yuhui Duan et al. · 系统比较 UMI 风格大视场腕部相机操作中增加外部头视角的边际收益,质疑'相机越多越好'的假设。为多视角数据采集与策略设计提供实证经验。
Lonnie Tankersley et al. · 结合 LLM 与 VLM 做硬件感知的零样本任务规划,将可达性、碰撞与工作空间约束纳入计划生成。面向 grounded 操作的规划方法。
Jianli Sun et al. · 给冻结的 π0.5 策略加一个轻量 CALL 头,学习何时调用外部 Astra 做具身推理,降低查询次数与 token 成本。为 VLA 与外部推理模型的按需混合调用提供思路。
Renbin Shu et al. · 提出 Axiom-0 层次化自精炼方法,提升 VLA 策略在陌生任务、布局与物体交互上的可靠性。属 VLA 策略改进框架。
Dayou Li et al. · 为机器人操作 RL 学习解耦任务相关潜在动力学的奖励模型,缓解手工奖励工程负担。面向 RL 奖励学习方向。
Yang Liu et al. · 用视觉子目标与策略先验引导潜在世界模型的长程规划,缓解远距离目标指导不足与动作搜索低效。世界模型规划方法。
Weikang Wan et al. · 提出接触感知的基础控制器,为灵巧手在遥操作或学得策略给出的运动意图之外补充关键接触决策。面向接触丰富的灵巧操作。
Yilin Wu et al. · 提出多流潜在记忆,让策略无需人工整理历史即可获得长期记忆,规避捷径学习与上下文膨胀。为长程 VLA 记忆机制提供方案。
Shihan Zhao et al. · 用质量多样性(QD)环境生成对 VLA 模型做 red-teaming,系统暴露其失败场景。为 VLA 鲁棒性评测提供工具。
Zihao Li et al. · 面向去中心化多机器人操作,从局部历史学习动作条件下的队友响应信念来评估动作价值。多机协作方法。
Chen Zhao et al. · 为 VLA 测试时验证的候选动作采样提出 flow-support 加权方案,改善多候选的多样性与可用性。属 VLA 推理期验证方向。
Hieu D. Pham et al. · 提出分析型基准,揭示视觉语言导航中'到达目标但发生碰撞'的安全盲区。面向 VLN(导航而非操作)的安全评测。
Zihan Gao et al. · 从人类视频学习真实世界灵巧控制,摆脱昂贵的手动遥操作数据采集。面向灵巧操作的模仿学习。
Peizheng Guo et al. · 为世界动作模型区分动作诱导与环境诱导的未来变化,提出因果动作增益 WAM,使预测未来能更可靠地评估候选动作。世界模型方法。
Chenyang Wang et al. · 针对动作分块策略因局部误差而重生成整段动作的问题,提出按 span 做历史条件动作修订。改进行动分块的推理方式。
Kaneyoshi Hiratsuka et al. · 把 VLA 的测试时计算(多候选打分)蒸馏进策略,避免每次推理都重复采样打分。为 VLA 推理效率与自适应提供方案。
Shutong Ding et al. · 用无分类器引导统一扩散策略的采样、探索与 RL 微调,利用其多模态动作分布。属扩散策略学习框架。
ZhiYuan Feng et al. · 对具身智能体的执行 harness 做诊断驱动的自动演化,修复源于 harness 组织方式而非模型能力的失败。Agentic 控制工程方法。
Wenbo Yu et al. · 为实时异步 VLA 执行引入障碍约束引导,缓解已提交动作流与新预测块之间的边界错位。面向 VLA 实时部署。