Towards High-DoF Dexterous Manipulation through VLA Post-Training
Junlei Zhu et al. · 面向高自由度灵巧手的 VLA 后训练流程,在特定下游任务与硬件平台上做适配微调,弥合通用 VLA 基座与真实灵巧平台部署之间的差距;做灵巧操作落地可直接参考其微调范式与硬件适配细节。
Junlei Zhu et al. · 面向高自由度灵巧手的 VLA 后训练流程,在特定下游任务与硬件平台上做适配微调,弥合通用 VLA 基座与真实灵巧平台部署之间的差距;做灵巧操作落地可直接参考其微调范式与硬件适配细节。
Jiaxuan Zhang et al. · 在权重冻结条件下,用历史 rollout 的成功/失败轨迹构造引导信号修正流匹配 VLA 的速度场,实现推理期策略自我改进;可直接套用到 π0 一类 flow-matching 策略上做免训练提点。
Yan Qin et al. · 用人类触摸视频学习动作条件的触觉世界模型,获得跨本体、可扩展的接触丰富操作动力学预测,绕开真机触觉数据采集昂贵与传感器绑定的问题;适合作为触觉 VLA 的预训练/数据扩增组件。
Hanchu Zhou et al. · 提出联合预测未来世界状态与动作的触觉世界动作模型,针对现有触觉 WAM 推理迟缓、反应性不足的问题提升控制频率与响应速度;为接触丰富操作的世界模型落地提供直接可复用的设计。
Ziqian Wang et al. · 提出 Q 引导的值梯度匹配,绕开对 flow-matching 策略的反向传播完成离线到在线 RL 微调;可直接用于 π0 一类 flow VLA 的强化学习后训练,缓解监督微调难以超越示教水平的问题。
研究对抗 patch 对 VLA 策略的持续影响:提出状态恢复实验协议,区分 patch 存在时的动作破坏与移除后仍残留的状态效应,为 VLA 鲁棒性评测提供新协议。
用生成式视觉增强从第一人称视频预测触觉信号,无需真实触觉传感器即可批量生成触觉监督,为触觉操作数据稀缺提供规模化路径。
Masato Kobayashi et al. · 水下双臂机器人学习平台,含定制主从遥操作与模仿学习全流程,把双臂模仿学习从空气中扩展到水下场景,方向较窄但提供完整硬件与数据流程。
Jing Jiang et al. · 用图结构自动完成长程操作真机实验中的场景重置与初始状态采样,替代人工复位,提升评测效率并降低初始状态分布偏移带来的噪声。
Yuchen Han et al. · 针对扩散式 VLA 迭代去噪带来的计算与访存开销,用反馈感知的采样步自适应减少推理步数,面向边缘平台的实时部署加速。
Chiyoung Kim et al. · 用离线隐状态蒸馏恢复被结构性剪掉 63% 语言主干的 VLA 精度,且不依赖原始训练数据,服务于机器人端侧部署的模型压缩。
Caoliwen Wang et al. · 以接触为中心的可变形物体操作世界模型,用少量高质量轨迹学习接触动力学并生成大规模交互经验,降低真机数据采集成本。
Chiyoung Kim et al. · 对已录制的真机示教做生成式视觉域随机化,改变物体颜色与背景等外观以缓解视觉过拟合,提升视觉运动策略在新环境下的泛化。
Yuxin Cao et al. · 针对电池回收场景的运行时安全过滤,把依赖两物体联合空间关系(而非物体各自 keep-out 区域)的危险状态建模,属特定工业应用的受限改进。
Wenbo Li et al. · 用锚定扩散为操作策略构建 3D 感知的场景记忆,缓解部分可观测下已离开视野区域几何信息丢失的问题。
Haolong Li et al. · 把联邦学习引入 VLA 训练,用一致性聚合在数据不出本地的前提下跨机构协同训练,缓解机器人数据孤岛,但属成熟联邦范式在 VLA 上的迁移。
Zitai Huang et al. · 用实例级掩码接地支撑长程操作中的目标跟踪与任务进度评估,应对多物体外观相似时的跟踪丢失与进度误判。
Harsha Guda et al. · 指出 VLA 只给位置不给力度,通过双边遥操作采集可辨识的阻抗/柔顺信息,为接触丰富任务补齐“推多用力”的示教接口。
Soham Patil et al. · 仅用 RGB 观测实现视角不变的灵巧操作策略,摆脱对 RGB-D/点云等显式 3D 模态的硬件依赖,提升相机位姿漂移下的鲁棒性。
Kaivalya Agrawal et al. · 用经典规划器接管长程任务中的部分决策,跳过不必要的 VLA 前向调用以减少推理次数、加速真机执行。
Zimu Han et al. · 把人类在环后训练接到 UMI 通用操作接口上,用人类纠正数据修正 VLA 在真实部署中的失败模式,降低 SFT 之后仍需反复调试的成本。
Zhongbo Zhang et al. · 为 3D 扩散策略加入不依赖显式轨迹标注的预测性监督,使策略在生成当前动作时预判交互走向。
Xin Chen et al. · 从扩散去噪轨迹中提取几何信息自适应决定动作块长度,替代现有固定 action horizon 的执行方式,兼顾不同任务阶段的精度与效率。
Nitish Dashora et al. · 用显著性驱动监督训练轻量工作空间记忆模型,为长程操作策略提供紧凑的过去事件表征,避免条件化完整历史带来的虚假相关与性能退化。
Bingxin Xu et al. · 让编码智能体为机械臂编写带避障约束的控制程序,并系统检验此类免训练生成式控制器在安全关键操作中的可靠性边界。
Gengyang Xu et al. · 揭示仿真资产中视觉网格正常但碰撞网格可被投毒,使策略在训练与评测中被错误碰撞几何误导,为仿真数据管线安全提供警示与攻击构造方法。
Lyuxing He et al. · 自监督的物体中心潜在粒子泼溅方法,用前馈 3D 高斯泼溅把场景分解为语义粒子,为操作与世界模型提供物体级结构化表征。
Tianbin Liu et al. · 在 JEPA 潜空间中把生成的视觉指令接入世界动作模型,改善现有 WAM 仅靠语言条件时指令跟随能力不足的问题。
Wenbo Li et al. · 把可执行机器人轨迹作为视觉提示引入双几何-视觉轨迹接口,使 VLM 在动作选择时获得更明确的空间参照,减少语言指令的目标歧义。
Jinhui Ye et al. · 针对 VLA 生态架构与训练流程高度碎片化的问题,梳理各组件差异并提出更简化的统一 VLA 设计,降低复现与消融对比成本。