SafeLoop: Risk-Aware Rollback for Vision-Language-Action Manipulation

📄 arXiv: 2609.26313v1 📥 PDF

作者: Zeyu Lou, Tianran Zhang, Xinquan Yue, Ya Jing, Chenyang Si

分类: cs.RO

发布日期: 2026-09-22

备注: 8 pages, 7 figures. Accepted to the 2026 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS 2026)

🔗 代码/项目: GITHUB


💡 一句话要点

提出SafeLoop以解决视觉-语言-动作操作中的风险问题

🎯 匹配领域: 支柱一:机器人控制 (Robot Control) 支柱九:具身大模型 (Embodied Foundation Models)

关键词: 视觉-语言-动作 风险预测 回滚机制 机器人操作 安全性增强

📋 核心要点

  1. 现有的视觉-语言-动作模型在长时间执行时容易受到状态估计和控制错误的影响,导致不可逆的操作失败。
  2. SafeLoop通过引入外部风险预测和回滚机制,增强了VLA模型的安全性,能够在不修改模型参数的情况下进行危险预测和恢复。
  3. 在多项实验中,SafeLoop显著降低了约70%的危险案例,同时保持了任务成功率和基础策略的控制率,表现出色。

📝 摘要(中文)

近年来,视觉-语言-动作(VLA)模型在通用操作中展现出良好前景,但长时间执行仍然脆弱。小的状态估计或控制错误可能导致不可逆的失败,如碰撞和物体掉落。为避免这些风险,本文提出了SafeLoop,一个非侵入性的外部包装器,能够在不改变VLA模型参数的情况下,增加危险预测和基于回滚的恢复机制。SafeLoop从视觉和本体感知中训练风险预测器,输出身体碰撞和物体失败的危险概率及时间。轻量级控制器根据预测的风险选择三种动作之一:继续执行、保存安全检查点或在关节空间中后退。实验结果显示,SafeLoop在24个LIBERO任务和三个真实机器人任务中,相较于其他方法,整体安全成功权衡更优,危险案例减少约70%。

🔬 方法详解

问题定义:本文旨在解决视觉-语言-动作操作中长时间执行的脆弱性,现有方法在面对状态估计和控制错误时容易导致碰撞和物体掉落等不可逆失败。

核心思路:SafeLoop通过引入一个非侵入性的外部包装器,增加了危险预测和基于回滚的恢复机制,能够在不改变VLA模型参数的情况下,主动预测潜在风险并采取相应措施。

技术框架:SafeLoop的整体架构包括风险预测器和轻量级控制器。风险预测器从视觉和本体感知中提取信息,输出身体碰撞和物体失败的概率及时间。控制器根据预测的风险选择继续执行、保存检查点或回滚等动作。

关键创新:SafeLoop的主要创新在于其非侵入性设计,能够在不改变原有VLA模型的情况下,增强其安全性和鲁棒性。这一设计使得模型能够在面对潜在危险时做出更为智能的决策。

关键设计:在参数设置上,SafeLoop使用了轻量级的风险预测器,确保了实时性和高效性。损失函数设计上,重点考虑了危险预测的准确性与控制策略的有效性,以实现最佳的安全成功权衡。具体的网络结构和参数设置在论文中有详细描述。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

在24个LIBERO任务和三个真实机器人任务的实验中,SafeLoop显著降低了约70%的危险案例,同时保持了任务成功率和基础策略的控制率,展现出优于其他方法的安全成功权衡。

🎯 应用场景

SafeLoop的研究成果在机器人操作、自动驾驶、智能制造等领域具有广泛的应用潜力。通过增强系统的安全性和鲁棒性,能够有效降低操作风险,提高任务执行的可靠性,推动智能系统的实际应用和发展。

📄 摘要(原文)

Recent vision-language-action (VLA) models are promising for general-purpose manipulation, but long-horizon execution remains fragile. Small state-estimation or control errors can lead to irreversible failures (e.g., collisions and object drops). Avoiding these risks requires a proactive safety mechanism capable of anticipating hazards. In this paper, we introduce SafeLoop, a non-invasive external wrapper that adds hazard prediction and rollback-based recovery to a VLA model without changing its parameters. SafeLoop trains a risk predictor from vision and proprioception to output four values: the probability and time-to-hazard for body collisions and for object failures. A lightweight controller then chooses one of three actions based on the predicted risk: continue execution (noop), save a safety checkpoint (record), or retreat in joint space (rollback). Rollback moves the robot back to a recent safe waypoint and queries the base policy again, which may yield an alternative continuation. Across 24 LIBERO tasks (16 random seeds each) and three real-robot tasks (25 rollouts each), SafeLoop achieves a stronger overall safety-success trade-off than alternative methods, reducing hazard cases by roughly 70% while preserving task success and the base-policy control rate. Project code is available at https://github.com/Loule0-0/SafeLoop/tree/release/safeloop.