World Action Models in Real Time: An Empirical Study of Smooth Execution via Asynchronous Deployment

📄 arXiv: 2608.01880v1 📥 PDF

作者: Motubrain Team

分类: cs.RO

发布日期: 2026-08-03


💡 一句话要点

提出异步部署策略以解决机器人执行中的延迟问题

🎯 匹配领域: 支柱一:机器人控制 (Robot Control) 支柱二:RL算法与架构 (RL & Architecture)

关键词: 异步部署 世界动作模型 机器人控制 时间对齐 动态操作 精确放置 长时间任务

📋 核心要点

  1. 现有的世界动作模型在推理过程中存在显著延迟,导致机器人执行时出现不连续和过时动作的问题。
  2. 论文提出了异步部署策略,通过重叠推理与执行来提高响应速度和控制平滑性,比较了多种策略的效果。
  3. 实验结果显示,准确的时间对齐是关键,前缀条件生成在任务表现和执行速度上优于其他策略。

📝 摘要(中文)

世界动作模型通过迭代去噪生成固定时间范围的动作块,但会导致显著的推理延迟,从而在机器人执行过程中产生暂停、过时的动作和不连续性。本文通过实证研究异步部署策略,重叠模型推理与动作执行,以实现响应迅速和平滑的控制。我们比较了六种策略,并通过离线轨迹分析和在线实验评估其在动态操作、精确放置和长时间任务中的表现。结果表明,观察、预测和执行命令之间的准确时间对齐是基本要求,错误的对齐会导致持续的块边界不连续性,无法仅通过混合来纠正。适当的对齐下,直接动作加权提供了简单平滑的基线,但在精确任务中牺牲了准确性。前缀条件生成在任务表现、执行速度和轨迹平滑性之间取得了最佳平衡。

🔬 方法详解

问题定义:本文旨在解决世界动作模型在机器人执行过程中因推理延迟导致的动作不连续和过时问题。现有方法在执行时常常面临显著的推理延迟,影响了机器人的实时控制能力。

核心思路:提出异步部署策略,通过将模型推理与动作执行重叠,来提高控制的响应性和流畅性。这种设计旨在减少因推理延迟带来的影响,从而实现更平滑的机器人操作。

技术框架:整体架构包括六种策略的比较:同步执行、纯异步切换、后处理动作混合、去噪时间混合、推理时间速度指导和前缀条件生成。每种策略在10 Hz双手机器人上进行评估,结合离线轨迹分析与在线实验。

关键创新:最重要的创新在于识别出观察、预测和执行命令之间的准确时间对齐是实现平滑控制的基本要求。前缀条件生成策略通过学习一致的动作延续,取得了最佳的任务表现与执行速度平衡。

关键设计:在实验中,采用了不同的参数设置和损失函数以优化模型性能,特别是在前缀条件生成中,通过训练学习到的动作延续显著提升了执行的流畅性。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

实验结果表明,前缀条件生成策略在任务表现、执行速度和轨迹平滑性方面均优于其他策略,尤其在精确放置任务中表现出色。通过优化时间对齐,减少了块边界不连续性,提升了整体执行效果。

🎯 应用场景

该研究的潜在应用领域包括工业机器人、服务机器人和自动化生产线等场景,能够显著提高机器人在动态环境中的操作效率和精度。未来,随着技术的进一步发展,异步部署策略可能会在更多实时控制系统中得到应用,推动智能机器人技术的进步。

📄 摘要(原文)

World Action Models generate fixed-horizon action chunks through iterative denoising, creating substantial inference latency that can cause pauses, stale actions, and discontinuities during robotic execution. We present an empirical study of asynchronous deployment strategies that overlap model inference with action execution to enable responsive and smooth control. We compare six strategies, including synchronous execution, pure asynchronous switching, post-hoc action blending, denoising-time blending, inference-time velocity guidance, and prefix-conditioned generation, on a 10 Hz bimanual robot. Evaluation combines offline trajectory analysis with online experiments across dynamic manipulation, precision-critical placement, and long-horizon tasks. Our results identify accurate temporal alignment between observations, predictions, and executed commands as a fundamental requirement. Alignment errors produce persistent chunk-boundary discontinuities that cannot be corrected through blending alone. With proper alignment, direct action weighting provides a simple and smooth baseline but sacrifices accuracy in precision-critical tasks. Inference-time velocity guidance fails to reliably constrain committed actions on our platform. In contrast, prefix-conditioned generation achieves the best overall balance between task performance, execution speed, and trajectory smoothness by learning consistent action continuations during training. These findings clarify the practical trade-offs among asynchronous deployment strategies and provide guidance for deploying high-latency World Action Models in real-time robotic systems.