Augmented Reality Warnings in Roadway Work Zones: Evaluating the Effect of Modality on Worker Reaction Times

📄 arXiv: 2403.15571v2 📥 PDF

作者: Sepehr Sabeti, Fatemeh Banani Ardecani, Omidreza Shoghli

分类: cs.HC, cs.CV, eess.IV

发布日期: 2024-03-22 (更新: 2024-03-29)

期刊: Transportation Research Part C: Emerging Technologies, Volume 169, December 2024, 104867

DOI: 10.1016/j.trc.2024.104867

💡 一句话要点

通过多模态增强现实警告提升道路施工区工人反应时间

🎯 匹配领域: 支柱九：具身大模型 (Embodied Foundation Models)

关键词: 增强现实 道路施工 工人安全 反应时间 虚拟现实 多模态警告 视觉测量

📋 核心要点

  1. 现有的安全警告系统在道路施工区的应用不足，工人的反应时间亟待提升。
  2. 本研究提出了一种多模态增强现实警告系统，通过实验分析不同警告组合对工人反应时间的影响。
  3. 实验结果表明，VR模拟与真实环境中的反应时间存在显著差异，且基于视觉的测量方法具有良好的可靠性。

📝 摘要（中文）

随着老化的公路基础设施需要大规模重建和改进，施工区的数量不断增加，因此迫切需要开发先进的安全系统来保护工人。增强现实（AR）在向工人传递警告方面具有显著潜力，但其在道路施工区的应用仍然相对未被探索。本研究的主要目标是通过分析不同多模态AR警告组合对工人反应时间的影响，改善道路施工区的安全措施。我们通过一系列实验，模拟真实世界和虚拟现实环境中的施工区条件，评估反应时间。研究结果显示，VR模拟与真实场景之间的反应时间差异，以及基于视觉的反应时间测量的潜力和可靠性。

🔬 方法详解

问题定义：本研究旨在解决道路施工区工人反应时间不足的问题，现有的警告系统未能有效提升工人的安全意识和反应速度。

核心思路：通过开发多模态增强现实警告系统，结合虚拟现实技术，模拟施工环境，分析不同警告形式对工人反应时间的影响。

技术框架：研究包括三个主要模块：先进的AR系统原型、施工区环境的VR模拟，以及使用“巫师的奥兹”技术同步用户体验。

关键创新：本研究的创新点在于结合了AR和VR技术，通过多模态警告系统提升工人的反应时间，且首次在施工区环境中应用了基于视觉的反应时间测量。

关键设计：实验中采用简单反应时间（SRT）技术和实时姿态估计的视觉基础度量，设计了五个实验在控制的户外施工区和室内VR环境中进行。实验参数和设置经过精心设计，以确保数据的可靠性和有效性。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

实验结果显示，在使用多模态AR警告系统时，工人的平均反应时间显著降低，且VR模拟与真实场景的反应时间差异为20%。基于视觉的反应时间测量方法与传统SRT技术结果一致，验证了其在实际应用中的可行性。

🎯 应用场景

该研究的潜在应用领域包括道路施工安全管理、工人培训和增强现实技术的实际应用。通过提升工人的反应时间和安全意识，能够有效减少施工事故，保护工人生命安全，具有重要的社会价值和经济效益。

📄 摘要（原文）

Given the aging highway infrastructure requiring extensive rebuilding and enhancements, and the consequent rise in the number of work zones, there is an urgent need to develop advanced safety systems to protect workers. While Augmented Reality (AR) holds significant potential for delivering warnings to workers, its integration into roadway work zones remains relatively unexplored. The primary objective of this study is to improve safety measures within roadway work zones by conducting an extensive analysis of how different combinations of multimodal AR warnings influence the reaction times of workers. This paper addresses this gap through a series of experiments that aim to replicate the distinctive conditions of roadway work zones, both in real-world and virtual reality environments. Our approach comprises three key components: an advanced AR system prototype, a VR simulation of AR functionality within the work zone environment, and the Wizard of Oz technique to synchronize user experiences across experiments. To assess reaction times, we leverage both the simple reaction time (SRT) technique and an innovative vision-based metric that utilizes real-time pose estimation. By conducting five experiments in controlled outdoor work zones and indoor VR settings, our study provides valuable information on how various multimodal AR warnings impact workers reaction times. Furthermore, our findings reveal the disparities in reaction times between VR simulations and real-world scenarios, thereby gauging VR's capability to mirror the dynamics of roadway work zones. Furthermore, our results substantiate the potential and reliability of vision-based reaction time measurements. These insights resonate well with those derived using the SRT technique, underscoring the viability of this approach for tangible real-world uses.