A Spatiotemporal Illumination Model for 3D Image Fusion in Optical Coherence Tomography

📄 arXiv: 2402.12114v1 📥 PDF

作者: Stefan Ploner, Jungeun Won, Julia Schottenhamml, Jessica Girgis, Kenneth Lam, Nadia Waheed, James Fujimoto, Andreas Maier

分类: eess.IV, cs.CV

发布日期: 2024-02-19

备注: Presented orally & as poster on 20th April 2023 at the IEEE International Symposium on Biomedical Imaging (ISBI) in Cartagena, Colombia. 6 pages, 3 figures. You can find the official version with broken equations and bad contrast figures under https://ieeexplore.ieee.org/document/10230526

DOI: 10.1109/ISBI53787.2023.10230526

💡 一句话要点

提出时空光照模型以解决OCT图像融合中的伪影问题

🎯 匹配领域: 支柱八：物理动画 (Physics-based Animation)

关键词: 光学相干断层扫描 图像重建 光照模型 伪影校正 时空参数化 医学成像 计算机视觉

📋 核心要点

  1. 现有OCT成像方法在获取连续切片时，常受到运动和光照伪影的影响，导致图像质量下降。
  2. 本文提出了一种新颖的时空光照模型，通过利用正交光栅扫描数据的连续性，避免了切片间的假设，从而减少伪影。
  3. 在68个病理眼的实验中，88%的数据成功减少了光照伪影，且仅有6%显示中等残余伪影，显著提升了图像重建效果。

📝 摘要（中文）

光学相干断层扫描（OCT）是一种非侵入性的微米级成像技术，已成为眼科临床标准。通过对视网膜进行光栅扫描，获取连续的横截面图像切片以生成体积数据。然而，活体成像中切片之间的连续性受到运动和光照伪影的影响。本文提出了一种新的光照模型，利用正交光栅扫描体积数据的连续性，提出了一种时空参数化方法，确保了光照在时间和空间上的连续性。该方法在68个病理眼的体积数据中显示出88%的数据减少了光照伪影，且仅有6%的数据显示中等残余伪影。此方法支持前向扭曲运动校正数据的使用，提升了OCT的图像重建精度。

🔬 方法详解

问题定义：本文旨在解决OCT成像中由于切片间不连续性导致的运动和光照伪影问题。现有方法在处理这些伪影时，往往依赖于切片间的假设，容易引入不必要的误差。

核心思路：论文提出的时空光照模型通过利用正交光栅扫描的连续性，确保了光照在时间和空间上的一致性，而不依赖于切片间的假设，从而有效减少伪影。

技术框架：该方法的整体架构包括数据采集、时空光照模型的建立、图像重建和伪影校正四个主要模块。首先，通过OCT设备获取视网膜的体积数据，然后应用时空光照模型进行光照校正，最后进行图像重建。

关键创新：本研究的最大创新在于首次在OCT图像重建中优化了三维逆模型，提出了一种新的时空参数化方法，显著提高了图像质量。

关键设计：在模型设计中，采用了特定的损失函数以优化光照一致性，并通过前向扭曲运动校正数据来提升重建精度。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

实验结果表明，所提出的方法在68个病理眼的体积数据中，成功减少了88%的光照伪影，且仅有6%的数据显示中等残余伪影。这一显著的性能提升，表明该方法在OCT图像重建中的有效性和实用性。

🎯 应用场景

该研究的潜在应用领域包括眼科医学成像、疾病诊断和治疗监测等。通过提高OCT图像的质量，能够更准确地评估眼部疾病的进展，进而改善临床决策和患者管理。未来，该方法也可能扩展到其他医学成像领域，提升图像重建的准确性和可靠性。

📄 摘要（原文）

Optical coherence tomography (OCT) is a non-invasive, micrometer-scale imaging modality that has become a clinical standard in ophthalmology. By raster-scanning the retina, sequential cross-sectional image slices are acquired to generate volumetric data. In-vivo imaging suffers from discontinuities between slices that show up as motion and illumination artifacts. We present a new illumination model that exploits continuity in orthogonally raster-scanned volume data. Our novel spatiotemporal parametrization adheres to illumination continuity both temporally, along the imaged slices, as well as spatially, in the transverse directions. Yet, our formulation does not make inter-slice assumptions, which could have discontinuities. This is the first optimization of a 3D inverse model in an image reconstruction context in OCT. Evaluation in 68 volumes from eyes with pathology showed reduction of illumination artifacts in 88\% of the data, and only 6\% showed moderate residual illumination artifacts. The method enables the use of forward-warped motion corrected data, which is more accurate, and enables supersampling and advanced 3D image reconstruction in OCT.