周囲環境を“仮想スクリーン”化し3D視覚性能を向上(Turning surroundings into a ‘virtual screen’ could help machines better see in 3D)

2026-05-20 アリゾナ大学

米国のThe University of Arizonaの研究チームは、周囲環境を仮想スクリーンとして利用することで、機械の3次元認識能力を向上させる新しい画像処理技術を開発した。研究では、物体表面や周囲空間に反射・散乱した光情報を解析し、直接見えない対象物の形状や位置を高精度に再構成する計算手法を提案した。従来の3Dセンシングではカメラ視野や遮蔽物に制限があったが、本技術は環境全体を情報媒体として活用することで、隠れた物体の検出や空間認識を可能にする。AIと計算イメージングを組み合わせることで、ロボット、自動運転、拡張現実(AR)、災害探索など多様な分野への応用が期待される。研究チームは、周辺環境そのものを“仮想ディスプレー”として利用する新しい機械視覚の概念だとしている。

周囲環境を“仮想スクリーン”化し3D視覚性能を向上(Turning surroundings into a ‘virtual screen’ could help machines better see in 3D)
A mixed reflectance scene contains objects whose surfaces vary from matte, or dull (wooden box) to specular, or shiny (chrome figurines) and in-between reflectance (plant, statue). A laser (green light) scans the entire scene. After computational separation of matte and specular scene parts, the 3D shape of the matte parts is evaluated directly, and the specular parts are evaluated via the reflection signal from the matte parts, effectively turning them into a large virtual screen for the specular measurement. Aniket Dashpute et al.

<関連情報>

混合反射シーンの正確かつ高速なイベントベース形状計測 Accurate and fast event-based shape measurement of mixed reflectance scenes

Aniket Dashpute,Jiazhang Wang,James Taylor,Oliver Cossairt,Ashok Veeraraghavan & Florian Willomitzer
Nature Communications  Published:20 May 2026
DOI:https://doi.org/10.1038/s41467-026-72254-6

Abstract

Event-based structured light systems have recently emerged as an exciting alternative to frame-based triangulation for 3D measurement of diffuse surfaces, offering high dynamic range and fast capture speed, but at the cost of reduced data quality. Existing event-based and frame-based 3D imaging systems are typically tailored to a single surface reflectance type, diffuse or specular, and therefore struggle with mixed reflectance scenes. In this work, we present an event-based structured light system for fast and accurate 3D imaging of mixed reflectance scenes. Using epipolar constraints on the captured events, we decompose reflections into diffuse, two-bounce specular, and other multi-bounce reflections. Diffuse surfaces are reconstructed via triangulation and repurposed as a virtual screen for deflectometry to evaluate specular surfaces, requiring only a scanning laser and an event camera. Our system achieves motion-robust 3D reconstructions at  < 600 μm depth accuracy and introduces a fast diffuse-only capture mode operating at 250 Hz.

1603情報システム・データ工学
ad
ad
Follow
ad
タイトルとURLをコピーしました