題目

RGB-Dカメラを用いて取得した環境3Dモデルに基づくスマートフォンによる拡張現実表示システム (Augmented Reality System using a Smartphone Based on a 3D Environment Model Created by a RGB-D Camera)

概要

本システムでは，環境側にRGB-Dカメラが固定されていることを想定し，スマートフォンと通信可能なサーバが，RGB-Dカメラにより取得された環境3D形状に基づいて，スマートフォン上で拡張現実感を実現する．
スマートフォン側では，取得した画像をサーバに送り，サーバで実行される拡張現実処理された出力画像を受信し表示する．
サーバ側では，スマートフォンから送信された画像に撮影された実環境中に仮想物体を重畳した画像をスマートフォンに送り返す．
その際，RGB-Dカメラとスマートフォン間の相対位置姿勢を求めることで，実環境に合わせて仮想物体の位置を適切に計算することが可能になっている．
また，環境の3D形状を把握しているので，仮想的に照明を変更するといった処理も可能である．
実験の結果，インタラクション可能な仮想物体を約7-8fpsでスマートフォン上に重畳できることを確認した．

URL

http://www.hvrl.ics.keio.ac.jp/

著者

本田 俊博 (慶應義塾大学大学院) , ドゥ ソルビエ フランソワ (慶應義塾大学大学院) , 斎藤 英雄 (慶應義塾大学大学院)