【HCI論文】Holoportation (2016) - ホログラム＋遠隔コミュニケーション -

今回の論文
関連
- 疑問
- 解説
関連研究

今回の論文

"Holoportation: Virtual 3D Teleportation in Real-time"(UIST 2016)
www.youtube.com

どんなもの？

深度カメラを用いて、人や物体を含む空間の3次元再構成を行う
また、それを送受信することで遠隔の人が自分と同じ場所に存在するかのように会話できる

先行研究との違い

・リモート/ローカルどちらのユーザの動きも制限されない
・リモートで3Dキャプチャを表示することで、同じ空間に共存できる
・人体だけでなく、家具や小道具などほかの物体の再構成も行う

実装

・360°撮影のために被写体を囲むように8つのカメラポッド（2つのIRカメラと1つのRGBカメラ）を配置
・深度推定にアクティブステレオを使用
・CRFを用いて、グリーバックを使わずに必要な領域のみ切り取る
・"Fusion4D(2016)"の技術を使って、得られた深度マップから3dモデルを生成
・8方向からのRGB画像を使って、テクスチャを付ける