筑波大学　計算科学研究センター
北原　格　准教授
自由視点映像、 Bullet Time、 Image-Based Modeling

http://www.image.iit.tsukuba.ac.jp/

自由視点映像の課題である、
①撮影システム
②映像品質
③閲覧法
を解決し、インタラクティブな放送・映像メディアの実現を目指します。

今技術の特徴

自由視点３次元スポーツ中継や自由視点映像コンテンツ生成、配信スポーツなどの動作分析への用途を想定しています。
上記課題①-③に対して、以下のことに取り組んでいます。
①映像データの撮影・保存・利用の一元管理による撮影準備時間の短縮、複数カメラ間の見え方補正およびフレーム同期による多視点映像撮影の方法論を構築。
②撮影空間の3次元構造復元処理に基づいてトリミング、デジタルズーム、回転処理などの２次元画像処理を施すことにより、撮影映像の画質を最大限に活用した自由視点映像を生成。
③自由視点映像を撮影する直感的な仮想、カメラ操作インタフェースを開発し３次元ＣＧコンテンツと同等の操作性を実現。

◆今後、ビデオカメラの高精細化、高フレームレート化、低価格化が進むと、処理プロセッサの高性能低価格化と相まって、自由視点映像の利活用が本格化します。

【用語の定義】
※視点：対象を観察する地点（カメラ位置）
※多視点映像：複数の地点（多視点）に配置し、他ビデオカメラ（実カメラ）を用いた撮影により得られる映像データ。
※仮想カメラによる撮影：視点位置（３次元）、視線方向（３次元）、時間（１次元）の計７次元を指定すると、観察される情景（２次元画像）を指定できる。この７次元パラメータを決定して画像を取得する処理を仮想カメラでの撮影という。
※自由視点映像：仮想カメラの撮影時刻や位置・姿勢を自由に指定し、その結果生成される映像を連続的に表示することによって、視点の移動感覚を表現できる映像。

企業などへのメッセージ

オリンピックを４年後に控えたタイミングで産業基盤の創生に向けた活動を本格化する必要性を感じています。 自由視点３次元映像中継、コンテンツ作成、３次元動作分析において共同研究を希望します。

特許・主な論文

Yuichi Ohta, Itaru Kitahara, Yoshinari Kameda, Hiroyuki Ishikawa and Takayoshi Koyama, “Live 3D Video in Soccer Stadium”, International Journal of Computer Vision (IJCV), vol.75, no.1, pp.173-187, (2007)