映画で背景に使われる「マットペイント」という手法は、手描きのものからPhotoshopなどで描いたCG映像が一般的になってきているようです。
マッチムーブ技術を使うと実写とマットペイントの背景を違和感なく合成する事ができます。
マッチムーブのソフトには、低価格の「SynthEyes」や無料ソフト「Voodoo Camera Tracker」もあります。
前の記事で取り上げたミュージックビデオも、SynthEyes・マットペイント・After Effects を使って作成されています。
そんなマットペインティングを使うメイキングビデオをDigital Domain サイトで見ることができます。
直接リンクできないので、トップページから「REELS」→「MATTE PAINTING」と進んでください。
ビデオカメラ映像だろうと3DCGソフトのムービーだろうと、撮影したカメラの位置やレンズを計算して出力できるカメラトラッキングソフト「SynthEyes」とAfter Effectsを使ったミュージックビデオです。
3Dソフトにインポートすれば、ムービーに3Dオブジェクト（顔につけたマスク等）をビデオカメラとパースを合わせて配置したり、After Effectsであれば、カメラとトラッキングポイントを3Dレイヤーの平面として配置されたプロジェクトファイルが出力されるので、位置合わせがやりやすくなります。
【追記：チュートリアルビデオを見るとAfter Effects用の出力ファイル名に"via.ma"と文字が付いているので、3DソフトのMAYAが必要なのか？不明な点があります】
ミュージックビデオはカメラ1台で、移動しながら撮影しても滑らかに撮れるんですね。
SynthEyesを買って、このような合成をやってみたいけど、きれいに撮れるカメラもあるといいな・・・
</object>
関連記事 パノラマ画像のミュージックビデオ
<script type="text/javascript"> </script> <script src="http://pagead2.googlesyndication.com/pagead/show_ads.js" type="text/javascript"> </script>
マイクロソフトの「Unwrap Mosaics」は、ビデオカメラ映像でも3Dソフトで言う「UVマップ」を自動で作成して「テクスチャー」を貼り付けられる、ハリウッド映画顔負けの編集技術ですが、After Effectsでも実写は無理ですが、3DCGソフトで作成した動画であれば、サードパーティプラグイン「RE:Map」を使えば、オブジェクトのテクスチャーを貼ることができます。
はめ込み画像もこれを使えば、正確な位置に貼り付けられ、障害物があっても対応できます。
＜ムービー：Quicktime 3.1MB＞
今回も体験版なのでＸ印が入っています。
＜3Dソフトでオブジェクト作成＞
3Dソフトの「Cinem 4D」で出力する方法は、チュートリアルビデオが用意されていますが、 Lightwave v9 は無いので、シェーダーは下図の物を使い、UVマップとムービーの出力はRGBとDepth Bufferを用意してAfter Effectsに読み込みしました。
＜After Effectsのコンポジション＞
RE:Mapを設定すると、テクスチャーは青いスクリーン面にピッタリ貼り付けられ、平面の動きに合わせてテクスチャーも一体で動きます。
モニタのオブジェクト2台が交差するシーンがあるので、Depth Bufferをコロラマで調整し、ルミナンスマットで視界を制限しています。
今回は、スクリーン上にテクスチャー貼りつけると画質が悪くなっているので、テクスチャーの作り方を試行錯誤してみるつもり。
3DソフトとRE:Mapがあれば、After Effectsの3D空間で平面を思い通りに変形できそうです。
現在開催されている「NVISION 2008」で、ペガシスのビデオエンコードソフト「TMPGEnc 4.0 XPress」が、NVIDIA CUDAに対応する事を発表しています。
詳しい内容は、日本のペガシスサイトでデータ等が公開されています。
<script type="text/javascript"> </script> <script src="http://pagead2.googlesyndication.com/pagead/show_ads.js" type="text/javascript"> </script>
8/18の記事で、マイクロソフトのビデオ編集技術「Unwrap Mosaics」を取り上げましたが、他のプロジェクトも着々と開発が進行してるようです。
凄い事を簡単にできるこれらの編集機能は、家庭用のビデオ編集ソフトに搭載される可能性が高いので、楽しみにしましょう。
テキストリンクから各プロジェクトのページへ
Computer Vision at MSRC
簡単に背景からオブジェクトを切り取って、穴埋めされています。
マイクロソフトのビデオ編集では、合成箇所がカメラとパースを合わさっていて、プロ並みの仕上げになっている。
開発チームのサイトです。
<script type="text/javascript"> </script> <script type="text/javascript" src="http://pagead2.googlesyndication.com/pagead/show_ads.js"> </script>
