実写とレイトレーシングで現実感アップ、ソニーが技術開発

公開 2019年09月18日 18時26分

更新 2024年04月02日 11時59分

著者

芹澤隆徳

[ITmedia]

印刷する Googleで優先するソースとして追加

　ソニー・インタラクティブエンタテインメントは9月18日、演算で光線を再現するレイトレーシング技術を用いたリアルなCGを、リアルタイムに実写映像と組み合わせる技術を披露した。映画やゲームの制作が容易になるとしている。

レイトレーシング技術のデモンストレーション。手前の机を撮影している画面にCGの黄色いクルマが登場

　レイトレーシングは、光源から発生する光の反射と、それに伴う散乱を計算するため演算量が膨大になることで知られている。例えば1ピクセル当たり12サンプル×6バウンス（反射）なら光線の軌道は72。4K映像では1フレームあたり829万4400ピクセル×72で5億9719万6800通りもの光線軌道を計算しなければならない。

　そこでソニーは、多数のGPUを並列稼働させてレイトレーシングのリアルタイム処理を行うシステムを開発。レイトレーシングを適用したオブジェクトを実写映像に合成し、違和感のない映像を作りだした。デモンストレーションでは、現実にあるテーブルの上に配置したモノをCGの人形に置き換えた。モノを横に移動させると、CGの人形も同じように移動する。

GPUボードを多数装着したハイパフォーマンスPCを3台用意した

　レイトレーシングを応用すれば、人形の素材感をガラリと変えることもできる。ソニーは深層学習（ディープラーニング）で素材ごとに異なる光の拡散と反射を推測し、リアルタイムにCGへ反映するシステムも開発。素材撮影用のカメラの前に緑色のプラスチックスプーンを置くと、人形も緑色のプラスチック人形に早変わりした。金属の皿を撮影すると、人形はメタリックな彫像になる。