Innovative Tech

合成背景に人が溶け込むよう照明を調節する技術 Googleが開発(2/2 ページ)

 1つ目のモジュールで、入力したRGB画像からアルファマットと前景を推定する。これらを2つ目のモジュールに提供し、表面形状とアルベド推定を行い、ピクセルごとの照明表現やライトマップを使用してレンダリングした外観の拡散反射と鏡面反射の成分をモデル化する。最後のモジュールでは、再照明の結果とアルファマット、新しい背景を合成し、新しい背景で再照明された人物画像を生成する。

photo システムの概要

 データセットには、異なる視点を持つ64台のカメラと331個のLED光源を含むLight Stageでキャプチャーした70人のOLATデータ(同じ被写体において、異なる角度からの照明を1つずつ照らして撮影した画像群)を用いた。

 実写画像を用いた実験では、この再照明モデルが、表面下の散乱や鏡面反射などを説得力を持って表現できることを実証し、人物画像の再照明に関する最先端の類似技術を上回ったという。

photo 本手法の出力結果

 このシステムはフレーム単位で動作するため、動く被写体に対しても時間的に一貫した効果を発揮するが、リアルタイムに処理するにはまだ最適化の必要があるという。

印刷する
SNSでシェア
SpecialPR

この記事の著者

山下裕毅
山下裕毅

2014年から幅広い分野の研究論文をピックアップして解説しているメディア「Seamless」(シームレス)を主宰している。

関連記事

こんなメディアも見られています

ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。

メールマガジンを配信中
メールマガジンを配信中

国内外の業界動向、AIやクラウドなどの最新技術、キャリア情報など今知りたい情報をまとめてお届けします。

いますぐご登録

本日の新着記事

アクセスランキング

  1. 1
  2. 2
  3. 3
  4. 4
  5. 5
  6. 6
  7. 7
  8. 8
  9. 9
  10. 10

ITmedia NEWS SNS

X @itmedia_newsをフォロー

インフォメーション

ITmediaNEWSをフォロー

あなたにおすすめの記事PR