Innovative Tech
複数写真から自由視点画像を生成 Googleなど「NeRF」開発
Innovative Tech：
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
米カリフォルニア大学バークレー校、米Googleの研究部門であるGoogle Research、米カリフォルニア大学サンディエゴ校による研究チームが開発した「NeRF」は、さまざまな角度から撮影した写真を機械学習を用いて処理し、自由な視点から見られる画像を生成する技術だ。
NeRFで作成した異なる視点のレゴのブルドーザー
この技術を用いて出力した画像は、見る視点を変えても、その視点に合わせた新しい画像が連続的に生成されるため、立体感を保ったまま閲覧できる。
この画像を生成するために、MLP（Multilayer perceptron）ニューラルネットワークで学習する。特徴的なのが、機械学習で画像生成を行う際に一般的に用いられるCNN（Convolutional Neural Network）を使っていないこと。CNNなしで従来の類似研究より高精度な成果を出せたという。
NeRFの概要図
学習したモデルは、撮影した画像の各点の位置（複数視点の3次元座標）と見る角度（2次元の視線方向）を入力として物体の密度と色（RGB）を予測し、これを基に画像を合成する。合成した画像は、光の反射も再現しており、見る視点を変更すると同時に反射具合が変わるため、写実的な表現と感じ取ることができる。
出力した画像内の手前にある物体の後ろにバーチャルオブジェクトを隠すオクルージョンも可能だ。
NeRFで作成した画像内にバーチャルオブジェクト（オレンジ色のボール）を挿入し、隠蔽効果を実行している様子
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
「命の砂時計」連呼のGMO会見──熊谷代表の発言にXではツッコミ続出
-
2
ロゴ画像用の公開領域に顧客ファイルも保存 GMO系シングルサインオン、4.5万人分漏えい
-
3
GMO熊谷代表、涙の謝罪会見でも“熊谷節”さく裂──「31年間、もうけるという言葉は使ったことがない」
-
4
日本郵政「ゆうID」不正ログイン、他社で流出したパスワード使うリスト攻撃か……2段階認証必須に
-
5
渦中のGMO記者会見、責任の所在はどこに？ 熊谷代表が語った“グループ内の力関係”
-
6
GMO熊谷代表、会見で改めて謝罪 SNS投稿巡り「配慮が欠けていた」
-
7
Anthropic、IPO申請書を修正 7～9月売上高は約170億ドル、インフラ契約額は約8954億ドル
-
8
Marvell、光通信技術のLumentumを約18兆円で買収 AIデータセンターの高速化に対応
-
9
Apple、第4四半期として過去最高の増収増益 ターナスCEO初の決算「Siri AIはずっと望んでいたSiri」
-
10
AI学習への利用拒否をrobots.txtで一括指定へ OpenAIやGoogleなどが対応表明
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR