Innovative Tech
Niantic、キャラクターが画像内の後ろに回り込める技術を開発
Innovative Tech：
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
米Nianticと英ユニバーシティ・カレッジ・ロンドンの研究チームが開発した「Footprints and Free Space from a Single Color Image」は、1枚のRGB画像の中で、キャラクターが前景の後ろに回り込んで通過するなど、違和感のない移動を可能にする技術だ。
ペンギンのキャラクターが人の背後を通過し移動した様子
今回のモデルは、画像内で見えている平面だけでなく、前景の後方にある隠れた平面も計算する。画像から見える移動可能領域のセグメンテーションマスクだけではなく、深度データ、隠れた領域のセグメンテーションマスクや深度データの情報表現も活用する。単一のネットワークで構築するため、高速処理が可能という。
（左）見えている領域のみを計算する既存手法（右）物体の背後の見えていない領域も計算する本手法
これらを学習用するため、データセット作成用のパイプラインも提案している。カメラポーズ、フレーム毎の深度、セマンティックセグメンテーションを用いて、ステレオ映像からトレーニングデータを形成する。
訓練データセットを作成するためのパイプライン
学習したモデルは、物体の背後にある実際の経路を含めたセグメンテーション画像を出力し、バーチャルキャラクターが回り込むように横断させることを可能にする。
評価の結果、類似手法よりも高い精度が得られたとしている。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
「命の砂時計」連呼のGMO会見──熊谷代表の発言にXではツッコミ続出
-
2
ロゴ画像用の公開領域に顧客ファイルも保存 GMO系シングルサインオン、4.5万人分漏えい
-
3
GMO熊谷代表、涙の謝罪会見でも“熊谷節”さく裂──「31年間、もうけるという言葉は使ったことがない」
-
4
渦中のGMO記者会見、責任の所在はどこに？ 熊谷代表が語った“グループ内の力関係”
-
5
Marvell、光通信技術のLumentumを約18兆円で買収 AIデータセンターの高速化に対応
-
6
アットコスメ、会員約300万人分の情報漏えい 不正アクセスで
-
7
Anthropic、IPO申請書を修正 7～9月売上高は約170億ドル、インフラ契約額は約8954億ドル
-
8
GMO熊谷代表、会見で改めて謝罪 SNS投稿巡り「配慮が欠けていた」
-
9
日本郵政「ゆうID」不正ログイン、他社で流出したパスワード使うリスト攻撃か……2段階認証必須に
-
10
Apple、第4四半期として過去最高の増収増益 ターナスCEO初の決算「Siri AIはずっと望んでいたSiri」
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR