Innovative Tech
1枚の顔写真にリアルな動きを 韓国企業「MarioNETte」開発
Innovative Tech：
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
韓国のスタートアップ、Hyperconnectが2019年11月に発表した「MarioNETte」は、画像内の人物を写実的に動作させる合成技術だ。上下左右の顔全体の動き、目や口の部分的な動きまでを再構築する。
MarioNETteの出力結果。上段行がターゲット画像、左列がドライバー画像
これまでターゲット画像（操られる側）に、ドライバー画像（操る側）を転送し合成アニメーションを生成する技術は数多く研究されてきた。しかし転送後のターゲット画像の特徴を保つことには四苦八苦している。自然に見せるための重要な課題だ。
新技術では、これまでより特徴を保持した現実的な合成アニメーションを生成する。加えて、少ないターゲット画像（1～8枚）で生成し、任意のターゲット画像へ転送できるのも特徴だ。
MarioNETteのアーキテクチャ
パイプラインでは、各画像を入力に3Dランドマーク検出器を用い、ターゲット画像とドライバー画像の顔のキーポイントを抽出しエンコード。出力系列の要素と強く相関する入力系列の要素を抽出し、最後にターゲット画像とドライバー画像の特徴の不一致をさらに調整するため、敵対させ精度を高める。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
総務省、GMO攻撃者サイトの「ブロッキング」を通信各社に要請 報道
-
2
楽天カード、本人認証をワンタイムパスワードに統一 27年2月から順次
-
3
「低評価でキャラが悲しげな目」 モスバーガーのアンケートがSNSで話題 運営会社に狙いを聞いた
-
4
Binanceの約1兆円流出、北朝鮮ハッカー集団「TraderTraitor」の犯行か
-
5
「PayPay連携の銀行から、お金全部盗られた」被害報告……原因と対策は？ PayPayに聞いた
-
6
松屋のアプリに不正アクセス、約238万件の個人情報が漏えい 停止中の補償も予定
-
7
グッスマ、顧客の2800人のカード番号全16桁＋セキュリティコードなど流出か 下4桁は40万枚分
-
8
セガのスマホゲーム「チェンクロ」、セキュリティ問題で1～2カ月の長期メンテ 13年続く長寿タイトル
-
9
PayPay証券、障害で日本株・ETFが売買できず 14日の予約注文も受付止まる 復旧めど立たず
-
10
「ITノウハウ持つ人材少なく」 PHP脆弱性問題、31市町村でサイト一時停止継続
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR