モナ・リザが走る! 1枚の絵とモーションデータだけでぬるぬる動き出す「Magic Animate」が話題に
画像、テキストと矢継ぎ早に新技術が開発されてきた生成AIだが、その動きが動画分野にも波及しつつある。中国Alibaba発の「Animate Anyone」が話題になったばかりだが、今度はTikTokを運営する中国ByteDanceとシンガポール国立大学が共同で開発した「Magic Animate」が登場した。
画像、テキストと矢継ぎ早に新技術が開発されてきた生成AIだが、急速に動画分野にも進出しつつある。中国Alibaba研究グループが発表した「Animate Anyone」が話題になったばかりだが、今度はTikTokを運営する中国ByteDanceとシンガポール国立大学が共同で開発した「Magic Animate」が登場した。
これは、人物が映っている1枚の絵/写真とモーションデータを組み合わせるだけで、静止画1枚しか情報がない人物をモーションデータと同じ動きでアニメーション化できるというもの。しかも人物の顔や服装といったディティールを保持したまま、かつモーションに引っ張られることなく安定した背景のままアニメーション化を実現している。同様のアニメーション化技術と比べて破綻が少ないのが特徴。
デモとして、走っている人物のモーションデータを使い、ダ・ヴィンチの「モナ・リザ」や、フェルメールの「真珠の耳飾りの少女」を軽快に走らせたり、「DALL・E 3」で生成した人物イメージを踊らせたりしたビデオを公開。また、複数人を同時にアニメーション化させることもでき、写真の3人がキレのあるダンスを踊るデモも掲載している。
特に、走るモナ・リザの破壊力は高く、Magic Animateを紹介するX(旧Twitter)のポストに対し、「フェルメールもミュシャもムンクも、ナポレオンもベートーベンも聖徳太子も、みんな走らせてマラソン大会できちゃう」「『クララが立った』に次ぐ衝撃『モナリザが走った』」といったコメントの他、ネットミームの「止まらないオルガBBを思い出した」とポストするユーザーもいた。
関連記事
- カメラ映像から複数人の動きを骨格・筋レベルで同時検出 東大とドコモがモーションキャプチャ技術発表
動きの激しい、多人数がプレイするスポーツでモーションキャプチャが可能な技術が開発された。 - 映像から複数人の激しい動きを解析、東大とドコモが技術開発 ディープラーニング活用
東京大学とNTTドコモが、ディープラーニングを活用し、カメラ映像から複数人のモーションキャプチャーを行う技術を開発。スポーツやエンターテインメント領域、介護・リハビリ現場などでの活用を目指す。 - 「ホロライブ」のカバーが総工費27億円の新スタジオ モーションキャプチャー用カメラ200台超を導入
「ホロライブ」を運営するカバーがモーションキャプチャーや音楽収録、クロマキー撮影が可能な新スタジオを設立。総工費は約27億円という。 - Ubisoft、ゲームキャラを自然に動かせる低コストな深層学習モデルを開発
ゲーム制作のコスト引き下げに効果のあるアニメーション手法。 - iPhoneだけで全身モーションキャプチャする無料アプリ
全身モーションキャプチャアプリ「ミチコン-VisionPose Single3D-」がリリースした。
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.