Innovative Tech

音楽からダンスを自動生成するAI振付師 Googleなど開発

Innovative Tech:

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

 南カリフォルニア大学、Google Research、カリフォルニア大学バークレー校による米研究チームが開発した「AI Choreographer」は、音楽からダンスの振り付けを作成する機械学習フレームワークだ。生成した振り付けを3Dキャラクターに転送しダンスアニメーションを作成できる。本物のダンサーから学習しており、リアルで滑らかな動きを生成する。

photo 本手法の概要

 40人のプロダンサーが踊るソロダンス1510本、グループダンス108本含む動画数1万3940本で構成するストリートダンス動画データベース「AIST Dance Video Database」から3Dモーションを再構築した3Dヒューマンダンスモーションデータセット「AIST ++」には、2Dと3Dの両方での人の関節位置17カ所、24のポーズパラメーターなどのアノテーションが含まれる。

 このデータセットにより、非常に滑らかなダンスモーションを出力する。先行研究の2つのベースラインと比較する評価実験を行なったところ、本手法がより本物に近い動き、多様なダンスモーションを生成できることを示したとしている。生成された3次元の動きと音楽との相関についての評価も本手法が上回ったという。

 動画では、多様な音楽で踊る3Dキャラクターを確認できる。

印刷する
SNSでシェア
SpecialPR

この記事の著者

山下裕毅
山下裕毅

2014年から幅広い分野の研究論文をピックアップして解説しているメディア「Seamless」(シームレス)を主宰している。

関連記事

こんなメディアも見られています

ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。

メールマガジンを配信中
メールマガジンを配信中

国内外の業界動向、AIやクラウドなどの最新技術、キャリア情報など今知りたい情報をまとめてお届けします。

いますぐご登録

本日の新着記事

アクセスランキング

  1. 1
  2. 2
  3. 3
  4. 4
  5. 5
  6. 6
  7. 7
  8. 8
  9. 9
  10. 10

ITmedia NEWS SNS

X @itmedia_newsをフォロー

インフォメーション

ITmediaNEWSをフォロー

あなたにおすすめの記事PR