Innovative Tech
音楽からダンスを自動生成するAI振付師 Googleなど開発
Innovative Tech：
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
南カリフォルニア大学、Google Research、カリフォルニア大学バークレー校による米研究チームが開発した「AI Choreographer」は、音楽からダンスの振り付けを作成する機械学習フレームワークだ。生成した振り付けを3Dキャラクターに転送しダンスアニメーションを作成できる。本物のダンサーから学習しており、リアルで滑らかな動きを生成する。
本手法の概要
40人のプロダンサーが踊るソロダンス1510本、グループダンス108本含む動画数1万3940本で構成するストリートダンス動画データベース「AIST Dance Video Database」から3Dモーションを再構築した3Dヒューマンダンスモーションデータセット「AIST ++」には、2Dと3Dの両方での人の関節位置17カ所、24のポーズパラメーターなどのアノテーションが含まれる。
このデータセットにより、非常に滑らかなダンスモーションを出力する。先行研究の2つのベースラインと比較する評価実験を行なったところ、本手法がより本物に近い動き、多様なダンスモーションを生成できることを示したとしている。生成された3次元の動きと音楽との相関についての評価も本手法が上回ったという。
動画では、多様な音楽で踊る3Dキャラクターを確認できる。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
ドラマ「VIVANT」のワンシーンに映像制作界隈が「ぞっとする」 microSDカードを端子むき出しで手渡し
-
2
マンガ原稿をクラウドに上げただけでGoogleアカウントBAN Gmailも道連れ……日本では合法なのになぜ？
-
3
不正アクセスで「当選」が「落選」に改ざん ウルトラマンショップのLINE整理券システムで被害
-
4
ドコモ、34万ユーザーの電話番号などAmazonに無断提供 人的ミスで同意事項を削除
-
5
“自動で耳コピ”アプリ、ヤマハが無料公開 音源読み込み→3分でピアノ譜に
-
6
日本郵便、荷物の本人確認をICチップ付き身分証4種に限定 スマホのマイナカードで受け取れる場合も
-
7
無人タクシー、東京で来年運行へ GO、Waymo、日本交通が合意
-
8
メルカリ、ポケカ最新パックの出品禁止に
-
9
「GPT Astraでゲーム開発＝ほぼソシャゲ」説を唱えたい 非エンジニアの挑戦は、廃課金への道か
-
10
メルカリ株が大幅安、1カ月で3割下落 最新ポケカ出品禁止を嫌気、転売・不正利用の批判も相次ぐ
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR