ニュース
1枚のイラストが10秒でVTuber用2Dモデルに、PFNのAI活用 ライブ配信アプリ「IRIAM」に新機能
ライブ配信アプリ「IRIAM」を提供するIRIAM社は6月18日、1枚のイラストからバーチャルYouTuberのように表情が変化する2Dモデルを自動生成する機能のβテストを開始した。Preferred Networksが提供するAIを活用しており、約10秒で2Dモデルを生成できるという。
ライブ配信アプリ「IRIAM」(iOS/Android、無料)を提供するIRIAM社(東京都渋谷区)は6月18日、1枚のイラストからバーチャルYouTuberのように表情が変化する2Dモデルを自動生成する機能のβテストを開始した。Preferred Networksが提供するAIを活用しており、約10秒で2Dモデルを生成できるという。
ユーザーがイラストをアップすると、PFNの深層学習技術で顔などをパーツ分けし、IRIAM社のモデリング技術「表情表現用モデリング」「表情表現用エンジン」でそれぞれを動かす仕組み。生成したモデルは目や口、首などを動かせる他、「怒った顔」「困った顔」など表情を変化させることも可能という。
通常、2Dモデルのアニメーションは動画データとして出力することが多いが、今回の機能では各パーツの位置関係などをデータ化した「モーションデータ」として出力。色などの情報を含まないため、生成にかかる時間を約10秒、出力後のファイルサイズを1MB程度に抑えられたという。
IRIAMはバーチャルなキャラクターになりきってライブ配信できるサービス。IRIAM社は今後、目や首といったパーツに加えてイラストの髪部分も動かせるよう、機能のアップデートを進める。
関連記事
- AIで漫画のキャラを自動着色、作業時間を半分以下に ピクシブとPFNが法人向けに試験提供
ピクシブとPreferred Networksは5月28日、AIで漫画のキャラクターを自動着色するサービス「Petalica Paint for Manga」の試験提供を法人向けに始めた。着色にかかる作業時間を手作業の半分以下に減らせるという。すでにDNPなど3社が利用を始めている。 - 東映、アニメ背景制作をAIで効率化 写真をイラスト風に自動変換、前処理を1/6に短縮
東映アニメーションが、PFNのAI技術を活用してアニメ制作を効率化する実験を行った。背景写真をアニメ調やサイバーパンク調に自動変換することで、美術クリエイターが画像の前処理にかける時間を従来の約6分の1に短縮できた。 - 「子供がゲームより夢中になる」──PFNの教材を使ったプログラミング教室の魅力を探る
AIベンチャーのPreferred Networksと、学習塾のやる気スイッチグループが2020年夏にプログラミング教室を開校。ゲームより夢中になる子供もいるという、同教室の魅力を探った。 - 「ふんふふん」で曲名が分かるGoogleの鼻歌検索 驚きの的中度支えるマッチング手法
モバイルのGoogleアプリに「この曲なに?」ときいてふんふふんと鼻歌(歌詞付きも可)を歌うと曲名を表示してくれる「鼻歌検索」。検索が得意なGoogleさんの、さすがの的中度です。従来の類似サービスとの違いを中の人が説明してくれました。 - 京大、ピアノ演奏を“耳コピ”するAIを開発 ゆゆうたさんなどの演奏を採譜したデータも公開
京都大学の研究チームは6月15日、ピアノの演奏データから楽譜を自動で書き起こすAIを開発したと発表した。実際に採譜したデータも公開していて、専用のWebページではピアノを演奏するYouTuberの鈴木ゆゆうたさんなどの動画と、動画からAIで採譜した楽譜を比較できる。
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.