ボカロ界の革命――無償のAI歌声合成ソフトが一般公開 誰でもアイドル声優の歌声が作れるように
AI技術を活用して人間らしい歌声を合成できるソフト「NEUTRINO」が無償公開された。これまでは研究者や開発者しか手にできかったAI歌声合成システムが、一般人でも触れるようになった。
「ボカロ界の革命だ」――AIを活用して歌声を合成するフリーウェア「NEUTRINO」が2月22日に登場し、ニコニコ動画やTwitterで話題になっている。楽譜データを入力すれば、音程や声質などを操作しなくても人間のような自然な歌声を合成できる。
これまでも研究者や専門の開発者によって日本マイクロソフトの「りんな」や、ヤマハが技術協力した「AI美空ひばり」など、AIを活用した歌声合成技術で作られた楽曲が公開されてきたが、NEUTRINOの登場で誰でも“AIシンガー”に触れられるようになった。
NEUTRINOはSHACHIさんが開発した歌声合成ソフト。ニューラルネットワークを活用して事前に実在する声優や歌手の歌い方を学習したAIが、入力された楽譜から本人らしい発声のタイミングや声の高さ、声質などを推定。自動でビブラートや“しゃくり上げ”といった歌唱表現を再現し、人間らしい歌声を合成する。高性能なGPUを搭載していないノートPCでも数分で歌声を合成できる。
歌声ライブラリとして、声優の茜屋日海夏(あかねや ひみか)さんをベースにした「東北きりたん」と、童謡など得意とする「謡子」を同梱。アイドル声優や声楽家のような歌い方を再現できる。東北きりたんのライブラリ作成に使った学習データには、明治大学の森勢将雅准教授が中心となって作成した「研究者向け東北きりたん歌唱データベース」を活用している。
VOCALOIDやUTAUといった既存の歌声合成ソフトでは、人間の歌声に近づけるために声質や音程などのパラメーターを操作する“調教”“調声”と呼ばれる作業が必要だったがNEUTRINOでは必要ない。
実際の歌声を学習したことによる欠点もある。VOCALOIDなどの歌声合成ソフトに比べ、NEUTRINOはどんな楽譜でも歌えるわけではない。人間には歌いにくい早口や、何十秒も息継ぎができないような長いフレーズを歌わせると、歌声が破綻することもある。
22日以降、ニコニコ動画にはNEUTRINOを使った作品が3日間で200本以上投稿されている。Twitterでは作曲家が実際にNEUTRINOで作った音声を公開している。
SHACHIさんは公式Webサイトで、「本ソフト(NEUTRINO)の名称はまだ聞いたことのないような楽曲・ジャンルを開拓してほしいという思いを込めて名付けた。あなたの創作・発見の一助になれれば幸い」としている。
関連記事
- 紅白歌合戦に「AI美空ひばり」出場 「VOCALOID:AI」で歌声を再現
NHKは紅白歌合戦で、ディープラーニング技術を活用して再現した故・美空ひばりさんのステージを放送すると発表した。 - 元・女子高生AI「りんな」、エイベックスから歌手デビュー 人間の“息遣い”を再現
元・女子高生AI「りんな」の歌声が進化。人間の歌声のデータから抽出した「ブレス音」の特徴を学習した。 - 元歌手と判別できないレベルのAI歌声合成、名古屋工業大学と音声ベンチャーが開発
聴いてみればわかるが、人間の歌だ。上手い人は上手く、それなりの人はそれなりに。 - 「AI美空ひばり」の舞台裏 「冗談でやっていいことではない」──故人をよみがえらせたヤマハの技術者の思い
ヤマハがAIの技術を活用して故・美空ひばりさんの歌声を再現し、新曲を披露した。実際に開発を行った研究者は何を考えていたのか、詳しく聞いた。 - 「AI美空ひばり」を支えた技術 「七色の声」どう再現? ヤマハ技術者に詳しく聞いた
AIの技術を活用して、故・美空ひばりさんの歌声を再現したヤマハの技術者に、技術の仕組みや開発の苦労を詳しく聞いた。
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.