多数のIoTをビートで刻む　産総研Songle Syncが目指すライブの形

公開 2017年08月02日 21時13分

更新 2017年08月02日 23時17分

著者

松尾公也

[ITmedia]

印刷する Googleで優先するソースとして追加

　「Songle Syncを使えばIoT（Internet of Things）がIoMT（Internet of Musical Things）になる」と産総研の後藤真孝さんは紹介した。

「ぼかりす」から一貫して音楽に関わってきたチームリーダーの後藤真孝さん

　演奏に合わせてスマートフォン、照明、腕輪、ペンライト、さまざまなデバイスが同期して色を変えたり、図形を描いたりする、そんな一体感のあるライブを数万人規模で実施するようなことはいまだ行われていない。しかし、産総研（国立研究開発法人産業技術総合研究所）が8月2日に公開した技術を使えば、無償で簡単にそうしたプログラムを組むことができる。その技術の名をSongle Syncという。

Songle Syncの仕組み

服に仕込まれたLEDが点滅、照明とも同期している

　音楽の再生に合わせて、Windows、Mac、iPhone、iPad、Android、さらにはRaspberry PiやArduinoを使って制御されたさまざまなIoTデバイス、ロボットが遅延なしで連携動作する。2日に行われた記者説明会では、ネットワーク接続された最大125台のデバイスが音楽に連動して表示や動きを変えるデモを行った。そのうち十数台はその場でQRコードでアクセスした報道陣のスマートフォンで、その画面には音楽と同期したCGアニメーションが表示され、動いていた。

QRコードでアクセスしたブラウザ上に、音楽に合わせてアニメーションが表示される

ロボットは音楽に合わせてダンス

　産総研情報技術研究部門首席研究員の後藤真孝さんを中心としたチームは2012年からSongleという音楽解析技術をベースにしたサービスを発表しており、すでに100万曲以上が解析済み。7月30日に公開されたばかりのボカロ曲「テレホタイム」も含まれる。このSongleを元に音楽の鑑賞体験をよりアクティブなものにする研究を行ってきたが、今回のSongle Syncにより、それをスマートデバイスやIoT制御にまで拡大した。

　多数のデバイスを音楽に同期させる試みとしてはこれまでにも赤松正行さんが行った例などがあるが、Songle Syncは登録済みの100万曲超の楽曲との同期を簡単にするためのAPIが公開されているところが大きく異なる。

　このAPIを使うと、Songleで解析された音楽イベント（ビート、小節、サビ、繰り返し、コード）のタイミングに合わせてデバイスの振るまいを変化させることが可能となる。例えばサビが始まったらカーテンレールを動かして、外の光が差し込むようにするといったこともできる。同時に照明を落としたり、サビに合わせてロボットがよりアクティブに動くといった演出も可能だ。

　その音楽イベントに合わせて駆動するプログラムを記述するだけでよく、JavaScriptが動作するブラウザやNode.jsが動くIoTデバイスならばこのAPIで動かすことができる。

　サーバを増やすことで数万人規模の同期が理論上は可能となるというこの技術。スマートホームから店舗の演出、さらにはライブエンターテインメントまで、さまざまな応用が可能と後藤さんは想定する。

　Apple HomeKitやGoogle Homeなど既存のIoTプラットフォームは現在サポートしていないが、API公開により接続できるデバイスの増加が期待される。

　Songle Sync。音楽好きなIoT初心者がプログラミングを始めるきっかけにもなりそうだ。

印刷する