Facebook、ライブ動画をリアルタイムで加工できる「Caffe2Go」発表
Facebookは、Prismaなどのアプリで知られる画像加工機能「スタイルトランスファー」をリアルタイムのストリーミング動画に適用するディープラーニングプラットフォーム「Caffe2Go」を発表した。iOSおよびAndroid版公式アプリで利用できるようにする計画だ。
米Facebookは11月8日(現地時間)、「ライブ動画」でも使える独自の「スタイルトランスファー」を“間もなく”モバイルアプリに追加すると発表した。
スタイルトランスファーとは、画像や動画を加工して、例えばゴッホやレンブラントなどのような著名画家のタッチに変えるツールのことだ。米SnapchatやロシアPrismaのフィルターで知られるようになった。下の画像は、Facebookが紹介したスタイルトランスファーのサンプルだ。
Facebookのスタイルトランスファーは、ライブ動画にも適用できるのが特徴だ。
*** 一部省略されたコンテンツがあります。PC版でご覧ください。 ***
スタイルトランスファーは「ディープラーニング」技術によるもので、一般には適用対象のコンテンツを解析するためにクラウドにアップロードする必要がある。これを、モバイル端末側だけで処理できるようにしたことで、ライブ動画への適用を可能にしたとしている。
Facebookはこの新しいスタイルトランスファーのために構築したディープラーニングプラットフォームを「Caffe2Go」と名付け、そのフレームワークをモバイルアプリに統合したという。
Caffe2Goは、画像や動画の解析に使うAIモデルのサイズを100分の1に凝縮することで、iOSおよびAndroid上でのディープニューラルネットワークの稼働を可能にするという。モバイル端末上で、毎秒20フレームを加工できるとしている。
*** 一部省略されたコンテンツがあります。PC版でご覧ください。 ***
同社はCaffe2Goを向こう数カ月中にオープンソースで公開する計画だ。
Facebookは、Caffe2Goはスタイルトランスファーだけでなく、アクセシビリティや教育などの分野でも応用できる技術であり、今後この技術を採用するモバイルでの素晴らしいAIおよびAR(拡張現実)体験を提供していくとしている。
関連記事
- Facebook、売上高が初の70億ドル超え モバイルのみからのMAUが10億人超
Facebookの7〜9月期決算は、予測を大幅に上回る増収増益で、売上高は70億ドルを超えた。モバイル動画広告が好調だった。モバイルのみからアクセスするDAUが10億人を超えた。ザッカーバーグCEOは、MessengerなどのアプリへのAI採用の動画関連技術投入を予告した。 - Facebookの動画、「Apple TV」とGoogleの「Chromecast」で大画面での視聴可能に
動画サービスに注力するFacebookが、ニュースフィード上の「ライブ動画」を含む動画投稿を「Apple TV」とGoogleの「Chromecast」に対応させた。動画のテレビアイコンをタップしてキャスト先を選ぶだけで、テレビなどの大画面でニュースフィードの動画を視聴できる。 - Facebook、AI画像認識技術「DeepMask」などをオープンソース化
Facebookが、写真に写っている物体を抽出してそれぞれの物体が何かを認知するコンピュータビジョン技術のコードをGitHubで公開した。 - Facebook、AI採用の画像の音声キャプションを視覚障害者向けに提供開始
人工知能研究に注力するFacebookが、自社開発の物体認識技術を採用した投稿写真の内容説明読み上げ機能「自動代替テキスト」を発表した。目の不自由なユーザーはサービスに投稿された写真をスワイプすることでその説明を再生できる。 - Facebookの2016年は未来技術(VR、AI、Internet.org)元年、とザッカーバーグCEO
Facebookのマーク・ザッカーバーグCEOが、2016年はこれまで培ってきたVR(仮想現実)、AI(人工知能)、Internet.org(万人にネット接続を提供する取り組み)の研究開発の成果を適用し始める年になると語った。
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.