Innovative Tech:
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
中国の清華大学と米バージニア工科大学の研究チームが開発した「Instance-aware Image Colorization」は、白黒画像をカラー化する深層学習を用いた手法だ。画像内でどの範囲が1つの物体かを判定する領域分割技術を取り入れることで、精密なカラー化を実現した。
深層学習で白黒画像をカラー化する技術はこれまでも研究されてきたが、背景が複雑で複数の細かいオブジェクトを持つ画像ではうまく機能していなかった。
今回の手法では、物体と背景を明確に分けることに着目し、事前学習済みの物体検出器(Mask R-CNN)を導入することで、細かいオブジェクトも正確に色付けすることを目指した。
具体的には、オブジェクト領域を検出し色付けを行うモジュールと、画像全体の色付けを行うモジュールを別々に学習し、2つのネットワークから抽出された特徴を選択して統合することで物体と背景の混色を回避した。
これにより出力した画像は、細かいオブジェクトが複雑に登場する画像でも精密で鮮やかなカラー化が可能となった。また3つのベンチマークデータセットにおいても、既存の手法と比較して良好な結果が得られたとしている。
関連記事
- ディズニー、高解像度で顔を入れ替える深層学習技術を開発
顔をすげ替えて、光やコントラストも反映し、100万画素の解像度で出力できる。 - 髪の毛1本サイズの極細ワイヤー型タッチセンサー「ThreadSense」 ダートマス大学が開発
髪の毛に編み込んで、コントローラーとして使うこともできる。 - 自分でくるりと回るだけで精密な人物3Dモデル作成 1台のKinectで
Kinectで数秒、自分で回るだけで人体3D化が可能。
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.