角膜に写る自分の姿から、スマートフォンの持ち方を特定する技術 慶應大などのチームが開発:Innovative Tech
慶應義塾大学 lifestyle Computing LabとYahoo! JAPAN研究所、東京工科大学の研究チームは、ユーザーの角膜に写るスマートフォンの像をインカメラで取得し、操作しているスマートフォンの持ち方を識別する技術を開発した。
Innovative Tech:
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
慶應義塾大学 lifestyle Computing Labの張翔さん、杉浦裕太さん、Yahoo! JAPAN研究所の池松香さん、東京工科大学の加藤邦拓さんによる研究チームが開発した「角膜反射像を利用したスマートフォンの把持姿勢推定」は、ユーザーの角膜に写るスマートフォンの像をインカメラで取得し、操作しているスマートフォンの持ち方を識別する技術だ。角膜に写るスマートフォンと操作する指の影から、現在の持ち方を深層学習で特定する。
ユーザーがスマートフォンをどのように持って、どの指で操作しているかの情報は、開発側にとって役に立つ。把持姿勢に合わせた画面表示や操作ボタン位置の自動切り替え、アプリや機能を自動で立ち上げるなどのユーザーインタフェースの改善に生かせるからだ。
研究チームは、スマートフォンを操作する際に、目の角膜にスマートフォンの画面の光が反射して像が写る現象に着目した。ユーザーが画面に指を置いている部分は影となって欠けることを考慮すれば、持ち方を識別できると考えた。
スマートフォンの内蔵するインカメラで顔写真を自撮りし、収集した顔写真からCNN(Convolutional Neural Network)でスマートフォンの持ち方の学習および識別を行う。今回は、6種類(両手横持ち・両親指操作、両手縦持ち・両手親指操作、左手持ち・左手親指操作、右手持ち・右手親指操作、左手持ち・右手人差し指操作、右手持ち・左手人差し指操作)の持ち方を対象とした。
学習を行うため、iPhone向けのアプリを実装し、さまざまな輝度で6種類の持ち方を撮影。取得したデータから前処理として、角膜部分の切り取り、明るさやコントラストの調整、データ拡張を行った。
被験者13人で行った実験結果は、平均85%の精度で6種類の持ち方を識別。特に、両手横持ちに関しては適合率と再現率がともに最も高かった。右手で持っている条件と左手で持っている条件間では指の像の欠け方が大きく変わるため精度が高く、それに対し、親指と人差し指のどちらで操作しているかの条件については指の像の欠け方に大きな影響を及ぼさないため精度が低かった。
今後は、親指と人差し指での操作を高精度で分類するために、画像に加えて動画の撮影や音を使ったセンシングなどで指の動きを捉える方法を組み合わせたいという。
関連記事
- 東大、“世界最高性能”のディープフェイク検出AIを開発 フェイクニュースやポルノなどの悪用根絶に期待
東京大学の研究チームは、動画内の人物の顔が本物かどうか判定する、ディープフェイク検出AIを開発した。このAIは、既存研究の性能を大きく上回り、世界最高性能の評価を示したという。 - 「SNSで交友関係が豊かでも現実がそうとは限らない」 東京都健康長寿医療センター研究所が調査
東京都健康長寿医療センター研究所が、SNSでの交友関係が豊かでも現実でそうとは限らないとする調査結果を発表した。Facebookの友達数が多くても困ったときに助けてくれる人は一部に限られるとしている。 - 握力を増強できるバナナみたいな手袋、米MITなどが開発 編物の人工筋肉を空気で膨張
米MIT CSAILと米Tencent Americaの研究チームは、センシング機能を搭載した織物ベースのソフトな空気圧アクチュエータを開発した。 - 古い白黒映画を“昨日撮影したかのように”AIが修復 フィルムノイズを除去しカラー
香港城市大学と米Microsoft Research、Microsoft Cloud+AIによる研究チームは、劣化の激しい古い白黒映画を修復しカラー映像に変換する深層学習フレームワークを開発した。古い映像にある独特のフィルムノイズなどを修復し、色付けを行う。 - 基本情報技術者試験がいつでも受験できるように、年2回から変更 2023年4月スタート 出題範囲も変更
情報処理推進機構は、基本情報技術者試験と情報セキュリティマネジメント試験を通年試験化すると発表した。これまで年2回のみ実施していた試験を、受験者が都合の良い日時を選択して受験できるようになる。2023年4月から適用する。
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.