Innovative Tech
マスクしてても口の動きが見える「Unmasked」
Innovative Tech：
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
ルイジアナ州立大学とドミニカン大学による米研究チームが開発した「Unmasked」は、マスクを着用した状態で内側の口の動きをマスク前面のディスプレイに表示するシステムだ。
マスク内の口の動きを3種類の方法で前方ディスプレイに表示し表情を伝える
コロナ禍でマスクの着用シーンが増えているが、顔の半分が隠れて唇の動きや表情が見えないため、感情表現が伝わりにくくなっている。Unmaskedは、マスクをつけたまま口の動きを対面する人に伝えようという試みだ。
マスク前面に取り付けた3.5インチ液晶ディスプレイに、着用者の口の動きを反映させる方法を採用。マスクの内側に取り付けた加速度センサー、カメラトラッキング付きLED、ストリーミングビデオのいずれかを使用して口の動きを捉える。
1つ目の加速度センサーは、唇の上部、側面、下部に取り付け口周辺の加速度を測定。2つ目のLEDも上部、側面、下部に取り付け、光をマスク内の小型カメラで追跡する。取得したデータにより唇の動きをアニメーション化し、ディスプレイに表示する。
加速度センサー搭載マスクで唇のアニメーションを表示するバージョン
LED搭載マスクで唇のアニメーションを表示するバージョン
3つ目は、マスクの内側に取り付けた小型カメラを使用して、マスク前面のディスプレイに直接口元の映像をストリーミングする、唯一実写を使った方法だ。
ストリーミングで唇の動きを直接表示するバージョン
これら3つのバージョンの平均精度を検証した結果、加速度センサー搭載マスクは80.21％、LED搭載マスクは82.08％、ストリーミングビデオ搭載マスクは86.46％を示した。一番高い精度を示したストリーミングビデオ搭載マスクは、参加者の中でも最も高評価を獲得した。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
Aterm設定画面、「PHP使ってないのに.php」なぜ？ NECに聞いた
-
2
「命の砂時計」連呼のGMO会見──熊谷代表の発言にXではツッコミ続出
-
3
ビックカメラG、メールアドレスなど約1490万件漏えいの可能性 委託先への不正アクセスで
-
4
セガ系に不正アクセス ゲームセンター向けサービス停止 バンダイ系の「太鼓の達人」などにも影響
-
5
Microsoft、メモリ8GBのWindows 11 PCを高速化 マルチタスク処理は最大40％向上
-
6
メルアド7700万件流出か アララメッセージの不正アクセスで続報 共通環境から契約企業のサーバへ侵入 悪用も確認
-
7
セブン-イレブン「7NOW」の利用者情報16万件超漏えい 配達委託先に不正アクセス、出前館でも約800件
-
8
GMO熊谷代表、涙の謝罪会見でも“熊谷節”さく裂──「31年間、もうけるという言葉は使ったことがない」
-
9
なぜCookie同意バナーの「拒否」ボタンは見つからないのか 1万4000サイト調査で見えた“同意させる”手口
-
10
Apple、刷新版「Siri AI」を全開発者に開放 アプリ連携で予約や注文などの操作が可能に
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR