Innovative Tech
マスクしてても口の動きが見える「Unmasked」
Innovative Tech：
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
ルイジアナ州立大学とドミニカン大学による米研究チームが開発した「Unmasked」は、マスクを着用した状態で内側の口の動きをマスク前面のディスプレイに表示するシステムだ。
マスク内の口の動きを3種類の方法で前方ディスプレイに表示し表情を伝える
コロナ禍でマスクの着用シーンが増えているが、顔の半分が隠れて唇の動きや表情が見えないため、感情表現が伝わりにくくなっている。Unmaskedは、マスクをつけたまま口の動きを対面する人に伝えようという試みだ。
マスク前面に取り付けた3.5インチ液晶ディスプレイに、着用者の口の動きを反映させる方法を採用。マスクの内側に取り付けた加速度センサー、カメラトラッキング付きLED、ストリーミングビデオのいずれかを使用して口の動きを捉える。
1つ目の加速度センサーは、唇の上部、側面、下部に取り付け口周辺の加速度を測定。2つ目のLEDも上部、側面、下部に取り付け、光をマスク内の小型カメラで追跡する。取得したデータにより唇の動きをアニメーション化し、ディスプレイに表示する。
加速度センサー搭載マスクで唇のアニメーションを表示するバージョン
LED搭載マスクで唇のアニメーションを表示するバージョン
3つ目は、マスクの内側に取り付けた小型カメラを使用して、マスク前面のディスプレイに直接口元の映像をストリーミングする、唯一実写を使った方法だ。
ストリーミングで唇の動きを直接表示するバージョン
これら3つのバージョンの平均精度を検証した結果、加速度センサー搭載マスクは80.21％、LED搭載マスクは82.08％、ストリーミングビデオ搭載マスクは86.46％を示した。一番高い精度を示したストリーミングビデオ搭載マスクは、参加者の中でも最も高評価を獲得した。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
メルカリ、梨の転売疑惑に「盗品の出品は確認されず」 誹謗中傷には利用制限も
-
2
「こんなのに追われたら……」急斜面もやすやす爆走、中国製の車輪付き四足ロボのデモ動画が話題 最高時速20km超
-
3
検索結果に「詐欺ではありません」と表示させる詐欺手口、警視庁が注意喚起 AI要約も餌食に
-
4
はてな、11億円流出の調査報告書を公開 偽警察、口外禁止、残業・休出200時間超、孤立……ほころびが連鎖
-
5
Z世代に聞く次の流行、「AIイラスト」が1位に 「Claude Code」も上位
-
6
東野圭吾さん死去、Xなどで追悼相次ぐ 「ガリレオ」など数々の人気作、エンジニアから転身
-
7
NVIDIAやMicrosoftなど30社超、オープンAIの防御ツール共同開発の「Open Secure AI Alliance」設立
-
8
「あ、その情報メモしたい！」を叶えるワイヤレスイヤフォン、Nothing「Ear (3a)」
-
9
有識者はGoogleやX、Meta、ドワンゴを名指しで批判……総務省、偽広告や誹謗中傷に発信・拡散前の対策求める
-
10
暑さ対策が熱い！ 「猛暑対策展」で感じた、転んでもただでは起き上がらない日本人のエネルギー
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR