Innovative Tech
「舌打ち」で障害物の位置を特定 音の跳ね返りをVR上で可視化、エコロケーションを体験
Innovative Tech:
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
岐阜大学の研究チームが開発した「MEcholocation」は、舌打ちの反響音で周囲の障害物を把握する能力を体験できるVR(バーチャルリアリティー)システムだ。舌打ちした音が複数のボールとしてバーチャル内で見え、そのボールの跳ね返りを手掛かりに周囲の机や壁を把握する。実際の部屋を舞台に、舌打ちの反響音を確認しながら暗闇内の障害物を回避して部屋の脱出を目指す。
全盲のダニエル・キッシュさんは、目の代わりに舌打ちの音の反響によって世界を見ているという。これはコウモリやイルカが超音波の反響を用いて自身の位置を把握するエコロケーション(反響定位)に似ている。
舌打ちによる短い音を使い、物体に跳ね返った音から周囲の状況を把握する。彼は目の前の車の形状を説明し、建物の建築スタイルを当て、自転車に乗ることにも成功しその能力を実証した。この能力は、生まれて1年余りで全盲になり幼少期から訓練を続けてきたものであり、一般の人が今すぐ習得できる代物ではない。
そこで研究チームは、舌打ちした音を目で見えるようにしてエコロケーションを容易に体験できるVRシステムを提案する。これは舌打ちした音をボールに見立てバーチャル内で可視化し、そのボールの移動で音の動きや跳ね返りを表現するアイデアだ。ユーザーはVR HMD(ヘッドマウントディスプレイ)を装着し、自身の舌打ち音の跳ね返りを目視して周囲の障害物を認識することで、エコロケーションを体験する。
まず、LiDAR搭載スマートフォンで3Dスキャンした部屋(実環境)をバーチャル内で映し出す。HMD内蔵のマイクで舌打ち音が検出され、音圧によってボールの大きさを変えてユーザーの口から発射される。
その際、音が遠くなると音圧レベルも下がるため、この音の減衰もボールのサイズで表現した。また同じ距離でも正面にいる方が聞こえやすく、横、後ろにいくに従って音が小さくなる現象を再現するため、HMDの正面方向との角度の差が大きくなるごとにボールの大きさを小さくした。
体験の冒頭では、部屋全体が見えるようにしてボールがどのように壁や机などに跳ね返るかを確認できるようにしている。中盤では、部屋を真っ暗にしてボールの跳ね返りしか見えない状態に切り替える。
実世界とVRは連動しているため、舌打ちの跳ね返り音と実際の壁や机の距離は連続して同期される。実世界と同期した暗闇の状態でユーザーは、ボールの跳ね返りを手掛かりに障害物を認識しながら歩いて移動する。その際、暗闇からその部屋の出口地点(開いた扉)まで向かう脱出ゲームとしての要素を取り入れている。
出典および画像クレジット: 小木曽直輝,阪井啓紀,酒井康希. MEcholocation 第 27 回日本バーチャルリアリティ学会大会論文集(2022年9月)
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
「楽天トラベル」に不正アクセス 顧客情報最大約260万件など流出か 予約者約3.6万件のクレカ情報も
-
2
GMO不正アクセス、犯人側は「27日に顧客のPC攻撃」予告 GMOが端末回収、ホワイトハッカーが解析中
-
3
NECのルータ「Aterm」、PHP脆弱性の影響なし 設定画面URLの「.php」は無関係
-
4
GMO、PCのバックアップと電源オフ呼びかけ VPS利用者に きょう正午の攻撃予告受け
-
5
Google、プライバシーポリシーに「Gmail」「Googleフォト」のデータを広告に使う例外を追加 回避方法は
-
6
「年齢は合ってますが、人間ではありません」 6歳の飼い猫に届いた“進研ゼミの案内” なぜ届いたのかベネッセに聞いた
-
7
GMO熊谷代表「社内ホワイトハッカーが事前に指摘」も対策遅れ、国に「能動的サイバー防御」要請 「責任転嫁では」SNSで批判も
-
8
「5年でバッテリーが使い物にならなくなる」は本当か テスラ「モデル3」5年目点検で分かったこと
-
9
「若手はAI使うな」は“老害”なのか? 新人教育で「AI禁止」した企業の1年後
-
10
政府、サイバー攻撃の「緊急対策パッケージ」来週中に策定へ 高市首相がサイバー閣僚会議の初会合で指示
ITmedia NEWS SNS
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR