Innovative Tech:
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
東京大学による研究チームが2019年11月に発表した「Biofeedback Interactive VR System Using Biological Information Measurement HMD」は、VR体験中に生体情報を計測するHMD(ヘッドマウントディスプレイ)取り付け型システムだ。
HMDの鼻部分に手軽に取り付けられるのが特徴。Oculus RiftやHTC Vive、FOVEなど市販のHMDへの取り付けが可能だ。
また、顔に強く押し当てることができるため、頭や体の動きに対してズレにくく固定されるのも特徴。そのため、従来の指先や腰など個別に取り付けるウェアラブル生体センサーに比べて取り付け負荷が低い。
デバイスは、光電容積脈波センサーとサーモパイルの2種類のセンサーで光電容積脈波と呼吸波形を計測する。呼吸を計測するために、サーモパイルを配置して、呼気と吸気の温度差を活用。光電容積脈波センサーの適用によって光電容積脈波を計測し、脈波のピーク間隔を計算する。覚醒度は、心拍変動のパターンから評価を行う。これにより、体の動きにある程度頑健に、脈波と呼吸波を、覚醒度を計算するために必要な精度で計測できる。
本システムを用いて研究チームは、バイオフィードバックインタラクティブVRゲームも提案する。推定した覚醒度に応じて、難易度を自動調整するVRコンテンツだ。例えば、ホラーFPSゲームでは、計測された心拍変動から推定されるプレーヤーの恐怖度に応じて、視野範囲を変更。恐怖度が低いと視界が悪くなり、恐怖を追求するプレイヤーにとってより面白くなる。
他にも、計測された呼吸に基づいてアバターの胸部を動かすVR療法で使用したり、VRボクシングゲームで鼓動を聴覚的に提示することで、プレイヤーの興奮を高めるなど応用範囲も広い。
本研究の一部は、内閣府総合科学技術・イノベーション会議の「SIP/ビッグデータ・AIを活用したサイバー空間基盤技術」(管理法人:国立研究開発法人新エネルギー・産業技術総合開発機構)によって実施されたものである。
関連記事
- スマートフォン表示のAR物体を手づかみ ブラウン大学など「Portal-ble」開発
Leap Motionとスマートフォンを組み合わせてハンドトラッキングとフィードバックを効果的に実現。 - 「腕があと2本あったら」を実現するロボットアーム フランスと東大の研究チーム、「Co-Limbs」開発
4本腕のメリットがいろいろあることが分かる、新しい直感的ユーザーインタフェース。 - Google、全身キャプチャと深層学習で3Dアバター生成 任意のシーン、照明に合わせレンダリング可能
既存の全身キャプチャシステムを改良し、ディープラーニング技術を投入することで、フォトリアリスティックな3Dアバターを実現する。
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.