Innovative Tech

カメラなしでも全行動を文章で記録する「RF-Diary」　RF信号でライフログ技術、MITが開発

公開 2020年09月10日 08時35分

更新 2024年04月02日 11時45分

著者

山下裕毅

[ITmedia]

印刷する Googleで優先するソースとして追加

Innovative Tech：

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

　米マサチューセッツ工科大学（MIT）CSAIL（Computer Science and Artificial Intelligence Laboratory）の研究チームが開発した「In-Home Daily-Life Captioning Using Radio Signals」（RF-Diary）は、家庭内に設置した無線周波数（RF）信号装置で人の動きを記録し、何をしていたかを文章で残せるシステムだ。

　人の日常生活を記録する場合、一般的なRGB方式のカメラをトイレや浴室、寝室などに設置するとプライバシー上の懸念が生じるだけでなく、カメラの視野が限られるため物陰で見えなかったり、暗いシーンでは撮影が困難だったりする。どの部屋に行ってもレンズがこちらを向いているとしたら、それは耐え難いものだろう。

　これらの問題に対処するために、RF信号を使用する。RF信号は1台だけで部屋の大部分をカバーし、壁や遮蔽物を通過できるだけでなく、明暗にかかわらず機能する。

　今回使用するRF信号ベースの無線機（垂直/水平方向に配置された2つのアンテナアレイを搭載）は、FM-CW（周波数変調連続波）と呼ばれる波形を送信し、5.4GHzから7.2GHzまで周波数を変化させる。これにより、人間の骨格の状態を動的に記録できる。

2つのシーンをRGBカメラとRF-Diaryで記録しテキスト記述した例。上段ではRGBカメラは暗闇で記録できていないが、RF-Diaryは記録に成功し「ベッドで寝る、コートを着る、机に歩いて行きラップトップを操作する」と、具体的に動作を記録している。下段ではRGBカメラの場合、「皿を洗う」と誤記しているのに対して、RF-Diaryでは「コンロ上で料理をする」と正確に記録している

　入力にはRF信号の他に、ベッドやソファ、テレビ、冷蔵庫などの静的な物体の大きさと位置が記された家庭内の見取り図を使う。見取り図は、レーザーメーターを使えば簡単に測定可能だ。