Innovative Tech

ARでドローンを操作　東北大学が「PinpointFly」開発

　東北大学の研究チームが2019年11月に発表した「PinpointFly」は、ドローンの飛行をARでリアルタイムに制御するインタフェースシステムだ。

　ドローンを目視で制御する場合、機体を視認しながら、ドローンを中心とする座標軸で操作するのが一般的。その場合、機体の奥行きなどの3次元空間での位置を正確に把握しなければならず、ドローンの向きにも常に注意を払う必要がある。初心者にとっては直感的ではない。

　そこで本システムは、初心者でも簡単かつ正確に操作できるARを用いたドローン制御法を提案する。操作は、モバイルディスプレイ越しに飛行中のドローンを見て、そのドローンの移動先を入力するのみ。

　ディスプレイにはバーチャルドローンを表示。その真下の地面に描かれる赤い矢印が空中に浮くドローンの影に相当し、ドローンの位置を把握しやすくする。ユーザーは、これをドラッグ操作して、ドローンの次の移動先の位置を指定する。画面下部のスライダバーを動かしてドローン本体の向きも指定。加えて画面右側のスライダバーによってドローン本体の高さを調整する。これにより3次元の位置決めができる。

　4種類の操作方法を紹介している。

（a）DragFly：ドローンの目的地にバーチャルドローンを移動させるとドローン本体は後から自動追従し移動する。

（b）PointFly：ドローンの目的地にバーチャルドローンを移動させ、Goのスイッチをタップすると指定した位置へドローン本体が移動する。

（c）TrajectoryFly：ドローンを飛行経路を指定し、Goのスイッチをタップすると経路通りにドローン本体が移動する。

（d）WaypointFly：ドローンの目的地までの経由点を連続的に指定し、Goのスイッチをタップすると指定した位置を順番通りに移動する。

　プロトタイプでは、床に接地したQRコードベースのマーカーとドローンに取り付けた底面カメラでドローン本体の3次元位置をトラッキングする（Optitrackを用いたトラッキングでも代用可能）。

　ドローンの底面カメラからキャプチャーした画像を、ワイヤレス伝送でサーバにストリーミング。サーバ上でOpenCV Acucoアルゴリズムを使用して、マーカー配置に基づいてドローンの位置と方向を計算する。モーションコマンドとFPVビデオストリームもWi-Fiで伝送する。

　こうすることで、ユーザーは精密なドローン操作を直感的に行える。例えば、脚立に登って天井の電気工事している人の目の前に、工具をドローンで運ぶことも可能。モバイル機器を持ったまま廊下を移動し、同時に飛行経路も指定するなど、長距離飛行も思い通りに行える。マーカーを設置できれば野外での制御も可能だ。

　特にドローンの動きに奥行きの動きや複数の回転が含まれる場合、従来のジョイスティックコントローラーよりも優れていることを実証した。

この記事の著者

関連記事

• 

  手に着陸するドローンを振動で体感　スコルコボ研究所と電通大「SwarmCloak」発表

• 

  飛行中のドローンを別ドローンで客観視　2画面と模型で操縦を簡単に　東北大など研究

• 

  ドローンとアクションカムで人の生死を判定　イラク・豪州の研究チームが開発　空から心肺運動を分析

• 

  昆虫に学べ　小型ドローン群で災害時の人命探索