Innovative Tech

漫画のシーンに合わせて“刺激”発生　炎の攻撃で熱、大きな「ゴゴゴ」には振動　NHK技研が開発

公開 2022年09月21日 08時04分

著者

山下裕毅

[ITmedia]

印刷する

Innovative Tech：

このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。

　日本放送協会放送技術研究所（NHK技研）の研究チームが開発した「マンガを視覚と触覚で楽しむ『ハプトコミック』」は、電子書籍ベースの漫画において、読んでいるシーンに応じて触覚（振動や温度）を提示するシステムだ。炎の攻撃では熱さを、オノマトペ（擬音語・擬態語）が大きなシーンでは振動を、タブレットを持った手に与えることでユーザーの読書体験を向上させる。

漫画を読む視線を追跡し、見たシーンに応じて振動や温度で触覚を提示するシステム

　近年、漫画を電子書籍で読むケースが多くなってきた。紙の本に比べ自由度が高い電子書籍は、さまざまな付加価値を付与するのに適しており、読書体験向上の技術も増えてきた。例えば、グロテスクな場面やゴキブリのような虫など、各ユーザーの「見たくないシーン」が登場する前に警告し、その予告からページ送りや目をつむって閲覧を回避するシステムがその一つだ。

　このような電子書籍で読む漫画の読書体験向上のための新たな技術として、NHK技研の研究者らは特定のシーンを見た注視に応じて、そのシーンに合った触覚フィードバックを読者に提示するシステムを提案する。

　触覚フィードバックはさまざまな提示方法が考えられるが、提案システムでは振動と温度の2種類を検討する。提示のタイミングは、オノマトペに振動を、シーンの気温変化や主人公の心情描写、火や氷を使った攻撃などに温度変化を適応する。

　プロトタイプの構成は以下の通りだ。視線追跡には視線計測装置、コンテンツ表示にはタブレットPCを使用する。振動提示には振動子とアンプを用い、タブレットPCから出力する音声信号を入力に駆動させる。温度提示にはペルチェ素子を用いる。タブレットPCからマイクロコンピュータモジュールに制御信号を有線で送信し、モータードライバーモジュールへ制御信号を入力することでペルチェ素子を駆動させる。