映像を見て感じた内容を言語化、脳波で推定
人間の脳波を読み解くことで、映像を見て感じた内容を、1万個の単語(名詞、動詞、形容詞)で言語化する技術を開発したと、NICT脳情報通信融合研究センターが11月1日に発表した。形容詞に対応したことで、物への“印象”も分かるという。発話や筆談が難しい人が頭の中で考えただけでコミュニケーションできるなど、応用が期待できる。
研究グループは、1万個の単語を“点”とみなし、例えば「犬」と「猫」は近く、「猫」と「建物」は遠く――というように、意味な近さ・遠さを位置関係で表した「言語特徴空間」を作成した。
その上で(1)約2時間の映像を見た被験者がシーンごとに書いた説明文を1万個の単語に言い換え、言語特徴空間に描き入れたもの、(2)別の被験者にも同じ映像を見せて脳波を計測し、現れた脳波同士の関係性を図示したもの――を用意。(1)と(2)を対応付けることで、新たに計測した脳波でも、意味が近しい単語を推定できるようにした。
NICTによれば、これまでも映像を見て感じた物体と動作の内容を、約500単語で推定した例はあった。約20倍の1万単語を使えば、より解釈しやすい言葉で表現できる。また形容詞にも対応したことで、物を見た“印象”も解読が可能になるとしている。
研究成果は、神経科学の国際科学誌「NeuroImage」(電子版)に掲載された。
Copyright © ITmedia, Inc. All Rights Reserved.
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
「楽天銀行から数百万が勝手に移動」「残高が0に」……楽天証券のシステム不具合、連休中に発生
-
2
「クリスタ」素材、大量非公開でユーザー混乱 人物だけでなくペンや公式素材まで セルシス「誤判定もあった」が……
-
3
台風25号で“地下神殿”また稼働 雨水が流れ込む動画公開 今年度7回目で過去最多に
-
4
大雨で「首都圏外郭放水路」稼働 濁流が“地下神殿”を満たすまでの動画公開 国交省
-
5
JCOM障害「インターネットが使えない」 サポート窓口もつながりにくく
-
6
NTT東西が「にじさんじ電報」発売 ポップアップ台紙にはライバーの複製手書きメッセージ
-
7
楽天証券、追加認証の必須化で一部にトラブルか 「無限ループ」「ログインできん」
-
8
「モンスト」キャラの声をAI生成、MIXIのニュース紹介企画に批判続出 実施見合わせへ
-
9
J:COM「ネットつながらない」障害、約9時間で復旧 原因は「調査中」
-
10
ゼロから声を作れる音声生成モデル「Gemini 3.8 Flash TTS」公開 「Gemini Notebook」でも利用可能に
ITmedia NEWS SNS
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR