日本財団、AI使った手話学習ゲーム「手話タウン」を正式リリース Googleや関西学院大と協力
日本財団は9月22日、画像認識AIで手話を判別する「手話認識技術」を活用した、手話を学べるオンラインゲーム「手話タウン」を正式リリースした。AIの開発には米Googleや関西学院大学が協力。ICTが普及した影響で、手話の学習においても映像教材が一般的になる中、ゲーム型の教材を提供することで、手話のさらなる普及促進を目指すとしている。
手話を学べるオンラインゲーム「手話タウン」
手話タウンは、手話が公用語として採用された架空の町を舞台に、カフェでの注文やホテルのチェックインなどを体験できるブラウザゲーム。プレイヤーは、Webカメラに向かって手話を使うことで、その手話が状況に応じたものかどうかを確認できる。日本で使われる「日本手話」と香港などで使われる「香港手話」に対応する。利用料は無料。
手話タウンの主な機能
日本財団によれば、従来の手話認識技術は手の形と動きだけを認識するものが多いが、手話では手だけでなく体や表情の動きも表現の一部になるため、高精度な判別が難しいという。
一方、手話タウンでは3つの機械学習モデルを組み合わせて活用する技術を採用したため、（1）人のポーズやジェスチャー、（2）口と顔の表情、（3）手の形と指──を各モデルがそれぞれ分担して検出できる。これにより、手だけでなく体の動きや表情も認識可能になり、判別の精度が高まったとしている。
手話の認識には3つの機械学習モデルを組み合わせた
AIの開発には、Googleの機械学習用オープンソースライブラリ「TensorFlow」を活用。ゲームの開発には中国の香港中文大学が、日本手話の学習データ収集には関西学院大学が協力した。
プロジェクトでの役割
日本財団は5月に手話タウンのβ版を公開。プレイヤー8500人からのフィードバックが集まったことから、手話の見本動画をスロー再生できる機能などを追加して正式リリースした。今後はゲーム内で扱う単語数を増やす他、今回の知見を基に、PCやスマホのカメラで撮影した手話を、音声言語に変換できる翻訳モデルの開発も目指すとしている。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
「命の砂時計」連呼のGMO会見──熊谷代表の発言にXではツッコミ続出
-
2
GMO熊谷代表、涙の謝罪会見でも“熊谷節”さく裂──「31年間、もうけるという言葉は使ったことがない」
-
3
ロゴ画像用の公開領域に顧客ファイルも保存 GMO系シングルサインオン、4.5万人分漏えい
-
4
渦中のGMO記者会見、責任の所在はどこに？ 熊谷代表が語った“グループ内の力関係”
-
5
Marvell、光通信技術のLumentumを約18兆円で買収 AIデータセンターの高速化に対応
-
6
アットコスメ、会員約300万人分の情報漏えい 不正アクセスで
-
7
Apple、第4四半期として過去最高の増収増益 ターナスCEO初の決算「Siri AIはずっと望んでいたSiri」
-
8
GMO熊谷代表、会見で改めて謝罪 SNS投稿巡り「配慮が欠けていた」
-
9
日本郵政「ゆうID」不正ログイン、他社で流出したパスワード使うリスト攻撃か……2段階認証必須に
-
10
Anthropic、IPO申請書を修正 7～9月売上高は約170億ドル、インフラ契約額は約8954億ドル
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR