Innovative Tech
話し言葉を手話に自動変換 なめらかな生成を実現──英研究
Innovative Tech：
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
英サリー大学の研究チームが開発した「Progressive Transformers for End-to-End Sign Language Production」は、深層学習で音声言語から手話の動きを生成するフレームワーク（Sign Language Production、SLP）だ。
生成された手話ポーズのシーケンス。上から翻訳されたテキスト言語、本手法による出力
音声言語から手話の動きへ変換する研究はこれまでも行われてきたが、話し言葉から変換された手話は滑らかではなかった。今回の手法では、連続的な流れの手話ポーズシーケンスを生成する。
最初に話し言葉のシーケンスを手話表現にマッピングし、次に正確な手話表現を3Dスケルトンポーズへ変換する。
この手法によって生成した手話の正確さを評価するため、実際の手話と比較した。その結果はほぼ一致し、特に手話間の滑らかな遷移が正しく生成されたとしている。
（a）入力の音声言語（b）生成された手話ポーズシーケンス（c）Ground Truthのポーズ（d）比較用のオリジナルビデオ
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
なぜ酒蔵の許諾なしに？ 「VTuberコラボ日本酒」騒動、主催者が経緯説明 仲介者による調整で「準備進んでいると認識」
-
2
「食事量は1日1200kcal以下、でも肥満」な人を14日間追跡調査 痩せない理由は……米コロンビア大などの研究
-
3
本物そっくり“AI生成レシート“が経費精算の脅威に マネフォ「自力で見破るのは難しい」 企業はどう備える？
-
4
かっぱ寿司「配布前のコラボグッズ、フリマで買わないで」 プリキュアコラボ発表日に注意喚起
-
5
「菜の花がおかしい」――イラストレーター制作うたうマラソン大会ポスターに指摘相次ぐ 事務局がAI使用明かす【訂正あり】
-
6
「iPhone Duo」純正ケース話題、「面白いけど高い」……1万4800円と2万4800円
-
7
デジタル庁に不正アクセス、個人情報24.6万件漏えいか 各府省庁の職員情報など
-
8
「ペンギンを返して」→「3匹全部採用して」 批判殺到のSuica新キャラ、ファンアートが空気を変えた？ SNSの声
-
9
藤井風のリサイタル、公式サイトがインターネット老人会すぎると話題 公民館のチラシみたいだけど東京ドーム開催
-
10
OpenAI、最先端AI開発の減速を検討か アルトマンCEOが社員に説明と米報道
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR