Innovative Tech
話し言葉を手話に自動変換 なめらかな生成を実現──英研究
Innovative Tech：
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
英サリー大学の研究チームが開発した「Progressive Transformers for End-to-End Sign Language Production」は、深層学習で音声言語から手話の動きを生成するフレームワーク（Sign Language Production、SLP）だ。
生成された手話ポーズのシーケンス。上から翻訳されたテキスト言語、本手法による出力
音声言語から手話の動きへ変換する研究はこれまでも行われてきたが、話し言葉から変換された手話は滑らかではなかった。今回の手法では、連続的な流れの手話ポーズシーケンスを生成する。
最初に話し言葉のシーケンスを手話表現にマッピングし、次に正確な手話表現を3Dスケルトンポーズへ変換する。
この手法によって生成した手話の正確さを評価するため、実際の手話と比較した。その結果はほぼ一致し、特に手話間の滑らかな遷移が正しく生成されたとしている。
（a）入力の音声言語（b）生成された手話ポーズシーケンス（c）Ground Truthのポーズ（d）比較用のオリジナルビデオ
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
「命の砂時計」連呼のGMO会見──熊谷代表の発言にXではツッコミ続出
-
2
ロゴ画像用の公開領域に顧客ファイルも保存 GMO系シングルサインオン、4.5万人分漏えい
-
3
GMO熊谷代表、涙の謝罪会見でも“熊谷節”さく裂──「31年間、もうけるという言葉は使ったことがない」
-
4
渦中のGMO記者会見、責任の所在はどこに？ 熊谷代表が語った“グループ内の力関係”
-
5
アットコスメ、会員約300万人分の情報漏えい 不正アクセスで
-
6
GMO熊谷代表、会見で改めて謝罪 SNS投稿巡り「配慮が欠けていた」
-
7
Marvell、光通信技術のLumentumを約18兆円で買収 AIデータセンターの高速化に対応
-
8
日本郵政「ゆうID」不正ログイン、他社で流出したパスワード使うリスト攻撃か……2段階認証必須に
-
9
Apple、第4四半期として過去最高の増収増益 ターナスCEO初の決算「Siri AIはずっと望んでいたSiri」
-
10
Anthropic、IPO申請書を修正 7～9月売上高は約170億ドル、インフラ契約額は約8954億ドル
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR