“不自然さのない”アイコラ画像を数枚の顔写真から生成するAI 韓国チームが開発:Innovative Tech
韓国のKAISTなどに所属する研究者らは、複数枚の顔写真から参照スタイルに応じた合成ポートレード写真を高品質に生成するシステムを提案した研究報告を発表した。
Innovative Tech:
このコーナーでは、2014年から先端テクノロジーの研究を論文単位で記事にしているWebメディア「Seamless」(シームレス)を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
Twitter: @shiropen2
韓国のKAISTなどに所属する研究者らが発表した論文「MagiCapture: High-Resolution Multi-Concept Portrait Customization」は、複数枚の顔写真から参照スタイルに応じた合成ポートレード写真を高品質に生成するシステムを提案した研究報告である。
MagiCaptureを使用することで、数枚のセルフィーから証明写真やプロフィール写真のような特定のスタイルの高品質な画像を生成できるだけでなく、任意の人の顔を使ってさまざまなスタイルの合成画像も作成できる。
大規模言語モデルを用いて、トレーニング画像セットを利用し、特定の被写体やスタイルの生成に関する研究が進められている。これまでの方法には、ポートレート画像の生成時に十分なリアルさが得られないという問題があった。
顔とその周囲の統合が不自然だったり、被写体のアイデンティティーが損なわれたりすることがその例である。この問題の主な原因は、少数の画像だけを使用して大規模言語モデルのパラメータを更新しようとすることにある。
これらの課題を解決するため、MagiCaptureという新しい技術を提案する。この技術は、被写体(人物)とスタイル(写真の見た目や質感)の概念を融合し、少数の被写体とスタイルの参照のみで高解像度のポートレート画像を生成するカスタマイズ方法である。
MagiCaptureは、ソースとなる顔と参照となるスタイルをうまく統合するよう、合成プロンプトの学習を行う。モデルが学習する際、常に正確なラベルを持つデータが利用できるわけではないため、実際のラベルがないデータに対して予測した「疑似ラベル」を使用して学習を支援する。
また、モデルの学習をより効果的に進めるため、補助ロスを使用する。ソース画像と参照スタイルを適切に組み合わせ、不要な情報の流出を防ぐために「Attention Refocusing loss」も導入している。
評価実験において、MagiCaptureは他の基準モデルよりも優れていることを示した。MagiCaptureは人の顔だけでなく、人間以外のオブジェクトにも適用可能である。
Source and Image Credits: Junha Hyung, Jaeyo Shin, Jaegul Choo. MagiCapture: High-Resolution Multi-Concept Portrait Customization.
関連記事
- 女性声優の“存在しない”水着画像をAIで作成、販売……法的に問題ないの? 弁護士に聞いた
実在する人物に似た画像をAIで生成し、それを販売する事例が現れた。顔は女性声優や女優などを模しているようで、水着などを着せている。著名人を模したAI画像やそれを作成できるAIモデルの売買について、法的に問題はないのだろうか。弁護士に聞いた。 - 元AV女優・上原亜衣さん、自身のAIグラビア写真集発売 Kindleの絵画ランキングで1位に
元AV女優でインフルエンサーの上原亜衣さんは、AIグラビア写真集「上原亜衣『再生』 AI Uehara 'Rebirth'」を発売した。販売形態は電子書籍版のみでKindleで配信中、価格は699円。 - “AIグラビア”でよくない? 生成AI時代に現実はどこまで必要か
集英社のAIグラビアは1週間でお蔵入りになったが、AmazonやYoutubeには大量の「AI生成グラビア」コンテンツが登録され、存在感を示し始めている。こうした非実在のデジタル人物はビジネスや世の中をどう変えるのか。アニメ「AIの遺電子」の原作者である山田胡瓜さんと、亡き妻の面影をAIを駆使して再現する取り組みで「第1回 AIアートグランプリ」の最優秀賞を受賞した「松尾P」こと松尾公也さんが語り合った。 - 米国政府から突然メールがきた? 有名ドメインでなりすましメールを送る攻撃 米研究者が発表
カリフォルニア大学サンディエゴ校などに所属する研究者らは、政府や主要な金融機関、報道機関など有名なドメインになりすまして電子メールを送る攻撃を提案した研究報告を発表した。 - Twitterが「クールポコ。」の“クソコラ”まみれに ペプシ公式アカウントが高解像度な写真を投稿
いま、Twitterでお笑いコンビ「クールポコ。」のボケ・小野まじめさんの画像がはやっている。
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.