Google LensにMUM採用の画像＋テキストのマルチ検索

[ITmedia]

　米Googleは4月7日（現地時間）、AndroidおよびiOSのGoogleアプリで使える検索ツール「Google Lens」の新機能「マルチ検索」を発表した。画像とテキストの両方で検索できる。まずは米国の英語版で提供を開始する。

マルチ検索の流れ（画像：Google）

　例えばネットで見つけたデザインの気になる茶色のドレスをLensで検索し、検索結果画面に表示されるようになる「+ Add to your search」をタップし「グリーン」と入力すると、似たデザインで色がグリーンのドレスが検索結果として表示される。

　Googleはこの他の例として、以下のような検索例を紹介した。

• 持っている食器の画像＋「テーブル」というテキスト＝食器に似合うテーブル候補を表示
• 庭に咲いているローズマリーの画像＋「育て方」＝ローズマリーの栽培方法

　この機能は、昨年9月のオンラインイベント「Search On 21」で発表されたもの。昨年のGoogle I/Oで紹介した検索アルゴリズム「MUM」（Multitask Unified Model）で実現した。

　MUMは、複雑な疑問に「専門家のように答えられる」ことを目指す検索アルゴリズム。同社の自然言語処理モデル「BERT」同様にTransformerアーキテクチャ上に構築されているが、BERTの1000倍強力という。MUMは日本語を含む75の言語と多数のタスクで同時にトレーニングされており、以前のモデルより情報を包括的に理解できる。

　Googleは3月末には、MUMの採用で自殺を考えるなど“個人的な危機”にある個人を検索クエリから検知し、より適切な情報を表示していく取り組みも発表した。