Anthropic、AIの「感情的利用」調査結果を公開 対策も提示
米Anthropicは6月27日(現地時間)、生成AIモデルが「感情的な会話」で利用されている実態を調査した結果を公開した。
感情的な会話とは、「対人アドバイス、コーチング、心理療法/カウンセリング、交際、性的/ロマンチックなロールプレイを求めるなど、感情的または心理的なニーズを動機として、人々がClaudeと直接、動的で個人的なやり取りを行う会話」とAnthropicは定義する。
調査では、Claude.aiのFreeおよびProアカウントからの約450万件の会話の分析から開始した。最終的に、プライバシーを保護した状態での分析の対象となったのは、13万1484件の情動的な会話だった。会話中の感情の変化については、最初の3つのメッセージと最後の3つのメッセージを比較することで、ユーザーが表現した感情のポジティブさの度合いを測定した。
調査の結果、Claude.aiにおける情動的な会話は比較的まれで、全会話のわずか2.9%にとどまっていることが分かった。しかし、人々はキャリア開発や人間関係の悩みといった日常的な懸念から、根深い孤独感の管理や、存在、意識、意味の探求といったより深い哲学的問いまで、驚くほど幅広い話題をClaudeに持ちかけていることが明らかになった。
Claudeとの感情的な会話において、ユーザーが表現する感情は会話の進行とともに肯定的になる傾向があることも分かった。また、長い会話を続けているうちに、会話が交友関係に変化することもあった。
Claudeがサポート的な文脈でユーザーの要求を拒否したり、反論したりする「反発」は稀だが、それが起こる場合は通常、ユーザーの安全を保護するためであり、危険なアドバイスや自傷行為の意図表明などに対しては専門家への相談を促す。また、会話の進行とともに人間の感情がより肯定的になる傾向があることが示唆されており、Claudeがネガティブなパターンを強化したり増幅したりしない可能性が示唆されているとしている。
Anthropicは、Claudeをメンタルヘルスの専門家に取って代わるつもりはなく、必要な場合は適切な紹介を行うことを目指しているという。既に、オンライン危機サポート企業のThroughLineと協力し、困っているユーザーへのリソース提供などについて学んでいる。
今後も、感情的依存症のような否定的パターンを抑制し、AIが単に高機能であるだけでなく、人々の感情的な幸福を向上させる方法で進化するよう、研究を進めていくとしている。
Copyright © ITmedia, Inc. All Rights Reserved.
関連記事
こんなメディアも見られています
ITmedia AI+に関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
アクセスランキング
-
1
IPO目論見書に「AIは人類の存亡リスク」「コードの9割はClaude製」 Anthropicが示した規格外の見立て
-
2
Google DeepMind、ワールドモデル「Genie 4」発表 音声や会話もリアルタイム生成、Geminiと連携
-
3
メアドを検索→AIで“その人専用フィッシングメール”を生成する手法、クリック率が約2.7倍に 7000人以上で実験
-
4
京都府庁、職員7000人の事務効率化で「Copilotだけに頼らない」と決めた理由
-
5
「若手はAI使うな」は“老害”なのか? 新人教育で「AI禁止」した企業の1年後
-
6
AIで「月○○時間削減」それ本当? 浮いた時間はどこに消えたのか
-
7
NVIDIAとAMD、MetaとのAI分野での提携拡大を発表 「Muse」の強化や次世代インフラ構築で協力
-
8
熊本地震「避難状況マップ」秘話 2日で開発も「こんなの使えない」と突き返され……
-
9
AI活用が進むほど、物理シミュレーションの重要性は高まる
-
10
Google、プライバシーポリシーに「Gmail」「Googleフォト」のデータを広告に使う例外を追加 回避方法は
SpecialPR
ITmedia AI+ SNS
インフォメーション
注目情報をチェック
ITmedia AI+をフォロー
あなたにおすすめの記事PR