Anthropic、AIの「感情的利用」調査結果を公開 対策も提示
米Anthropicは6月27日(現地時間)、生成AIモデルが「感情的な会話」で利用されている実態を調査した結果を公開した。
感情的な会話とは、「対人アドバイス、コーチング、心理療法/カウンセリング、交際、性的/ロマンチックなロールプレイを求めるなど、感情的または心理的なニーズを動機として、人々がClaudeと直接、動的で個人的なやり取りを行う会話」とAnthropicは定義する。
調査では、Claude.aiのFreeおよびProアカウントからの約450万件の会話の分析から開始した。最終的に、プライバシーを保護した状態での分析の対象となったのは、13万1484件の情動的な会話だった。会話中の感情の変化については、最初の3つのメッセージと最後の3つのメッセージを比較することで、ユーザーが表現した感情のポジティブさの度合いを測定した。
調査の結果、Claude.aiにおける情動的な会話は比較的まれで、全会話のわずか2.9%にとどまっていることが分かった。しかし、人々はキャリア開発や人間関係の悩みといった日常的な懸念から、根深い孤独感の管理や、存在、意識、意味の探求といったより深い哲学的問いまで、驚くほど幅広い話題をClaudeに持ちかけていることが明らかになった。
Claudeとの感情的な会話において、ユーザーが表現する感情は会話の進行とともに肯定的になる傾向があることも分かった。また、長い会話を続けているうちに、会話が交友関係に変化することもあった。
Claudeがサポート的な文脈でユーザーの要求を拒否したり、反論したりする「反発」は稀だが、それが起こる場合は通常、ユーザーの安全を保護するためであり、危険なアドバイスや自傷行為の意図表明などに対しては専門家への相談を促す。また、会話の進行とともに人間の感情がより肯定的になる傾向があることが示唆されており、Claudeがネガティブなパターンを強化したり増幅したりしない可能性が示唆されているとしている。
Anthropicは、Claudeをメンタルヘルスの専門家に取って代わるつもりはなく、必要な場合は適切な紹介を行うことを目指しているという。既に、オンライン危機サポート企業のThroughLineと協力し、困っているユーザーへのリソース提供などについて学んでいる。
今後も、感情的依存症のような否定的パターンを抑制し、AIが単に高機能であるだけでなく、人々の感情的な幸福を向上させる方法で進化するよう、研究を進めていくとしている。
Copyright © ITmedia, Inc. All Rights Reserved.
関連記事
こんなメディアも見られています
ITmedia AI+に関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
アクセスランキング
-
1
MIXI、新卒エンジニア向け研修資料&動画を無料公開 「実践的なAI活用術」を12科目で紹介
-
2
NVIDIA、Microsoft、OpenAIなどがオープンモデル規制反対を表明 Anthropic従業員は「CUDAのオープンソース化が楽しみ」と皮肉
-
3
検索結果に「詐欺ではありません」と表示させる詐欺手口、警視庁が注意喚起 AI要約も餌食に
-
4
Z世代に聞く次の流行、「AIイラスト」が1位に 「Claude Code」も上位
-
5
NVIDIA、「オープンなAIセキュリティ」掲げる業界連合 Microsoftなど30社超が参加
-
6
「iPhone高騰」はこれからも続く? 中国CXMTに近づくApple、メモリ競合へのけん制が不発に終わりそうなワケ【後編】
-
7
近畿大、入試にAIの利用認める 情報学部の総合型選抜で
-
8
Googleが“自社AIの裏切り”に備え始めた 異例の構想「AI Control Roadmap」とは
-
9
ゼロから分かる「Claude」の教科書 ChatGPTと比べて分かった強みとは?
-
10
Anthropic、「Claude Opus 5」公開 Fable 5に迫る性能を半額で――サイバー安全策は緩和、拒否時は自動フォールバックも
SpecialPR
ITmedia AI+ SNS
インフォメーション
注目情報をチェック
ITmedia AI+をフォロー
あなたにおすすめの記事PR