“スケールアップだけ”で「AGI」は実現できるのか? 情報幾何学の第一人者、甘利俊一氏の警鈴(2/2 ページ)
大規模言語モデルをはじめとする現代のAI開発は、モデルの大規模化によって急速な進展を遂げている。しかし、この「スケールアップ」に依存した開発手法に対して、情報幾何学の第一人者である甘利俊一氏(帝京大学先端総合研究機構特任教授、東京大学名誉教授)が警鐘を鳴らした。
効率的なアプローチの可能性
大規模化路線の一方で、より効率的なアプローチの可能性も存在する。「小さな規模でも同じようなことができるかもしれない」と甘利氏は指摘する。現代のAIモデルの中には「何か隠れた構造があるのではないか」という。
この指摘の背景には、甘利氏が1960年代から取り組んできた情報幾何学の知見がある。
情報幾何学は、統計学やシステム理論、情報理論を統合する理論体系だ。これは例えば、機械学習のモデルを幾何学的な「空間」として捉え、その中でデータやパラメータがどのように分布し、学習がどのように進むのかを数学的に解析する。ニューラルネットワークのような複雑なモデルでも、この「空間」の性質を調べることで、なぜうまく学習できるのか、どのような限界があるのかといった本質的な特性を理解することを目指している。いわば、AIの「地図」を作る試みともいえる。
「理論が遅れていることを克服できるとは思っている」と甘利氏は展望を示す。単純なスケールアップではなく、AIモデルの内部で起きている現象を理論的に解明することで、より効率的な手法が見つかる可能性があるというわけだ。
この考えは、人間の脳の仕組みからもヒントが得られる。講演の中で甘利氏は、脳が「ニューロンとシナプス結合から成り立ち、非常に複雑な情報処理を行っている」と説明。「脳にヒントを得つつも実装技術や素材がまったく異なる」現代のAIにおいて、効率的な情報処理の原理を理解することの重要性を強調した。
理論と実践の融合へ
では、今後のAI開発はどのような方向を目指すべきなのか。甘利氏は「はっきりは分からないが、理論的な理解を深められるという夢を信じたい」と語る。現在の大規模化路線は一定の成果を上げているものの、それだけでは不十分だという認識だ。
同時に甘利氏は、AIの発展が人類文明にもたらす影響についても言及した。「AIは社会を大きく変える可能性を秘めている。多くの分野で人間の代わりに作業を担い、効率化をもたらすだろう」としながらも、「そのプロセスの中で危険がないとも限らない」と警告する。
特に注目すべきは、AIの理論的理解が遅れていることが、この不確実性をさらに高めているという指摘だ。AIの挙動や性能を理論的に説明できないままスケールアップを続けることは、予期せぬリスクをもたらす可能性がある。
「新しいアルゴリズムや、人間の脳がもつ学習効率の鍵を解明し、それを工学的に実装するようなアプローチが必要になるだろう」。60年以上にわたりAI研究の最前線で理論研究を続けてきた甘利氏のこの指摘は、現代のAI開発において理論と実践のバランスを問い直す重要な提言といえるだろう。
Copyright © ITmedia, Inc. All Rights Reserved.
関連記事
「これまでと異なる科学の形がある」――AI技術のノーベル賞受賞に、東大・松尾教授が語ったこと
AI研究で知られる東京大学の松尾豊教授は、防衛装備庁の開催する技術シンポジウムに登壇し、2024年のAI関連のノーベル賞受賞について「これまでと異なる科学の形がある」などとコメントした。
米OpenAI、汎用人工知能“AGI”開発中か コードネームは「ストロベリー」
米OpenAIがコードネーム「Strawberry」(ストロベリー)というAIの推論技術の開発プロジェクトに取り組んでいる。ストロベリーは2023年に報じられた、汎用人工知能(AGI)の開発プロジェクト「Q*」(Qスター)のことだ。
「時間の矢」が生成AIにも含まれていた? “未来から過去を予測”する逆の訓練をLLMで実施 海外チームが検証
スイスのEPFLや英ロンドン大学に所属する研究者らは、大規模言語モデル(LLM)が、次のトークンを予測する能力に比べて、前のトークンを予測する能力が劣ることを明らかにした研究報告を発表した。
AIを“AIで”改善 Sakana AIが新技術「AI CUDA Engineer」発表 目指すは100万倍の効率化
Sakana AIは、新たな技術「AI CUDA Engineer」を発表した。AIモデルの開発や利用時にかかる計算処理を10〜100倍高速化できるエージェントシステムだ。
Sakana AI、AIの“多様性”を尊重した集団を開発する手法「CycleQD」発表 生物の“すみ分け”がヒント
AIベンチャー「Sakana AI」は、自然界の生物の「すみ分け」の仕組みをヒントに、小規模なAIモデル(AIエージェント)を複数育て上げ、それぞれが得意分野を持ちながら協力し合える新しい開発手法を提案した研究報告を発表した。
