Meta、無料で商用可の「Llama 3.1」リリース 「世界最大かつ最も高性能なオープンモデル」
Metaは、“オープンソースの”LLMの最新版「Llama 3.1」を発表した。最大モデルは4050億(405B)のパラメータを持ち、米NVIDIAの1万6000個以上の「H100」でトレーニングした。AWSなどの環境で実行するために掛かるコストは、GPT-4oの約半分という。
米Metaは7月24日(現地時間)、“オープンソースの”LLMの最新版「Llama 3.1」を発表した。最大モデルは4050億(405B)のパラメータを持ち、米NVIDIAの1万6000個以上の「H100」でトレーニングした。Llama 3の70Bモデルと8Bモデルもアップグレードされる。
4月にリリースした「Llama 3」同様に、ほぼすべての主要クラウドサービス(AWS、Databricks、Google Cloud、Hugging Face、Kaggle、IBM WatsonX、Microsoft Azure、NVIDIA NIM、Snowflake)で利用可能になる。
15兆トークンを超えるトレーニングデータでトレーニングしたとしているが、データの出所は明示していない。
405Bモデルは、長文テキストの要約、多言語会話エージェント、コーディングアシスタント、将来のAI言語モデルのトレーニングに使用する合成データの作成に有用としている。また、Llama 3.1の出力を使用して他のAIモデルを改善できる。
Metaによると、Llama 3.1は複数のベンチマークで米OpenAIの「GPT-4o」や米Anthropicの「Claude 3.5 Sonnet」より優れているという。
同社のAIアシスタント「Meta AI」(日本でのリリースはまだ)もLlama 3.1ベースになる。これにより、サポート言語が22カ国語に増え(日本語はまだ)、人物写真から画像を生成する機能などが追加される。
マーク・ザッカーバーグCEOは公式ブログで、この高性能なAIモデルを無料で提供する理由について、オープンソースのLinuxが現在、スマートフォンやサーバのベースOSになったのと同様に、オープンソースのAIモデルはプロプライエタリモデルを抜いて進歩していくと語った。「Llama 3.1のリリースは、ほとんどの開発者がオープンソースを使い始める業界の転回点になるだろう」(ザッカーバーグ氏)
Metaによると、Llama 3.1をAWSなどの環境で実行するために掛かるコストは、GPT-4oの約半分という。
ザッカーバーグ氏は「オープンソース」という言葉を使っているが、Open Source Initiativeが定義する「オープンソース」とは異なる。Llama 3.1はMetaのWebサイトやHugging Faceからダウンロードできるが、いずれの場合もダウンロードに際して個人情報の提供と、ライセンスおよび利用規定への同意が必要だ。
Copyright © ITmedia, Inc. All Rights Reserved.
関連記事
Meta、無料で商用可の新LLM「Llama 3」、ほぼすべてのクラウドでアクセス可能に
Metaは、オープンソースのLLM最新版「Llama 3」をパラメータ80億と700億の2モデルで公開した。AWSやAzure、Google Coudなどで利用可能になる。誤った拒否率が大幅に減少したとしている。
Meta、AIアシスタント「Meta AI」をInstagramやMessengerでロールアウト
Metaは、昨年のConnectで予告したAIアシスタント「Meta AI」をInstagramなどの同社サービスで展開していくと発表した。同日発表の新LLM「Llama 3」で構築した。まずは英語版のみを数十カ国で提供する。
Metaの1〜3月期、予想を上回る増収増益 「AIへの大規模投資は続ける」とザッカーバーグCEO
Metaの1月〜3月期の決算は、売上高は前年同期比27%増、純利益は117%増と校長だった。サッカーバーグCEOは「世界をリードするAI構築に向けた新たな一歩」と語った。
MetaのザッカーバーグCEO、AGI開発宣言 「AIとメタバースは繋がっている」
Metaのマーク・ザッカーバーグCEOは、同社の後期的なビジョンはAGIの構築だと語った。AGIとのコミュニケーションにはスマートグラスが適しており、「AIとメタバースは繋がっている」としている。


