4台のM5 Ultra Mac Studioで「データセンター級」メモリ帯域幅4.8TB/s 巨大LLMも高速でローカル実行可能に(1/2 ページ)
Mac4台でデータセンター級のメモリ帯域幅に――複数デバイスをAIクラスタとして扱うためのOSS「exo」を開発する米EXO Labsは8月25日(現地時間)、米Appleの新チップ「M5 Ultra」を搭載した新型「Mac Studio」4台のクラスタで合計約4.8TB/sのメモリ帯域幅を実現できると発表した。巨大な大規模言語モデル(LLM)をローカルで高速実行できるとうたう。
EXO LabsはAppleと1年にわたり協力し、OSやCPUを挟まずメモリ間で直接データを転送する技術「RDMA」を、Mac Studioに搭載された「Thunderbolt 5」で低遅延に行う技術を開発。これによりクラスタ全体のメモリ帯域幅を繋いだ台数にほぼ比例して拡大でき、「Kimi K3」「GLM-5.3」などの巨大モデルも「API並みの速度」で動くという。成果はAppleの製品ページでも紹介されている。
M5 UltraはAppleが同日に新発表したチップで、最大36コアのCPUと最大80コアのGPUを搭載。1.2TB/sのメモリ帯域幅を備える。M5 Ultra搭載のMac Studioの価格は94万9800円(税込)から。8月25日から予約を開始し、発売は9月22日。ただし512GBメモリのモデルは10月下旬発売となる。
Copyright © ITmedia, Inc. All Rights Reserved.
関連記事
こんなメディアも見られています
ITmedia AI+に関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
アクセスランキング
-
1
履歴書100通に1通「AIだけが読める文字」 20万件調査でわかった“就活ハック”の手口 米研究
-
2
Google「Gemini」新サービスで「Claude」利用可能に 他モデルも今後追加予定
-
3
農水省の“クソダサ”ポスター話題 「AIよりよっぽど良い」の声も 担当者に狙いを聞いた
-
4
ChatGPT、ついに音声ファイルに対応 文字起こしや要約などが可能に 有料ユーザー向け
-
5
ChatGPT、無料版を含む全ユーザーに「GPT-6」 回答内に“操作できる画面”を生成する「Intelligent UI」搭載
-
6
Googleが「Gemini 4 Argon」発表 “10カ月の沈黙”を破り、AI開発競争の首位奪還へ
-
7
富士通では「Copilot」10万ライセンスの利用率が“9割超え” 「導入したけど使われない」をどう防いだ?
-
8
“クールジャパン機構の二の舞”か? 2兆円支援のラピダス、2ナノ半導体工場あっても拭えぬ「顧客不在」の懸念
-
9
「当然、攻撃者はAIを悪用する」――不正アクセスに対峙する国家サイバー統括室を直撃、日本の情報をどう守る?
-
10
「製造データと暗黙知があれば勝てる」は幻想? フィジカルAI“10の誤解”をGartnerが指摘
SpecialPR
ITmedia AI+ SNS
インフォメーション
注目情報をチェック
ITmedia AI+をフォロー
あなたにおすすめの記事PR