《電子技術應用》
您所在的位置:首頁 > 人工智能 > 业界动态 > Meta新建两座数据中心集群专门训练Llama3

Meta新建两座数据中心集群专门训练Llama3

内含超4.9万块英伟达H100 GPU
2024-03-14
來源:IT之家

Meta 公司當地時間 12 日通過官方新聞稿公布了兩座新的數據中心集群,該公司正希望通過英偉達的 GPU,在以 AI 為重點的開發中脫穎而出。

據悉,這兩座數據中心的唯一目的,是在消費者特定應用領域(注:包含聲音或圖像識別)中進行 AI 研究和大語言模型的開發,每個集群都包含了 24576 塊英偉達 H100 AI GPU,將用于自家大語言模型 Llama 3 的訓練。

1.png

兩座新建的數據中心集群都具有 400Gbps 互聯功能,其中一個集群采用了 Meta 基于 Arista 7800 自主開發的 Fabric 解決方案,而另一個集群則采用了英偉達的 Quantum2 InfiniBand Fabric,以確保無縫互連體驗。

此外,集群基于 Meta 自家的開放式 GPU Grand Teton AI 平臺,可通過提高主機到 GPU 的帶寬和計算能力,充分利用現代加速器的功能。

Meta 官方表示,這些集群的高性能網絡結構的效率及關鍵存儲決策、配合每個集群中的 H100 GPU,能夠為更大、更復雜的模型提供支持,為通用人工智能產品開發、AI 研究的進步鋪路。

據IT之家1 月報道,Meta 首席執行官扎克伯格宣布公司正在建設龐大的基礎設施。“預估到今年年底,我們將擁有大約 35 萬片英偉達 H100 加速卡,如果算上其它 GPU 的話,其計算能力相當于 60 萬片 H100。”


weidian.jpg

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
主站蜘蛛池模板: 国产亚洲精品自在久久| 久久久久久伊人| 国产伦精品免费视频| 欧美日韩电影在线观看| 国产精品久久久久av免费| 91成人免费观看| 国产福利久久精品| 欧美大片欧美激情性色a∨久久| 亚洲中文字幕无码一区二区三区| 国产一区二区精品在线| 久久天天躁狠狠躁夜夜躁| 日韩视频免费在线| 亚洲精品女av网站| 亚洲综合色av| 91久久久久久久久| 国产激情久久久| 国产精品美女久久久免费| 国产精品一区电影| 久久久亚洲天堂| 欧美国产综合视频| 人人妻人人澡人人爽欧美一区| 91成人免费观看| 亚洲xxxx在线| 日韩中文在线不卡| 日韩久久久久久久久久久久| 色综合五月天导航| 日韩一级片一区二区| 日韩天堂在线视频| 日韩福利视频| 欧美日本韩国一区二区三区| 日韩久久久久久久久久久久久| 日本一区二区三区在线视频| 亚洲国产精品www| 亚洲中文字幕无码av永久| 一区二区免费在线观看| 日韩中文字幕精品| 日韩精品综合在线| 欧美成人精品三级在线观看| 欧美一级片一区| 久久久国产精彩视频美女艺术照福利 | 欧美激情国产日韩|