色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

美光高管看2024年AI數據中心、AI PC的存儲趨勢

花茶晶晶 ? 來源:電子發燒友網 ? 作者:黃晶晶 ? 2024-10-13 15:22 ? 次閱讀

電子發燒友網報道(文/黃晶晶)生成式AI帶來的產業技術革新不僅在于性能越來越強大的GPU,它同時正在推進存儲產品的變化和技術的進步。近日,美光副總裁暨客戶端存儲事業部總經理Prasad Alluri在接受包括電子發燒友網在內的少數媒體采訪時指出,與過往不同,閃存和內存曾各自為政,主要致力于提高密度。AI的興起帶來了兩大轉變,一是與系統架構的協同優化;二是將能效作為關鍵優化參數。為此,美光科技正積極優化存儲產品、賦能AI在數據中心、PC、智能手機乃至汽車等各領域的應用與發展。

AI數據中心:兩大存儲池的不同存儲策略


Prasad Alluri表示,在探討AI基礎設施對數據中心存儲的具體影響時,我們可以將其視為兩個獨立的存儲池來分析。

首先,存在一個龐大的數據池,用于存儲供模型訓練所需的數據。以GPT-4為例,據估算,其訓練過程消耗了互聯網上約四分之一的數據,這足以說明大模型所需數據的龐大規模。為了訓練這類模型,必須具備存儲海量數據的能力,我們可以形象地稱之為“數據湖”,即所有待訓練數據均匯聚于此。

對于這一存儲場景,最關鍵的屬性在于能夠高效且經濟地傳輸數據。將容量與經濟性相結合,意味著需要摒棄主要依賴大容量硬盤驅動器的傳統架構,轉而采用大容量SSD。此舉不僅能減少物理占用空間,還能降低能耗,從而提升整體能源經濟性。在此方面,美光科技推出的6500 ION系列產品正是針對大容量存儲需求而優化的理想解決方案。

另一方面是訓練過程實際發生的存儲池,即緊鄰GPU的存儲池。此時,需考慮的是如何將數據湖中的數據高效送入GPU內存以供訓練。在此過程中,設備的讀寫性能至關重要,尤其是隨機讀取性能。對于這類靠近GPU訓練集群的存儲,美光9550 SSD從設計之初便旨在滿足這些需求。9550 SSD隨機讀取性能領先業界,速率高達3,300 KIOPS,這正是訓練集群所亟需的。

此外,美光9550 SSD提供業界領先的能效,并在支持各類AI工作負載方面表現出眾,包括使用大規模存儲加速器(BaM)進行圖神經網絡(GNN)訓練(SSD平均功耗降低高達43%,整體系統能耗減少高達29%)、NVIDIA Magnum IO GPUDirect Storage(每傳輸1TB數據,SSD能耗降低高達81%)、MLPerf(SSD能耗降低高達35%,系統能耗降低高達13%)以及使用Microsoft DeepSpeed對Llama 大語言模型(LLM)訓練進行微調(SSD能耗降低高達 21%)。

wKgZoWcLddKAHPtSAAOKConnGk0495.png

AI PC的存儲需求,將遠超微軟的“基準要求”


微軟為AI PC產品Copilot+設定了基準要求,其中NPU的算力起始于40 TOPS,內存方面則規定了至少16GB的容量,以及256GB的存儲空間作為最低配置。不過,Prasad Alluri表示,這些僅是基礎指導線,并未全面界定AI PC的真正內涵。

“要深入理解AI PC,我們需將焦點放在用戶體驗上。AI PC的核心在于通過諸如翻譯或圖像編輯等任務來提升生產力,且這些任務需在設備上高效完成。正是這種整體體驗定義了AI PC,而非單純的技術規格。為了滿足用戶的這些期望,我們認為所需的內存量遠超最低指導線。事實上,當前多數OEM在打造AI PC時,已配備了24GB至32GB的DRAM。”

從存儲角度來看,盡管OEM目前提供的最低容量為512GB,但我們認為對于AI工作負載而言,更理想的容量應接近1TB。

不過,這不僅僅關乎容量大小,功耗效率和性能同樣至關重要。在存儲領域,目標是以最高效的方式將AI模型從存儲加載到內存中。為此,需要在不增加功耗的前提下,獲得盡可能高的吞吐量。美光高性能客戶端3500 SSD在相同功耗下提供了業界領先的性能。

針對于AI PC,美光科技加速了LPDDR5X在AI PC中的應用普及。與同類SODIMM產品相比,LPDDR5X的性能提升了約1.5倍。此外,還專為AI個人電腦設計了一種新型內存模塊——LPCAMM2。與傳統SODIMM產品相比,LPCAMM2不僅性能提升1.5倍,而且功耗降低高達58%,空間節省達64%。這款新產品于今年早些時候推出,主要圍繞三大目標設計:提升性能、降低功耗以及減小體積。在標準PC中,通常需要兩個SODIMM并排放置,占用主板大量空間。而LPCAMM2則將這些功能集成到一個DIMM中,從而顯著提升了電源效率和性能。

在當前的PC環境中,以我們內部使用的Microsoft Copilot為例,它高度依賴云計算,將大部分復雜任務卸載到云端。然而,未來的AI個人電腦將能夠在本地處理部分工作負載,減少對云端的依賴。這樣,模型復雜性將降低,AI個人電腦能在保持高性能的同時,實現更高效的能源利用,提高數據處理的靈活性和速率。

在PC的本地存儲中完全可以放置多個模型,并根據用戶查詢的上下文加載這些模型。例如,如果用戶需要語音轉文本服務,您可以加載相關模型;如果用戶需要圖像創建,您可以加載相應的模型。在此過程中,關鍵在于以節能方式從存儲中加載數據,因此,SSD的性能至關重要,它需在最低功耗下實現最高吞吐量,即充分利用PCIe 4.0 的四通道。

為此,美光科技的3500 SSD不僅在最低功耗下提供行業領先的性能。同時,該SSD中內置了啟發式算法。當檢測到AI工作負載時,驅動器可以主動加載所需的正確模型或數據。這些就是為實現高效能和電源效率所做的優化。

QLC越發重要,閃存層數應從縱橫向提升


當本網記者問及當前QLC對于AI存儲越來越重要,美光的看法與規劃,以及3D NAND閃存的層數將如何發展等問題時,Prasad Alluri也給出了詳細的分析。

Prasad Alluri表示,從NAND技術的視角來看,最關鍵的因素在于每平方毫米的容量密度。也就是我們最終追求的是比特面密度(Bit Areal Density),因為這將有助于降低成本。

但是,有多種方法可以實現這一目的。其中一種是對單個物理單元提升容量。這正是四階存儲單元(QLC)技術大顯身手的地方,而我們在這一領域始終保持領先地位,特別是在PC市場率先推出了這一技術。目前,美光科技在該領域的市場占有率位居前列。盡管我們尚未宣布針對數據中心的具體計劃,但我們仍在持續投資QLC技術,并致力于提高容量密度,這是推動技術進步的重要途徑之一。

另外,在NAND技術中可以通過堆疊更多層來增加單位面積內的容量。美光科技最近推出了第九代(G9)TLC NAND技術。雖然目前尚不清楚3D NAND的層數何時會達到極限,但在未來的幾代產品中,美光的閃存層數將繼續增加。

wKgaoWcLdeyAPoT_AAH35i87vBg197.png

但他也強調,層數并非實現比特面密度提升的唯一關鍵因素,因為橫向擴展同樣至關重要。除了關注3D堆疊層的數量外,還需要考慮單元之間水平位置的接近程度。這種橫向優化是美光提高比特面密度的另一個關鍵領域。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4296

    瀏覽量

    85798
  • 數據中心
    +關注

    關注

    16

    文章

    4761

    瀏覽量

    72034
  • AI
    AI
    +關注

    關注

    87

    文章

    30728

    瀏覽量

    268886
  • 美光
    +關注

    關注

    5

    文章

    709

    瀏覽量

    51418
  • AI PC
    +關注

    關注

    0

    文章

    123

    瀏覽量

    236
收藏 人收藏

    評論

    相關推薦

    華迅光通AI計算加速800G模塊部署

    400G模塊。更多信息可以在這篇文章中找到:NVIDIA DGX H100簡介。這表明在葉脊架構下,數據中心對高速模塊的需求呈指數級增長。隨著數據中心規模的擴大,特別是對
    發表于 11-13 10:16

    AI PC存儲遠超“基準要求”,兩大策略應對數據中心存儲池”

    在接受包括電子發燒友網在內的少數媒體采訪時指出,與過往不同,閃存和內存曾各自為政,主要致力于提高密度。AI的興起帶來了兩大轉變,一是與系統架構的協同優化;二是將能效作為關鍵優化參數。為此,科技正積極優化
    的頭像 發表于 10-18 09:09 ?2575次閱讀
    <b class='flag-5'>美</b><b class='flag-5'>光</b><b class='flag-5'>高</b><b class='flag-5'>管</b>:<b class='flag-5'>AI</b> <b class='flag-5'>PC</b><b class='flag-5'>存儲</b>遠超“基準要求”,兩大策略應對<b class='flag-5'>數據中心</b>“<b class='flag-5'>存儲</b>池”

    發布全新數據中心SSD

    近日,全球領先的存儲解決方案提供商科技股份有限公司宣布了一項重大創新成果——9550 NVMe? SSD的正式推出。這款專為
    的頭像 發表于 07-30 16:41 ?636次閱讀

    推出數據中心SSD產品9550 NVMe SSD新品

    科技股份有限公司(納斯達克股票代碼:MU)近日宣布,推出數據中心 SSD 產品 9550 NVMe SSD,性能業界領先,同時具備卓
    的頭像 發表于 07-29 18:12 ?1152次閱讀

    推出全新數據中心 SSD,性能業界領先

    數據中心 SSD 產品 9550 NVMe? SSD,性能業界領先,同時具備卓越的 AI 工作負載性能及能效。[1]
    發表于 07-29 15:13 ?937次閱讀

    HBM投資增加,2024資本支出預測上調至80億美元

    科技適度調整了2024的資本開支預估,加大對帶寬存儲(HBM)半導體生產線的投入力度,以
    的頭像 發表于 05-22 14:59 ?531次閱讀

    HNS 2024:星河AI數據中心網絡,賦AI時代新動能

    華為數據通信創新峰會2024在巴庫隆重舉辦,在“星河AI數據中心網絡,賦AI時代新動能”主題論壇中,華為面向中東中亞地區發布星河
    的頭像 發表于 05-15 09:15 ?646次閱讀
    HNS <b class='flag-5'>2024</b>:星河<b class='flag-5'>AI</b><b class='flag-5'>數據中心</b>網絡,賦<b class='flag-5'>AI</b>時代新動能

    率先出貨用于AI數據中心的關鍵內存產品

    科技近日在業界取得重大突破,成功驗證并率先推出了一款針對AI數據中心的關鍵內存產品。這款新產品基于大容量32Gb單塊DRAM芯片,構建成了128GB DDR5 RDIMM內存,其傳
    的頭像 發表于 05-10 09:38 ?377次閱讀

    以信任為基,圍繞AI推動存儲革命

    為基礎的存儲革命。 ? 在這場革命中,不僅提供高性能的存儲產品,更是在AI時代構建起信任的基石,確保
    發表于 04-01 09:15 ?703次閱讀
    以信任為基,圍繞<b class='flag-5'>AI</b>,<b class='flag-5'>美</b><b class='flag-5'>光</b>推動<b class='flag-5'>存儲</b>革命

    展望2024數據中心基礎設施

    前陣子,DeLL'ORO GROUP發布預測報告,回顧了23年數據中心基礎設施報告中的突出趨勢,及展望了2024年數據中心基礎設施的發展情況,以下是報告內容。
    的頭像 發表于 03-25 15:59 ?395次閱讀

    AI需求引爆存儲市場,2024存儲市場趨勢如何?CFMS給出預測

    3月20日,2024中國閃存市場峰會CFMS在深圳前海華僑城JW萬豪酒店盛大召開,三星、SK海力士、、鎧俠、長江存儲等內存大廠
    的頭像 發表于 03-21 18:17 ?4699次閱讀
    <b class='flag-5'>AI</b>需求引爆<b class='flag-5'>存儲</b>市場,<b class='flag-5'>2024</b><b class='flag-5'>存儲</b>市場<b class='flag-5'>趨勢</b>如何?CFMS給出預測

    是德科技推出AI數據中心測試平臺旨在加速AI/ML網絡驗證和優化的創新

    20242月29日,是德科技(Keysight Technologies,Inc.)宣布,針對人工智能(AI)和機器學習(ML)基礎設施生態系統,推出了 AI
    的頭像 發表于 02-29 09:32 ?629次閱讀
    是德科技推出<b class='flag-5'>AI</b><b class='flag-5'>數據中心</b>測試平臺旨在加速<b class='flag-5'>AI</b>/ML網絡驗證和優化的創新

    讓數字世界堅定運行 | 華為發布2024數據中心能源十大趨勢

    深圳20241月17日 /通社/ --?近日,華為舉辦2024數據中心能源十大趨勢發布會并發
    的頭像 發表于 01-17 20:45 ?553次閱讀
    讓數字世界堅定運行 | 華為發布<b class='flag-5'>2024</b><b class='flag-5'>數據中心</b>能源十大<b class='flag-5'>趨勢</b>

    華為發布2024數據中心能源十大趨勢,引領未來變革

    20241月15日,華為舉辦2024數據中心能源十大趨勢發布會并發布《白皮書》。JAEALOT2024
    的頭像 發表于 01-17 08:25 ?558次閱讀
    華為發布<b class='flag-5'>2024</b><b class='flag-5'>數據中心</b>能源十大<b class='flag-5'>趨勢</b>,引領未來變革

    從CES 2024AI PC江湖

    CES 2024有閉幕的一天,但這場名為AIPC產業協奏,才初試啼聲
    的頭像 發表于 01-13 14:53 ?1896次閱讀
    從CES <b class='flag-5'>2024</b><b class='flag-5'>看</b><b class='flag-5'>AI</b> <b class='flag-5'>PC</b>江湖
    主站蜘蛛池模板: 欧美成人3d动漫专区| 一二三四视频免费社区5| 美国一级黄色| 久久99re6热在线播放| 国产亚洲精品久久久久| 国产第一页在线视频| 国产51麻豆二区精品AV视频| 办公室里做好紧好爽H| 99re6久久在热线视频| 99精品成人无码A片观看金桔| 8X拨牐拨牐X8免费视频8| 伊人国产在线观看| 伊人久久国产免费观看视频| 一区二区三区无码被窝影院| 亚洲中文 字幕 国产 综合| 亚洲精品国产精品麻豆99| 小SB几天没做SAO死了H| 亚洲大爷操| 亚洲一级特黄| 中文字幕乱偷无码AV蜜桃| 69精品人人人人| caoporn 超碰在线视频| SAO货腿张开JI巴CAO死我| 成片免费观看视频大全| 攻把受做哭边走边肉楼梯PLAY| 姑娘视频日本在线播放| 国产九九九九九九九A片| 国产亚洲精品久久精品69| 色吧.com| 欧美极品尿交| 国产乱妇乱子在线播视频播放网站| 无码区国产区在线播放| 精品国产乱码久久久久久下载 | 蜜臀AV中文字幕熟女人妻| 亚洲综合国产在不卡在线| 老人洗澡自拍xxx互摸| 国产在线伊人| 三级叫床震大尺度视频| 无码人妻精品一区二区蜜桃在线看 | 34g污奶绵uk甩奶| 99国产福利|