色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

美光高管:AI PC存儲遠超“基準要求”,兩大策略應對數據中心“存儲池”

花茶晶晶 ? 來源:電子發燒友 ? 作者:黃晶晶 ? 2024-10-18 09:09 ? 次閱讀

電子發燒友網報道(文/黃晶晶)生成式AI帶來的產業技術革新不僅在于性能越來越強大的GPU,它同時正在推進存儲產品的變化和技術的進步。近日,美光副總裁暨客戶端存儲事業部總經理Prasad Alluri在接受包括電子發燒友網在內的少數媒體采訪時指出,與過往不同,閃存和內存曾各自為政,主要致力于提高密度。AI的興起帶來了兩大轉變,一是與系統架構的協同優化;二是將能效作為關鍵優化參數。為此,美光科技正積極優化存儲產品、賦能AI在數據中心、PC、智能手機乃至汽車等各領域的應用與發展。

AI數據中心:兩大存儲池的不同存儲策略

Prasad Alluri表示,在探討AI基礎設施對數據中心存儲的具體影響時,我們可以將其視為兩個獨立的存儲池來分析。

首先,存在一個龐大的數據池,用于存儲供模型訓練所需的數據。以GPT-4為例,據估算,其訓練過程消耗了互聯網上約四分之一的數據,這足以說明大模型所需數據的龐大規模。為了訓練這類模型,必須具備存儲海量數據的能力,我們可以形象地稱之為“數據湖”,即所有待訓練數據均匯聚于此。

對于這一存儲場景,最關鍵的屬性在于能夠高效且經濟地傳輸數據。將容量與經濟性相結合,意味著需要摒棄主要依賴大容量硬盤驅動器的傳統架構,轉而采用大容量SSD。此舉不僅能減少物理占用空間,還能降低能耗,從而提升整體能源經濟性。在此方面,美光科技推出的6500 ION系列產品正是針對大容量存儲需求而優化的理想解決方案。

另一方面是訓練過程實際發生的存儲池,即緊鄰GPU的存儲池。此時,需考慮的是如何將數據湖中的數據高效送入GPU內存以供訓練。在此過程中,設備的讀寫性能至關重要,尤其是隨機讀取性能。對于這類靠近GPU訓練集群的存儲,美光9550 SSD從設計之初便旨在滿足這些需求。9550 SSD隨機讀取性能領先業界,速率高達3,300 KIOPS,這正是訓練集群所亟需的。

此外,美光9550 SSD提供業界領先的能效,并在支持各類AI工作負載方面表現出眾,包括使用大規模存儲加速器(BaM)進行圖神經網絡(GNN)訓練(SSD平均功耗降低高達43%,整體系統能耗減少高達29%)、NVIDIA Magnum IO GPUDirect Storage(每傳輸1TB數據,SSD能耗降低高達81%)、MLPerf(SSD能耗降低高達35%,系統能耗降低高達13%)以及使用Microsoft DeepSpeed對Llama 大語言模型(LLM)訓練進行微調(SSD能耗降低高達 21%)。

73f6c7253fc84771b38ea85c69216d33~tplv-tt-shrink:640:0.image?lk3s=06827d14&traceid=2024101809093961CDC802EC1C8B66A1C8&x-expires=2147483647&x-signature=1TAcqvFvlorBSVmzTuWM6nTjDgQ%3D

AI PC的存儲需求,將遠超微軟的“基準要求”

微軟為AI PC產品Copilot+設定了基準要求,其中NPU的算力起始于40 TOPS,內存方面則規定了至少16GB的容量,以及256GB的存儲空間作為最低配置。不過,Prasad Alluri表示,這些僅是基礎指導線,并未全面界定AI PC的真正內涵。

“要深入理解AI PC,我們需將焦點放在用戶體驗上。AI PC的核心在于通過諸如翻譯或圖像編輯等任務來提升生產力,且這些任務需在設備上高效完成。正是這種整體體驗定義了AI PC,而非單純的技術規格。為了滿足用戶的這些期望,我們認為所需的內存量遠超最低指導線。事實上,當前多數OEM在打造AI PC時,已配備了24GB至32GB的DRAM。”

從存儲角度來看,盡管OEM目前提供的最低容量為512GB,但我們認為對于AI工作負載而言,更理想的容量應接近1TB。

不過,這不僅僅關乎容量大小,功耗效率和性能同樣至關重要。在存儲領域,目標是以最高效的方式將AI模型從存儲加載到內存中。為此,需要在不增加功耗的前提下,獲得盡可能高的吞吐量。美光高性能客戶端3500 SSD在相同功耗下提供了業界領先的性能。

針對于AI PC,美光科技加速了LPDDR5X在AI PC中的應用普及。與同類SODIMM產品相比,LPDDR5X的性能提升了約1.5倍。此外,還專為AI個人電腦設計了一種新型內存模塊——LPCAMM2。與傳統SODIMM產品相比,LPCAMM2不僅性能提升1.5倍,而且功耗降低高達58%,空間節省達64%。這款新產品于今年早些時候推出,主要圍繞三大目標設計:提升性能、降低功耗以及減小體積。在標準PC中,通常需要兩個SODIMM并排放置,占用主板大量空間。而LPCAMM2則將這些功能集成到一個DIMM中,從而顯著提升了電源效率和性能。

在當前的PC環境中,以我們內部使用的Microsoft Copilot為例,它高度依賴云計算,將大部分復雜任務卸載到云端。然而,未來的AI個人電腦將能夠在本地處理部分工作負載,減少對云端的依賴。這樣,模型復雜性將降低,AI個人電腦能在保持高性能的同時,實現更高效的能源利用,提高數據處理的靈活性和速率。

在PC的本地存儲中完全可以放置多個模型,并根據用戶查詢的上下文加載這些模型。例如,如果用戶需要語音轉文本服務,您可以加載相關模型;如果用戶需要圖像創建,您可以加載相應的模型。在此過程中,關鍵在于以節能方式從存儲中加載數據,因此,SSD的性能至關重要,它需在最低功耗下實現最高吞吐量,即充分利用PCIe 4.0 的四通道。

為此,美光科技的3500 SSD不僅在最低功耗下提供行業領先的性能。同時,該SSD中內置了啟發式算法。當檢測到AI工作負載時,驅動器可以主動加載所需的正確模型或數據。這些就是為實現高效能和電源效率所做的優化。

QLC越發重要,閃存層數應從縱橫向提升

當本網記者問及當前QLC對于AI存儲越來越重要,美光的看法與規劃,以及3D NAND閃存的層數將如何發展等問題時,Prasad Alluri也給出了詳細的分析。

Prasad Alluri表示,從NAND技術的視角來看,最關鍵的因素在于每平方毫米的容量密度。也就是我們最終追求的是比特面密度(Bit Areal Density),因為這將有助于降低成本。

但是,有多種方法可以實現這一目的。其中一種是對單個物理單元提升容量。這正是四階存儲單元(QLC)技術大顯身手的地方,而我們在這一領域始終保持領先地位,特別是在PC市場率先推出了這一技術。目前,美光科技在該領域的市場占有率位居前列。盡管我們尚未宣布針對數據中心的具體計劃,但我們仍在持續投資QLC技術,并致力于提高容量密度,這是推動技術進步的重要途徑之一。

另外,在NAND技術中可以通過堆疊更多層來增加單位面積內的容量。美光科技最近推出了第九代(G9)TLC NAND技術。雖然目前尚不清楚3D NAND的層數何時會達到極限,但在未來的幾代產品中,美光的閃存層數將繼續增加。

bd448c41ffe9493195be5c4f4abf2a9c~tplv-tt-shrink:640:0.image?lk3s=06827d14&traceid=2024101809093961CDC802EC1C8B66A1C8&x-expires=2147483647&x-signature=%2Fg4nVUtolQuElK%2Fkqy2WFl3hcN4%3D

但他也強調,層數并非實現比特面密度提升的唯一關鍵因素,因為橫向擴展同樣至關重要。除了關注3D堆疊層的數量外,還需要考慮單元之間水平位置的接近程度。這種橫向優化是美光提高比特面密度的另一個關鍵領域。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4296

    瀏覽量

    85798
  • 數據中心
    +關注

    關注

    16

    文章

    4761

    瀏覽量

    72034
  • 美光
    +關注

    關注

    5

    文章

    709

    瀏覽量

    51418
  • AI PC
    +關注

    關注

    0

    文章

    123

    瀏覽量

    236
收藏 人收藏

    評論

    相關推薦

    科技推出業界首款PCIe 5.0 60TB數據中心SSD

    科技股份有限公司(納斯達克股票代碼:MU)近日宣布已開始與客戶進行6550 ION NVMe SSD的認證。6550 ION SSD是全球速率領先的60TB
    的頭像 發表于 12-20 09:06 ?189次閱讀

    科技推出新款存儲解決方案

    隨著人工智能(AI)不斷改變行業并推動創新,數據中心需要能夠跟上存儲解決方案的發展步伐。為滿足這一需求,我很高興地宣布推出新款存儲解決方案——
    的頭像 發表于 11-18 10:32 ?207次閱讀
    <b class='flag-5'>美</b><b class='flag-5'>光</b>科技推出新款<b class='flag-5'>存儲</b>解決方案

    看2024年AI數據中心AI PC存儲趨勢

    在接受包括電子發燒友網在內的少數媒體采訪時指出,與過往不同,閃存和內存曾各自為政,主要致力于提高密度。AI的興起帶來了兩大轉變,一是與系統架構的協同優化;二是將能效作為關鍵優化參數。為此,
    的頭像 發表于 10-13 15:22 ?1377次閱讀
    <b class='flag-5'>美</b><b class='flag-5'>光</b><b class='flag-5'>高</b><b class='flag-5'>管</b>看2024年<b class='flag-5'>AI</b><b class='flag-5'>數據中心</b>、<b class='flag-5'>AI</b> <b class='flag-5'>PC</b>的<b class='flag-5'>存儲</b>趨勢

    數據中心對MOS性能的要求

    數據中心作為現代信息技術的核心基礎設施,承載著數據存儲、處理和傳輸的重要任務。在這些任務中,MOS(金屬氧化物半導體場效應晶體)作為關鍵
    的頭像 發表于 10-11 11:22 ?263次閱讀

    半導體存儲器在數據中心中的應用

    半導體存儲器在數據中心中的應用是極其重要且廣泛的,它們不僅是數據中心存儲系統的核心組件,還直接關系到數據處理的效率、可靠性和安全性。以下將詳細闡述半導體
    的頭像 發表于 08-20 10:17 ?610次閱讀

    Solidigm推出兩款數據中心固態存儲硬盤(SSD)

    與D7-PS1030。這款基于PCIe 5.0接口的超高速SSD,旨在滿足從通用服務器到高級AI及機器學習應用等多樣化工作負載的嚴苛IO需求,標志著數據中心存儲性能的新紀元。
    的頭像 發表于 08-07 16:24 ?607次閱讀

    發布全新數據中心SSD

    近日,全球領先的存儲解決方案提供商科技股份有限公司宣布了一項重大創新成果——9550 NVMe? SSD的正式推出。這款專為
    的頭像 發表于 07-30 16:41 ?636次閱讀

    推出數據中心SSD產品9550 NVMe SSD新品

    科技股份有限公司(納斯達克股票代碼:MU)近日宣布,推出數據中心 SSD 產品 9550 NVMe SSD,性能業界領先,同時具備卓
    的頭像 發表于 07-29 18:12 ?1152次閱讀

    推出9550系列數據中心PCIe 5.0 SSD

    科技巨頭近日震撼宣布,成功推出其革命性的9550系列數據中心PCIe 5.0 SSD,一舉奠定了全球最快數據中心存儲解決方案的新高度。這款專為
    的頭像 發表于 07-26 15:49 ?367次閱讀

    憶聯全場景存儲解決方案助力金融數據中心存力飛躍

    AI時代,數據中心建設正在經歷一場深刻的變革。依照行業最高標準建設的金融數據中心需要怎樣的存力?當高密度、大容量、可靠、高性能存儲逐步成為
    的頭像 發表于 07-23 18:15 ?1138次閱讀
    憶聯全場景<b class='flag-5'>存儲</b>解決方案助力金融<b class='flag-5'>數據中心</b>存力飛躍

    率先量產232層QLC NAND產品

    科技再次領跑行業前沿,近日宣布其232層QLC NAND產品已成功實現量產,并已開始應用于部分Crucial英睿達固態硬盤中。這一突破性的技術不僅滿足了客戶端對數據存儲
    的頭像 發表于 05-09 14:53 ?600次閱讀

    以信任為基,圍繞AI推動存儲革命

    為基礎的存儲革命。 ? 在這場革命中,不僅提供高性能的存儲產品,更是在AI時代構建起信任的基石,確保
    發表于 04-01 09:15 ?703次閱讀
    以信任為基,圍繞<b class='flag-5'>AI</b>,<b class='flag-5'>美</b><b class='flag-5'>光</b>推動<b class='flag-5'>存儲</b>革命

    數據中心存儲的趨勢

    隨著數據存儲需求的持續增長,數據中心存儲技術和架構不斷發展以滿足企業和消費者的需求。在本節中,我們將分析數據中心存儲未來的一些關鍵趨勢。 一、全閃存
    的頭像 發表于 03-18 17:39 ?540次閱讀

    科技啟動帶寬存儲芯片生產 為英偉達最新AI芯片提供支持

    英偉達下一代H200圖形處理器將采用HBM3E芯片,預計于今年第2季交付,有望超越現有的H100芯片,為科技貢獻更高業績。此外,龍頭廠商SK海力士等供應的
    的頭像 發表于 02-27 09:33 ?682次閱讀

    數據中心變“綠“要點有哪些?

    數據中心作為一個復雜的系統,存儲著大量敏感信息和重要數據,又是能耗“大戶”,需要應對不斷提升的“綠”電、節能要求,全面及時的檢測維護對于
    的頭像 發表于 01-25 11:12 ?719次閱讀
    主站蜘蛛池模板: 国产偷抇久久精品A片蜜臀A| 男人J放进女人屁股免费观看| 青青青手机视频| 一本之道高清在线观看免费| 富婆夜店找黑人猛男BD在线| 美女张开大腿| 伊人网综合在线观看| 国产人成无码视频在线观看| 皮皮在线精品亚洲| 中字幕久久久人妻熟女天美传媒| 国产精品人妻一区免费看8C0M| 青柠视频在线观看高清HD| 中文字幕福利视频在线一区| 国内精品久久久久影院亚洲| 色老汉网址导航| 啊好大好厉害好爽真骚| 露露的性战k8经典| 亚洲综合中文| 国产一区日韩二区欧美三区| 男女车车的车车网站W98免费| 亚欧成人毛片一区二区三区四区 | 亚洲精品高清AV在线播放| 成人精品视频99在线观看免费| 蜜桃最新网址| 一本一本之道高清在线观看| 国产喷水1区2区3区咪咪爱AV| 肉动漫无修3D在线观看| www黄色com| 欧美成ee人免费视频| 97精品国产高清在线看入口| 久久热这里面只有精品| 一二三四视频免费社区5| 国产亚洲精品A久久777777| 天天影视色欲 影视| 高H高肉强J短篇校园| 日本综艺大尺度无删减版在线 | 免费看的一级毛片| 0855午夜福利伦理电影| 久久视频精品3线视频在线观看| 一道精品视频一区二区| 精品丰满人妻无套内射|