色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

華中科大馮丹教授:加速數(shù)據(jù)中心向Diskless架構(gòu)演進,近數(shù)據(jù)處理新型盤框技術(shù)創(chuàng)新發(fā)力

章鷹觀察 ? 來源:電子發(fā)燒友原創(chuàng) ? 作者:章鷹 ? 2023-04-23 17:41 ? 次閱讀
電子發(fā)燒友網(wǎng)報道 文/章鷹)“我們把計算中心分為三大塊,計算、傳輸和存儲。但是當(dāng)前數(shù)據(jù)中心存算分離不徹底,導(dǎo)致計算和存儲分別還有大量的冗余空間。比如計算器、存儲服務(wù)器都有配置相應(yīng)的硬盤,通過計算服務(wù)器的硬盤做緩存,將存儲域的數(shù)據(jù)拉到計算這塊進行處理,導(dǎo)致我們配備最大容量的配置,導(dǎo)致存儲資源的浪費;另外一方面,采用通用的算力進行處理,使得IO的處理在計算域這一側(cè)采用CPU來做網(wǎng)絡(luò)和讀寫的操作,需要消耗30%的算力,而在存儲域采用通用CPU做控制器,使得性能降低20%。”華中科技大學(xué)計算機科學(xué)與技術(shù)學(xué)院院長馮丹表示點出當(dāng)前數(shù)據(jù)中心存儲領(lǐng)域的痛點問題。


圖:華中科技大學(xué)計算機科學(xué)與技術(shù)學(xué)院院長 馮丹

4月20日,在中國深圳舉辦的華為分析師大會分論壇上,長江學(xué)者特聘教授、華中科技大學(xué)計算機科學(xué)與技術(shù)學(xué)院院長馮丹對數(shù)據(jù)中心Diskless架構(gòu)及近數(shù)據(jù)處理發(fā)展趨勢做出了權(quán)威解讀。

馮丹指出,傳統(tǒng)存算融合架構(gòu)下,企業(yè)通常采用應(yīng)用與本地盤耦合的服務(wù)器一體化架構(gòu),存在存力效率低、無效數(shù)據(jù)遷移、資源浪費等典型問題。表現(xiàn)為:一、數(shù)據(jù)從盤到計算域CPU,需要8次以上數(shù)據(jù)搬遷,無效搬遷帶來了網(wǎng)絡(luò)和算力資源的浪費;二、在存算融合的上千節(jié)點大規(guī)模集群中,算力、容量空間配比無法均衡,擴容時需要額外遷移數(shù)據(jù),不僅帶來現(xiàn)有業(yè)務(wù)風(fēng)險,還會浪費投資;三、數(shù)據(jù)爆發(fā)增長,面向結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)縮減策略不完全適用于非結(jié)構(gòu)化場景。

國際調(diào)研機構(gòu)IDC的數(shù)據(jù)顯示,2025年數(shù)據(jù)量將達到175ZB,積累的數(shù)據(jù)量90%主要來自于近兩年,大部分?jǐn)?shù)據(jù)來自金融、基因、分子、動力、IoT等等,從結(jié)構(gòu)化到非結(jié)構(gòu)化大量數(shù)據(jù)的產(chǎn)生,使得對容量、成本的壓力越來越大。但是傳統(tǒng)的面向結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)壓縮方法,可以使壓縮比達到3:1,但是對于非結(jié)構(gòu)化數(shù)據(jù),壓縮比小于2,甚至是無效的。如何在存儲域?qū)崿F(xiàn)對于用戶來說,透明的、高效、自適應(yīng)的數(shù)據(jù)縮減算法也成為一個難題。

隨著算力多樣化、高性能網(wǎng)絡(luò)和存儲介質(zhì)的發(fā)展,數(shù)據(jù)中心架構(gòu)從以CPU中心朝著以數(shù)據(jù)為中心的Diskless架構(gòu)演進。Diskless架構(gòu)下,單一CPU算力發(fā)展到GPU、DPU、XPU等多樣算力,算力效率得以充分發(fā)揮;網(wǎng)絡(luò)從IP、NOF發(fā)展到高通量的CXL,為算力和存力等硬件解耦奠定了基礎(chǔ);存力也從傳統(tǒng)HDD到SSD,性能、功耗實現(xiàn)全面提升。Intel、華為、KIOXIA、阿里云等業(yè)界芯片、存儲、云和互聯(lián)網(wǎng)廠商的積極推進下,Diskless架構(gòu)借助專用DPU/IPU等數(shù)據(jù)處理芯片和OceanDisk等專用存儲模塊,進一步提升數(shù)據(jù)處理和存儲的效能,充分調(diào)動數(shù)據(jù)中心資源。

馮丹教授表示,資源池化共享的Diskless架構(gòu)應(yīng)具備以下關(guān)鍵技術(shù):

1、網(wǎng)存協(xié)同,DPU硬件卸載加速,數(shù)據(jù)高效協(xié)同處理。通過DPU等專有數(shù)據(jù)處理模塊,使服務(wù)器CPU全為應(yīng)用服務(wù),基礎(chǔ)設(shè)施與應(yīng)用任務(wù)解耦,將VirtIO、NVMe-oF等CPU計算效率低任務(wù)轉(zhuǎn)移到DPU的專用加速器執(zhí)行,實現(xiàn)資源彈性擴展。

2、數(shù)控分離+IO直通,實現(xiàn)控制流與IO流分離,IO直通到存儲介質(zhì),進一步提升存儲效率。通過數(shù)控分離,可達到極致IO訪問時延,通過存儲域IO讀寫數(shù)據(jù)流與IO控制處理的分離,使得讀寫IO直通到存儲介質(zhì)中,減少IO處理路徑,降低處理復(fù)雜度,極大提升存儲域訪問性能。計算域則可以借助DPUbypassCPU,減少數(shù)據(jù)拷貝開銷,提升IO訪問性能。

3、盤控協(xié)同,盤芯片與控制器芯片配合,提升集成度,達到最佳成本和能耗。盤控協(xié)同技術(shù)的關(guān)鍵是要實現(xiàn)高性能、低成本的大盤,通過硬件對盤控系統(tǒng)內(nèi)的算法進行加速,比如利用FPGA實現(xiàn)FTL/DIF/在線壓縮/加密/EC/GC等硬化,提升性能;盤內(nèi)和框內(nèi)的各類驅(qū)動和緩存層合一,實現(xiàn)盤框一體,構(gòu)建極致成本和能耗的大盤存儲。

4、算子卸載,EC、數(shù)據(jù)縮減等算法通過硬件卸載到存儲端,實現(xiàn)近數(shù)據(jù)處理。通過計算語義的卸載,存儲直出語義接口,主機側(cè)軟件棧打薄,減少80%的IO交互次數(shù),實現(xiàn)對整系統(tǒng)

的CPU和網(wǎng)絡(luò)帶寬節(jié)省。同時,在大數(shù)據(jù)/數(shù)據(jù)倉庫場景,可以利用引擎的下推接口,下推謂詞和投影等運算操作到存儲資源池,減少無效數(shù)據(jù)的搬移。

華為去年發(fā)布的OceanDisk智能盤框產(chǎn)品,是一個標(biāo)準(zhǔn)的大存力新型盤框產(chǎn)品。OceanDisk通過NoF+高速網(wǎng)絡(luò)連接Diskless服務(wù)器,實現(xiàn)計算和存儲獨立彈性擴展,幫助客戶提高資源利用率,機柜空間和設(shè)備功耗分別降低40%;內(nèi)置FlashLink?智能盤框協(xié)同算法等軟硬結(jié)合技術(shù),帶來最大250萬IOPS,50GB/s帶寬的高性能;依托華為多年存儲研發(fā)實力,OceanDisk智能盤框提供硬盤亞健康管理、智能慢盤優(yōu)化等技術(shù),保持大規(guī)模數(shù)據(jù)中心10萬級硬盤的性能穩(wěn)定,大幅降低運維難度。OceanDisk作為業(yè)界首個面向Diskless架構(gòu)的新型盤框,將以高性能、高可靠、綠色集約重新定義下一代云和互聯(lián)網(wǎng)數(shù)據(jù)中心存儲架構(gòu)。

馮丹教授表示:“從技術(shù)趨勢來看,高性能異構(gòu)算力、高速網(wǎng)絡(luò)、大存力新型盤框、算子卸載等技術(shù)的發(fā)展,帶來了數(shù)據(jù)中心架構(gòu)的變革,加速了以CPU為中心的耦合架構(gòu)走向徹底存算分離、資源池化共享的以數(shù)據(jù)為中心的Diskless架構(gòu),這種架構(gòu)進一步簡化了數(shù)據(jù)中心基礎(chǔ)設(shè)施構(gòu)建,能夠?qū)崿F(xiàn)存力和算力資源的集約高效發(fā)展,已經(jīng)成為大規(guī)模數(shù)據(jù)中心發(fā)展的重要技術(shù)趨勢。”

本文由電子發(fā)燒友原創(chuàng),轉(zhuǎn)載請注明以上來源。微信號zy1052625525。需入群交流,請?zhí)砑游⑿舉lecfans999,投稿爆料采訪需求,請發(fā)郵箱zhangying@elecfans.com。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 華為
    +關(guān)注

    關(guān)注

    216

    文章

    34476

    瀏覽量

    252114
  • intel
    +關(guān)注

    關(guān)注

    19

    文章

    3483

    瀏覽量

    186109
  • 數(shù)據(jù)中心
    +關(guān)注

    關(guān)注

    16

    文章

    4806

    瀏覽量

    72209
收藏 人收藏

    評論

    相關(guān)推薦

    維諦技術(shù):如何讓貴州醫(yī)科大學(xué)數(shù)據(jù)中心遷移0業(yè)務(wù)影響?

    搬家是什么感覺?麻煩,累,折騰……而且稍不留神就會丟三落四。普通人搬家尚且如此,那數(shù)據(jù)中心“搬家”會更讓人崩潰,過程會涉及大量設(shè)備、重要數(shù)據(jù)和核心資產(chǎn)的轉(zhuǎn)移。貴州醫(yī)科大學(xué)就經(jīng)歷了這樣的大場面
    的頭像 發(fā)表于 12-18 15:20 ?172次閱讀
    維諦<b class='flag-5'>技術(shù)</b>:如何讓貴州醫(yī)<b class='flag-5'>科大</b>學(xué)<b class='flag-5'>數(shù)據(jù)中心</b>遷移0業(yè)務(wù)影響?

    華為數(shù)據(jù)中心能源榮膺W.Media 2024技術(shù)領(lǐng)袖獎

    近日,W.Media 2024亞太云和數(shù)據(jù)中心頒獎晚宴在新加坡舉辦,華為數(shù)據(jù)中心能源憑借卓越的技術(shù)領(lǐng)導(dǎo)和廣泛的市場影響,榮獲“
    的頭像 發(fā)表于 12-09 09:51 ?202次閱讀

    NIDA發(fā)布《智算數(shù)據(jù)中心網(wǎng)絡(luò)建設(shè)技術(shù)要求》

    Alliance,以下簡稱 “NIDA”)攜手中國信息通信研究院等9家組織成員共同發(fā)布了《智算數(shù)據(jù)中心網(wǎng)絡(luò)建設(shè)技術(shù)要求》(以下簡稱 “技術(shù)要求”)。該技術(shù)要求明確了智算場景下
    的頭像 發(fā)表于 12-04 11:13 ?380次閱讀

    電力模塊如何在數(shù)據(jù)中心建設(shè)中創(chuàng)新使用?為設(shè)計提供思路

    高密化、規(guī)?;陌l(fā)展,供電系統(tǒng)作為數(shù)據(jù)中心的“心臟”,為滿足數(shù)據(jù)中心的增長,以及綠色能源的發(fā)展趨勢,在建設(shè)中不僅要保障供電的安全性,更要對供電系統(tǒng)進行技術(shù)創(chuàng)新,為客戶創(chuàng)造更大價值。結(jié)合相關(guān)技術(shù)
    的頭像 發(fā)表于 11-26 14:33 ?342次閱讀
    電力模塊如何在<b class='flag-5'>數(shù)據(jù)中心</b>建設(shè)中<b class='flag-5'>創(chuàng)新</b>使用?為設(shè)計提供思路

    面向未來數(shù)據(jù)中心的存儲平臺技術(shù)挑戰(zhàn)與探索

    教授華中科技大學(xué)金海教授,清華大學(xué)舒繼武教授,李輝等20余位專家出席會議。秀湖會議學(xué)術(shù)委員會主席、CCF副理事長、清華大學(xué)胡事民教授在開幕
    的頭像 發(fā)表于 11-06 10:43 ?244次閱讀

    如何選擇數(shù)據(jù)中心服務(wù)

    的規(guī)模、所需的服務(wù)類型(如托管服務(wù)、云服務(wù)、存儲服務(wù)等)、數(shù)據(jù)處理和存儲的需求、安全性要求以及預(yù)算等。這些需求將直接影響選擇數(shù)據(jù)中心服務(wù)的方向和重點。 二、考察數(shù)據(jù)中心的位置 數(shù)據(jù)中心
    的頭像 發(fā)表于 10-24 16:14 ?221次閱讀

    當(dāng)今數(shù)據(jù)中心技術(shù)趨勢

    計算 數(shù)據(jù)中心的首要趨勢是追求更高的效能和性能。隨著數(shù)字化轉(zhuǎn)型的深入推進,各行業(yè)對數(shù)據(jù)中心處理能力和存儲容量提出了更高要求。為了滿足這些需求,數(shù)據(jù)中心正不斷引入新
    的頭像 發(fā)表于 10-24 15:15 ?492次閱讀

    簡述數(shù)據(jù)中心網(wǎng)絡(luò)架構(gòu)的演變

    隨著全球?qū)θ斯ぶ悄埽ˋI)的需求不斷增長,數(shù)據(jù)中心作為AI計算的重要基礎(chǔ)設(shè)施,其網(wǎng)絡(luò)架構(gòu)與連接技術(shù)的發(fā)展變得尤為關(guān)鍵。
    的頭像 發(fā)表于 10-22 16:23 ?331次閱讀

    人工智能數(shù)據(jù)中心新型連接解決方案

    支持新型人工智能數(shù)據(jù)中心架構(gòu)的先進連接解決方案不斷涌現(xiàn)。高速板對板連接器、下一代電纜、背板和近似集成電路連接器對電纜解決方案的運行速度高達224Gb/s-PAM4,將加速未來計算的發(fā)展
    的頭像 發(fā)表于 06-13 08:26 ?579次閱讀
    人工智能<b class='flag-5'>數(shù)據(jù)中心</b>的<b class='flag-5'>新型</b>連接解決方案

    第十三期CCF秀湖會議:共話未來數(shù)據(jù)中心的存儲平臺技術(shù)挑戰(zhàn)與探索

    、清華大學(xué)鄭緯民教授,華中科技大學(xué)金海教授,清華大學(xué)舒繼武教授,浪潮存儲產(chǎn)品線總經(jīng)理李輝等20余位專家出席會議。秀湖會議AC主席、CCF副理事長、清華大學(xué)胡事民
    的頭像 發(fā)表于 06-04 16:33 ?386次閱讀
    第十三期CCF秀湖會議:共話未來<b class='flag-5'>數(shù)據(jù)中心</b>的存儲平臺<b class='flag-5'>技術(shù)</b>挑戰(zhàn)與探索

    八大科技巨頭攜手推進UALink,加速數(shù)據(jù)中心AI互聯(lián)

    近日,英特爾、Google、微軟、Meta等八家科技巨頭宣布共同成立超加速器鏈接(UALink)推廣小組,致力于推動數(shù)據(jù)中心內(nèi)AI加速器芯片的連接組件發(fā)展。UALink旨在優(yōu)化數(shù)據(jù)中心
    的頭像 發(fā)表于 05-31 10:59 ?857次閱讀

    智慧醫(yī)療的綠色大腦 中科曙光風(fēng)改液數(shù)據(jù)中心

    中科曙光及旗下子公司曙光數(shù)創(chuàng)積極探索,推出液冷數(shù)據(jù)中心解決方案。該方案在華中科技大學(xué)協(xié)和深圳醫(yī)院(以下簡稱南山醫(yī)院)成功應(yīng)用。 不僅為智慧醫(yī)療的發(fā)展提供了強有力的支撐,也為實現(xiàn)“雙碳”目標(biāo)作出了積極貢獻。 ? ?
    發(fā)表于 04-08 09:53 ?366次閱讀

    華中科大在近場光學(xué)成像方向取得重要進展

    近日,《自然·納米技術(shù)》(Nature Nanotechnology)在線刊發(fā)華中科技大學(xué)李培寧教授團隊題目為“Van der Waals quaternary oxides for tunable low-loss aniso
    的頭像 發(fā)表于 03-19 09:17 ?803次閱讀
    <b class='flag-5'>華中科大</b>在近場光學(xué)成像方向取得重要進展

    讓數(shù)字世界堅定運行 | 華為發(fā)布2024數(shù)據(jù)中心能源十大趨勢

    碳綠色,并分享數(shù)據(jù)中心在部件、產(chǎn)品、系統(tǒng)和架構(gòu)方面的技術(shù)演進趨勢,凝聚共識,洞見未來。 華為數(shù)據(jù)中心能源領(lǐng)域總裁堯權(quán) 堯權(quán)表示,AI大模型時
    的頭像 發(fā)表于 01-17 20:45 ?575次閱讀
    讓數(shù)字世界堅定運行 | 華為發(fā)布2024<b class='flag-5'>數(shù)據(jù)中心</b>能源十大趨勢

    IDc數(shù)據(jù)中心需要哪些產(chǎn)品

    IDC數(shù)據(jù)中心是一個專門提供服務(wù)器和網(wǎng)絡(luò)設(shè)備的租用、托管和管理服務(wù)的場所。它通常由大型的硬件設(shè)施和專業(yè)的技術(shù)團隊組成,可以為企業(yè)和機構(gòu)提供高效、安全和可靠的數(shù)據(jù)存儲和處理解決方案。這篇
    的頭像 發(fā)表于 01-16 17:40 ?2142次閱讀
    主站蜘蛛池模板: 欧美高清视频www夜色资源网| 深爱激情站| 国自精品三七区| 果冻传媒在线播放| 久久99国产精品二区不卡| 看电影就来5566先锋av| 欧美肥胖女人bbwbbw视频| 日本在线免费| 小小水蜜桃免费影院| 亚洲午夜精品A片久久WWW软件| 在线涩涩免费观看国产精品| av视频在线免播放观看| 广西美女色炮150p图| 好吊妞国产欧美日韩视频| 恋夜直播午夜秀场最新| 内射少妇36P九色| 色聚网久久综合| 亚洲欧美一区二区三区导航| 最近日本MV字幕免费观看在线| FREEXXX性乌克兰XXX| 国产精品…在线观看| 九九99国产香蕉视频| 欧美大片xxxxbbbb| 午夜福利免费0948视频| 在教室伦流澡到高潮H免费视频| qvod伦理片| 国偷自产视频一区二区99 | 亚洲精品无夜久久久久久久久| 伊人影院网| 成年视频国产免费观看| 国产专区亚洲欧美另类在线| 免费视频亚洲| 亚洲91av| caoporn 免费视频| 国际老妇高清在线观看| 嫩草影院在线观看精品视频| 午夜在线观看免费完整直播网| 18美女腿打开无遮软件| 国产精品久久久亚洲偷窥女厕| 麻豆精品传媒一二三区| 无码专区aaaaaa免费视频|