色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

虹科干貨 | Redis?Enterprise?自動分層技術:大數據集高性能解決方案

廣州虹科電子 ? 來源:虹科云科技 ? 作者:虹科云科技 ? 2023-10-19 11:19 ? 次閱讀

文章來源:虹科云科技

越來越多的應用程序依賴于龐大的數據集合,而這些應用程序必須快速響應。借助自動分層,Redis Enterprise 7.2 幫助開發人員輕松創建超快的應用程序。何樂而不為?

Redis將數據存儲在內存中,因此應用程序能以最快的速度檢索和處理數據。然而,隨著應用程序需要處理的數據越多,存儲數據集所需的內存越大,所耗費的成本則更高,Redis Enterprise自動分層技術能很好地化解這個兩難的局面。

一、問題:內存有限且昂貴

當應用程序訪問的數據量很大,例如達到TB級時,開發人員就面臨著內存有限的問題,他們一般使用基于磁盤的解決方案來在幕后支持 Redis。這樣一來,開發人員就不得不在應用程序中構建整個數據管理系統,這意味著他們要把時間花在不相干的任務上。

利用Redis Enterprise 的自動分層功能 ,開發人員可以使用固態硬盤(SSD)作為可用內存的一部分,將大容量數據庫擴展到SSD中。Redis Enterprise 可以隨時識別哪些數據應留在內存中,哪些數據應留在固態硬盤上,從而將吞吐量提高一倍,并將延遲減半。

因此,開發人員無需編寫額外的代碼或學習其他新技術。通過將動態RAM 與高速外部存儲相結合,Redis Enterprise 可以輕松高效地使用系統資源,同時還能快速訪問熱數據。

二、自動分層的工作原理
image.png

自動分層可自動管理數據。它會將熱數據轉移到DRAM,并智能地將未使用的數據轉移到 SSD。這為依賴大型數據集的應用帶來了新的可能性。

通過將訪問頻率較低的冷數據轉移到固態硬盤,開發人員可以優化內存使用,降低與大容量內存需求相關的成本。

實際上,這可以使數據量大的應用程序運行得更快,而無需開發人員額外付出。與僅使用DRAM 的部署相比,它還能節省高達 70% 的基礎硬件設施成本。而且,由于自動分層可以高效地自動管理數據訪問模式,因此您無需花費時間(計算或人工篩選)來識別熱數據和冷數據。

image.png

為了增強這一功能,Redis 與創新的鍵值存儲引擎 Speedb 建立了戰略合作伙伴關系。我們將其技術整合為默認的自動分層引擎。

集成Speedb 后,Redis Enterprise 的性能顯著提升,在訪問相同資源的情況下,吞吐量翻倍,延遲減半。這大大拓寬了可利用自動分層優勢的用例范圍。在這一改進之后,Redis Enterprise 使用自動分層的數據庫規模由每個內核 5k ops/秒增至10k ops/秒。

image.png

三、數據案例

我們來看一個案例。

下圖展示了自動分層在實際工作負載場景中的性能演變示例。藍色條代表使用以前的存儲引擎(RocksDB)的 Redis Enterprise 6.4,紅色條代表使用 Speedb 的 Redis Enterprise 7.2。在基礎設施方面,我們使用 I4i.8xlarge AWS 實例在 10 個分片上托管 1TB 數據庫,為實現高可用性,采用總共 20 個分片,為 1,024 個客戶端提供服務。

為了模擬最標準的Redis 用例,我們在 20% DRAM 和 80% SSD 的配置上定義了兩種不同的有效載荷(1KiB 和 10KiB),并提供了三種可能的使用模式:平衡讀/寫(1:1)、重讀(1:4)和重寫(4:1)。在這兩種情況下,我們測量了以每秒操作數為單位的吞吐量和相應的延遲。以下圖表顯示了結果。

image.png

RAM/SSD數據占比2:8,單次操作1KB值

RS 6.4 (RocksDB) 相比,RS 7.2 (Speedb) 改進了:

· 85% 命中率時:每秒操作次數增加 1.4 倍至 1.6 倍,同時延遲降低高達 2.4 倍

· 50% 命中率時:每秒操作次數增加 1.9 倍至 2.3 倍,同時延遲降低高達 3.8 倍image.png

RAM/SSD數據占比2:8,單次操作10KB值

與RS 6.4 (RocksDB) 相比,RS 7.2 (Speedb) 改進了:

· 85% 命中率時:每秒操作次數增加 2.3 倍至 3.0 倍,同時延遲降低高達 3.0 倍

· 50% 命中率時:每秒操作次數增加 2.1 倍至 3.5 倍,同時延遲降低高達 3.5 倍

在所有情況下,帶有Speedb 的 Redis Enterprise 7.2 都具有更好的吞吐量,這意味著維持這種性能水平所需的應用程序速度更快,基礎設施更少。

四、應用場景

自動分層尤其適用于將數據分為熱數據和冷數據的情況。

1.移動銀行

讓我們來看看移動銀行應用的例子。

如今,每個人的移動設備上都有銀行應用程序。 用戶登錄應用程序,獲取余額,查看最后一筆交易,并獲取其他相對較小和集中的信息 每個人都希望這一過程流暢、簡單、即時。這些數據就是我們的熱數據,存放在Redis Enterprise 數據庫的 DRAM 中。

用戶希望獲得更多信息的情況并不常見,例如舊交易記錄--也許是兩年前的稅務數據。用戶需要訪問這些數據,但數據訪問速度并不那么重要。這種數據集是我們的冷數據,可以保存在高速外部存儲如固態硬盤中。

2.游戲行業

速度在游戲行業也很重要。例如, 游戲應用對延遲有嚴格要求 。另外,從本質上講,游戲是一種潮流。隨著時間的推移,游戲公司會積累越來越多的用戶數據,并將其存儲在用戶資料數據庫中,但并非所有用戶都是活躍用戶。通過自動分層,活躍用戶的資料數據可以存儲在DRAM 中,而其他用戶的數據則存儲在 SSD 中。

審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 內存
    +關注

    關注

    8

    文章

    3019

    瀏覽量

    74003
  • 固態硬盤
    +關注

    關注

    12

    文章

    1459

    瀏覽量

    57336
  • 大數據
    +關注

    關注

    64

    文章

    8882

    瀏覽量

    137397
  • Redis
    +關注

    關注

    0

    文章

    374

    瀏覽量

    10871
收藏 人收藏

    評論

    相關推薦

    廣和通率先推出5G融合Wi-Fi 7智能解決方案

    近期,廣和通率先推出5G融合Wi-Fi 7智能解決方案,以高性能、高速率、高可靠的無線連接幫助客戶快速迭代智能終端。目前,該5G+Wi-Fi 7智能解決方案已在智能手持客戶商用,幫助客戶以更優成本、更短開發周期邁向高速連接。
    的頭像 發表于 12-06 15:11 ?290次閱讀

    攜手Seed Robotics,開啟機器人靈巧手合作新篇章

    與SeedRobotics將結合各自在技術和市場方面的優勢,共同推廣一系列先進的機器人手和操縱器產品/解決方案,以滿足工業、醫療、教育和研究等領域對高性能機器人技術的需求。關于S
    的頭像 發表于 12-05 01:00 ?317次閱讀
    <b class='flag-5'>虹</b><b class='flag-5'>科</b>攜手Seed Robotics,開啟機器人靈巧手合作新篇章

    ADI高性能電源管理解決方案

    電子發燒友網站提供《ADI高性能電源管理解決方案.pdf》資料免費下載
    發表于 11-15 11:04 ?432次下載

    應用 為什么PCAN方案能成為石油工程通訊的首選?

    在石油工程領域,實時監控鉆井參數對于確保作業安全和提高效率至關重要。提供的PCAN解決方案憑借其高可靠性和便捷的安裝維護特性,為石油鉆井行業帶來了顯著的革新。
    的頭像 發表于 11-08 16:48 ?215次閱讀
    <b class='flag-5'>虹</b><b class='flag-5'>科</b>應用 為什么<b class='flag-5'>虹</b><b class='flag-5'>科</b>PCAN<b class='flag-5'>方案</b>能成為石油工程通訊的首選?

    應用 | 煤礦機械數據傳輸監測難?試試PCAN優選方案

    ,痛點頻現。推出的基于CAN總線技術的煤礦安全監控系統,融合多傳感器信息,顯著提升了監測實時性、數據傳輸效率和系統抗干擾能力,為煤礦安全帶來變革。01#煤礦監
    的頭像 發表于 10-17 08:01 ?325次閱讀
    <b class='flag-5'>虹</b><b class='flag-5'>科</b>應用 | 煤礦機械<b class='flag-5'>數據</b>傳輸監測難?試試<b class='flag-5'>虹</b><b class='flag-5'>科</b>PCAN優選<b class='flag-5'>方案</b>

    應用 當CANoe不是唯一選擇:發現PCAN-Explorer 6

    在CAN總線分析軟件領域,當CANoe不再是唯一選擇時,PCAN-Explorer 6軟件成為了一個有競爭力的解決方案。在現代工業控制和汽車領域,CAN總線分析軟件的重要性不言而喻。隨著
    的頭像 發表于 08-16 13:08 ?491次閱讀
    <b class='flag-5'>虹</b><b class='flag-5'>科</b>應用 當CANoe不是唯一選擇:發現<b class='flag-5'>虹</b><b class='flag-5'>科</b>PCAN-Explorer 6

    能源為SolarToday提供高壓戶用儲能解決方案

    近日,全球領先的光伏、儲能企業晶能源宣布,為SolarToday提供高壓戶用儲能解決方案,該方案將于2024年6月起在德國DACH和BeneLux地區使用。
    的頭像 發表于 06-22 10:14 ?587次閱讀

    新品 | E-Val Pro Plus有線驗證解決方案

    有線驗證解決方案E-ValProPlus我們很高興地宣布,我們將推出全新的
    的頭像 發表于 04-19 08:04 ?354次閱讀
    <b class='flag-5'>虹</b><b class='flag-5'>科</b>新品 | E-Val Pro Plus有線驗證<b class='flag-5'>解決方案</b>

    方案 | 符合醫藥行業規范的液氮罐運輸和存儲溫度監測解決方案

    在醫藥行業,液氮罐用于運輸和存儲敏感生物樣本和藥品,需保持極低溫度。的液氮罐溫度監測解決方案不僅符合行業規范,還解決了極端低溫下的挑戰。了解如何保障產品質量、安全性,滿足合規要求,并確保追溯責任。立即探索
    的頭像 發表于 04-17 13:08 ?316次閱讀
    <b class='flag-5'>虹</b><b class='flag-5'>科</b><b class='flag-5'>方案</b> | 符合醫藥行業規范的液氮罐運輸和存儲溫度監測<b class='flag-5'>解決方案</b>

    PLC如何為樓宇自動化行業提供空調、供暖與通風的解決方案

    還在人工控制空調、供暖與通風系統嗎?宏通過高性能控制器與CODESYS軟件平臺,為樓宇自動化行業提供高效解決方案,助力客戶維護建筑運行并減少相關成本。
    的頭像 發表于 04-07 10:31 ?517次閱讀
    宏<b class='flag-5'>集</b>PLC如何為樓宇<b class='flag-5'>自動</b>化行業提供空調、供暖與通風的<b class='flag-5'>解決方案</b>?

    開放式高實時高性能PLC控制器解決方案-基于米爾電子STM32MP135

    實時高性能需求尤其突出。面對以上挑戰,合作伙伴翌控科技基于米爾STM32MP135開發板發布開放式高實時高性能PLC控制器解決方案,將高精準數據采集、預處理、存儲、通信與高實時控制融為
    發表于 03-07 20:06

    NVMe Host Controller IP實現高性能存儲解決方案

    電子發燒友網站提供《NVMe Host Controller IP實現高性能存儲解決方案.pdf》資料免費下載
    發表于 02-21 14:28 ?2次下載

    分享 | PCAN工具:強大的CAN通訊解決方案,你了解多少?

    在當今的汽車和工業自動化領域,可靠的通訊系統至關重要,PCAN工具為這些應用提供了強大的支持。本文將介紹PCAN工具的功能、應用和優
    的頭像 發表于 02-02 09:54 ?826次閱讀
    <b class='flag-5'>虹</b><b class='flag-5'>科</b>分享 | PCAN工具:強大的CAN通訊<b class='flag-5'>解決方案</b>,你了解多少?

    方案|釋放總線潛力:汽車總線離線模擬解決方案

    導讀: 傳統的ECU模擬工具通常需要依賴上位機軟件來發起通信,這在離線場景和自動化產線中帶來不便。為了應對這一挑戰,推出了創新的汽車總線離線模擬解決方案,基于PCAN-Router
    的頭像 發表于 01-30 11:10 ?426次閱讀
    <b class='flag-5'>虹</b><b class='flag-5'>科</b><b class='flag-5'>方案</b>|釋放總線潛力:汽車總線離線模擬<b class='flag-5'>解決方案</b>

    一分鐘,自動完成Redis數據遷移

    NineData提供了高效、安全的Redis不停機數據遷移方案。與傳統遷移方案相比,NineData具備簡單易用、強勁性能和高可靠性的優勢。
    的頭像 發表于 01-08 11:34 ?417次閱讀
    一分鐘,<b class='flag-5'>自動</b>完成<b class='flag-5'>Redis</b><b class='flag-5'>數據</b>遷移
    主站蜘蛛池模板: 国产色婷婷亚洲99麻豆| 69人体阴展网| 男女后进式猛烈xx00动态图片| AV无码久久无遮挡国产麻豆| 色婷婷狠狠97成为人免费| 国产亚洲精品品视频在线| 在线亚洲视频无码天堂| 欧美三级aaa| 国产美女又黄又爽又色视频网站| 诱人的秘书BD在线观看| 区一区二视频免费观看| 国产亚洲精品久久久999蜜臀| 中文字幕 日韩 无码 在线| 人妖欧美一区二区三区四区| 国产在线高清亚洲精品一区| 6080YYY午夜理论片在线观看| 少妇精油按摩| 久久99视频免费| 99精品久久久久久久| 无套内射CHINESEHD熟女| 久久精品亚洲AV无码三区观看| xxnx日本| 亚洲精品无码午夜福利在线观看 | 国产女合集小岁9三部| 早乙女由依在线观看| 乳巨揉みま痴汉电车中文字幕动漫| 黄色天堂网| 冰山高冷受被c到哭np双性 | YELLOW视频在线观看大全| 亚洲精品青青草原avav久久qv| 欧美成人momandson| 黑色丝袜在线观看| xhameter中国| 伊人影院亚洲| 特级毛片AAAAAA| 蜜桃传媒视频| 国产亚洲美女精品久久久2020| AV无码国产精品午夜A片麻豆| 亚洲日韩中文字幕日本有码| 日韩AV爽爽爽久久久久久| 久久精品国产亚洲AV妓女不卡|