大數(shù)據(jù)技術(shù)當(dāng)中,在海量數(shù)據(jù)的存儲環(huán)節(jié),涉及到兩個重要的概念,就是分布式數(shù)據(jù)存儲與數(shù)據(jù)庫,穩(wěn)定高效安全的數(shù)據(jù)存儲,才能為后續(xù)的計算分析環(huán)節(jié),提供穩(wěn)固的支持。今天的大數(shù)據(jù)概念解析,我們來講講分布式存儲與數(shù)據(jù)庫。
進入大數(shù)據(jù)時代,數(shù)據(jù)特征發(fā)生了明顯的變化,數(shù)據(jù)規(guī)模大、非結(jié)構(gòu)化/半結(jié)構(gòu)化的數(shù)據(jù)多,使得大數(shù)據(jù)存儲本身也需要克服很多的問題。要實現(xiàn)大規(guī)模數(shù)據(jù)的計算分析加工等問題,對于企業(yè)而言,需要通過各種手段來解決相關(guān)的問題,比如說通過優(yōu)化存儲基礎(chǔ)設(shè)施,或者搭建高性能的大數(shù)據(jù)存儲框架等等。海量數(shù)據(jù)的存儲任務(wù),針對于不同的應(yīng)用場景,往往需要因地制宜地選擇存儲方案,因此有了對象存儲、塊存儲、文件系統(tǒng)存儲等。
分布式文件/對象存儲系統(tǒng)
分布式存儲系統(tǒng)面向海量數(shù)據(jù)的存儲訪問與共享需求,提供基于多存儲節(jié)點的高性能,高可靠和可伸縮性的數(shù)據(jù)存儲和訪問能力,實現(xiàn)分布式存儲節(jié)點上多用戶的訪問共享。目前業(yè)界比較流行的分布式存儲系統(tǒng)包括:HDFS、OpenStack Swift、Ceph、GlusterFS、Lustre、AFS、OSS等。
分布式關(guān)系型數(shù)據(jù)庫
關(guān)系型數(shù)據(jù)庫是建立在關(guān)系模型基礎(chǔ)上的數(shù)據(jù)庫,借助于集合代數(shù)等數(shù)學(xué)概念和方法來處理數(shù)據(jù)庫中的數(shù)據(jù)。目前業(yè)界比較流行的分布式關(guān)系型數(shù)據(jù)庫包括:DRDS、TiDB、GreenPlum、Cobar、Aurora、Mycat等。
分析型數(shù)據(jù)庫
分析數(shù)據(jù)庫是面向分析應(yīng)用的數(shù)據(jù)庫,與傳統(tǒng)的數(shù)據(jù)庫不同,它可以對數(shù)據(jù)進行在線統(tǒng)計、數(shù)據(jù)在線分析、隨即查詢等發(fā)掘信息數(shù)據(jù)價值的工作。目前業(yè)界比較流行的分析型數(shù)據(jù)庫包括:Kylin、AnalyticDB、Druid、Clickhouse、Vertica、MonetDB、InfiniDB、LucidDB等。
圖數(shù)據(jù)庫
圖數(shù)據(jù)庫的基本含義是以“圖”這種數(shù)據(jù)結(jié)構(gòu)存儲和查詢數(shù)據(jù),而不是存儲圖片的數(shù)據(jù)庫。目前業(yè)界比較流行的圖數(shù)據(jù)庫包括:Titan、Neo4J、ArangoDB、OrientDB、MapGraph、ALLEGROGRAPH等。
列存儲數(shù)據(jù)庫
列式數(shù)據(jù)庫是以列相關(guān)存儲架構(gòu)進行數(shù)據(jù)存儲的數(shù)據(jù)庫,主要適合于批量數(shù)據(jù)處理和即時查詢。目前業(yè)界比較流行的列存儲數(shù)據(jù)庫包括:Phoenix、Cassandra、Hbase、Kudu、Hypertable等。
文檔數(shù)據(jù)庫
文檔型數(shù)據(jù)庫是NoSQL中非常重要的一個分支,它主要用來存儲、索引并管理面向文檔的數(shù)據(jù)或者類似的半結(jié)構(gòu)化數(shù)據(jù)。目前業(yè)界比較流行的文檔型數(shù)據(jù)庫包括:MongoDb、CouchDB、OrientDB、MarkLogic等。
鍵值存儲數(shù)據(jù)庫
鍵值存儲(Key-Value)是NoSQL中,數(shù)據(jù)模型中比較簡單的一個了,主要就是用哈希表,通過對于鍵(Key)的查找來找到特定的數(shù)據(jù)。目前業(yè)界比較流行的鍵值存儲數(shù)據(jù)庫包括:Redis、Memcached、Tair等。關(guān)于大數(shù)據(jù)概念解析,分布式存儲與數(shù)據(jù)庫,以上就為大家做了一個簡單的介紹了。大數(shù)據(jù)存儲環(huán)節(jié),涉及到分布式與數(shù)據(jù)庫,是需要重點去掌握的一部分,對于主流的技術(shù)架構(gòu)也需要有相應(yīng)程度的掌握。
目前業(yè)界比較流行的鍵值存儲數(shù)據(jù)庫包括:Redis、Memcached、Tair等。
關(guān)于大數(shù)據(jù)概念解析,分布式存儲與數(shù)據(jù)庫,以上就為大家做了一個簡單的介紹了。大數(shù)據(jù)存儲環(huán)節(jié),涉及到分布式與數(shù)據(jù)庫,是需要重點去掌握的一部分,對于主流的技術(shù)架構(gòu)也需要有相應(yīng)程度的掌握。
責(zé)任編輯:tzh
-
存儲
+關(guān)注
關(guān)注
13文章
4296瀏覽量
85801 -
大數(shù)據(jù)
+關(guān)注
關(guān)注
64文章
8882瀏覽量
137403
發(fā)布評論請先 登錄
相關(guān)推薦
評論