大數(shù)據(jù)技術(shù)當(dāng)中,在海量數(shù)據(jù)的存儲(chǔ)環(huán)節(jié),涉及到兩個(gè)重要的概念,就是分布式數(shù)據(jù)存儲(chǔ)與數(shù)據(jù)庫,穩(wěn)定高效安全的數(shù)據(jù)存儲(chǔ),才能為后續(xù)的計(jì)算分析環(huán)節(jié),提供穩(wěn)固的支持。今天的大數(shù)據(jù)概念解析,我們來講講分布式存儲(chǔ)與數(shù)據(jù)庫。
進(jìn)入大數(shù)據(jù)時(shí)代,數(shù)據(jù)特征發(fā)生了明顯的變化,數(shù)據(jù)規(guī)模大、非結(jié)構(gòu)化/半結(jié)構(gòu)化的數(shù)據(jù)多,使得大數(shù)據(jù)存儲(chǔ)本身也需要克服很多的問題。要實(shí)現(xiàn)大規(guī)模數(shù)據(jù)的計(jì)算分析加工等問題,對于企業(yè)而言,需要通過各種手段來解決相關(guān)的問題,比如說通過優(yōu)化存儲(chǔ)基礎(chǔ)設(shè)施,或者搭建高性能的大數(shù)據(jù)存儲(chǔ)框架等等。海量數(shù)據(jù)的存儲(chǔ)任務(wù),針對于不同的應(yīng)用場景,往往需要因地制宜地選擇存儲(chǔ)方案,因此有了對象存儲(chǔ)、塊存儲(chǔ)、文件系統(tǒng)存儲(chǔ)等。
分布式文件/對象存儲(chǔ)系統(tǒng)
分布式存儲(chǔ)系統(tǒng)面向海量數(shù)據(jù)的存儲(chǔ)訪問與共享需求,提供基于多存儲(chǔ)節(jié)點(diǎn)的高性能,高可靠和可伸縮性的數(shù)據(jù)存儲(chǔ)和訪問能力,實(shí)現(xiàn)分布式存儲(chǔ)節(jié)點(diǎn)上多用戶的訪問共享。目前業(yè)界比較流行的分布式存儲(chǔ)系統(tǒng)包括:HDFS、OpenStack Swift、Ceph、GlusterFS、Lustre、AFS、OSS等。
分布式關(guān)系型數(shù)據(jù)庫
關(guān)系型數(shù)據(jù)庫是建立在關(guān)系模型基礎(chǔ)上的數(shù)據(jù)庫,借助于集合代數(shù)等數(shù)學(xué)概念和方法來處理數(shù)據(jù)庫中的數(shù)據(jù)。目前業(yè)界比較流行的分布式關(guān)系型數(shù)據(jù)庫包括:DRDS、TiDB、GreenPlum、Cobar、Aurora、Mycat等。
分析型數(shù)據(jù)庫
分析數(shù)據(jù)庫是面向分析應(yīng)用的數(shù)據(jù)庫,與傳統(tǒng)的數(shù)據(jù)庫不同,它可以對數(shù)據(jù)進(jìn)行在線統(tǒng)計(jì)、數(shù)據(jù)在線分析、隨即查詢等發(fā)掘信息數(shù)據(jù)價(jià)值的工作。目前業(yè)界比較流行的分析型數(shù)據(jù)庫包括:Kylin、AnalyticDB、Druid、Clickhouse、Vertica、MonetDB、InfiniDB、LucidDB等。
圖數(shù)據(jù)庫
圖數(shù)據(jù)庫的基本含義是以“圖”這種數(shù)據(jù)結(jié)構(gòu)存儲(chǔ)和查詢數(shù)據(jù),而不是存儲(chǔ)圖片的數(shù)據(jù)庫。目前業(yè)界比較流行的圖數(shù)據(jù)庫包括:Titan、Neo4J、ArangoDB、OrientDB、MapGraph、ALLEGROGRAPH等。
列存儲(chǔ)數(shù)據(jù)庫
列式數(shù)據(jù)庫是以列相關(guān)存儲(chǔ)架構(gòu)進(jìn)行數(shù)據(jù)存儲(chǔ)的數(shù)據(jù)庫,主要適合于批量數(shù)據(jù)處理和即時(shí)查詢。目前業(yè)界比較流行的列存儲(chǔ)數(shù)據(jù)庫包括:Phoenix、Cassandra、Hbase、Kudu、Hypertable等。
文檔數(shù)據(jù)庫
文檔型數(shù)據(jù)庫是NoSQL中非常重要的一個(gè)分支,它主要用來存儲(chǔ)、索引并管理面向文檔的數(shù)據(jù)或者類似的半結(jié)構(gòu)化數(shù)據(jù)。目前業(yè)界比較流行的文檔型數(shù)據(jù)庫包括:MongoDb、CouchDB、OrientDB、MarkLogic等。
鍵值存儲(chǔ)數(shù)據(jù)庫
鍵值存儲(chǔ)(Key-Value)是NoSQL中,數(shù)據(jù)模型中比較簡單的一個(gè)了,主要就是用哈希表,通過對于鍵(Key)的查找來找到特定的數(shù)據(jù)。目前業(yè)界比較流行的鍵值存儲(chǔ)數(shù)據(jù)庫包括:Redis、Memcached、Tair等。關(guān)于大數(shù)據(jù)概念解析,分布式存儲(chǔ)與數(shù)據(jù)庫,以上就為大家做了一個(gè)簡單的介紹了。大數(shù)據(jù)存儲(chǔ)環(huán)節(jié),涉及到分布式與數(shù)據(jù)庫,是需要重點(diǎn)去掌握的一部分,對于主流的技術(shù)架構(gòu)也需要有相應(yīng)程度的掌握。
目前業(yè)界比較流行的鍵值存儲(chǔ)數(shù)據(jù)庫包括:Redis、Memcached、Tair等。
關(guān)于大數(shù)據(jù)概念解析,分布式存儲(chǔ)與數(shù)據(jù)庫,以上就為大家做了一個(gè)簡單的介紹了。大數(shù)據(jù)存儲(chǔ)環(huán)節(jié),涉及到分布式與數(shù)據(jù)庫,是需要重點(diǎn)去掌握的一部分,對于主流的技術(shù)架構(gòu)也需要有相應(yīng)程度的掌握。
責(zé)任編輯:tzh
-
存儲(chǔ)
+關(guān)注
關(guān)注
13文章
4808瀏覽量
90119 -
大數(shù)據(jù)
+關(guān)注
關(guān)注
64文章
9070瀏覽量
143850
發(fā)布評(píng)論請先 登錄
海光3350便攜機(jī)主板:大數(shù)據(jù)處理利器
大數(shù)據(jù)解決方案如何實(shí)施
大數(shù)據(jù)平臺(tái)運(yùn)營的基礎(chǔ)是什么
AOI與AXI檢測技術(shù)全面解析:原理、差異與選型指南
湖北大數(shù)據(jù)集團(tuán)到訪維智科技參觀交流
組態(tài)大數(shù)據(jù)平臺(tái)是什么?有什么功能?
競品數(shù)據(jù)對比接口技術(shù)解析
電磁兼容與電磁干擾在電磁兼容性大數(shù)據(jù)分析中的智能管理系統(tǒng)
御控工業(yè)物聯(lián)網(wǎng)大數(shù)據(jù)解決方案:排水設(shè)備遠(yuǎn)程監(jiān)控與大數(shù)據(jù)統(tǒng)計(jì)系統(tǒng)
SiC+Si混碳融合逆變器 · 從概念到系統(tǒng)方案落地的全景解析
大數(shù)據(jù)技術(shù)概念解析
評(píng)論