91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線(xiàn)課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

多源零拷貝技術(shù)在數(shù)據(jù)存儲(chǔ)中起到了怎樣的作用?

浪潮存儲(chǔ) ? 來(lái)源:未知 ? 作者:工程師郭婷 ? 2018-08-05 10:50 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

在互聯(lián)網(wǎng)、云計(jì)算、AI、大數(shù)據(jù)等新智能應(yīng)用驅(qū)動(dòng)的新數(shù)據(jù)時(shí)代下,數(shù)據(jù)存儲(chǔ)作為一切其他數(shù)據(jù)行為的基礎(chǔ),扮演著越來(lái)越重要的角色。浪潮軟件定義存儲(chǔ)AS13000通過(guò)模塊化定義的方式,基于多源零拷貝技術(shù)實(shí)現(xiàn)多應(yīng)用高效共享一套存儲(chǔ)系統(tǒng),提高數(shù)據(jù)應(yīng)用效率。

云計(jì)算、大數(shù)據(jù)、AI、物聯(lián)網(wǎng)等各種新智能應(yīng)用不斷涌現(xiàn),帶來(lái)數(shù)據(jù)需求的改變。文件、對(duì)象等數(shù)據(jù)類(lèi)型需求增多。一方面,傳統(tǒng)的文件系統(tǒng)存儲(chǔ)服務(wù)正被企業(yè)廣泛應(yīng)用;另一方面,有著鮮明的互聯(lián)網(wǎng)、大數(shù)據(jù)時(shí)代特點(diǎn)對(duì)象存儲(chǔ),也越來(lái)越受到互聯(lián)網(wǎng)用戶(hù)青睞。

每一種存儲(chǔ)分別對(duì)應(yīng)不同的訪問(wèn)協(xié)議,文件存儲(chǔ)主要操作對(duì)象是文件和文件夾,例如NFS協(xié)議;對(duì)象存儲(chǔ)協(xié)議則主要為S3、Swift。浪潮軟件定義存儲(chǔ)AS13000的優(yōu)勢(shì)即在于,通過(guò)模塊化定義的方式,實(shí)現(xiàn)了在同一存儲(chǔ)系統(tǒng)中可以同時(shí)支持文件、對(duì)象等多種存儲(chǔ)協(xié)議,讓用戶(hù)通過(guò)一套存儲(chǔ)系統(tǒng)即可支持企業(yè)各種應(yīng)用訪問(wèn)存儲(chǔ)數(shù)據(jù),大大節(jié)省TCO。

1什么是對(duì)象存儲(chǔ)?

對(duì)象存儲(chǔ)是一種新的采用扁平數(shù)據(jù)的組織形式,并提供基于HTTP協(xié)議的RESTful接口訪問(wèn)的分布式存儲(chǔ)系統(tǒng)。它適用于一次寫(xiě)入,多次讀取的非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)的需求場(chǎng)景,例如文檔、圖像、視頻等網(wǎng)絡(luò)媒體文件。在云計(jì)算與大數(shù)據(jù)時(shí)代,對(duì)象存儲(chǔ)發(fā)展迅猛。

不過(guò),目前業(yè)界的同類(lèi)存儲(chǔ)產(chǎn)品,每種存儲(chǔ)系統(tǒng)只能提供1種或2種存儲(chǔ)協(xié)議。對(duì)于新增對(duì)象存儲(chǔ)需求的用戶(hù),這就要求在多應(yīng)用環(huán)境中必須部署2套或2套以上的存儲(chǔ)系統(tǒng),無(wú)疑增加了用戶(hù)的初始投資,且增大了后期維護(hù)和管理的難度。

浪潮軟件定義存儲(chǔ)AS13000則通過(guò)所提供的多源零拷貝技術(shù),實(shí)現(xiàn)了在線(xiàn)存儲(chǔ)和大數(shù)據(jù)分析存儲(chǔ)的統(tǒng)一融合。企業(yè)的各種應(yīng)用在存取數(shù)據(jù)時(shí),無(wú)需在存儲(chǔ)集群間進(jìn)行數(shù)據(jù)拷貝,而是通過(guò)文件系統(tǒng)方便地訪問(wèn)對(duì)象存儲(chǔ)的數(shù)據(jù),同時(shí)還可以高效實(shí)現(xiàn)大數(shù)據(jù)的分析和挖掘。

2對(duì)象存儲(chǔ):通過(guò)多源零拷貝技術(shù),共享一套存儲(chǔ)

多源零拷貝技術(shù),是通過(guò)對(duì)NFS協(xié)議、HDFS文件協(xié)議和S3/Swift對(duì)象協(xié)議多種存儲(chǔ)協(xié)議的融合,來(lái)實(shí)現(xiàn)多應(yīng)用存取數(shù)據(jù)共享一套存儲(chǔ)系統(tǒng)的先進(jìn)技術(shù)。多源零拷貝技術(shù)既避免了數(shù)據(jù)在不同存儲(chǔ)之間來(lái)回拷貝的問(wèn)題,又解決了用戶(hù)投資大、維護(hù)和管理難的問(wèn)題。

多源零拷貝技術(shù)示意圖

浪潮軟件定義存儲(chǔ)AS13000之所以可以同時(shí)支持NFS、S3/Swift、HDFS(Hadoop分布式文件系統(tǒng))訪問(wèn)底層對(duì)象存儲(chǔ),是因?yàn)椴捎昧艘韵录夹g(shù):

AS13000基于DOS設(shè)計(jì)和實(shí)現(xiàn)S3/Swift接口。它在S3/Swift接口基礎(chǔ)上封裝FS適配器,實(shí)現(xiàn)了HDFS接口和NFS接口的對(duì)接,從而實(shí)現(xiàn)大數(shù)據(jù)應(yīng)用程序和NFS應(yīng)用程序?qū)Υ鎯?chǔ)系統(tǒng)的訪問(wèn)。

AS13000的對(duì)象應(yīng)用程序通過(guò)S3/Swift接口直接調(diào)用底層存儲(chǔ)系統(tǒng),從而實(shí)現(xiàn)對(duì)象應(yīng)用程序?qū)?duì)象數(shù)據(jù)的上傳與下載。AS13000底層存儲(chǔ)是一個(gè)高可用、智能化的分布式對(duì)象存儲(chǔ)系統(tǒng),支持自修復(fù)、自管理等底層數(shù)據(jù)管理功能,它向上提供UDOS訪問(wèn)函數(shù)庫(kù),能夠支持DOS、DFS和DBS等模塊的訪問(wèn)。3提高對(duì)象存儲(chǔ)數(shù)據(jù)訪問(wèn)效率

浪潮軟件定義存儲(chǔ)AS13000提供的多源零拷貝技術(shù),避免了企業(yè)不同業(yè)務(wù)應(yīng)用數(shù)據(jù)在多存儲(chǔ)系統(tǒng)之間的拷貝,因此可以有效提升數(shù)據(jù)訪問(wèn)效率,為多場(chǎng)景、多應(yīng)用的“互聯(lián)網(wǎng)+”用戶(hù)帶來(lái)了優(yōu)勢(shì)。

浪潮軟件定義存儲(chǔ)AS13000在醫(yī)療領(lǐng)域慢病跟蹤私有云存儲(chǔ)場(chǎng)景的應(yīng)用

目前,浪潮軟件定義存儲(chǔ)AS13000在各行各業(yè)已經(jīng)有了廣泛應(yīng)用。以醫(yī)療領(lǐng)域應(yīng)用為例,AS13000已經(jīng)應(yīng)用于慢病跟蹤私有云存儲(chǔ)解決方案。系統(tǒng)的數(shù)據(jù)來(lái)源包括病人公有云監(jiān)測(cè)數(shù)據(jù)、電子病歷文件及數(shù)據(jù)庫(kù)、PACS影像數(shù)據(jù)等多種渠道,通過(guò)Storming,Spark等流式和批量數(shù)據(jù)分析和運(yùn)算,將HBASE開(kāi)源數(shù)據(jù)集存儲(chǔ)到AS13000中,然后通過(guò)慢病檔案等應(yīng)用,對(duì)HBASE結(jié)果數(shù)據(jù)進(jìn)行前端展示,提供輔助治療決策及建議。

浪潮軟件定義存儲(chǔ)AS13000存儲(chǔ)系統(tǒng)的優(yōu)勢(shì)在于,支持原生多種文件/對(duì)象協(xié)議接口, 通過(guò)一套存儲(chǔ)集群,適配多種場(chǎng)景多個(gè)應(yīng)用,給醫(yī)院節(jié)省了硬件成本;與此同時(shí),通過(guò)數(shù)據(jù)存儲(chǔ)融合,使得Spark、Storm讀取多源數(shù)據(jù)的效率提升,HBASE存儲(chǔ)數(shù)據(jù)效率也得到相應(yīng)提升,從而提升了整個(gè)存儲(chǔ)系統(tǒng)的訪問(wèn)效率。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 云計(jì)算
    +關(guān)注

    關(guān)注

    39

    文章

    8023

    瀏覽量

    144480
  • 互聯(lián)網(wǎng)
    +關(guān)注

    關(guān)注

    55

    文章

    11339

    瀏覽量

    109994
  • 數(shù)據(jù)存儲(chǔ)

    關(guān)注

    5

    文章

    1025

    瀏覽量

    52958
  • AI
    AI
    +關(guān)注

    關(guān)注

    91

    文章

    39881

    瀏覽量

    301533
  • 大數(shù)據(jù)
    +關(guān)注

    關(guān)注

    64

    文章

    9066

    瀏覽量

    143797

原文標(biāo)題:多源零拷貝,提升數(shù)據(jù)應(yīng)用效率的核心技術(shù)

文章出處:【微信號(hào):inspurstorage,微信公眾號(hào):浪潮存儲(chǔ)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    衛(wèi)星同步時(shí)鐘技術(shù)演進(jìn):從GPS馴服到冗余的工程實(shí)踐

    GPS同步時(shí)鐘技術(shù)正朝著高精度、智能化、冗余的方向持續(xù)演進(jìn)。從最初簡(jiǎn)單的脈沖輸出,到如今融合智能馴服算法、納秒級(jí)測(cè)量技術(shù)冗余判斷的復(fù)
    的頭像 發(fā)表于 02-27 12:00 ?61次閱讀
    衛(wèi)星同步時(shí)鐘<b class='flag-5'>技術(shù)</b>演進(jìn):從GPS馴服到<b class='flag-5'>多</b><b class='flag-5'>源</b>冗余的工程實(shí)踐

    碳園區(qū)數(shù)據(jù)融合體系的未來(lái)發(fā)展方向

    協(xié)同深度不足、智能決策能力薄弱、安全與共享失衡等瓶頸。隨著AI大模型、數(shù)字孿生、區(qū)塊鏈等技術(shù)的成熟,以及碳標(biāo)準(zhǔn)體系的完善,數(shù)據(jù)融合體系
    的頭像 發(fā)表于 02-03 10:08 ?87次閱讀

    西格電力碳園區(qū)技術(shù)路徑實(shí)施過(guò)程如何保障數(shù)據(jù)安全

    碳園區(qū)“能源-建筑-交通-數(shù)字”系統(tǒng)協(xié)同的技術(shù)體系,數(shù)據(jù)已成為核心生產(chǎn)要素——從光伏電站的實(shí)時(shí)出力
    的頭像 發(fā)表于 01-14 10:13 ?703次閱讀
    西格電力<b class='flag-5'>零</b>碳園區(qū)<b class='flag-5'>技術(shù)</b>路徑實(shí)施過(guò)程<b class='flag-5'>中</b>如何保障<b class='flag-5'>數(shù)據(jù)</b>安全

    半導(dǎo)體安全芯片技術(shù)原理

    物理攻擊,如通過(guò)拆解設(shè)備獲取存儲(chǔ)的敏感信息、篡改硬件電路等。一些部署在戶(hù)外的物聯(lián)網(wǎng)設(shè)備,如智能電表、交通信號(hào)燈等,更容易成為物理攻擊的目標(biāo)。 芯半導(dǎo)體的安全芯片采用了多種先進(jìn)的安全技術(shù),從硬件層面為物
    發(fā)表于 11-13 07:29

    寬頻CT在減少諧波偏差起到怎樣作用

    與相位信息,避免普通 CT 因 “頻率響應(yīng)窄、幅值衰減、相位偏移” 導(dǎo)致的諧波信號(hào)失真,為后續(xù)算法分解序分量、計(jì)算不平衡度提供準(zhǔn)確的原始數(shù)據(jù)。 一、核心作用 1:覆蓋寬頻率范圍,捕捉高次諧波 普通 CT(如常規(guī) 0.5 級(jí))的頻率響應(yīng)范圍窄(通常僅 50
    的頭像 發(fā)表于 11-05 16:31 ?1250次閱讀

    邊緣計(jì)算網(wǎng)關(guān)在能源數(shù)據(jù)采集監(jiān)控管理系統(tǒng)作用

    邊緣計(jì)算網(wǎng)關(guān)在能源數(shù)據(jù)采集監(jiān)控管理系統(tǒng)扮演著核心角色,其作用貫穿能源數(shù)據(jù)從采集到?jīng)Q策的全生命周期,具體體現(xiàn)在數(shù)據(jù)采集與整合、實(shí)時(shí)處理與分析
    的頭像 發(fā)表于 10-17 11:27 ?551次閱讀

    工業(yè)互聯(lián)網(wǎng)數(shù)據(jù)臺(tái)有什么作用

    在工業(yè)互聯(lián)網(wǎng)數(shù)據(jù)臺(tái)作為連接數(shù)據(jù)源與業(yè)務(wù)應(yīng)用的橋梁,通過(guò)整合異構(gòu)
    的頭像 發(fā)表于 10-14 11:07 ?403次閱讀
    工業(yè)互聯(lián)網(wǎng)<b class='flag-5'>中</b>的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>中</b>臺(tái)有什么<b class='flag-5'>作用</b>

    PCIe協(xié)議分析儀在數(shù)據(jù)中心中有何作用?

    速率,確保關(guān)鍵業(yè)務(wù)(如實(shí)時(shí)AI推理)的低延遲。 NUMA架構(gòu)下的PCIe拓?fù)鋬?yōu)化 場(chǎng)景:CPU服務(wù)器,NUMA節(jié)點(diǎn)間通過(guò)PCIe交換數(shù)據(jù),若拓?fù)洳缓侠頃?huì)導(dǎo)致跨節(jié)點(diǎn)訪問(wèn)延遲高。 作用
    發(fā)表于 07-29 15:02

    黑芝麻智能一芯拷貝共享內(nèi)存技術(shù):破解車(chē)載大數(shù)據(jù)傳輸效能困局

    通過(guò) 拷貝共享內(nèi)存技術(shù) ,黑芝麻智能解決車(chē)載域間大數(shù)據(jù)傳輸?shù)难舆t與資源消耗問(wèn)題。核心技術(shù)包括
    發(fā)表于 06-23 17:53 ?1726次閱讀
    黑芝麻智能一芯<b class='flag-5'>多</b>域<b class='flag-5'>零</b><b class='flag-5'>拷貝</b>共享內(nèi)存<b class='flag-5'>技術(shù)</b>:破解車(chē)載大<b class='flag-5'>數(shù)據(jù)</b>傳輸效能困局

    安科瑞ARD系列電動(dòng)機(jī)保護(hù)器在數(shù)據(jù)中心的UPS系統(tǒng)具的作用

    在當(dāng)今數(shù)字化、信息化快速發(fā)展的時(shí)代,數(shù)據(jù)中心作為信息存儲(chǔ)和處理的核心設(shè)施,其穩(wěn)定性和可靠性顯得尤為重要。安科瑞ARD電動(dòng)機(jī)保護(hù)器作為一種先進(jìn)的電機(jī)保護(hù)裝置,其在數(shù)據(jù)中心的不間斷電源系統(tǒng)(UPS)
    的頭像 發(fā)表于 04-27 16:42 ?591次閱讀
    安科瑞ARD系列電動(dòng)機(jī)保護(hù)器<b class='flag-5'>在數(shù)據(jù)</b>中心的UPS系統(tǒng)<b class='flag-5'>中</b>具的<b class='flag-5'>作用</b>

    27MHz HCSL 差分晶體振蕩器在數(shù)據(jù)中心網(wǎng)絡(luò)存儲(chǔ)系統(tǒng)的應(yīng)用方案

    集成存儲(chǔ)與PCIe控制器的服務(wù)器芯片平臺(tái) FCO5L02700033HDY00兼容上述芯片,可作為主時(shí)鐘或CDR參考時(shí)鐘,用于確保存儲(chǔ)數(shù)據(jù)穩(wěn)定傳輸與控制器時(shí)鐘同步。 五、使用注意事
    發(fā)表于 04-14 21:19

    邊緣計(jì)算在智慧路燈桿系統(tǒng)起到什么作用

    ,邊緣計(jì)算技術(shù)發(fā)揮著至關(guān)重要的作用,它就像是智慧路燈桿的 “智慧大腦”,讓智慧路燈桿真正 “聰明” 起來(lái)。 什么是邊緣計(jì)算 邊緣計(jì)算起源于傳媒領(lǐng)域,它是指在靠近物或數(shù)據(jù)源頭的一側(cè),采用網(wǎng)絡(luò)、計(jì)算、
    的頭像 發(fā)表于 04-11 14:58 ?790次閱讀

    使用串口dma環(huán)形接收+空閑中斷,觸發(fā)空閑中斷后進(jìn)入任務(wù)拷貝數(shù)據(jù)發(fā)現(xiàn)拷貝數(shù)據(jù)全為0,怎么處理?

    求助,我使用串口dma環(huán)形接收+空閑中斷,默認(rèn)應(yīng)該開(kāi)了緩存,在觸發(fā)空閑中斷后進(jìn)入任務(wù)拷貝數(shù)據(jù)發(fā)現(xiàn)拷貝數(shù)據(jù)全為0,但是我掛上調(diào)試之后在拷貝
    發(fā)表于 03-27 06:17

    嵌入式學(xué)習(xí)-飛凌嵌入式ElfBoard ELF 1板卡-內(nèi)核空間與用戶(hù)空間的數(shù)據(jù)拷貝數(shù)據(jù)拷貝介紹

    copy_from_user(void *to, const void __user *from, unsigned long n);參數(shù)說(shuō)明:to:目標(biāo)緩沖區(qū)的指針,用于存儲(chǔ)數(shù)據(jù);from:緩沖區(qū)的指針,
    發(fā)表于 03-20 11:50

    飛凌嵌入式ElfBoard ELF 1板卡-內(nèi)核空間與用戶(hù)空間的數(shù)據(jù)拷貝數(shù)據(jù)拷貝介紹

    , unsigned long n);參數(shù)說(shuō)明:to:目標(biāo)緩沖區(qū)的指針,用于存儲(chǔ)數(shù)據(jù);from:緩沖區(qū)的指針,數(shù)據(jù)的來(lái)源;n:要拷貝的字節(jié)
    發(fā)表于 03-19 08:55