91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

人工智能如何高效地存儲(chǔ)和管理數(shù)據(jù)

姚小熊27 ? 來(lái)源:物聯(lián)網(wǎng) ? 作者:物聯(lián)網(wǎng) ? 2020-10-26 16:17 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

隨著大數(shù)據(jù)的大量來(lái)源以及企業(yè)可用數(shù)據(jù)量的增加,存儲(chǔ)容量規(guī)劃已成為存儲(chǔ)管理員的問(wèn)題。據(jù)估計(jì),每天產(chǎn)生2.5萬(wàn)億字節(jié)的數(shù)據(jù)?,F(xiàn)在,如果以神經(jīng)元計(jì)算的話,那就是相當(dāng)于2.5億個(gè)人類大腦的海量數(shù)據(jù)。而且,相同的估計(jì)表明,全球總數(shù)據(jù)的90%是從2016年到2018年生成的。

可以簡(jiǎn)單地說(shuō),每天生成越來(lái)越多的數(shù)據(jù),這正增加了存儲(chǔ)工作負(fù)載的規(guī)模和復(fù)雜性。但是,人工智能可以拯救存儲(chǔ)管理員,幫助他們高效地存儲(chǔ)和管理數(shù)據(jù)。通過(guò)使用AI數(shù)據(jù)存儲(chǔ),供應(yīng)商和企業(yè)可以將存儲(chǔ)管理提升到一個(gè)新的水平。而且,存儲(chǔ)管理員可以找到他們目前正在努力管理的指標(biāo)的解決方案。

存儲(chǔ)管理員需要努力的主要指標(biāo)

存儲(chǔ)管理員在管理存儲(chǔ)問(wèn)題時(shí)面臨一些挑戰(zhàn)。而且,如果他們克服了這些挑戰(zhàn),將幫助他們?cè)跀?shù)據(jù)存儲(chǔ)的各個(gè)方面之間找到適當(dāng)?shù)钠胶?,例如在哪里分配工作?fù)載,如何分配工作負(fù)載以及如何優(yōu)化堆棧等等。

一般而言,吞吐量是指處理某事物的速率。在網(wǎng)絡(luò)級(jí)別,吞吐量的度量單位是Mbps(兆位/秒),而在存儲(chǔ)級(jí)別,吞吐量的度量單位是MB /秒(兆字節(jié)/秒)。由于一個(gè)字節(jié)等于八兆位,因此生產(chǎn)率在存儲(chǔ)級(jí)別上提高了。并且,變得難以管理提高的生產(chǎn)率。

延時(shí)

延遲是服務(wù)器完成請(qǐng)求所花費(fèi)的時(shí)間。關(guān)于存儲(chǔ),這是指滿足單個(gè)存儲(chǔ)塊的請(qǐng)求所花費(fèi)的時(shí)間。存儲(chǔ)塊或塊存儲(chǔ)是將數(shù)據(jù)存儲(chǔ)在卷中的塊。純延遲不受吞吐量影響,但是如果單個(gè)塊請(qǐng)求很大,則應(yīng)用延遲可能會(huì)隨著吞吐量的增加而偏離。

IOPS(每秒輸入/輸出操作)

IOPS是指存儲(chǔ)堆棧每秒可以處理的離散讀寫任務(wù)的數(shù)量。存儲(chǔ)堆棧是一種允許過(guò)程調(diào)用的數(shù)據(jù)結(jié)構(gòu)。這意味著將多個(gè)過(guò)程彼此存儲(chǔ)在堆棧中,然后在調(diào)用和返回的基礎(chǔ)上一個(gè)接一個(gè)地執(zhí)行所有過(guò)程。例如,如果一個(gè)過(guò)程被調(diào)用,它將被執(zhí)行,然后返回,以便在堆棧中調(diào)用下一個(gè)過(guò)程。而且,在談?wù)揑OPS時(shí),基礎(chǔ)輸入/輸出任務(wù)可以達(dá)到存儲(chǔ)系統(tǒng)的堆棧限制。例如,讀取一個(gè)大文件和多個(gè)小文件可能會(huì)對(duì)IOPS產(chǎn)生影響。由于讀取單個(gè)大文件僅需要執(zhí)行一個(gè)讀取任務(wù),因此可以以較高的速度執(zhí)行它,而另一方面,讀取多個(gè)文件的速度非常慢,因?yàn)樾枰獔?zhí)行許多讀取任務(wù)。

AI數(shù)據(jù)存儲(chǔ)如何解決存儲(chǔ)問(wèn)題

企業(yè)管理員和存儲(chǔ)供應(yīng)商處理各種各樣的存儲(chǔ)類型。而且,它們還滿足不同輸入/輸出服務(wù)的指標(biāo)。大型文件共享應(yīng)用可能需要適當(dāng)?shù)耐掏铝?,但也必須允許延遲損失,因?yàn)榇笮投鴱?fù)雜的應(yīng)用可能會(huì)對(duì)延遲產(chǎn)生不利影響。另一方面,電子郵件服務(wù)器可能需要大量存儲(chǔ),低延遲和良好的吞吐量,但它可能不需要非常苛刻的IOPS配置文件。并且,存儲(chǔ)管理員應(yīng)該決定應(yīng)該為哪些存儲(chǔ)分配什么資源。因此,在組織中運(yùn)行著成千上萬(wàn)的服務(wù)時(shí),對(duì)基礎(chǔ)存儲(chǔ)的管理超過(guò)了人們進(jìn)行明智更改的能力。而且,這就是AI算法派上用場(chǎng)的地方。

人工智能支持的存儲(chǔ)管理和計(jì)劃

AI可以監(jiān)控存儲(chǔ)以檢測(cè)多種工作負(fù)載的模式和性能。這里的工作負(fù)載是由各種輸入/輸出特征或應(yīng)用任務(wù)生成的數(shù)據(jù)流。通過(guò)檢測(cè)這些工作負(fù)載模式,AI可以幫助存儲(chǔ)管理員洞悉哪些工作負(fù)載可能使他們面臨最大化存儲(chǔ)陣列的風(fēng)險(xiǎn)。此外,存儲(chǔ)監(jiān)視還可以幫助了解是否有任何額外的工作負(fù)載可以放入陣列中。而且,如果添加到陣列中,那么工作負(fù)載將造成多少中斷。

例如,假設(shè)一家企業(yè)正在向流程中添加電子郵件服務(wù)器。在這種情況下,人工智能系統(tǒng)可以幫助預(yù)測(cè)存儲(chǔ)陣列將能夠滿足該服務(wù)器的存儲(chǔ)需求還是將其最大化。借助此類技術(shù),存儲(chǔ)管理員可以主動(dòng)獲取有關(guān)如何將不同的工作負(fù)載分配給不同的存儲(chǔ)堆棧并最大程度地減少延遲的信息。因此,將AI集成到存儲(chǔ)陣列,存儲(chǔ)供應(yīng)商和組織中可以優(yōu)化存儲(chǔ)堆棧。

除了監(jiān)視存儲(chǔ)活動(dòng)外,存儲(chǔ)管理員還需要檢查和分析存儲(chǔ)系統(tǒng)要使用的應(yīng)用的編碼和錯(cuò)誤。這有助于他們更好地了解如何圍繞應(yīng)用的需求設(shè)計(jì)存儲(chǔ)體系結(jié)構(gòu)。他們通過(guò)了解應(yīng)用的輸入/輸出模式來(lái)做到這一點(diǎn)。用于執(zhí)行此操作的最常見(jiàn)技術(shù)是捕獲應(yīng)用的跟蹤。

Strace是Linux的用戶空間實(shí)用程序,可用于診斷、調(diào)試和獲取有關(guān)輸入和輸出功能的指令。但是,由于復(fù)雜的應(yīng)用可以具有多個(gè)輸入/輸出功能,因此這對(duì)人類來(lái)說(shuō)可能是一個(gè)挑戰(zhàn)。另一方面,ML算法可以輕松地提取和分析大量數(shù)據(jù),并解決許多存儲(chǔ)問(wèn)題,最好是通過(guò)查看存儲(chǔ)系統(tǒng)本身來(lái)解決。此外,通過(guò)使用大量數(shù)據(jù)訓(xùn)練算法,以了解特定堆?;蛘麄€(gè)應(yīng)用如何收集和存儲(chǔ)數(shù)據(jù),它們可以幫助實(shí)現(xiàn)對(duì)該特定應(yīng)用存儲(chǔ)活動(dòng)的實(shí)時(shí)觀察,以防止堆棧最大化并改善存儲(chǔ)容量。

AI數(shù)據(jù)存儲(chǔ)可滿足客戶需求

遙測(cè)數(shù)據(jù)是自動(dòng)記錄和無(wú)線傳輸來(lái)自遠(yuǎn)程或不可訪問(wèn)來(lái)源的數(shù)據(jù)。遙測(cè)以下列方式起作用:傳感器在源處測(cè)量數(shù)據(jù),它們將其轉(zhuǎn)換為電壓,然后將其與定時(shí)數(shù)據(jù)合并為單個(gè)數(shù)據(jù)流,該數(shù)據(jù)流將傳輸?shù)竭h(yuǎn)程接收器。接收后,可以根據(jù)用戶要求對(duì)數(shù)據(jù)進(jìn)行處理。

AI的計(jì)算機(jī)視覺(jué)技術(shù)可以掃描遙測(cè)數(shù)據(jù),以保護(hù)存儲(chǔ)陣列免受漏洞侵害。當(dāng)使用有關(guān)漏洞的歷史數(shù)據(jù)進(jìn)行訓(xùn)練時(shí),機(jī)器學(xué)習(xí)算法可以將來(lái)自各種應(yīng)用程序的傳入數(shù)據(jù)與歷史數(shù)據(jù)進(jìn)行匹配,以發(fā)現(xiàn)漏洞的可能性。因此,借助AI的預(yù)測(cè)分析,存儲(chǔ)供應(yīng)商可以著眼于在遇到客戶之前防止存儲(chǔ)問(wèn)題。

AI數(shù)據(jù)存儲(chǔ)仍處于起步階段,但已經(jīng)顯示出了驚人的結(jié)果。而且,因此云供應(yīng)商和其他存儲(chǔ)管理員正在對(duì)AI進(jìn)行越來(lái)越多的投資,以使用超融合存儲(chǔ)系統(tǒng)進(jìn)行存儲(chǔ)維護(hù)。采用主流AI數(shù)據(jù)存儲(chǔ)肯定會(huì)幫助企業(yè)控制上述所有指標(biāo),并為其客戶提供更好的服務(wù)。
責(zé)任編輯:YYX

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 人工智能
    +關(guān)注

    關(guān)注

    1818

    文章

    50120

    瀏覽量

    265613
  • 大數(shù)據(jù)
    +關(guān)注

    關(guān)注

    64

    文章

    9066

    瀏覽量

    143819
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    淺談人工智能(2)

    接前文《淺談人工智能(1)》。 (5)什么是弱人工智能、強(qiáng)人工智能以及超人工智能? 弱人工智能(Weak AI),也稱限制領(lǐng)域
    的頭像 發(fā)表于 02-22 08:24 ?165次閱讀
    淺談<b class='flag-5'>人工智能</b>(2)

    自然智能與人工智能融合如何重塑芯片設(shè)計(jì)

    人類大腦是所有處理器中最復(fù)雜的,能夠構(gòu)思出不可思議的創(chuàng)意,解決復(fù)雜、微妙的問(wèn)題。相比之下,人工智能擅長(zhǎng)快速分析海量數(shù)據(jù)高效執(zhí)行任務(wù)。當(dāng)自然智能
    的頭像 發(fā)表于 01-15 13:58 ?535次閱讀

    AI HOME智能體:當(dāng)存儲(chǔ)遇上智能體,開啟數(shù)據(jù)管理新紀(jì)元?

    AI HOME智能體的出現(xiàn),標(biāo)志著數(shù)據(jù)管理進(jìn)入智能化時(shí)代。它將NAS的存儲(chǔ)能力與AI的智能分析能力完美結(jié)合,為用戶提供更
    的頭像 發(fā)表于 12-17 17:02 ?1184次閱讀
    AI HOME<b class='flag-5'>智能</b>體:當(dāng)<b class='flag-5'>存儲(chǔ)</b>遇上<b class='flag-5'>智能</b>體,開啟<b class='flag-5'>數(shù)據(jù)管理</b>新紀(jì)元?

    AI NAS:當(dāng)存儲(chǔ)遇上智能,開啟數(shù)據(jù)管理新紀(jì)元

    數(shù)據(jù)爆炸的時(shí)代,AI NAS(網(wǎng)絡(luò)附加存儲(chǔ))已成為個(gè)人和企業(yè)存儲(chǔ)海量數(shù)據(jù)的利器。然而,面對(duì)日益龐大的數(shù)據(jù)量,傳統(tǒng)的NAS系統(tǒng)在文件
    的頭像 發(fā)表于 11-27 11:26 ?1095次閱讀
    AI NAS:當(dāng)<b class='flag-5'>存儲(chǔ)</b>遇上<b class='flag-5'>智能</b>,開啟<b class='flag-5'>數(shù)據(jù)管理</b>新紀(jì)元

    人工智能數(shù)據(jù)中心的光纖布線策略

    數(shù)據(jù)中心的光纖布線策略,包括布線規(guī)劃、光纖選型、架構(gòu)設(shè)計(jì)、成本優(yōu)化以及未來(lái)趨勢(shì)等。 布線規(guī)劃的重要性 在人工智能數(shù)據(jù)中心中,光纖布線的規(guī)劃是確保系統(tǒng)高效運(yùn)行的關(guān)鍵步驟。合理的布線規(guī)劃不
    的頭像 發(fā)表于 11-21 10:21 ?430次閱讀

    小身材 大能量 | 騰視科技重磅推出AI NAS,重塑數(shù)據(jù)管理方式,開啟智能高效新時(shí)代

    數(shù)據(jù)爆炸式增長(zhǎng)的今天,如何高效管理海量文件、快速獲取關(guān)鍵信息成為現(xiàn)代人的共同挑戰(zhàn)。騰視科技今日正式發(fā)布革命性產(chǎn)品——騰視AI NAS(人工智能網(wǎng)絡(luò)
    的頭像 發(fā)表于 11-14 17:11 ?4260次閱讀
    小身材 大能量 | 騰視科技重磅推出AI NAS,重塑<b class='flag-5'>數(shù)據(jù)管理</b>方式,開啟<b class='flag-5'>智能</b><b class='flag-5'>高效</b>新時(shí)代

    利用超微型 Neuton ML 模型解鎖 SoC 邊緣人工智能

    應(yīng)用。 為什么選擇 Neuton 作為開發(fā)人員,在產(chǎn)品中使用邊緣人工智能的兩個(gè)最大障礙是: ML 模型對(duì)于您所選微控制器的內(nèi)存來(lái)說(shuō)太大。 創(chuàng)建自定義 ML 模型本質(zhì)上是一個(gè)手動(dòng)過(guò)程,需要高度的數(shù)據(jù)科學(xué)知識(shí)
    發(fā)表于 08-31 20:54

    挖到寶了!人工智能綜合實(shí)驗(yàn)箱,高校新工科的寶藏神器

    應(yīng)用場(chǎng)景。從數(shù)據(jù)采集,到模型推理,都能完整且自如地參與,輕松解鎖人工智能全流程實(shí)訓(xùn),讓你深度體驗(yàn)AI技術(shù)的魅力 。 四、九門課程全覆蓋,滿足多元學(xué)習(xí)需求 對(duì)于高校教學(xué)或者技術(shù)學(xué)習(xí)來(lái)說(shuō),課程覆蓋的廣度
    發(fā)表于 08-07 14:30

    挖到寶了!比鄰星人工智能綜合實(shí)驗(yàn)箱,高校新工科的寶藏神器!

    應(yīng)用場(chǎng)景。從數(shù)據(jù)采集,到模型推理,都能完整且自如地參與,輕松解鎖人工智能全流程實(shí)訓(xùn),讓你深度體驗(yàn)AI技術(shù)的魅力 。 四、九門課程全覆蓋,滿足多元學(xué)習(xí)需求 對(duì)于高校教學(xué)或者技術(shù)學(xué)習(xí)來(lái)說(shuō),課程覆蓋的廣度
    發(fā)表于 08-07 14:23

    超小型Neuton機(jī)器學(xué)習(xí)模型, 在任何系統(tǒng)級(jí)芯片(SoC)上解鎖邊緣人工智能應(yīng)用.

    Neuton 是一家邊緣AI 公司,致力于讓機(jī)器 學(xué)習(xí)模型更易于使用。它創(chuàng)建的模型比競(jìng)爭(zhēng)對(duì)手的框架小10 倍,速度也快10 倍,甚至可以在最先進(jìn)的邊緣設(shè)備上進(jìn)行人工智能處理。在這篇博文中,我們將介紹
    發(fā)表于 07-31 11:38

    CES Asia 2025同期低空智能感知與空域管理技術(shù)論壇即將啟幕

    如何利用人工智能算法實(shí)現(xiàn)對(duì)空域態(tài)勢(shì)的實(shí)時(shí)感知、智能預(yù)測(cè)和動(dòng)態(tài)調(diào)控。通過(guò)對(duì)海量飛行數(shù)據(jù)的分析,人工智能能夠優(yōu)化飛行路徑規(guī)劃、提高空域利用率,同時(shí)及時(shí)發(fā)現(xiàn)并處理潛在的飛行沖突,提升空域
    發(fā)表于 07-10 10:16

    CES Asia 2025聚焦低空智能感知與空域管理,論壇開啟行業(yè)新征程

    智能管控。 人工智能在空域動(dòng)態(tài)管理中的應(yīng)用,為空域管理帶來(lái)了革命性的變化。通過(guò)人工智能算法,能夠?qū)沼騼?nèi)的海量飛行
    發(fā)表于 07-10 09:57

    最新人工智能硬件培訓(xùn)AI 基礎(chǔ)入門學(xué)習(xí)課程參考2025版(大模型篇)

    人工智能大模型重塑教育與社會(huì)發(fā)展的當(dāng)下,無(wú)論是探索未來(lái)職業(yè)方向,還是更新技術(shù)儲(chǔ)備,掌握大模型知識(shí)都已成為新時(shí)代的必修課。從職場(chǎng)上輔助工作的智能助手,到課堂用于學(xué)術(shù)研究的智能工具,大模型正在工作生活
    發(fā)表于 07-04 11:10

    人工智能正在改變世界

    它需要大量的處理能力,需求每一百天就會(huì)翻一番,這推動(dòng)了人工智能基礎(chǔ)設(shè)施的投資熱潮。未來(lái)的數(shù)據(jù)中心需要滿足和管理對(duì)計(jì)算資源前所未有的需求:既要能智能
    的頭像 發(fā)表于 06-13 10:19 ?824次閱讀

    人工智能對(duì)智慧園區(qū)的提升和幫助

    隨著人工智能(AI)技術(shù)的快速發(fā)展,其在智慧園區(qū)中的應(yīng)用正逐步改變傳統(tǒng)園區(qū)的管理模式和服務(wù)方式。 智慧園區(qū) 通過(guò)整合物聯(lián)網(wǎng)、大數(shù)據(jù)、云計(jì)算等技術(shù),實(shí)現(xiàn)了資源的高效配置和
    的頭像 發(fā)表于 03-13 14:39 ?1070次閱讀