91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

FPGA與GPU計(jì)算存儲(chǔ)單位功耗性能

算法與數(shù)據(jù)結(jié)構(gòu) ? 來(lái)源:Xilinx賽靈思 ? 作者:Xilinx ? 2021-08-13 17:45 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

為了提升計(jì)算基礎(chǔ)設(shè)施的性能,并緊跟數(shù)據(jù)分析與 AI 不斷攀升的需求,眾多企業(yè)將硬件加速視為主要的解決方案。在大多數(shù)情況下,先進(jìn)的可編程硬件(主要是指 GPUFPGA)是加速的主要方式。通過(guò)使用這種先進(jìn)的硬件,企業(yè)正在贏得計(jì)算優(yōu)勢(shì);然而,對(duì)于編程難度,他們?nèi)匀淮嬖诤侠淼膿?dān)憂(yōu)。

硬件制造商正在將加速方法應(yīng)用于計(jì)算存儲(chǔ),這是專(zhuān)門(mén)設(shè)計(jì)用于包含內(nèi)嵌計(jì)算元素的存儲(chǔ)。這種方法已經(jīng)被證明可以為分析和 AI 應(yīng)用提供優(yōu)異的性能。使用或者不使用機(jī)器學(xué)習(xí)輔助的分析以及驗(yàn)證,都可以借助計(jì)算存儲(chǔ)器件進(jìn)行加速。這些器件提供了一個(gè)關(guān)鍵的優(yōu)勢(shì),使得成本高昂的計(jì)算被卸載到存儲(chǔ)器件上,而不必在服務(wù)器 CPU 上完成。與標(biāo)準(zhǔn)的存儲(chǔ)/CPU 方法相比,通過(guò)計(jì)算存儲(chǔ)獲得的優(yōu)勢(shì)包括:

1

借助應(yīng)用專(zhuān)用編程定制可編程硬件,獲得更高性能

2

將計(jì)算任務(wù)從服務(wù)器卸載到存儲(chǔ)器件,釋放 CPU 資源

3

數(shù)據(jù)與計(jì)算共址,降低數(shù)據(jù)傳輸需求

這種新穎的方法前景光明。不過(guò),您應(yīng)根據(jù)具體用例評(píng)估這種方法,考量性能、成本、功耗和易用性。性?xún)r(jià)比和單位功耗性能在選擇加速硬件評(píng)估時(shí),占據(jù)主要比率。在本文中,我們將研討單位功耗性能。

計(jì)算存儲(chǔ)功耗比較

在這個(gè)場(chǎng)景中,我們將比較以 CSV 數(shù)據(jù)讀取用例為主的三種工具:英偉達(dá) GPUDirect 存儲(chǔ) 和RAPIDS存儲(chǔ),以及基于賽靈思技術(shù)的三星 SmartSSD 存儲(chǔ)。CSV 讀取在計(jì)算密集型流水線中起著重要的作用。

在下文中,我們將性能定義成 CSV 的處理速率,或處理“帶寬”。我們先快速回顧一下三種系統(tǒng)的運(yùn)行方式。

英偉達(dá) GPUDirect 存儲(chǔ)

端到端滿(mǎn)足分析和 AI 需求

將 GPU 用作計(jì)算單元,緊貼基于 NVMe 的存儲(chǔ)器件布局 (GPUDirect)

使用 CUDA 進(jìn)行編程 (RAPIDS)

英偉達(dá)用其 CSV 數(shù)據(jù)讀取技術(shù)衡量相對(duì)于標(biāo)準(zhǔn) SSD 的性能提升。結(jié)果如圖 1 所示。使用 1 到 8 個(gè)加速器時(shí),對(duì)應(yīng)的吞吐量是 4 到 23GB/s。

三星 SmartSSD 驅(qū)動(dòng)器

將賽靈思 FPGA 用作計(jì)算單元

與存儲(chǔ)邏輯內(nèi)嵌駐留在同一個(gè)內(nèi)部 PCIe 互聯(lián)上

通過(guò)編程在存儲(chǔ)平臺(tái)上開(kāi)展運(yùn)算

賽靈思數(shù)據(jù)分析解決方案合作伙伴 Bigstream 與三星合作,為 Apache Spark 設(shè)計(jì)加速器,包括用于 CSV 和 Parquet 處理的 IP。SmartSSD 的測(cè)試使用單機(jī)模式的 CSV 解析引擎,以便開(kāi)展比較。結(jié)果如圖 2 所示,使用 1 到 12 個(gè)加速器時(shí),對(duì)應(yīng)的吞吐量是 4 到 23GB/s,同時(shí)也給出英偉達(dá)的結(jié)果(使用 1 到 8 個(gè)加速器)。請(qǐng)注意,本討論中的所有結(jié)果都按 x 軸上的加速器數(shù)量進(jìn)行參數(shù)化。

這些結(jié)果令人振奮,但在選擇您的解決方案時(shí),請(qǐng)務(wù)必將功耗情況納入考慮。

單位功耗性能比較

圖 3 顯示了將功耗考慮在內(nèi)后的分析結(jié)果。它們代表單位功耗達(dá)到的性能水平,根據(jù)上述討論中引用的相關(guān)材料,給出了以下假設(shè):

Tesla V100 GPU:最大功耗 200 瓦

SmartSSD 驅(qū)動(dòng)器 FPGA:最大功耗 30 瓦

在這個(gè)場(chǎng)景下,計(jì)算表明,在全部使用 8 個(gè)加速器的情況下,SmartSSD 的單位功耗性能比 GPUDirect Storage 高 25 倍。

最 終 思 考

計(jì)算存儲(chǔ)的優(yōu)勢(shì)在于能增強(qiáng)數(shù)據(jù)分析和 AI 應(yīng)用的性能。然而,要讓這種方法具備可實(shí)際部署的能力和實(shí)用性,就必須在評(píng)估時(shí)將功耗納入考慮。

針對(duì)用于 CSV 數(shù)據(jù)解析的兩種不同的計(jì)算存儲(chǔ)方法,我們已經(jīng)提出按功耗參數(shù)化的吞吐量性能曲線。結(jié)果顯示,在使用相似數(shù)量的加速器進(jìn)行比較時(shí),SmartSSD 驅(qū)動(dòng)器的單位功耗性能優(yōu)于 GPUDirect存儲(chǔ)方法。

GPUDirect 是英偉達(dá)通過(guò) NVIDIA DGX-2 應(yīng)用平臺(tái)提供的研究系統(tǒng)。

三星 SmartSSD 驅(qū)動(dòng)器是一種可部署的量產(chǎn)型 PCIe 可插拔平臺(tái),現(xiàn)在已經(jīng)通過(guò)賽靈思及分銷(xiāo)商供貨。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • FPGA
    +關(guān)注

    關(guān)注

    1660

    文章

    22416

    瀏覽量

    636591
  • 驅(qū)動(dòng)器
    +關(guān)注

    關(guān)注

    54

    文章

    9084

    瀏覽量

    155649
  • 三星電子
    +關(guān)注

    關(guān)注

    34

    文章

    15894

    瀏覽量

    183137
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    5196

    瀏覽量

    135515

原文標(biāo)題:FPGA 與 GPU 計(jì)算存儲(chǔ)加速對(duì)比

文章出處:【微信號(hào):TheAlgorithm,微信公眾號(hào):算法與數(shù)據(jù)結(jié)構(gòu)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    成功案例:象帝先計(jì)算技術(shù)與Imagination合作——面向現(xiàn)代圖形與計(jì)算工作負(fù)載的專(zhuān)業(yè)GPU

    為專(zhuān)業(yè)計(jì)算設(shè)計(jì)桌面GPU桌面GPU不僅用于游戲,還能加速?gòu)膶?zhuān)業(yè)可視化、高級(jí)模擬到數(shù)據(jù)密集型計(jì)算在內(nèi)的多種現(xiàn)代工作負(fù)載。專(zhuān)業(yè)用戶(hù)需要能在多種應(yīng)用場(chǎng)景中穩(wěn)定運(yùn)行的高
    的頭像 發(fā)表于 03-09 09:17 ?199次閱讀
    成功案例:象帝先<b class='flag-5'>計(jì)算</b>技術(shù)與Imagination合作——面向現(xiàn)代圖形與<b class='flag-5'>計(jì)算</b>工作負(fù)載的專(zhuān)業(yè)<b class='flag-5'>GPU</b>

    展望2026存儲(chǔ)產(chǎn)業(yè)趨勢(shì):SSD將成AI性能提升關(guān)鍵

    AI和高性能計(jì)算的發(fā)展,正迎來(lái)關(guān)鍵轉(zhuǎn)折點(diǎn)。業(yè)界仍在孜孜不倦地追求GPU的強(qiáng)大性能,在這種情況下,存儲(chǔ)解決方案必須緊跟步伐,應(yīng)對(duì)日益先進(jìn)的
    的頭像 發(fā)表于 02-26 16:48 ?555次閱讀

    FPGA+GPU異構(gòu)混合部署方案設(shè)計(jì)

    為滿(mǎn)足對(duì) “納秒級(jí)實(shí)時(shí)響應(yīng)” 與 “復(fù)雜數(shù)據(jù)深度運(yùn)算” 的雙重需求,“FPGA+GPU”異構(gòu)混合部署方案通過(guò)硬件功能精準(zhǔn)拆分與高速協(xié)同,突破單一硬件的性能瓶頸 ——FPGA聚焦低延遲實(shí)時(shí)交易鏈路,
    的頭像 發(fā)表于 01-13 15:20 ?368次閱讀

    什么是低功耗設(shè)計(jì),如何評(píng)估低功耗MCU性能?

    每一個(gè)細(xì)節(jié)來(lái)考慮降低功率消耗,從而盡可能地延長(zhǎng)電池使用時(shí)間。 因此,大部分芯片都會(huì)有低功耗模式。從MCU端來(lái)講,低功耗的MCU性能一般有以下幾個(gè)參數(shù)指標(biāo)來(lái)衡量: ·MCU處于深度休眠模式的時(shí)候,所
    發(fā)表于 12-12 07:43

    汽車(chē)中的GPU是如何使用的?

    (HMI)的發(fā)展尤為迅猛。隨著電子電氣架構(gòu)(EEA)的集中化,車(chē)輛對(duì)高性能計(jì)算能力的需求顯著提升,GPU(圖形處理單元)的靈活性、可擴(kuò)展性以及高效并行計(jì)算能力,使其成為支持這些創(chuàng)新應(yīng)用
    的頭像 發(fā)表于 12-03 14:45 ?9585次閱讀
    汽車(chē)中的<b class='flag-5'>GPU</b>是如何使用的?

    NVIDIA RTX PRO 2000 Blackwell GPU性能測(cè)試

    Blackwell 架構(gòu) GPU 中的中端專(zhuān)業(yè)圖形卡,高度僅為全高 GPU 的二分之一。如果您需要的是一塊半高顯卡,能適配小機(jī)箱,功耗不高,還要具備 AI 及光線追蹤性能的話,那么
    的頭像 發(fā)表于 11-28 09:39 ?6351次閱讀
    NVIDIA RTX PRO 2000 Blackwell <b class='flag-5'>GPU</b><b class='flag-5'>性能</b>測(cè)試

    FPGAGPU加速的視覺(jué)SLAM系統(tǒng)中特征檢測(cè)器研究

    (Nvidia Jetson Orin與AMD Versal)上最佳GPU加速方案(FAST、Harris、SuperPoint)與對(duì)應(yīng)FPGA加速方案的性能,得出全新結(jié)論。
    的頭像 發(fā)表于 10-31 09:30 ?675次閱讀
    <b class='flag-5'>FPGA</b>和<b class='flag-5'>GPU</b>加速的視覺(jué)SLAM系統(tǒng)中特征檢測(cè)器研究

    曙光存儲(chǔ)支持西湖大學(xué)高性能計(jì)算中心部署完成全新存儲(chǔ)系統(tǒng)

    近日,曙光存儲(chǔ)支持西湖大學(xué)高性能計(jì)算中心部署完成全新存儲(chǔ)系統(tǒng),為AI研發(fā)、科學(xué)計(jì)算和信息化平臺(tái)等提供存力支持。
    的頭像 發(fā)表于 08-25 11:48 ?1252次閱讀

    PCIe協(xié)議分析儀能測(cè)試哪些設(shè)備?

    ) 測(cè)試場(chǎng)景:驗(yàn)證CPU與PCIe設(shè)備(如GPUFPGA)之間的數(shù)據(jù)流,優(yōu)化任務(wù)調(diào)度和數(shù)據(jù)流。 應(yīng)用價(jià)值:在異構(gòu)計(jì)算環(huán)境中平衡計(jì)算資源,減少數(shù)據(jù)傳輸瓶頸。 二、
    發(fā)表于 07-25 14:09

    如何在Ray分布式計(jì)算框架下集成NVIDIA Nsight Systems進(jìn)行GPU性能分析

    在大語(yǔ)言模型的強(qiáng)化學(xué)習(xí)訓(xùn)練過(guò)程中,GPU 性能優(yōu)化至關(guān)重要。隨著模型規(guī)模不斷擴(kuò)大,如何高效地分析和優(yōu)化 GPU 性能成為開(kāi)發(fā)者面臨的主要挑戰(zhàn)之一。
    的頭像 發(fā)表于 07-23 10:34 ?2425次閱讀
    如何在Ray分布式<b class='flag-5'>計(jì)算</b>框架下集成NVIDIA Nsight Systems進(jìn)行<b class='flag-5'>GPU</b><b class='flag-5'>性能</b>分析

    【「算力芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】+NVlink技術(shù)從應(yīng)用到原理

    前言 【「算力芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」書(shū)中的芯片知識(shí)是比較接近當(dāng)前的頂尖芯片水平的,同時(shí)包含了芯片架構(gòu)的基礎(chǔ)知識(shí),但該部分知識(shí)比較晦澀難懂,或許是由于我一直從事的事芯片
    發(fā)表于 06-18 19:31

    Imagination與澎峰科技攜手推動(dòng)GPU+AI解決方案,共拓計(jì)算生態(tài)

    的深度融合展開(kāi)合作。雙方將結(jié)合 Imagination 領(lǐng)先的 GPU IP 技術(shù)與澎峰科技在 AI 模型壓縮與性能優(yōu)化方面的軟硬協(xié)同能力,共同開(kāi)拓面向 AI 行業(yè)應(yīng)用的計(jì)算解決方案,推動(dòng)國(guó)產(chǎn)
    發(fā)表于 05-21 09:40 ?1229次閱讀

    RK3588核心板在邊緣AI計(jì)算中的顛覆性?xún)?yōu)勢(shì)與場(chǎng)景落地

    推理任務(wù),需額外部署GPU加速卡,導(dǎo)致成本與功耗飆升。 擴(kuò)展性受限:老舊接口(如USB 2.0、百兆網(wǎng)口)無(wú)法支持5G模組、高速存儲(chǔ)等現(xiàn)代外設(shè),升級(jí)困難。 開(kāi)發(fā)周期長(zhǎng):BSP適配不完善,跨平臺(tái)AI
    發(fā)表于 04-15 10:48

    高密度、低功耗,關(guān)聯(lián)AI與云計(jì)算

    在AI與云計(jì)算的深度融合中,高密度、低功耗特性正成為技術(shù)創(chuàng)新的核心驅(qū)動(dòng)力,主要體現(xiàn)在以下方面: 一、云計(jì)算基礎(chǔ)設(shè)施的能效優(yōu)化 存儲(chǔ)計(jì)算密度
    的頭像 發(fā)表于 04-01 08:25 ?1048次閱讀
    高密度、低<b class='flag-5'>功耗</b>,關(guān)聯(lián)AI與云<b class='flag-5'>計(jì)算</b>

    ?為什么GPU性能效率比峰值性能更關(guān)鍵

    在評(píng)估GPU性能時(shí),通常首先考察三個(gè)指標(biāo):圖形工作負(fù)載的紋理率(GPixel/s)、浮點(diǎn)運(yùn)算次數(shù)(FLOPS)以及它們能處理計(jì)算和AI工作負(fù)載的每秒8-bittera運(yùn)算次數(shù)(TOPS)。這些關(guān)鍵
    的頭像 發(fā)表于 03-13 08:34 ?901次閱讀
    ?為什么<b class='flag-5'>GPU</b><b class='flag-5'>性能</b>效率比峰值<b class='flag-5'>性能</b>更關(guān)鍵