91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

如何使用多個DPU實現(xiàn)云級架構(gòu)

星星科技指導員 ? 來源:NVIDIA ? 作者:Kevin Deierling ? 2022-04-19 15:58 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

區(qū)別SmartNIC 與數(shù)據(jù)處理器(DPU) 的依據(jù)是它的功能,而不是形態(tài)。對稱為 SmartNICs 的一類數(shù)據(jù)中心智能網(wǎng)卡來說,它需要支持硬件傳輸和用于虛擬交換機加速的可編程數(shù)據(jù)路徑。這些功能是必要的,但不足以使 其 成為 DPU 。一個真正的 DPU 還必須包括一個易于擴展的、 C語言編程的 Linux 環(huán)境,使數(shù)據(jù)中心架構(gòu)師能夠虛擬化云中的所有資源,并使它們看起來像本地資源。為了更好地理解為什么需要這樣,讓我們討論一下-創(chuàng)建 DPU 的原因。

為什么世界需要 DPU

世界需要 DPU 的一個最重要原因是,目前的應用程序和數(shù)據(jù)中心的設計讓 CPU 內(nèi)核花費了太多的開銷來支持網(wǎng)絡功能。隨著網(wǎng)絡速度的提高(現(xiàn)在每條鏈路的速度高達 200gb / s ), CPU 使用了太多寶貴的內(nèi)核來進行網(wǎng)絡流量的分類、跟蹤和控制。這些昂貴的 CPU 內(nèi)核是為通用應用程序處理而設計的,最不值得的就是將它們用于網(wǎng)絡數(shù)據(jù)包的查找和管理。畢竟,用CPU內(nèi)核來分析數(shù)據(jù)并得到結(jié)果才是它們真正的價值所在。

計算虛擬化的引入使這種情況變得更糟,因為無論是在同一臺服務器上運行的VM 或容器之間, 還是和其他的計算服務器或存儲服務器之間,都需要更多的流量。軟件定義存儲( SDS )、超聚合基礎設施( HCI )和大數(shù)據(jù)等的應用程序會增加服務器之間的東西向的通信流量,另外, RDMA 也通常被用來加速服務器之間的數(shù)據(jù)傳輸,這使得服務器對網(wǎng)絡基礎功能的處理要求更高。

隨著通信量的增加和 VXLAN 、 NVGRE 或 GENEVE 等覆蓋網(wǎng)絡的使用,公共云和私有云越來越流行。但其需求的多層封裝也進一步增加了網(wǎng)絡的復雜性。軟件定義的網(wǎng)絡( SDN )帶來了額外的數(shù)據(jù)包控制和處理的需求,這讓 CPU 花費珍貴的內(nèi)核來處理openvswitch ( OVS )等更多工作。

DPU 可以比標準 CPU 更快、更高效、更低的成本處理所有這些虛擬化的功能( SR-IOV 、 RDMA 、覆蓋網(wǎng)絡流量封裝、 OVS 卸載)。

不可忽視的安全隔離

有時,出于安全原因,您需要將網(wǎng)絡與 CPU 隔離開來。網(wǎng)絡是黑客攻擊或惡意軟件入侵最有可能的載體,但也是你第一個發(fā)現(xiàn)或阻止黑客攻擊的地方。它同時也是最有可能實現(xiàn)在線加密的地方。

DPU 作為特殊的 網(wǎng)卡 ,是檢查網(wǎng)絡流量、阻止攻擊和加密傳輸?shù)氖走x,最簡單有效,既有性能優(yōu)勢,又有安全優(yōu)勢,因為它消除了將所有傳入和傳出的數(shù)據(jù)讓CPU處理 并通過 PCIe 總線的頻繁需要。它通過與主機CPU 分開運行來提供安全隔離。如果主機CPU 受損, DPU 仍然可以檢測或阻止惡意活動。 DPU 可以在不立即涉及 CPU 的情況下檢測或阻止攻擊。

虛擬化存儲和云

DPU 的一個較新用例是虛擬化軟件定義的存儲、超聚合基礎設施和其他云資源。在虛擬化需求爆發(fā)之前,大多數(shù)服務器只運行本地存儲,這并不總是高效的,但卻很簡單易行。每個操作系統(tǒng)、應用程序和 hypervisor 都知道如何使用本地存儲。

然后是網(wǎng)絡存儲的興起: SAN 、 NAS ,以及最近出現(xiàn)的 NVMe of Fabrics(NVMe-oF)。但是,并不是每個應用程序都是原生的并可感知 SAN。另外,一些操作系統(tǒng)和 hypervisor ,比如 Windows 和 VMware ,都還沒有考慮到 NVMe-oF 。 DPU 可以支持虛擬化網(wǎng)絡存儲,即可以更高效也更易于管理,讓虛擬化網(wǎng)絡存儲看起來就像本地存儲,非常易于應用程序使用。一個 DPU 甚至可以虛擬化 GPU或其他神經(jīng)網(wǎng)絡處理器,這樣任何服務器在需要時都可以通過網(wǎng)絡訪問任意數(shù)量的 GPU。

類似的DPU優(yōu)勢也適用于軟件定義的存儲和超聚合基礎架構(gòu)。兩種架構(gòu)傳統(tǒng)上都使用管理層軟件(通常作為 VM 或 hypervisor的一部分來運行)來虛擬化和抽象本地存儲和網(wǎng)絡,以使其可供集群中的其他服務器或客戶端使用。這對于服務器的快速部署,及共享存儲資源帶來了極大的便利。然而,管理層和虛擬化占用了許多本應運行應用程序的 CPU 資源。更糟糕的是,網(wǎng)絡帶寬越大,存儲速度越快,需要損耗的CPU 的資源就越多。

這也是智能 DPU 創(chuàng)造效率的地方。首先,它卸載并幫助虛擬化網(wǎng)絡。它們加速了私有云和公共云,這就是為什么它們有時被稱為 CloudNICs 。它們可以卸載網(wǎng)絡和大部分甚至全部的存儲虛擬化。 DPU 還可以減輕 SDS 和 HCI 的各種功能,如壓縮、加密、重復數(shù)據(jù)消除、 RAID 、報告等。這一切都是為了把更昂貴的 CPU 內(nèi)核送回它們最擅長的領(lǐng)域:運行應用程序。

圖 1 。 DPU 是一種可編程的、專用的電子電路板,具有數(shù)據(jù)中心計算數(shù)據(jù)處理的硬件加速功能

必須有硬件加速

在介紹了主要的 DPU 用例之后,您應該已經(jīng)清楚何時何地使用DPU會帶來最大的好處:加速和卸載網(wǎng)絡流量,虛擬化存儲資源,通過網(wǎng)絡共享 GPU, 以及支持 RDMA 和執(zhí)行加解密。

那么 最優(yōu)的DPU 需要具備什么?必須有硬件加速。 硬件加速提供了最好的性能和效率,這也意味著用更少的開銷進行更多的卸載。為某些功能提供專用硬件的能力讓采用DPU 的機會大大增加。

必須可編程

為了獲得最佳性能,大多數(shù)加速功能必須在硬件上運行。為了獲得最大的靈活性,這些功能的控制和編程必須在軟件中運行。

在 DPU 上有許多功能可以編程,通常,特定的卸載方法、加密算法和傳輸機制不會有太大變化,但是路由規(guī)則、流表、加密的密鑰和網(wǎng)絡地址會一直會變化。前者是數(shù)據(jù)平面,后者是控制平面。數(shù)據(jù)平面規(guī)則和算法經(jīng)過標準化后,可以被固化到芯片中。但控制平面規(guī)則和要求變化太快,無法固化,但可以在 FPGA 上運行(偶爾修改,但很困難),也可以在 支持C語言編程的 Linux 環(huán)境中運行(容易且可以經(jīng)常修改)。

表 1 。 DPU 功能指南

在 DPU 上需要多少編程?

您可以選擇在DPU 上有多少功能要由運行程序完成,也就是說,處理數(shù)據(jù)包的數(shù)據(jù)平面由DPU處理 (硬件加速或/和 開發(fā)的程序),同時, 用于設置和管理規(guī)則的控制平面,可以由用戶決定是由DPU來全權(quán)處理,還是由位于其他地方的處理器,如 CPU來處理 。

例如,使用 Open vSwitch ,包交換可以在軟件或硬件中完成,而控制平面則可以在 CPU 或 DPU 上運行。如果是常規(guī)的基礎網(wǎng)卡,所有的交換和控制都必須由 CPU 上的軟件完成。 使用 SmartNIC 時,交換在網(wǎng)卡的 ASIC 上運行,但控制仍必須在 CPU 上完成。 只有在真正的 DPU 中,交換是由DPU卡上的 ASIC完成,而控制平面也是在DPU包含的 Arm 內(nèi)核上運行。

圖 2 。 ConnectX-5 SmartNIC 卸載 OVS 切換到 NIC 硬件

DPU 和 SmartNIC 哪一個最好?

為了在數(shù)據(jù)中心充分實現(xiàn)應用程序的效率,傳輸卸載、可編程的數(shù)據(jù)平面以及用于虛擬交換的硬件卸載都是至關(guān)重要的功能。根據(jù)定義,支持這些功能是 SmartNIC 的重要部分,。但只是 DPU 的最基本要求之一, 并不能將 SmartNIC 提升到 DPU 的級別。

客戶經(jīng)常告訴我們,他們必須有 DPU,因為他們需要可編程的虛擬交換硬件加速支持。這主要是某些供應商的誤導。如果某個供應商只能提供昂貴的、幾乎無法編程的產(chǎn)品,他會告訴客戶,“ DPU ”是實現(xiàn)這一目標的唯一方法。對我們來說,這種情況只需要我們的 ConnectX 系列的 SmartNIC 。

我覺得要將 SmartNIC 提升到 DPU 的高度,還需要支持更多的功能,比如能夠運行控制平面,以及在 Linux 環(huán)境下提供 C 語言編程。我們很自豪地提供 BlueField DPU 來支持所有這些,它包括 ConnectX 的所有智能 網(wǎng)卡 功能,以及 4 到 16 個 64 位的 Arm 內(nèi)核,當然,所有這些內(nèi)核都運行 Linux ,并且易于編程。

在計劃下一個基礎架構(gòu)的構(gòu)建或更新時,請記住以下要點:

DPU 在卸載網(wǎng)絡功能和虛擬化存儲、網(wǎng)絡和 GPU 等資源方面越來越有用

SmartNIC 可以在硬件中加速數(shù)據(jù)平面任務,但必須依靠host CPU來運行控制平面

控制平面軟件和其他管理軟件可以在常規(guī) CPU 或 DPU 上運行。

NVIDIA 提供業(yè)界最佳的SmartNICs ( ConnectX )、 FPGA NIC ( Innova )和完全可編程并支持數(shù)據(jù)平面及控制平面 DPU s ( BlueField 可編程 DPU )。

關(guān)于作者

Kevin Deierling 從 2013 年 3 月開始擔任 Mellanox 的營銷副總裁。此前,他曾擔任 Genia Technologies 的技術(shù)副總裁、 Silver Spring Networks 的首席架構(gòu)師,并在 Spans Logic 負責營銷和業(yè)務開發(fā)

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    11286

    瀏覽量

    225159
  • Linux
    +關(guān)注

    關(guān)注

    88

    文章

    11770

    瀏覽量

    219110
  • 數(shù)據(jù)中心
    +關(guān)注

    關(guān)注

    18

    文章

    5660

    瀏覽量

    75050
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    華為架構(gòu)大調(diào)整,波及千名員工,All in AI能否扭虧為盈

    電子發(fā)燒友網(wǎng)報道(文/黃山明)近日,有多家媒體報道,華為CEO張平安近期發(fā)文宣布將進行組織架構(gòu)調(diào)整,多個部門將被裁撤整合,聚焦AI領(lǐng)域,超過上千名員工被波及。其中,有消息稱,華為E
    的頭像 發(fā)表于 08-26 09:22 ?7636次閱讀

    TRENDS整合50多個系統(tǒng),打造適配AI的制造業(yè)數(shù)據(jù)核心架構(gòu)

    AI驅(qū)動自動化領(lǐng)域的領(lǐng)導者Boomi今日宣布,TRENDS Promotional Products采用Boomi企業(yè)平臺,將50多個定制應用程序和傳統(tǒng)系統(tǒng)整合為可擴展、適配AI的基礎架構(gòu),助力企業(yè)
    的頭像 發(fā)表于 02-10 16:18 ?1613次閱讀

    中關(guān)村計算產(chǎn)業(yè)聯(lián)盟黨建交流活動在中科馭數(shù)圓滿舉辦

    活動伊始,與會人員參觀了中科馭數(shù) DPU 展廳,深入了解 DPU 技術(shù)在計算領(lǐng)域的創(chuàng)新應用與發(fā)展前景。
    的頭像 發(fā)表于 01-23 15:20 ?523次閱讀

    基于DPU的智能盤框方案,華為如何大幅提升AI推理的效率?

    DPU
    腦極體
    發(fā)布于 :2026年01月20日 12:53:10

    定義企業(yè)智能化新路線:依托“邊端”架構(gòu),實現(xiàn)安全與韌性成長

    前言在全球AI創(chuàng)新浪潮中,中國已成為不可或缺的核心引擎。這為中國企業(yè)帶來了利用先進AI技術(shù)重塑業(yè)務、實現(xiàn)全球化競爭的先發(fā)優(yōu)勢。然而,從技術(shù)嘗鮮到收獲紅利,企業(yè)必須首先跨越從“上”到“深度用、高效
    的頭像 發(fā)表于 12-16 09:24 ?544次閱讀
    定義企業(yè)智能化新路線:依托“<b class='flag-5'>云</b>邊端”<b class='flag-5'>架構(gòu)</b>,<b class='flag-5'>實現(xiàn)</b>安全與韌性成長

    構(gòu)建智能網(wǎng)基座:萬店連鎖藥店網(wǎng)絡架構(gòu)升級實踐

    前言隨著計算、大數(shù)據(jù)、人工智能等技術(shù)在各行各業(yè)的深度應用,企業(yè)網(wǎng)絡架構(gòu)正面臨著前所未有的變革壓力。醫(yī)藥零售行業(yè)作為具有強監(jiān)管、多分支、高并發(fā)特性的典型場景,其網(wǎng)絡升級需求尤為迫切。藥品監(jiān)管政策
    的頭像 發(fā)表于 11-12 09:59 ?663次閱讀
    構(gòu)建智能<b class='flag-5'>云</b>網(wǎng)基座:萬店<b class='flag-5'>級</b>連鎖藥店網(wǎng)絡<b class='flag-5'>架構(gòu)</b>升級實踐

    實現(xiàn)吉瓦靈活部署:維諦推出面向NVIDIA Omniverse DSX藍圖的快速交付系統(tǒng)參考架構(gòu)

    維諦以針對NVIDIADSX藍圖的新一代吉瓦參考架構(gòu),持續(xù)強化其在AI基礎設施領(lǐng)域的先發(fā)優(yōu)勢?;陬A制式Vertiv?OneCore平臺,新架構(gòu)不僅實現(xiàn)了靈活的部署模式,更將“首次令
    的頭像 發(fā)表于 11-07 15:18 ?619次閱讀
    <b class='flag-5'>實現(xiàn)</b>吉瓦<b class='flag-5'>級</b>靈活部署:維諦推出面向NVIDIA Omniverse DSX藍圖的快速交付系統(tǒng)<b class='flag-5'>級</b>參考<b class='flag-5'>架構(gòu)</b>

    RISC-V DPU,重塑數(shù)據(jù)中心算力格局?

    電子發(fā)燒友網(wǎng)綜合報道 在現(xiàn)代數(shù)據(jù)中心架構(gòu)中,數(shù)據(jù)處理單元(DPU)正迅速崛起為繼 CPU 和 GPU 之后的第三顆核心芯片。DPU 專為數(shù)據(jù)密集型任務設計,通過卸載 CPU 的低效工作負載,如網(wǎng)絡
    的頭像 發(fā)表于 09-13 00:51 ?4772次閱讀

    鐵路巡檢升級:翎智能高精度執(zhí)法記錄儀+指揮調(diào)度系統(tǒng)實現(xiàn)故障秒響應

    數(shù)據(jù)實時回傳;結(jié)合AI智能調(diào)度算法,動態(tài)優(yōu)化響應路徑,將故障識別與資源調(diào)度效率提升至秒。翎智能高精度巡檢執(zhí)法記錄儀一、系統(tǒng)核心架構(gòu)與技術(shù)實現(xiàn)高精度執(zhí)法記錄儀硬件
    的頭像 發(fā)表于 07-29 22:37 ?788次閱讀
    鐵路巡檢升級:<b class='flag-5'>云</b>翎智能高精度執(zhí)法記錄儀+指揮調(diào)度系統(tǒng)<b class='flag-5'>實現(xiàn)</b>故障秒<b class='flag-5'>級</b>響應

    MESH自組網(wǎng)賦能森林防火:翎智能無線自組網(wǎng)厘米定位與實時火情傳輸

    在森林防火的數(shù)字化革新中,翎智能以動態(tài)MESH自組網(wǎng)與北斗厘米定位技術(shù)為核心,構(gòu)建了“無盲區(qū)、高精度、實時性”的應急通信體系。通過無中心動態(tài)組網(wǎng)、多模融合定位及寬窄帶融合傳輸,其解決方案實現(xiàn)
    的頭像 發(fā)表于 07-18 22:33 ?742次閱讀
    MESH自組網(wǎng)賦能森林防火:<b class='flag-5'>云</b>翎智能無線自組網(wǎng)厘米<b class='flag-5'>級</b>定位與實時火情傳輸

    DPU核心技術(shù)論文再次登陸體系結(jié)構(gòu)領(lǐng)域旗艦期刊《IEEE Transactions on Computers》

    能力,在降低了規(guī)模限制的硬件成本和設計周期的同時,又可通過軟件編程實現(xiàn)不同功能的計算,具有較高的可擴展性和靈活性。中科馭數(shù)DPU芯片基于自研KPU架構(gòu)設計。
    的頭像 發(fā)表于 06-11 18:11 ?663次閱讀
    <b class='flag-5'>DPU</b>核心技術(shù)論文再次登陸體系結(jié)構(gòu)領(lǐng)域旗艦期刊《IEEE Transactions on Computers》

    第三屆NVIDIA DPU黑客松開啟報名

    碰撞的絕佳機會。本次競賽采用開放式主題,參與者將通過 NVIDIA DOCA 軟件框架構(gòu)建創(chuàng)新的加速應用程序,充分挖掘 NVIDIA BlueField DPU 在 AI、網(wǎng)絡、存儲和安全等領(lǐng)域的強大潛能。
    的頭像 發(fā)表于 05-27 10:16 ?910次閱讀

    多模融合,秒響應-翎智能應急指揮箱打造全域指揮“移動中樞”

    翎智能應急指揮終端是一款面向應急指揮場景研發(fā)的移動化、智能化終端設備,通過多模態(tài)通信技術(shù)融合、高精度定位、AI智能分析等技術(shù)手段,實現(xiàn)“多模融合,秒響應”的核心能力,成為覆蓋全域場景的應急指揮
    的頭像 發(fā)表于 04-29 18:01 ?851次閱讀
    多模融合,秒<b class='flag-5'>級</b>響應-<b class='flag-5'>云</b>翎智能應急指揮箱打造全域指揮“移動中樞”

    EM儲能網(wǎng)關(guān) ZWS智慧儲能應用(11) — 一架構(gòu) 主從架構(gòu)

    ZWS智慧儲能針對儲能場景下不同的架構(gòu)體系進行了兼容,可以適配用戶面臨的復雜現(xiàn)場環(huán)境,滿足更深層次的管理和維護需求。簡介儲能系統(tǒng)包含PCS、BMS、EMS等多個組件,不同儲能架構(gòu)管理
    的頭像 發(fā)表于 04-17 13:00 ?780次閱讀
    EM儲能網(wǎng)關(guān) ZWS智慧儲能<b class='flag-5'>云</b>應用(11) — 一<b class='flag-5'>級</b><b class='flag-5'>架構(gòu)</b> 主從<b class='flag-5'>架構(gòu)</b>

    Arm助力開發(fā)者加速遷移至Arm架構(gòu)平臺 Arm遷移資源分享

    隨著基于 Arm 架構(gòu)實例日益擴展,越來越多的用戶正從傳統(tǒng)平臺遷移至 Arm 平臺上。
    的頭像 發(fā)表于 04-09 18:23 ?1255次閱讀