91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Arm平臺(tái)助力應(yīng)對(duì)AI能源需求

Arm社區(qū) ? 來源:Arm社區(qū) ? 2024-09-24 15:52 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

作者:Arm 首席執(zhí)行官 Rene Haas

人工智能 (AI) 具有超越過去一個(gè)世紀(jì)所發(fā)生的所有變革性創(chuàng)新的潛力,它在醫(yī)療保健、生產(chǎn)力、教育等領(lǐng)域?yàn)樯鐣?huì)帶來的益處將超乎我們的想象。為了運(yùn)行這些復(fù)雜的 AI 工作負(fù)載,全球數(shù)據(jù)中心所需的計(jì)算量需要以指數(shù)級(jí)規(guī)模進(jìn)行擴(kuò)展。然而,這種對(duì)計(jì)算無止盡的需求也揭示了一個(gè)嚴(yán)峻的挑戰(zhàn):數(shù)據(jù)中心需要龐大的電力來驅(qū)動(dòng)AI這一突破性技術(shù)。

當(dāng)今的數(shù)據(jù)中心已經(jīng)消耗了大量的電力 —— 全球每年需要 460 太瓦時(shí) (TWh) 電力進(jìn)行支持,這個(gè)數(shù)字等同于整個(gè)德國的用電量。而 AI 的興起預(yù)計(jì)將在 2030 年把該數(shù)字提高三倍,意味著將超過印度這一世界上人口最多國家的總耗電量。

未來的 AI 模型將持續(xù)變得更大、更智能,在帶動(dòng)對(duì)更多計(jì)算能力的需求的同時(shí),對(duì)電力的需求也會(huì)增加,從而成為良性循環(huán)的一部分。而找到降低這些大型數(shù)據(jù)中心電力需求的方法對(duì)于實(shí)現(xiàn)社會(huì)性突破和兌現(xiàn) AI 的承諾至關(guān)重要。

換言之,沒有電力就無法實(shí)現(xiàn) AI,企業(yè)需要重新思考如何應(yīng)對(duì)能效問題的方方面面。

重新構(gòu)思 AI 的未來

一個(gè)由 Arm 平臺(tái)驅(qū)動(dòng)的未來

Arm 最初的產(chǎn)品就是為使用電池的設(shè)備而設(shè)計(jì)的,并推動(dòng)了移動(dòng)電話的變革。因此,深植于 Arm 的能效 DNA 能使業(yè)界重新思考應(yīng)如何構(gòu)建芯片來滿足 AI 日益增長的需求。

在典型的服務(wù)器機(jī)架中,僅計(jì)算芯片就可以消耗超過 50% 的電力預(yù)算。工程團(tuán)隊(duì)正在尋找各種可以降低該數(shù)字的方法,每一瓦特的減少都至關(guān)重要。

正因?yàn)榇?,全球最大?AI 頭部云服務(wù)提供商們轉(zhuǎn)而采用 Arm 技術(shù)來降低功耗。與同行業(yè)中的其他產(chǎn)品相比,Arm 最新的 Arm Neoverse CPU 是面向云數(shù)據(jù)中心,性能最高、最節(jié)能的處理器。Neoverse 為頭部云服務(wù)提供商提供了定制芯片的靈活性,以優(yōu)化其苛刻的工作負(fù)載,同時(shí)提供領(lǐng)先的性能和能效。每一瓦特的節(jié)省都可以用來實(shí)現(xiàn)更多的計(jì)算。這也正是為什么亞馬遜云服務(wù) (AWS)、微軟、Google 和甲骨文 (Oracle) 現(xiàn)在都通過 Neoverse 技術(shù),處理其通用計(jì)算和基于 CPU 的 AI 推理和訓(xùn)練。Neoverse 平臺(tái)正在成為云數(shù)據(jù)中心領(lǐng)域的事實(shí)標(biāo)準(zhǔn)。

從近期的行業(yè)內(nèi)的發(fā)布來看:

基于 Arm 架構(gòu)的 AWS Graviton:與其他同行業(yè)產(chǎn)品相比,Amazon Sagemaker 的 AI 推理性能提高了 25%,Web 應(yīng)用程序提高了 30%,數(shù)據(jù)庫提高了 40%,效率則提升了 60%。

基于 Arm 架構(gòu)的 Google Cloud Axion:與傳統(tǒng)架構(gòu)相比,其性能和能效分別提高了 50% 和 60%,可為基于 CPU 的 AI 推理和訓(xùn)練、YouTube、Google 地球等服務(wù)提供支持。

基于 Arm 架構(gòu)的 Microsoft Azure Cobalt:性能高出同類產(chǎn)品 40%,并為 Microsoft Teams 等服務(wù)提供支持,與 Maia 加速器的耦合驅(qū)動(dòng) Azure 的端到端 AI 架構(gòu)。

Oracle Cloud 采用基于 Arm 架構(gòu)的 Ampere Altra Max:與傳統(tǒng)同類產(chǎn)品相比,每機(jī)架服務(wù)器的性能提高 2.5 倍,能耗降低 2.8 倍,并用于生成式 AI 推理模型,諸如摘要、大語言模型訓(xùn)練的數(shù)據(jù)的標(biāo)記化,以及批量推理用例。

顯然,Neoverse 極大地提升了云端通用計(jì)算的性能和能效。此外,合作伙伴也發(fā)現(xiàn)在加速計(jì)算方面,Neoverse 也能帶來同樣的益處。大規(guī)模 AI 訓(xùn)練需要獨(dú)特的加速計(jì)算架構(gòu),例如,NVIDIA Grace Blackwell 平臺(tái) (GB200) 結(jié)合了 NVIDIA 的 Blackwell GPU 架構(gòu)與基于 Arm 架構(gòu)的 Grace CPU。這種基于 Arm 技術(shù)的計(jì)算架構(gòu)可實(shí)現(xiàn)系統(tǒng)級(jí)設(shè)計(jì)優(yōu)化,與面向大語言模型的 NVIDIA H100 GPU 相比,可帶來 25 倍的能耗降低,并將每個(gè) GPU 的性能提高 30 倍。這些優(yōu)化能夠帶來顛覆性的性能和節(jié)能效果,而這一切都得益于 Neoverse 所帶來的前所未有的芯片定制靈活性。

隨著基于 Arm 架構(gòu)的部署持續(xù)擴(kuò)大,這些企業(yè)將可以節(jié)省高達(dá) 15% 的數(shù)據(jù)中心總能耗。這些巨幅的節(jié)省可以用來在相同的功率范圍內(nèi)驅(qū)動(dòng)額外的 AI 運(yùn)算,而不會(huì)增加能源負(fù)擔(dān)。換言之,這些節(jié)能相當(dāng)于可以額外運(yùn)行 20 億次 ChatGPT 查詢,驅(qū)動(dòng)四分之一的日常網(wǎng)絡(luò)搜索流量,為 20% 的美國家庭提供照明,或?yàn)榕c哥斯達(dá)黎加面積相仿的國家進(jìn)行供電。這對(duì)改善能源消耗和環(huán)境可持續(xù)性產(chǎn)生了驚人的影響。

Arm CPU 正在從根本上推動(dòng) AI 變革,并造福地球。Arm 架構(gòu)是未來 AI 計(jì)算的基石。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • ARM
    ARM
    +關(guān)注

    關(guān)注

    135

    文章

    9561

    瀏覽量

    392218
  • 電力
    +關(guān)注

    關(guān)注

    8

    文章

    2397

    瀏覽量

    52903
  • AI
    AI
    +關(guān)注

    關(guān)注

    91

    文章

    39944

    瀏覽量

    301589
  • 人工智能
    +關(guān)注

    關(guān)注

    1818

    文章

    50120

    瀏覽量

    265614

原文標(biāo)題:Arm 的使命是助力應(yīng)對(duì) AI 無止盡的能源需求

文章出處:【微信號(hào):Arm社區(qū),微信公眾號(hào):Arm社區(qū)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    Arm計(jì)算平臺(tái)助力物理AI與邊緣AI落地

    在上周舉行的 2026 年國際消費(fèi)電子展 (CES 2026) 上,一條貫穿全場的脈絡(luò)迅速顯現(xiàn):人們所見、所觸、所體驗(yàn)的大多數(shù)技術(shù)與產(chǎn)品,均已構(gòu)建在 Arm 技術(shù)之上?;?Arm 技術(shù)的平臺(tái)正在
    的頭像 發(fā)表于 01-15 14:02 ?600次閱讀

    應(yīng)對(duì)端側(cè)AI算力、內(nèi)存、功耗“三堵墻”困境,安謀科技Arm China “周易”X3給出技術(shù)錦囊

    NPU IP,通過架構(gòu)創(chuàng)新、軟硬件協(xié)同優(yōu)化與開放生態(tài)等,為應(yīng)對(duì)端側(cè)AI“算力墻”、“內(nèi)存墻”、“功耗墻”困境給出技術(shù)錦囊。 ? ? 錦囊一:應(yīng)對(duì)“算力墻”,從“定點(diǎn)”到“浮點(diǎn)”,架構(gòu)升級(jí)與算力靈活配置 端側(cè)
    的頭像 發(fā)表于 12-18 13:45 ?417次閱讀
    <b class='flag-5'>應(yīng)對(duì)</b>端側(cè)<b class='flag-5'>AI</b>算力、內(nèi)存、功耗“三堵墻”困境,安謀科技<b class='flag-5'>Arm</b> China “周易”X3給出技術(shù)錦囊

    RK3576驅(qū)動(dòng)高端顯控系統(tǒng)升級(jí):多屏拼控與AI視覺融合解決方案

    ,RK3576 憑借高算力、低功耗和強(qiáng)擴(kuò)展性的優(yōu)勢,成為工業(yè)控制、交通調(diào)度、能源監(jiān)控、安防指揮中心等領(lǐng)域的核心計(jì)算平臺(tái)。未來,隨著 AI 技術(shù)與顯控需求的不斷升級(jí),RK3576 將進(jìn)一
    發(fā)表于 11-21 17:51

    Arm Flexible Access方案引入Armv9邊緣AI計(jì)算平臺(tái)

    全球首個(gè) Armv9 邊緣 AI 計(jì)算平臺(tái)(專為物聯(lián)網(wǎng)及邊緣 AI 工作負(fù)載優(yōu)化)將納入 Arm Flexible Access 方案,助力
    的頭像 發(fā)表于 10-29 15:27 ?1078次閱讀

    PPEC Workbench 平臺(tái)拓?fù)淙采w,滿足各類電源開發(fā)需求

    式整流、維也納整流。 (2) 組合拓?fù)淠0?應(yīng)對(duì)復(fù)雜場景的集成需求) 如 Buck+全橋 LLC(兼顧寬范圍輸入與高頻率、高效率)、Boost+ 全橋 LLC(適配新能源高電壓母線與隔離變換)等,實(shí)現(xiàn)
    發(fā)表于 10-23 11:44

    全新Arm Lumex CSS平臺(tái)實(shí)現(xiàn)兩位數(shù)性能提升

    及下一代個(gè)人電腦加速其人工智能 (AI) 體驗(yàn)的先進(jìn)計(jì)算平臺(tái)。Lumex CSS 平臺(tái)集成了搭載第二代可伸縮矩陣擴(kuò)展 (SME2) 技術(shù)的最高性能 Arm CPU、GPU 及系統(tǒng) IP
    的頭像 發(fā)表于 09-10 16:14 ?949次閱讀
    全新<b class='flag-5'>Arm</b> Lumex CSS<b class='flag-5'>平臺(tái)</b>實(shí)現(xiàn)兩位數(shù)性能提升

    如何在基于Arm架構(gòu)的邊緣AI設(shè)備上部署飛槳模型

    當(dāng) Arm 與領(lǐng)先的開源深度學(xué)習(xí)平臺(tái)強(qiáng)強(qiáng)聯(lián)合,會(huì)帶來什么?那就是推動(dòng)創(chuàng)新的“火箭燃料”。Arm 攜手百度,利用雙方在高能效計(jì)算平臺(tái)AI
    的頭像 發(fā)表于 09-06 14:07 ?1127次閱讀

    RK3576助力智慧安防:8路高清采集與AI識(shí)別

    在智慧城市和數(shù)字化園區(qū)的建設(shè)過程中,安防監(jiān)控系統(tǒng)正從“被動(dòng)記錄”走向“主動(dòng)識(shí)別與分析”。隨著AI算法的成熟和高清視頻處理能力的提升,市場對(duì)多路視頻采集、實(shí)時(shí)拼接、智能識(shí)別的需求日益增強(qiáng)。 米爾電子
    發(fā)表于 08-22 17:41

    睿海光電800G光模塊助力全球AI基建升級(jí)

    巨頭反饋,睿海光電在800G SR8訂單中較競品提前72小時(shí)完成交付,助力AI訓(xùn)練集群建設(shè)周期壓縮15%。 三、廣泛兼容性:全場景適配+3年超長質(zhì)保,打造無憂部署體驗(yàn) 為應(yīng)對(duì)客戶多元化需求
    發(fā)表于 08-13 19:05

    Arm如何應(yīng)對(duì)復(fù)雜的全球AI監(jiān)管

    發(fā)布的《人工智能就緒指數(shù)報(bào)告》中《人工智能法規(guī)、監(jiān)管和全球趨勢》一章,由 Arm 全球政府事務(wù)主管 Vince Jesaitis 執(zhí)筆,從安全性與合規(guī)性視角出發(fā),剖析如何應(yīng)對(duì)復(fù)雜的全球 AI 監(jiān)管規(guī)范。
    的頭像 發(fā)表于 06-26 09:42 ?886次閱讀

    AI技術(shù)助力可持續(xù)發(fā)展

    隨著人工智能 (AI) 持續(xù)為行業(yè)和社會(huì)帶來變革,如何平衡其快速增長與環(huán)境責(zé)任的緊迫性已成為關(guān)鍵考量。誠然 AI 會(huì)致使巨大的能源需求,但它也可以成為應(yīng)對(duì)更廣泛的可持續(xù)發(fā)展挑戰(zhàn)的工具。
    的頭像 發(fā)表于 06-19 10:43 ?1303次閱讀

    全新STM32MP257開發(fā)板震撼發(fā)布!異核架構(gòu)x接口豐富x邊緣AI,助力ARM嵌入式工業(yè)4.0應(yīng)用!

    全新STM32MP257開發(fā)板震撼發(fā)布!異核架構(gòu)x接口豐富x邊緣AI,助力ARM嵌入式工業(yè)4.0應(yīng)用! ATK-DLMP257B開發(fā)板是正點(diǎn)原子基于STM32MP257DAK3處理器研發(fā)的一款
    發(fā)表于 04-12 12:04

    Arm助力開發(fā)者加速遷移至Arm架構(gòu)云平臺(tái) Arm云遷移資源分享

    隨著基于 Arm 架構(gòu)的云實(shí)例日益擴(kuò)展,越來越多的用戶正從傳統(tǒng)平臺(tái)遷移至 Arm 平臺(tái)上。
    的頭像 發(fā)表于 04-09 18:23 ?1257次閱讀

    適用于數(shù)據(jù)中心和AI時(shí)代的800G網(wǎng)絡(luò)

    AI平臺(tái)中,以太網(wǎng)因其通用性和易擴(kuò)展性,仍然占據(jù)重要地位。為滿足AI需求,現(xiàn)代以太網(wǎng)采用了以下優(yōu)化技術(shù): RoCE(基于以太網(wǎng)融合的RDMA):減少數(shù)據(jù)傳輸延遲。
    發(fā)表于 03-25 17:35

    Banana Pi 發(fā)布 BPI-AI2N &amp; BPI-AI2N Carrier,助力 AI 計(jì)算與嵌入式開發(fā)

    RZ/V2N——近期在嵌入式世界2025上新發(fā)布,為 AI 計(jì)算、嵌入式系統(tǒng)及工自動(dòng)化提供強(qiáng)大支持。這款全新的計(jì)算平臺(tái)旨在滿足開發(fā)者和企業(yè)用戶對(duì)高性能、低功耗和靈活擴(kuò)展的需求。 []() 領(lǐng)先的計(jì)算
    發(fā)表于 03-19 17:54