91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線(xiàn)課程
  • 觀(guān)看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

為AI計(jì)算釋放空間

安晟培半導(dǎo)體 ? 來(lái)源:未知 ? 2024-11-21 09:19 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

無(wú)論是移動(dòng)應(yīng)用程序或數(shù)字商務(wù)等可見(jiàn)應(yīng)用程序,還是航空公司定價(jià)算法或每次刷卡時(shí)激活的欺詐檢測(cè)系統(tǒng)等幕后流程,AI 都已成為我們?nèi)粘I钪胁豢苫蛉钡囊徊糠?。尤其是生成?AI,預(yù)計(jì)未來(lái)十年將以?xún)晌粩?shù)的速度持續(xù)增長(zhǎng),到 2032 年市場(chǎng)規(guī)模可能達(dá)到1 萬(wàn)億美元以上。

AI 技術(shù)的發(fā)展推動(dòng)了對(duì)更強(qiáng)大的處理器的需求,尤其是 GPU,是構(gòu)建 AI 基礎(chǔ)設(shè)施的重要組成部分。NVIDIA 在行業(yè)和市場(chǎng)占據(jù)著主導(dǎo)地位,AMD 也越來(lái)越受歡迎,但企業(yè)必須面對(duì)GPU 持續(xù)增加的功耗,部分型號(hào)甚至已經(jīng)超過(guò)1kW,這一趨勢(shì)也導(dǎo)致全球數(shù)據(jù)中心功耗大幅增加。預(yù)計(jì)在 2022 年至 2026 年間還將翻一番,容量已然成為公共事業(yè)提供商和企業(yè)面臨的主要挑戰(zhàn)。

目前,大約80% 的數(shù)據(jù)中心運(yùn)營(yíng)商面臨功率限制,許多運(yùn)營(yíng)商對(duì)每機(jī)架功率限制在 10-20 kW的范圍內(nèi)。雖然傳統(tǒng)方法證明,提高處理器性能和效率可以提高總功耗,但很多數(shù)據(jù)中心運(yùn)營(yíng)商已經(jīng)達(dá)到功率上限,這也對(duì)企業(yè)的持續(xù)創(chuàng)新和增長(zhǎng)造成了阻礙。此外,擴(kuò)展機(jī)架空間或適應(yīng)特殊的冷卻方法通常成本高昂或受到空間和法規(guī)的限制;老化的服務(wù)器基礎(chǔ)設(shè)施(許多服務(wù)器使用時(shí)間超過(guò) 5 年)也不斷增加維護(hù)成本和安全風(fēng)險(xiǎn)。

對(duì)此,最實(shí)用的解決方案是升級(jí)現(xiàn)有的基礎(chǔ)設(shè)施。及時(shí)的服務(wù)器更新能夠大幅整合機(jī)架空間,從而降低運(yùn)營(yíng)成本,回收電力預(yù)算,并支持部署能夠處理 AI 工作負(fù)載的現(xiàn)代服務(wù)器。在評(píng)估服務(wù)器更新時(shí),運(yùn)營(yíng)商需要用新的方式來(lái)思考,只要新一代處理器的每瓦性能(即效率)提高,處理器功耗的增加就可以被接受,這意味著新服務(wù)器比舊服務(wù)器 “里程更長(zhǎng)”。盡管最大機(jī)架功率預(yù)算有限并開(kāi)始接近極限,通過(guò)專(zhuān)注于每機(jī)架的性能,企業(yè)可以?xún)?yōu)化現(xiàn)有的電力和空間,使他們能夠從數(shù)據(jù)中心的局限性轉(zhuǎn)為更加專(zhuān)注于業(yè)務(wù)的增長(zhǎng)和創(chuàng)新。

Ampere 的云原生處理器旨在提供橫向擴(kuò)展性能和領(lǐng)先的效率。AmpereOne 自研核是替代老舊服務(wù)器的最佳 CPU 選擇。在AmpereOne 效率白皮書(shū)中,詳細(xì)闡述了 AmpereOne 的效率優(yōu)勢(shì),相較 AMD EPYC 9004 系列處理器,如何使云原生和 AI 工作負(fù)載的每機(jī)架性能提高 67%。

以下是 7 個(gè)開(kāi)源工作負(fù)載,從 Web 服務(wù)器和負(fù)載均衡器到數(shù)據(jù)庫(kù),再到緩存和內(nèi)存中數(shù)據(jù)存儲(chǔ)。它們?cè)谠S多現(xiàn)代 Web 服務(wù)中頗受歡迎,因?yàn)樗鼈兺ㄟ^(guò)緩存處理 web 流量管理、數(shù)據(jù)存儲(chǔ)和性能優(yōu)化。

91c9f60c-a7a4-11ef-93f3-92fbcf53809c.png

在AI 計(jì)算時(shí)代,通過(guò)將 AI 推理工作負(fù)載添加到上述通用工作負(fù)載中,可以增強(qiáng)各個(gè)行業(yè)的產(chǎn)品和服務(wù)。下表展示了 AmpereOne 在機(jī)架級(jí)別的性能和效率,適用于推理工作負(fù)載,如推薦引擎(DLRM)、圖像處理(ResNet-50)以及以語(yǔ)言為中心的工作負(fù)載(Whisper和Llama3)。這些工作負(fù)載支持現(xiàn)代設(shè)施,例如聊天機(jī)器人、在電子商務(wù)網(wǎng)站上查看推薦的產(chǎn)品、在流媒體平臺(tái)上呈現(xiàn)“您可能喜歡的節(jié)目”,或者為直播電視流提供實(shí)時(shí)隱藏字幕。

91d59e44-a7a4-11ef-93f3-92fbcf53809c.png

對(duì)于前面提到的每機(jī)架可用功率有限的企業(yè)和服務(wù)提供商來(lái)說(shuō),實(shí)現(xiàn)每機(jī)架的最大性能尤為重要。即使是中等規(guī)模的企業(yè),由 AI 驅(qū)動(dòng)的 web 服務(wù)也可以從 AmpereOne 中受益。與 AMD EPYC Genoa 8 個(gè)機(jī)架的輸出相比,AmpereOne 可以在不犧牲性能水平的情況下,將機(jī)架空間減少 38%,將功率預(yù)算降低 37%,并將購(gòu)置成本降低 49%。以下代理 web 服務(wù)包括作為前端 Web 服務(wù)器的 NGINX、作為鍵值存儲(chǔ)的 Redis、作為內(nèi)存數(shù)據(jù)庫(kù)的 Memcached、作為關(guān)系數(shù)據(jù)庫(kù)的 MySQL,以及分別作為推薦引擎和聊天機(jī)器人的 AI 組件 DLRM 和 Llama3。

91e45d12-a7a4-11ef-93f3-92fbcf53809c.png

AmpereOne 可以通過(guò)更新老化的服務(wù)器來(lái)重新利用預(yù)算、空間和功率。我們展示了如何節(jié)約資本支出,如何通過(guò)降低功耗和管理開(kāi)銷(xiāo)而實(shí)現(xiàn)運(yùn)營(yíng)支出的節(jié)省,在三年內(nèi)為企業(yè)節(jié)省大量 TCO。相較 AMD EPYC Bergamo,運(yùn)營(yíng)商可以節(jié)省 33% 的成本;與 AMD EPYC Genoa 相比,可節(jié)省高達(dá) 41% 的成本,這都?xì)w功于AmpereOne。

91f8aeca-a7a4-11ef-93f3-92fbcf53809c.png

無(wú)論公司規(guī)模大小,“AI 海嘯” 將繼續(xù)降低企業(yè)大規(guī)模實(shí)施 AI 的準(zhǔn)入門(mén)檻。即使沒(méi)有資源去雇傭?qū)iT(mén)的 AI 團(tuán)隊(duì),企業(yè)也可以通過(guò)服務(wù)提供商來(lái)開(kāi)啟 AI 之旅,并迅速投入生產(chǎn)。因此,整合傳統(tǒng)基礎(chǔ)設(shè)施為 AI 擴(kuò)展釋放空間尤其重要。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀(guān)點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    20259

    瀏覽量

    252551
  • AI
    AI
    +關(guān)注

    關(guān)注

    91

    文章

    39911

    瀏覽量

    301538
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    NVIDIA技術(shù)助力光輪智能加速物理AI落地

    機(jī)器人正加速走向真實(shí)世界。從實(shí)驗(yàn)室到工業(yè)現(xiàn)場(chǎng),從結(jié)構(gòu)化環(huán)境到開(kāi)放空間,物理 AI 對(duì)數(shù)據(jù)規(guī)模、物理準(zhǔn)確性與訓(xùn)練效率提出了前所未有的要求。
    的頭像 發(fā)表于 12-13 10:03 ?2193次閱讀

    疊層固態(tài)電容:小型化封裝,釋放PCB更多空間

    疊層固態(tài)電容通過(guò)小型化封裝設(shè)計(jì),顯著釋放PCB空間,同時(shí)保持高性能與可靠性,成為高密度電子系統(tǒng)的理想選擇。
    的頭像 發(fā)表于 12-05 16:15 ?698次閱讀

    低成本AI邊緣計(jì)算盒子DIY:基于迅RK3568和開(kāi)源模型,輕松玩轉(zhuǎn)智能識(shí)別

    低成本AI邊緣計(jì)算盒子DIY:基于迅RK3568和開(kāi)源模型,輕松玩轉(zhuǎn)智能識(shí)別
    的頭像 發(fā)表于 11-12 13:42 ?1786次閱讀
    低成本<b class='flag-5'>AI</b>邊緣<b class='flag-5'>計(jì)算</b>盒子DIY:基于迅<b class='flag-5'>為</b>RK3568和開(kāi)源模型,輕松玩轉(zhuǎn)智能識(shí)別

    ALVA推出“ AI + 空間計(jì)算智能運(yùn)維平臺(tái)

    市場(chǎng)規(guī)模正以指數(shù)級(jí)速度擴(kuò)張,中國(guó)以 38% 的全球占比成為最大需求國(guó)。 9 月 18 日,以 2025 華為 HC 大會(huì)為契機(jī),ALVA 與華為智算服務(wù)團(tuán)隊(duì)進(jìn)行了務(wù)實(shí)而高效的交流,深入探討在空間智能領(lǐng)域的合作。 ALVA?作為?AI +?
    的頭像 發(fā)表于 10-12 14:35 ?1956次閱讀

    【「AI芯片:科技探索與AGI愿景」閱讀體驗(yàn)】+AI的科學(xué)應(yīng)用

    AI被賦予了人的智能,科學(xué)家們希望在沒(méi)有人類(lèi)的引導(dǎo)下,AI自主的提出科學(xué)假設(shè),諾貝爾獎(jiǎng)級(jí)別的假設(shè)哦。 AI驅(qū)動(dòng)科學(xué)被認(rèn)為是科學(xué)發(fā)現(xiàn)的第五個(gè)范式了,與實(shí)驗(yàn)科學(xué)、理論科學(xué)、計(jì)算科學(xué)、數(shù)據(jù)驅(qū)
    發(fā)表于 09-17 11:45

    無(wú)人機(jī)飛控輕量化:合粵縮小體電容釋放空間,適配緊湊模組設(shè)計(jì)

    控系統(tǒng),通過(guò)創(chuàng)新性地縮小體電容釋放空間,成功實(shí)現(xiàn)了飛控模塊的緊湊化設(shè)計(jì),無(wú)人機(jī)行業(yè)的輕量化發(fā)展提供了新的解決方案。 傳統(tǒng)飛控系統(tǒng)在設(shè)計(jì)時(shí)往往面臨一個(gè)矛盾:一方面需要足夠大的電容來(lái)保證系統(tǒng)穩(wěn)定運(yùn)行,另一方面又
    的頭像 發(fā)表于 09-16 15:57 ?605次閱讀
    無(wú)人機(jī)飛控輕量化:合粵縮小體電容<b class='flag-5'>釋放空間</b>,適配緊湊模組設(shè)計(jì)

    【「AI芯片:科技探索與AGI愿景」閱讀體驗(yàn)】+AI的未來(lái):提升算力還是智力

    新信息的情況下持續(xù)學(xué)習(xí)和改進(jìn)的AI計(jì)算方式。 終身短發(fā)怎么保持已有知識(shí)和技能的有效性呢 ①知識(shí)蒸餾:將已有知識(shí)從一個(gè)模型轉(zhuǎn)移到另一個(gè)模型 ②知識(shí)更新:根據(jù)新知識(shí)更新已有知識(shí) ③知識(shí)重組:對(duì)已有知識(shí)進(jìn)行重組
    發(fā)表于 09-14 14:04

    愛(ài)芯元智AI原生處理器釋放智能生產(chǎn)力

    近年來(lái),人工智能產(chǎn)業(yè)持續(xù)高速發(fā)展,大模型技術(shù)不斷突破,各行各業(yè)帶來(lái)廣闊的應(yīng)用想象空間。與此同時(shí),AI算力部署正從云端加速向邊緣和終端延伸,邊緣AI憑借其低延遲、高隱私和性?xún)r(jià)比等優(yōu)勢(shì),
    的頭像 發(fā)表于 09-10 11:42 ?905次閱讀
    愛(ài)芯元智<b class='flag-5'>AI</b>原生處理器<b class='flag-5'>釋放</b>智能生產(chǎn)力

    【「AI芯片:科技探索與AGI愿景」閱讀體驗(yàn)】+可期之變:從AI硬件到AI濕件

    生物化學(xué)計(jì)算機(jī),它通過(guò)離子、分子間的相互作用來(lái)進(jìn)行復(fù)雜的并行計(jì)算。因而未來(lái)可期的前景是AI硬件將走向AI濕件。 根據(jù)研究,估算出大腦的功率是20W,在進(jìn)行智力活動(dòng)時(shí),其功率會(huì)增大到25
    發(fā)表于 09-06 19:12

    NVIDIA通過(guò)全新 Omniverse庫(kù)、Cosmos物理AI模型及AI計(jì)算基礎(chǔ)設(shè)施,機(jī)器人領(lǐng)域開(kāi)啟新篇章

    NVIDIA 通過(guò)全新 Omniverse 庫(kù)、Cosmos 物理 AI 模型及 AI 計(jì)算基礎(chǔ)設(shè)施,機(jī)器人領(lǐng)域開(kāi)啟新篇章 ? ·?全新 NVIDIA Omniverse NuRec
    的頭像 發(fā)表于 08-12 11:29 ?1796次閱讀
    NVIDIA通過(guò)全新 Omniverse庫(kù)、Cosmos物理<b class='flag-5'>AI</b>模型及<b class='flag-5'>AI</b><b class='flag-5'>計(jì)算</b>基礎(chǔ)設(shè)施,<b class='flag-5'>為</b>機(jī)器人領(lǐng)域開(kāi)啟新篇章

    AI 邊緣計(jì)算網(wǎng)關(guān):開(kāi)啟智能新時(shí)代的鑰匙?—龍興物聯(lián)

    ,這一過(guò)程常受網(wǎng)絡(luò)延遲和不穩(wěn)定的困擾。如今,借助 AI 邊緣計(jì)算網(wǎng)關(guān),數(shù)據(jù)處理任務(wù)下沉至網(wǎng)絡(luò)邊緣,在本地即可快速完成。以智能安防監(jiān)控例,在大型商場(chǎng)中,眾多監(jiān)控?cái)z像頭采集的視頻數(shù)據(jù),通過(guò) AI
    發(fā)表于 08-09 16:40

    空間計(jì)算是如何運(yùn)作的?它有哪些優(yōu)勢(shì)?

    空間計(jì)算將數(shù)字?jǐn)?shù)據(jù)與物理世界實(shí)時(shí)融合,通過(guò)增強(qiáng)現(xiàn)實(shí)和虛擬現(xiàn)實(shí)頭顯或智能眼鏡等設(shè)備、增強(qiáng)混合現(xiàn)實(shí)交互。
    的頭像 發(fā)表于 07-02 09:14 ?1195次閱讀

    DDN攜手NVIDIA釋放非結(jié)構(gòu)化數(shù)據(jù)的AI價(jià)值

    DDN 通過(guò)與 NVIDIA AI 數(shù)據(jù)平臺(tái)的合作,推出聯(lián)合解決方案,簡(jiǎn)化了企業(yè)對(duì)非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)、訪(fǎng)問(wèn)和激活方式,助力客戶(hù)釋放生成式 AI 的巨大商業(yè)潛能。DDN 全球合作伙伴負(fù)責(zé)人
    的頭像 發(fā)表于 06-10 10:31 ?970次閱讀

    Deepseek海思SD3403邊緣計(jì)算AI產(chǎn)品系統(tǒng)

    海思SD3403邊緣計(jì)算AI框架,提供了一套開(kāi)放式AI訓(xùn)練產(chǎn)品工具包,解決客戶(hù)低成本AI系統(tǒng),針對(duì)差異化AI 應(yīng)用場(chǎng)景,自己采集樣本數(shù)據(jù),進(jìn)
    發(fā)表于 04-28 11:05

    Banana Pi 發(fā)布 BPI-AI2N &amp; BPI-AI2N Carrier,助力 AI 計(jì)算與嵌入式開(kāi)發(fā)

    RZ/V2N——近期在嵌入式世界2025上新發(fā)布, AI 計(jì)算、嵌入式系統(tǒng)及工自動(dòng)化提供強(qiáng)大支持。這款全新的計(jì)算平臺(tái)旨在滿(mǎn)足開(kāi)發(fā)者和企業(yè)用戶(hù)對(duì)高性能、低功耗和靈活擴(kuò)展的需求。 [](
    發(fā)表于 03-19 17:54