91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

云天勵飛DeepEdge10適配DeepSeek開源周“首個大招”:FlashMLA

AI機械姬 ? 來源:AI機械姬 ? 作者:AI機械姬 ? 2025-02-27 11:06 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

2 月 24 日,DeepSeek"開源周"正式啟動,并發(fā)布首個代碼庫FlashMLA,引發(fā)全球關(guān)注。

FlashMLA是針對英偉達(dá)Hopper GPU優(yōu)化的高效MLA解碼內(nèi)核,專為可變長度序列優(yōu)化設(shè)計,是DeepSeek高效使用算力的核心程序模塊。FlashMLA通過MLA解碼優(yōu)化與分頁KV緩存技術(shù),顯著提升硬件利用率,加速大語言模型解碼過程,有效提高響應(yīng)速度與吞吐量,適用于各種實時對話生成場景。

云天勵飛芯片團隊在FlashMLA開源后,迅速完成了DeepEdge10 平臺與FlashMLA的適配工作。在適配過程中,云天勵飛采用了Op fusion tiling、Online softmax、Double buffer、細(xì)粒度存算并行等先進技術(shù),并基于自研的Triton-like編程語言快速開發(fā)驗證了高效的FlashMLA算子。通過一系列優(yōu)化,不僅顯著提升了計算效率,還大幅降低了顯存占用,充分展現(xiàn)了DeepEdge10 平臺“算力積木”芯片架構(gòu)的卓越優(yōu)勢,以及其與DeepSeek生態(tài)的高度契合性。

今日,云天勵飛已將相關(guān)代碼提交至開源平臺Gitee,為開源AI貢獻(xiàn)了重要的技術(shù)力量。

算子的源碼地址為:

https://gitee.com/Intellifusion_2025/tyllm/blob/master/python/tylang/flash_mla.py

DeepEdge10 系列芯片是專門針對大模型時代打造的芯片,支持包括 Transformer 模型、BEV 模型、CV 大模型、LLM 大模型等各類不同架構(gòu)的主流模型;基于自主可控的先進國產(chǎn)工藝打造,采用獨特的“算力積木”架構(gòu),可靈活滿足智慧城市、智慧交通、智能制造、智慧倉儲、機器人、邊緣智算中心等不同場景對算力的需求,為大模型推理提供強大動力。

wKgZPGe_1piAUBg0AAd-aDFnMzU838.png

目前,DeepEdge10 芯片平臺已成功適配DeepSeek R1 系列模型及國產(chǎn)鴻蒙操作系統(tǒng)。未來,云天勵飛將持續(xù)加大研發(fā)力度,推動芯片在國產(chǎn)化領(lǐng)域取得更大突破,為國產(chǎn)AI生態(tài)建設(shè)貢獻(xiàn)更多力量。

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 云天勵飛
    +關(guān)注

    關(guān)注

    0

    文章

    184

    瀏覽量

    12667
  • DeepSeek
    +關(guān)注

    關(guān)注

    2

    文章

    836

    瀏覽量

    3301
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    云天中標(biāo)湛江市AI滲透支撐新質(zhì)生產(chǎn)力基礎(chǔ)設(shè)施建設(shè)項目

    日前,云天中標(biāo)湛江市AI滲透支撐新質(zhì)生產(chǎn)力基礎(chǔ)設(shè)施建設(shè)項目。根據(jù)項目規(guī)劃,公司將基于自研國產(chǎn)AI推理加速卡,參與建設(shè)AI推理算力集群,并推動DeepSeek等國產(chǎn)大模型在相關(guān)應(yīng)用場
    的頭像 發(fā)表于 03-14 09:04 ?358次閱讀

    國內(nèi)首個國產(chǎn)AI推理千卡集群落地,采用云天全自研AI推理芯片

    3 月 12 日,云天中標(biāo)湛江市AI滲透支撐新質(zhì)生產(chǎn)力基礎(chǔ)設(shè)施建設(shè)項目,中標(biāo)金額4.2億元。項目將基于云天
    發(fā)表于 03-12 11:10 ?1034次閱讀

    云天正式舉辦大算力芯片戰(zhàn)略前瞻會

    2月3日,云天正式舉辦“大算力芯片戰(zhàn)略前瞻會”,首次對外公布未來三年的大算力 AI 推理芯片戰(zhàn)略布局。
    的頭像 發(fā)表于 02-06 17:23 ?3727次閱讀

    云天DeepEdge10為星載計算提供支撐,搭載自研NNP400T

    電子發(fā)燒友網(wǎng)報道 近日云天表示,公司用DeepEdge10為深空探測實驗室的自主可控星載計算提供支撐。DeepEdge10 基于自主可控
    的頭像 發(fā)表于 01-21 11:49 ?6504次閱讀

    云天中標(biāo)AI龍崗一期1.22億元項目

    日前,云天中標(biāo)AI龍崗一期1.22億元項目,將為龍崗區(qū)打造AI與機器人示范場景提供技術(shù)支撐,助力城市治理智能化水平持續(xù)提升。
    的頭像 發(fā)表于 12-22 09:34 ?438次閱讀

    AI教父Hinton對話云天陳寧

    在大模型步入深水區(qū)的當(dāng)下,AI 的下一個臨界點究竟在哪里?在 2025 GIS 全球創(chuàng)新峰會現(xiàn)場,深度學(xué)習(xí)奠基人、“AI 教父” Geoffrey Hinton 與云天董事長兼 CEO 陳寧
    的頭像 發(fā)表于 12-03 14:04 ?715次閱讀

    云天AI推理芯片如何賦能千行百業(yè)

    11月26日,云天會客廳第二期生態(tài)沙龍暨深商聯(lián)高科技高成長創(chuàng)新營走進上市公司活動圓滿舉辦。來自深圳科技領(lǐng)域的多位企業(yè)負(fù)責(zé)人齊聚云天,共同探討AI推理時代的技術(shù)變革、產(chǎn)業(yè)機遇與落地挑
    的頭像 發(fā)表于 12-03 13:58 ?645次閱讀

    云天亮相2025中國具身智能機器人大會

    近日,在 2025 中國具身智能機器人大會上,云天副總裁羅憶從芯片廠商的視角出發(fā),對具身智能產(chǎn)業(yè)的未來進行了深入剖析,并分享了公司在 AI 推理芯片與機器人應(yīng)用場景方面的整體布局。
    的頭像 發(fā)表于 11-25 11:26 ?883次閱讀

    云天與金蝶達(dá)成戰(zhàn)略合作

    11月4日,在2025金蝶全球創(chuàng)見者大會上,云天與金蝶簽署戰(zhàn)略合作協(xié)議。
    的頭像 發(fā)表于 11-05 18:09 ?1707次閱讀

    云天攜手合作伙伴共探AI產(chǎn)業(yè)新拐點

    10月17日,云天攜手深圳市人工智能產(chǎn)業(yè)協(xié)會舉辦“智見未來·Agent時代的產(chǎn)業(yè)機遇”主題沙龍,邀請來自全國50余家企業(yè)高管齊聚深圳,共同探討AI時代的新趨勢、新挑戰(zhàn)與新機遇。
    的頭像 發(fā)表于 10-27 10:12 ?948次閱讀

    云天與前海大數(shù)據(jù)公司、勤達(dá)睿達(dá)成戰(zhàn)略合作

    近日,深圳市前海大數(shù)據(jù)資源管理中心有限公司、深圳云天技術(shù)股份有限公司、勤達(dá)睿香港有限公司(Kyndryl)正式簽署戰(zhàn)略合作協(xié)議,圍繞智算基礎(chǔ)設(shè)施與“人工智能+”服務(wù)展開深度合作。
    的頭像 發(fā)表于 10-11 14:02 ?586次閱讀

    云天正式加入OISA生態(tài)

    近日,云天正式加入 OISA 生態(tài),攜手產(chǎn)業(yè)伙伴共同推動國產(chǎn) AI 芯片互聯(lián)體系建設(shè),為中國算力生態(tài)注入新的動力。
    的頭像 發(fā)表于 10-11 13:59 ?683次閱讀

    云天亮相2025全球AI芯片峰會

    9 月 17 日,全球 AI 芯片峰會在上海舉行,云天董事長兼 CEO 陳寧出席并發(fā)表演講。
    的頭像 發(fā)表于 09-17 17:56 ?1410次閱讀

    云天亮相SEMI-e 2025深圳國際半導(dǎo)體展

    9月10日,SEMI-e深圳國際半導(dǎo)體展暨2025集成電路產(chǎn)業(yè)創(chuàng)新展在深圳舉行。云天受邀出席同期舉辦的“端側(cè)AI芯片新架構(gòu)與新應(yīng)用專題研討會”并發(fā)表主題演講。
    的頭像 發(fā)表于 09-12 14:31 ?1729次閱讀

    云天飛出席2025亞布力論壇創(chuàng)新年會

    近日,2025 亞布力論壇第十一屆創(chuàng)新年會在杭州開幕,云天董事長兼 CEO 陳寧博士受邀出席,分享了他對未來 AI 產(chǎn)業(yè)化發(fā)展的趨勢研判。
    的頭像 發(fā)表于 07-10 11:36 ?1253次閱讀