為了提高效率、合理利用資源,人們無時無刻不在面對著各種優(yōu)化問題,需要在特定條件約束下尋找最佳的解決方案。這些優(yōu)化問題廣泛存在于科學研究、工程與日常生活中,包括物流的運輸、資源的調(diào)度、智慧工廠與工程設(shè)計等。然而,解決這些復雜優(yōu)化問題往往需要消耗大量硬件和時間資源,并且容易陷入局部極小值。因此,開發(fā)微縮化、高效率、低功耗的優(yōu)化求解器硬件將為未來終端智能決策提供重要基礎(chǔ),是研究人員亟待解決的難題。
為此,北京大學信息科學技術(shù)學院微納電子學系黃如院士-楊玉超研究員課題組提出并實現(xiàn)了一種基于單個憶阻器交叉陣列的高速、低功耗神經(jīng)形態(tài)優(yōu)化求解器硬件,通過在反饋網(wǎng)絡(luò)中引入暫態(tài)混沌達到了兼顧尋找最優(yōu)解以及算法收斂性的雙重效果。

基于憶阻器的暫態(tài)混沌神經(jīng)網(wǎng)絡(luò)用于函數(shù)優(yōu)化與組合優(yōu)化問題高效求解
憶阻器陣列具有高密度、非易失、能夠存儲模擬值等特性,是實現(xiàn)優(yōu)化求解器微縮化的硬件基礎(chǔ),并使得整個優(yōu)化求解過程高度并行、存算一體,是實現(xiàn)硬件低功耗、高吞吐量的關(guān)鍵。在該研究中,課題組將單個氧化鉭憶阻器陣列設(shè)計為優(yōu)化求解器硬件的核心,用以映射通過數(shù)學變形的暫態(tài)混沌模擬退火神經(jīng)網(wǎng)絡(luò)。其中,通過交叉陣列對角線位置的憶阻器有效引入了暫態(tài)混沌,并控制網(wǎng)絡(luò)從混沌到收斂的動力學狀態(tài)轉(zhuǎn)變,達到混沌模擬退火的目的。研究發(fā)現(xiàn),憶阻器對相同編程脈沖的固有非線性響應為優(yōu)化求解過程提供了高效的退火策略,可以保證以較高的收斂速度得到最優(yōu)解。實驗結(jié)果展示了該求解器硬件在連續(xù)函數(shù)優(yōu)化、組合優(yōu)化等典型優(yōu)化問題中的優(yōu)異表現(xiàn),證明了該硬件在優(yōu)化問題高效求解中的巨大潛力。
相關(guān)成果以“Transiently chaotic simulated annealing based on intrinsic nonlinearity of memristors for efficient solution of optimization problems(基于憶阻器固有非線性的暫態(tài)混沌模擬退火用于優(yōu)化問題高效求解》)”為題,近日在線發(fā)表于《科學·進展》(Science Advances6:eaba9901, 2020)。微納電子學系2017級博士生楊可為第一作者。
以上研究工作得到國家重點研發(fā)計劃項目、基金委創(chuàng)新群體項目、國家杰出青年科學基金、騰訊基金會、北京智源人工智能研究院等支持。
-
神經(jīng)網(wǎng)絡(luò)
+關(guān)注
關(guān)注
42文章
4839瀏覽量
107978 -
硬件
+關(guān)注
關(guān)注
12文章
3603瀏覽量
69083 -
憶阻器
+關(guān)注
關(guān)注
8文章
76瀏覽量
20857
發(fā)布評論請先 登錄
復雜的軟件算法硬件IP核的實現(xiàn)
脈沖神經(jīng)元模型的硬件實現(xiàn)
SNN加速器內(nèi)部神經(jīng)元數(shù)據(jù)連接方式
【「AI芯片:科技探索與AGI愿景」閱讀體驗】+神經(jīng)形態(tài)計算、類腦芯片
【「AI芯片:科技探索與AGI愿景」閱讀體驗】+化學或生物方法實現(xiàn)AI
【「AI芯片:科技探索與AGI愿景」閱讀體驗】+第二章 實現(xiàn)深度學習AI芯片的創(chuàng)新方法與架構(gòu)
【「AI芯片:科技探索與AGI愿景」閱讀體驗】+內(nèi)容總覽
全球首款全光譜可編程光控憶阻器,科創(chuàng)合作研制!?
一種帶通濾波器在無位置傳感器轉(zhuǎn)子檢測中的應用
關(guān)于CAPSENSE?接近按鈕傳感器陣列的設(shè)計問題求解
CST求解器選擇指南:瞬態(tài)(T)、頻域(F)還是積分方程(I)
在友晶DE1-SOC開發(fā)板實現(xiàn)Chirikov標準映射求解器
無刷直流電機單神經(jīng)元PI控制器的設(shè)計
革命性神經(jīng)形態(tài)微控制器 ?**Pulsar**? 的深度技術(shù)解讀
北大實現(xiàn)一種基于憶阻器交叉陣列的神經(jīng)形態(tài)優(yōu)化求解器硬件
評論