《電子技術應用》
您所在的位置:首頁 > 模擬設計 > 業界動態 > 清華造人工神經網絡芯片,憶阻器陣列效能高過GPU兩個數量級

清華造人工神經網絡芯片,憶阻器陣列效能高過GPU兩個數量級

2020-02-26
來源:電子工程專輯
關鍵詞: 人工智能 芯片

  近日,清華大學微電子所、未來芯片技術高精尖創新中心錢鶴、吳華強教授團隊與合作者在《自然》在線發表了題為“Fully hardware-implemented memristor convolutional neural network”的研究論文,報道了基于憶阻器陣列芯片卷積網絡的完整硬件實現。

  該存算一體系統在辦理卷積神經網絡(CNN)時能效比前沿的圖形辦理器芯片(GPU)高兩個數質級,可以說在一定程度上沖破了“馮諾依曼瓶頸”的限造:大幅提升算力的同時,實現了以更小的功耗和更低的硬件成本完成復雜的計算。

3387b317d8793da937ccff6ef64f498f.jpg

  多個憶阻器陣列芯片協同工作示意圖。(圖自:清華新聞網,下同)

  基于憶阻器芯片的存算一體系統

22ee2ab11b135ee1fd5dc464d4ab7010.jpg

  什么是憶阻器?

  憶阻器,全稱記憶電阻器(Memristor),是繼電阻、電容、電感之后的第四種電路基本元件,表示磁通與電荷之間的關系,最早由加州大學伯克利分校教授蔡少棠在1971年預言存在,惠普公司在2008年研制成功。

  簡單來說,這種組件的的電阻會隨著通過的電流量而改變,而且就算電流停止了,它的電阻仍然會停留在之前的值,直到接受到反向的電流它才會被推回去,等于說能“記住”之前的電流量。

  這種奇妙的效果,其實和神經元突觸有相仿之處。再加上憶阻器還具有尺寸小、操作功耗低、可大規模集成(三維集成)等優點,難怪計算機科學家們在憶阻器身上看到了存算一體、低能耗類腦計算的前景。

  人工神經網絡近年來大放異彩,如果用憶阻器連接成陣列,作為人工神經網絡的硬件,會有什么效果?

  憶阻器陣列

  當前國際上的相關研究還停留在簡單網絡結構的驗證,或者基于少量器件數據進行的仿真,基于憶阻器陣列的完整硬件實現仍然有很多挑戰:器件方面,制備高一致、可靠的多值憶阻器陣列仍是挑戰;系統方面,受憶阻器的阻變機理制約,器件固有的非理想特性(如器件間波動,器件電導卡滯,電導狀態漂移等)會導致計算準確率降低;架構方面,憶阻器陣列實現卷積功能需要以串行滑動的方式連續采樣、計算多個輸入塊,無法匹配全連接結構的計算效率。

  錢鶴、吳華強教授團隊通過優化材料和器件結構,成功制備出了高性能的憶阻器陣列。2017年5月,該課題組就曾在《自然通訊》報告稱,首次實現了基于1024個氧化物憶阻器陣列的類腦計算,將氧化物憶阻器的集成規模提高了一個數量級。這使芯片更加高效地完成人臉識別計算任務,將能耗降低到原來的千分之一以下。

  憶阻器神經網絡

  為解決器件非理想特性造成的系統識別準確率下降問題,他們提出一種新型的混合訓練算法,僅需用較少的圖像樣本訓練神經網絡,并通過微調最后一層網絡的部分權重,使存算一體架構在手寫數字集上的識別準確率達到96.19%,與軟件的識別準確率相當。與此同時,提出了空間并行的機制,將相同卷積核編程到多組憶阻器陣列中,各組憶阻器陣列可并行處理不同的卷積輸入塊,提高并行度來加速卷積計算。

  在此基礎上,該團隊搭建了全硬件構成的完整存算一體系統,在系統里集成了8個包括2048個憶阻器的陣列,以提高并行計算的效率,并在該系統上高效運行了卷積神經網絡算法,成功驗證了圖像識別功能,證明了存算一體架構全硬件實現的可行性。

cda6d0924a395f28fdc2ffb412b9cbf9.jpg

  存算一體系統架構

  近年來,錢鶴、吳華強教授團隊長期致力于面向人工智能的存算一體技術研究,從器件性能優化、工藝集成、電路設計及架構與算法等多層次實現創新突破,先后在《自然通訊》(Nature Communications)、《自然電子》(Nature Electronics)、《先進材料》(Advanced Materials)等期刊以及國際電子器件會議 (IEDM)、國際固態半導體電路大會(ISSCC)等頂級學術會議上發表多篇論文。

263f616c30197ff68ffb7281d1c33fe7.jpg

  團隊合影

  清華大學微電子所吳華強教授是本論文的通訊作者,清華大學微電子所博士生姚鵬是第一作者。該研究工作得到了國家自然科學基金委、國家重點研發計劃、北京市科委、北京信息科學與技術國家研究中心及華為技術有限公司等支持。


本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
主站蜘蛛池模板: 一级毛片私人影院 | 国产精品日韩欧美在线 | 亚洲欧美一区在线 | 特级黄色视频毛片 | 最好看免费中文字幕2019 | 亚洲精品高清久久 | 717影院理论午夜伦不卡久久 | 高清不卡毛片 | 免费国产小视频在线观看 | 好吊色妇女免费视频免费 | 精品日韩二区三区精品视频 | 亚洲丝袜第一页 | 国产国产成人精品久久 | 亚洲欧美日韩中文字幕在线一区 | 成人合集大片bd高清在线观看 | 性视频网 | 一级毛片在播放免费 | 国产成人精品久久亚洲高清不卡 | 国产不卡在线蜜 | 在线日韩欧美 | 日韩一中文字幕 | 黄色免费大片 | 精品日韩一区二区三区 | 特黄一级黄色片 | 一本久道久久综合 | 在线亚洲日产一区二区 | 日本一道本高清免费 | 特级做a爰片毛片免费看一区 | 天天操天天透 | 日韩成人毛片高清视频免费看 | 91精品国产一区二区三区左线 | 成年人福利 | 欧美videosde极品另类 | 一级毛片毛片毛片毛毛片 | 欧美精品在欧美一区二区 | 日产国产精品亚洲系列 | 狠狠色成人综合 | 国产精品亚洲一区二区三区正片 | 亚洲另类第一页 | 亚洲一区二区三区在线观看蜜桃 | 日韩小视频在线播放 |