衡阳派盒市场营销有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

非易失電導態對神經網絡計算硬件系統的構建

ExMh_zhishexues ? 來源:知社學術圈 ? 作者:知社學術圈 ? 2022-03-14 17:28 ? 次閱讀

神經網絡為代表的類腦人工智能技術在計算機視覺、自然語言處理、自動駕駛等方面有重要應用。但目前運行神經網絡計算的硬件系統依然基于傳統硅基運算器與存儲器,由于馮·諾伊曼瓶頸的原理限制,其能效遠低于人腦。研發具有神經形態模擬功能的類腦器件,如神經網絡硬件系統的核心器件——具有存算一體功能的電子突觸,是進一步推進人工智能發展的重要途徑之一。為執行復雜的人工智能任務,電子突觸器件需要滿足諸多苛刻要求,如:連續可調的非易失電導態數目(用于模擬腦突觸的連續可調性)大于100,非線性度小于1(好的線性度有助于精準調控電導),開關比大于100,翻轉耐久大于109次,周期隨機性小于3%。然而,已報道的類腦突觸器件無法全面滿足上述指標要求。

研究人員提出了多種構建類腦突觸器件的原理方案。其中,基于鐵電非易失電極化和量子隧穿效應的鐵電隧道結,因為有潛力構建成為高性能類腦突觸器件而備受關注。鐵電隧道結的電導調控基于鐵電疇的連續翻轉所調控的隧穿勢壘,在原理上具有穩定性高、功耗低、速度快等諸多優勢。因此,基于鐵電隧道結,設計并構筑高性能類腦突觸原型器件,使其具有高精度、線性調節的非易失電導態,未來應用于神經網絡計算硬件系統的構建,有重要意義。

基于上述背景,中國科學技術大學李曉光教授團隊通過對鐵電疇形態和翻轉動力學的設計,在鐵電量子隧道結中實現了亞納秒電脈沖下電導態可非易失連續調控的類腦突觸器件,可用于構建人工神經網絡類腦計算系統,該成果以“High-precision and linear weight updates by subnanosecond pulses in ferroelectric tunnel junction for neuro-inspired computing”為題發表在Nature Communications上。

研究人員制備了高質量Ag/PbZr0.52Ti0.48O3(PZT~1.2 nm,(111)取向)/Nb:SrTiO3鐵電隧道結(如圖1a)。通過設計PZT的超薄厚度和(111)取向,在鐵電勢壘層中實現了更豐富的鐵電多疇亞穩態(如圖1b, c),在外加電場下,鐵電疇的翻轉動力學行為更加連續,因而器件的電導調節更加連續、平緩,更有利于多態的實現。該器件綜合性能優異,主要表現在:

1038a208-98f9-11ec-952b-dac502259ad0.png

圖1:鐵電隧道結類腦突觸器件及其鐵電多疇結構。a. 鐵電隧道結類腦突觸器件結構示意圖。b. 鐵電隧道結不同鐵電疇區的原子分辨像。c. 不同厚度PZT薄膜中多疇結構的面外、面內PFM相位。

1)亞納秒超快操作速度、飛焦級低能耗,媲美人腦突觸的能效表現。

通過能帶設計、降低鐵電層厚度、選擇處于準同型相界處具有較低矯頑場的PZT作為鐵電勢壘層,有效地降低了器件的操作電壓,僅需 《 5 V的電壓就能在630 ps的操作速度下實現可分辨的阻態翻轉(如圖2a)。而器件最快操作速度可至300 ps(可以匹配目前CPU的操作速度,如圖2b)。此外,器件具有良好的可分辨多態(4比特)保持特性(如圖2c)。通過對直徑為50 nm的鐵電隧道結的性能表征,發現其操作能耗低至5.3 fJ/bit。基于上述性能推算,該鐵電隧道結構建的神經網絡計算系統有可能實現媲美人腦的優秀能效(人腦單次突觸活動的能耗約為1 ~100 fJ),且響應速度比人腦突觸快6個量級(人腦突觸響應速度約為亞毫秒)。

2)高精度、線性的電導調控和高耐久性,滿足類腦突觸器件的核心性能指標要求。

在10 ns的脈寬下(與DRAM操作速度相當),實現了8比特(256個)連續可調的非易失電導狀態,且非線性度低(《1),開關比大(~100),周期隨機性?。▇2.06%)(如圖2d);甚至在亞納秒(630 ps)的操作速度下,器件仍然可以調節出150個連續的電導態(如圖2e)。此外,器件表現出》109次的翻轉耐受性(如圖2f)。器件具有優良的突觸塑性調節功能和良好的翻轉耐受性,滿足了類腦突觸器件的核心性能指標要求。

10734de0-98f9-11ec-952b-dac502259ad0.png

1087383c-98f9-11ec-952b-dac502259ad0.png

圖2:鐵電隧道結類腦突觸器件的性能表征。a. 630 ps脈寬的脈沖電壓下,類腦突觸器件的電阻在不同阻態之間的往復翻轉。b. 不同脈寬的電脈沖下類腦突觸器件電阻的連續調控。c. 類腦突觸器件的16個可分辨阻態的保持特性。d, e. 10 ns 和 630 ps 脈寬的電脈沖下隧道結類腦突觸器件的長時程增強和抑制模擬。f. 類腦突觸器件的翻轉耐受性。

3)基于器件電導調控性能,仿真構建的神經網絡具有高圖像識別率。

基于該鐵電隧道結的實驗性能,仿真構建的卷積神經網絡(如圖3a)類腦計算系統可在線學習并識別Fashion-MNIST數據庫的時尚產品圖片,準確率達~94.7%,非常接近于基于浮點的神經網絡軟件計算結果~95.6%(如圖3b);此外,仿真構建的人工神經網絡還體現出良好的抗噪聲能力,即使在識別圖片中引入椒鹽或高斯噪聲(噪聲水平達0.5),其識別時尚產品圖片的準確率仍然可達~85%(如圖3c, d, e)。

10995b8e-98f9-11ec-952b-dac502259ad0.png

10ef106a-98f9-11ec-952b-dac502259ad0.png

11037c94-98f9-11ec-952b-dac502259ad0.png

圖3:基于器件性能,仿真構建神經網絡。a. 仿真構建的ResNet-18卷積神經網絡結構示意圖。b. 識別Fashion-MNIST數據庫中時尚產品圖片的準確率隨訓練次數的變化。c, d. 識別加入不同水平的椒鹽噪聲和高斯噪聲的Fashion-MNIST時尚產品圖片的準確率隨訓練次數的變化。e. 識別Fashion-MNIST時尚產品圖片的準確率隨加入椒鹽噪聲和高斯噪聲的水平的變化。

上述基于鐵電隧道結設計的類腦突觸原型器件具有超快、低能耗、高耐久特性,特別是具有穩定、線性、準連續的電導態調控優勢,滿足了類腦突觸器件的高要求,展現了鐵電隧道結在構建未來高性能類腦人工智能計算硬件系統方面的重要潛力。中國科學技術大學物理系博士生羅振、王梓鑒、管澤雨為文章的共同第一作者,中國科學技術大學李曉光教授、殷月偉教授為文章的通訊作者。

該項研究得到了國家自然科學基金、科技部國家重點研發計劃、中國科學技術大學“雙一流”人才團隊平臺項目的資助。

原文標題:Nat. Commun.: 基于鐵電隧道結的高性能類腦突觸原型器件

文章出處:【微信公眾號:知社學術圈】歡迎添加關注!文章轉載請注明出處。

審核編輯:彭菁
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 神經網絡
    +關注

    關注

    42

    文章

    4779

    瀏覽量

    101166
  • 硬件系統
    +關注

    關注

    0

    文章

    48

    瀏覽量

    11423
  • 人工智能技術

    關注

    2

    文章

    216

    瀏覽量

    10590

原文標題:Nat. Commun.: 基于鐵電隧道結的高性能類腦突觸原型器件

文章出處:【微信號:zhishexueshuquan,微信公眾號:知社學術圈】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    神經網絡教程(李亞非)

      第1章 概述  1.1 人工神經網絡研究與發展  1.2 生物神經元  1.3 人工神經網絡的構成  第2章人工神經網絡基本模型  2.1 MP模型  2.2 感知器模型  2.3
    發表于 03-20 11:32

    神經網絡系統辨識程序

    神經網絡系統辨識程序
    發表于 01-04 13:29

    局部神經網絡,打造未來神經網絡基本組件

    `將局部計算作為獲取長時記憶的通用模塊,提高神經網絡性能在深度神經網絡中,獲取長時記憶(long-range dependency)至關重要。對于序列數據(例如語音、語言),遞歸運算
    發表于 11-12 14:52

    【PYNQ-Z2試用體驗】神經網絡基礎知識

    學習和認知科學領域,是一種模仿生物神經網絡(動物的中樞神經系統,特別是大腦)的結構和功能的數學模型或計算模型,用于對函數進行估計或近似。神經網絡由大量的人工
    發表于 03-03 22:10

    【案例分享】ART神經網絡與SOM神經網絡

    今天學習了兩個神經網絡,分別是自適應諧振(ART)神經網絡與自組織映射(SOM)神經網絡。整體感覺不是很難,只不過一些最基礎的概念容易理解不清。首先ART神經網絡是競爭學習的一個代表,
    發表于 07-21 04:30

    人工神經網絡實現方法有哪些?

    人工神經網絡(Artificial Neural Network,ANN)是一種類似生物神經網絡的信息處理結構,它的提出是為了解決一些非線性,平穩,復雜的實際問題。那有哪些辦法能實現人工神經
    發表于 08-01 08:06

    如何設計BP神經網絡圖像壓縮算法?

    神經網絡的并行特點,而且它還可以根據設計要求配置硬件結構,例如根據實際需要,可靈活設計數據的位寬等。隨著數字集成電路技術的飛速發展,FPGA芯片的處理能力得到了極大的提升,已經完全可以承擔神經網絡數據壓縮
    發表于 08-08 06:11

    如何移植一個CNN神經網絡到FPGA中?

    訓練一個神經網絡并移植到Lattice FPGA上,通常需要開發人員既要懂軟件又要懂數字電路設計,是個不容易的事。好在FPGA廠商為我們提供了許多工具和IP,我們可以在這些工具和IP的基礎上做
    發表于 11-26 07:46

    如何構建神經網絡?

    原文鏈接:http://tecdat.cn/?p=5725 神經網絡是一種基于現有數據創建預測的計算系統。如何構建神經網絡?
    發表于 07-12 08:02

    基于BP神經網絡的PID控制

    最近在學習電機的智能控制,上周學習了基于單神經元的PID控制,這周研究基于BP神經網絡的PID控制。神經網絡具有任意非線性表達能力,可以通過對系統性能的學習來實現具有最佳組合的PID控
    發表于 09-07 07:43

    神經網絡移植到STM32的方法

    神經網絡移植到STM32最近在做的一個項目需要用到網絡進行擬合,并且將擬合得到的結果用作控制,就在想能不能直接在單片機上做神經網絡計算,這樣就可以實時
    發表于 01-11 06:20

    如何構建神經網絡

    神經網絡是模擬人體生物神經元原理構建的,比較基礎的有M-P模型,它按照生物 神經元的結構和工作原理構造出來的一個抽象和簡化的模型。
    的頭像 發表于 02-24 16:06 ?1939次閱讀
    如何<b class='flag-5'>構建</b><b class='flag-5'>神經網絡</b>

    構建神經網絡模型的常用方法 神經網絡模型的常用算法介紹

    神經網絡模型是一種通過模擬生物神經元間相互作用的方式實現信息處理和學習的計算機模型。它能夠對輸入數據進行分類、回歸、預測和聚類等任務,已經廣泛應用于計算機視覺、自然語言處理、語音處理等
    發表于 08-28 18:25 ?1070次閱讀

    PyTorch神經網絡模型構建過程

    PyTorch,作為一個廣泛使用的開源深度學習庫,提供了豐富的工具和模塊,幫助開發者構建、訓練和部署神經網絡模型。在神經網絡模型中,輸出層是尤為關鍵的部分,它負責將模型的預測結果以合適的形式輸出。以下將詳細解析PyTorch中
    的頭像 發表于 07-10 14:57 ?563次閱讀

    如何構建多層神經網絡

    構建多層神經網絡(MLP, Multi-Layer Perceptron)模型是一個在機器學習和深度學習領域廣泛使用的技術,尤其在處理分類和回歸問題時。在本文中,我們將深入探討如何從頭開始構建一個多層
    的頭像 發表于 07-19 17:19 ?1006次閱讀
    百家乐官网赌博玩法技巧| 百家乐官网赌博凯时娱乐| 云顶国际网站| 万博国际| 乐透乐博彩网| 左权县| 娱乐城代理| 利来国际网上娱乐| 射洪县| 皇朝娱乐城| 百家乐官网最长的闲| 关于百家乐官网概率的书| 百家乐官网真人百家乐官网皇冠开户| 百家乐官网赌场破解| 长江百家乐官网的玩法技巧和规则 | 脉动棋牌下载| 合胜娱乐城| 百家乐官网庄闲最佳打法| 百家乐官网八卦九| 百家乐澳门百家乐| 马牌百家乐的玩法技巧和规则| 大发888官方游戏平台| 韦德娱乐| 至尊百家乐官网qvod| 百家乐官网怎么玩| 百家乐输一押二| 大发888song58| 化州市| 百家乐官网博彩平| 澳门百家乐破解方法| 大发888游戏 下载| 祁东县| 百家乐暗红色桌布| 百家乐官网真钱棋牌| 澳门百家乐走势图| 阳春市| 百家乐最佳注码法| 百家乐官网投注网中国| 百家乐赌博彩| 百家乐官网号论坛博彩正网| 红树林百家乐的玩法技巧和规则|