国产精品久久久aaaa,日日干夜夜操天天插,亚洲乱熟女香蕉一区二区三区少妇,99精品国产高清一区二区三区,国产成人精品一区二区色戒,久久久国产精品成人免费,亚洲精品毛片久久久久,99久久婷婷国产综合精品电影,国产一区二区三区任你鲁

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

神經元的深度學習 神經科學與人工智能結合有望

DPVg_AI_era ? 2017-12-07 17:10 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

多倫多大學和DeepMind研究人員合作,通過實驗表明某些哺乳動物的神經元也能進行深度學習。如果神經元與深度學習之間的關聯得以確認,我們就能開發更好的腦機接口,從疾病治療到增強智能,隨之而來的應用也將開啟各種可能。

神經網絡受生物神經網絡啟發而來,但大腦里的學習過程真如深度學習那樣嗎?這個問題的答案有望實現更強大的深度學習模型,也有助于進一步了解人類的智能。

12月5日,CIFAR研究員、多倫多大學的Blake A. Richards和同事在期刊eLife發表了論文《嘗試用分離的樹突進行深度學習》(Towards deep learning with segregated dendrites)。他們在論文中提出了一種算法,對大腦中可以如何進行深度學習進行了模擬。他們構建的網絡表明,某些哺乳動物神經元具有適合進行深度學習的形狀和電學特性。不僅如此,他們的實驗也用一種更接近生物學的方法,展示了真實的大腦如何進行深度學習,甚至有望幫助解釋大腦如何演化出了“學習”的能力。

如果神經元與深度學習之間的關聯得以確認,我們就能開發更好的腦機接口,從疾病治療到增強智能,隨之而來的應用也將開啟各種可能。

哺乳動物大腦的神經元也能做深度學習

這項研究由Richards和他在多倫多大學的研究生Jordan Guerguiev一起,與DeepMind的Timothy Lillicrap合作完成。

實驗中使用的神經元是小鼠大腦新皮質的樹突細胞。新皮質腦區負責一些高等功能,比如知覺、運動指令的產生,與空間推理、意識及人類語言也有關系。而樹突則是從神經元細胞本體發出的多分支突起,形狀類似樹木。樹突是神經元的輸入通道,將從其他神經元接收到的動作電位(電信號)傳送至細胞本體。

研究構建的“多房室神經網絡”模型示意:左邊是小鼠初級視覺皮層錐體神經元;右邊是簡化的神經元模型。

利用這種神經元結構的知識,Richards和Guerguiev建立了一個模型,叫做“多房室神經網絡”(multi-compartment neural network model)。在這個網絡中,神經元都在隔開的“隔間”中接收信號。由于一段一段隔開,不同層的模擬神經元能夠協作,實現深度學習。

結果發現,在識別手寫數字時,多層網絡的效果明顯好于單層的網絡。算法能夠利用多層網絡結構識別高階表示正是深度學習的核心標志。這表明小鼠大腦神經元跟人工神經元一樣都能進行深度學習。

“這只是一組模擬,所以不能準確反映大腦正在做什么。但是,如果大腦可以使用AI使用的算法,這已經足以證明我們可以開展更進一步的實驗調查了?!盧ichards說。

用更好的訓練方法,證明深度學習體現人類大腦工作機制

在21世紀初,Richards和Lillicrap在多倫多大學上了Hinton的課,深信深度學習模型在一定程度上準確反映了人類大腦工作的機制。但是,在當時要驗證這個想法還有幾個挑戰。首先,人們還不確定深度學習是否能達到人類水平。其次,深度學習算法違反了神經科學家已經證明的生物學事實。

計算機網絡在深度學習中發生的活動模式也類似于人類大腦中所見的模式。但是,深度學習的一些特征似乎與大腦的工作方式不相容。而且,人工網絡中的神經元比生物神經元簡單得多。

現在,Richards和一些研究人員正在積極尋求彌合神經科學和人工智能之間差距的方法。本文以Yoshua Bengio團隊的研究為基礎,以生物學上更加可行的方式訓練神經網絡。

均衡傳播示意圖:使用均衡傳播訓練神經網絡時信息的傳遞過程。右邊的簡單網絡,一層一層傳遞,BP適用,當然均衡傳播也適用;而左邊的復雜網絡,更加類似生物神經網絡結構,BP在這里就不適用了,這也是通常認為深度學習不能體現人腦機制的原因之一,但是,均衡傳播能夠適用于多連接的這種情況。

Bengio和他的研究生Benjamin Scellier發明了一種新的神經網絡訓練方法,叫做“均衡傳播”(equilibrium propagation),是常用的反向傳播(BP)的一種替代方法。均衡傳播可以使用單一的回路和單一類型的計算來進行誤差的推理和反向傳播。因此,均衡傳播過程可能更加類似大腦生物神經回路中的學習過程。

這項研究還使用了DeepMind的TimothyLillicrap開發的算法,進一步放寬了神經網絡的一些訓練規則。(順便一說,TimothyLillicrap也是DeepMind最強通用棋類AI AlphaZero論文的作者之一。)

這篇論文還吸收了Matthew Larkam對新皮質神經元結構的研究。通過將神經科學的發現與現有的算法相結合,Richards的團隊創建了一個更好的、更真實的算法來模擬大腦中的學習過程。

未來10年真正打通神經科學與人工智能

樹狀新皮質神經元只是大腦中許多細胞類型之一。Richards說,未來的研究應該模擬不同類型的大腦細胞,并研究它們如何相互作用來實現深度學習。從長遠看,他希望研究人員能夠克服重大挑戰,比如在不接收反饋的情況下如何通過經驗進行學習。

Richards說:“我們在接下來的十年左右可能會看到神經科學與人工智能之間真正的研究良性循環,神經科學的發現幫助我們開發新的人工智能,而人工智能幫助我們解釋和理解神經科學方面的實驗數據。”

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 神經網絡
    +關注

    關注

    42

    文章

    4838

    瀏覽量

    107753
  • 深度學習
    +關注

    關注

    73

    文章

    5598

    瀏覽量

    124396

原文標題:哺乳動物大腦神經元也能做深度學習,未來10年神經科學與人工智能將迎突破

文章出處:【微信號:AI_era,微信公眾號:新智元】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    應用案例 | 40倍鏡下解析小鼠腦部神經元:深視智能sCMOS相機賦能膜片鉗實驗高效開展

    01實驗背景小鼠腦部神經元膜片鉗實驗是神經科學領域的關鍵技術,廣泛應用于神經系統疾病機制研究、藥物篩選及神經環路解析等核心方向。該實驗的兩大核心難點:一是高倍放大場景下精準識別目標
    的頭像 發表于 02-02 08:17 ?274次閱讀
    應用案例 | 40倍鏡下解析小鼠腦部<b class='flag-5'>神經元</b>:深視<b class='flag-5'>智能</b>sCMOS相機賦能膜片鉗實驗高效開展

    神經網絡的初步認識

    日常生活中的智能應用都離不開深度學習,而深度學習則依賴于神經網絡的實現。什么是
    的頭像 發表于 12-17 15:05 ?323次閱讀
    <b class='flag-5'>神經</b>網絡的初步認識

    神經元設備和腦機接口有何淵源?

    電極。1970年代,膜片鉗技術的出現使細胞內記錄成為可能,成為研究離子通道的“金標準”。隨著人工智能的興起,尤其是1950年代圖靈測試的提出,計算機學習神經網絡
    的頭像 發表于 11-03 18:03 ?1446次閱讀
    <b class='flag-5'>神經元</b>設備和腦機接口有何淵源?

    激活函數ReLU的理解與總結

    《The Organization of Behavior》論文中描述了神經元學習法則。 人工神經網絡更進一步被美國神經學家Frank R
    發表于 10-31 06:16

    脈沖神經元模型的硬件實現

    如圖所示展示了LIF神經元的膜電勢Vmem隨時間戳timestamp動態變化的過程,當接收到輸入脈沖后,LIF神經元的膜電勢值Vmem便會升高,直至達到閾值電壓Vthersh,此時神經元產生輸出脈沖
    發表于 10-24 08:27

    SNN加速器內部神經元數據連接方式

    所謂地址事件表達(Address Event Representation,AER),是指通過地址的方式將事件進行表達,然后按時間順序復用到總線上。已知生物神經元產生脈沖的頻率比數字電路要低很多
    發表于 10-24 07:34

    【「AI芯片:科技探索與AGI愿景」閱讀體驗】+神經形態計算、類腦芯片

    AI芯片不僅包括深度學細AI加速器,還有另外一個主要列別:類腦芯片。類腦芯片是模擬人腦神經網絡架構的芯片。它結合微電子技術和新型神經形態器件,模仿人腦
    發表于 09-17 16:43

    如何在機器視覺中部署深度學習神經網絡

    圖 1:基于深度學習的目標檢測可定位已訓練的目標類別,并通過矩形框(邊界框)對其進行標識。 在討論人工智能(AI)或深度學習時,經常會出現“
    的頭像 發表于 09-10 17:38 ?900次閱讀
    如何在機器視覺中部署<b class='flag-5'>深度</b><b class='flag-5'>學習</b><b class='flag-5'>神經</b>網絡

    利用超微型 Neuton ML 模型解鎖 SoC 邊緣人工智能

    應用。 為什么選擇 Neuton 作為開發人員,在產品中使用邊緣人工智能的兩個最大障礙是: ML 模型對于您所選微控制器的內存來說太大。 創建自定義 ML 模型本質上是一個手動過程,需要高度的數據科學
    發表于 08-31 20:54

    挖到寶了!人工智能綜合實驗箱,高校新工科的寶藏神器

    和生態體系帶到使用者身邊 ,讓我們在技術學習和使用上不再受制于人。 三、多模態實驗,解鎖AI全流程 它嵌入了2D視覺、深度視覺、機械手臂、語音識別、嵌入式傳感器等多種類AI模塊,涵蓋人工智能領域主要
    發表于 08-07 14:30

    挖到寶了!比鄰星人工智能綜合實驗箱,高校新工科的寶藏神器!

    和生態體系帶到使用者身邊 ,讓我們在技術學習和使用上不再受制于人。 三、多模態實驗,解鎖AI全流程 它嵌入了2D視覺、深度視覺、機械手臂、語音識別、嵌入式傳感器等多種類AI模塊,涵蓋人工智能領域主要
    發表于 08-07 14:23

    新一代神經擬態類腦計算機“悟空”發布,神經元數量超20億

    電子發燒友網綜合報道 8月2日,浙江大學腦機智能全國重點實驗室發布新一代神經擬態類腦計算機——Darwin Monkey(中文名“悟空”)。 ? “悟空”堪稱國際首臺神經元規模超20億、基于專用
    的頭像 發表于 08-06 07:57 ?7608次閱讀
    新一代<b class='flag-5'>神經</b>擬態類腦計算機“悟空”發布,<b class='flag-5'>神經元</b>數量超20億

    無刷直流電機單神經元自適應智能控制系統

    摘要:針對無刷直流電機(BLDCM)設計了一種可在線學習的單神經元自適應比例-積分-微分(PID)智能控制器,通過有監督的 Hebb學習規則調整權值,每次采樣根據反饋誤差對
    發表于 06-26 13:36

    無刷直流電機單神經元PI控制器的設計

    摘要:研究了一種基于專家系統的單神經元PI控制器,并將其應用于無刷直流電機調速系統中??刂破鲗崿F了PI參數的在線調整,在具有PID控制器良好動態性能的同時,減少微分項對系統穩態運行時的影響,并較好
    發表于 06-26 13:34

    【「芯片通識課:一本書讀懂芯片技術」閱讀體驗】從deepseek看今天芯片發展

    的: 神經網絡處理器(NPU)是一種模仿人腦神經網絡的電路系統,是實現人工智能神經網絡計算的專用處理器,主要用于人工智能
    發表于 04-02 17:25