可怕!科幻終究成爲現實,英特爾宣布全球最大的神經擬態系統,算力是人腦的200倍

2024-04-20 18:10:42    編輯: robot
導讀   之前科幻片中出現的機器人讓很多影迷驚嘆,紛紛討論這種機器人什么時候能夠走進我們的生活。現在這種幻想有肯能成爲現實。   北京時間4月18日凌晨,美國芯片巨頭英特爾(Intel)宣布,其打造出全球...

  之前科幻片中出現的機器人讓很多影迷驚嘆,紛紛討論這種機器人什么時候能夠走進我們的生活。現在這種幻想有肯能成爲現實。

  北京時間4月18日凌晨,美國芯片巨頭英特爾(Intel)宣布,其打造出全球最大的神經擬態系統——Hala Point,旨在支持未來類腦 AI 研究,以及解決 AI 目前在效率和可持續性等方面的挑战。

  Hala Point內置1152個、基於Intel 4(7nm)制程的英特爾Loihi 2處理器,支持多達11.5億個神經元和1280億個突觸,每秒可處理超過380萬億個8位突觸和超過 240 萬億個神經元操作,相關系統最初部署在美國桑迪亞國家實驗室。應用於仿生尖峰神經網絡模型時,在運行神經元數量較低的情況下,Hala Point速度可比人腦快200倍(20000%)。

  英特爾研究院神經擬態計算實驗室總監Mike Davies表示:“目前,AI模型的算力成本正在以不可持續的速度上升。行業需要能夠規模化的全新計算方法。爲此,英特爾开發了Hala Point,將高效率的深度學習和新穎的類腦持續學習、優化能力結合起來。我們希望使用Hala Point的研究能夠在大規模AI技術的效率和適應性上取得突破。”

  早在2018年,英特爾就推出了首款神經擬態芯片Loihi,這款芯片的計算任務由許多小單元進行,這些單元通過類似生物神經的尖峰信號相互通信,並通過尖峰調整其行爲。

  到了2021年,英特爾對Loihi系列進行了全面升級,發布了第二代神經擬態芯片Loihi 2。這款芯片採用了英特爾首個EUV工藝節點Intel 4,等效於4nm,實際爲7nm工藝。Loihi 2共有128個神經擬態核心,每個內核都有192KB的靈活內存,每個神經元可以根據模型分配多達4096個狀態,這是之前限制的24倍。

  與普通的CPU和GPU不同,神經擬態沒有外部內存。每個神經元都有一小部分內存供其專用。主要作用是分配給不同神經元輸入的權重、最近活動的緩存以及峰值發送到的所有其他神經元的列表。Loihi 2可以根據用途選擇各種不同連接選項,這一點上有些類似於FPGA。

  英特爾強調,在執行AI推理負載和處理優化問題時,Loihi 2神經擬態芯片系統的速度比常規CPU和GPU架構快50倍,同時能耗降低100倍。此外,英特爾還發布了用於Loihi芯片的軟件——一個名爲Lava的新开發框架。該框架及相關庫都用Python編寫,並在GitHub上开源,使得开發人員無需訪問硬件即可爲Loihi开發程序。

  如今,Loihi 2芯片已經被應用於機械臂、神經擬態皮膚、機器嗅覺等場景。英特爾表示,Loihi 2應用了衆多類腦計算原理,如異步(asynchronous)、基於事件的脈衝神經網絡(SNNs)、存算一體,以及不斷變化的稀疏連接,以實現能效比和性能的數量級提升。

  而在新一輪AI技術引領下,4月17日,英特爾將這個神經擬態芯片進行“暴力組裝”,構建了全球最大的神經擬態系統Hala Point。該系統由封裝在一個六機架的數據中心機箱中的1152個Loihi 2處理器組成,大小相當於一個微波爐。該系統支持分布在140544個神經形態處理內核上的多達11.5億個神經元和1280億個突觸,最大功耗僅爲2600瓦。

  Hala Point將處理、內存和通信通道集成在大規模並行結構中,提供總共16 PB/s的內存帶寬、3.5 PB/s的內核間通信帶寬和5 TB/s的帶寬(TB/s)的芯片間通信帶寬。該系統每秒可以處理超過380萬億個8位突觸和超過240萬億個神經元操作。

  早期研究結果表明,通過利用稀疏性高達10比1的稀疏連接(sparse connectivity)和事件驅動的活動,Hala Point運行深度神經網絡的能效比高達15 TOPS/W,同時無需對輸入數據進行批處理。盡管仍處於研究階段,但未來的神經擬態大語言模型將不再需要定期在不斷增長的數據集上再訓練,從而節約數千兆瓦時的能源。

  目前,Hala Point是一個旨在改進未來商用系統的研究原型。英特爾預計其研究將帶來實際技術突破,如讓大語言模型擁有從新數據中持續學習的能力,從而有望在AI廣泛部署的過程中,大幅降低訓練能耗,提高可持續性。

  接下來,Hala Point系統將向桑迪亞國家實驗室交付,這標志着英特爾共享的大型神經擬態研究系統的首次部署,進一步推動神經擬態計算應用和類腦AI研究等。如今,英特爾神經擬態研究社區(INRC)成員總數已超過200個。

特別聲明:以上文章內容僅代表作者本人觀點,不代表新浪網觀點或立場。如有關於作品內容、版權或其它問題請於作品發表後的30日內與新浪網聯系。

標題:可怕!科幻終究成爲現實,英特爾宣布全球最大的神經擬態系統,算力是人腦的200倍

地址:https://www.utechfun.com/post/360302.html

鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播信息之目的,不構成任何投資建議,如有侵權行為,請第一時間聯絡我們修改或刪除,多謝。

猜你喜歡