人民網北京9月9日電 (記者趙竹青)記者從中國科學院自動化研究所獲悉,近日,該所李國齊、徐波團隊合作,成功研發(fā)出類腦脈沖大模型“瞬悉1.0”(SpikingBrain-1.0)。該模型的發(fā)布,為新一代人工智能發(fā)展提供了非Transformer架構的新技術路線,并將啟迪更低功耗的下一代神經形態(tài)計算理論和芯片設計。
據介紹,該模型僅需約主流模型2%的數據量,就能在多項語言理解和推理任務中達到媲美眾多主流模型的性能。其超長序列處理能力在法律/醫(yī)學文檔分析、復雜多智能體模擬、高能粒子物理實驗、DNA序列分析、分子動力學軌跡等超長序列任務建模場景中具有顯著的潛在效率優(yōu)勢。
與前主流大模型架構(Transformer架構)不同,“瞬悉1.0”借鑒大腦神經元內部工作機制,基于“內生復雜性”理論構建,展示了一條不斷提升模型復雜度和性能的新型可行路徑,并在國產GPU平臺上完成了全流程訓練與推理。