中国科学家研究提出新型类脑学习方法 可助力新型类脑芯片设计
中新网北京8月29日电 (记者 孙自法)记者29日从中国科学院自动化研究所获悉,该所徐波研究员团队联合科研同行最新研究提出一种基于神经调制依赖可塑性的新型类脑学习方法(NACA),实现更高分类精度和更低学习能耗,可极大缓解灾难性遗忘问题,有望进一步引导新型类脑芯片的设计。
这项人工智能(AI)领域类脑研究重要进展成果论文,由徐波研究员团队与中国科学院脑科学与智能技术卓越创新中心蒲慕明院士、临港实验室李澄宇研究员等共同完成,近日在国际著名学术期刊《科学》旗下《科学进展》在线发表。
论文第一作者、中国科学院自动化研究所张铁林副研究员介绍说,人工智能迫切需要借鉴生物系统中的微观、介观、宏观等多尺度神经可塑性融合计算机制,以便启发实现更加高效的类脑连续学习算法,消除人工神经网络由于采用反向传播等人工学习方法而导致的广泛灾难性遗忘现象。
而生物系统中常见的多巴胺、5-羟色胺、血清素、去甲肾上腺素等神经调质物,往往经由特定的腺体释放,并远程弥散、投射到一定范围内的目标神经元群体,且根据调质浓度水平的不同,对局部的神经元、突触等多种微观可塑性产生复杂的调制影响。受生物神经调制机制的启发,研究团队通过建模多巴胺、乙酰胆碱等“全局神经调制可塑性”“局部时序依赖可塑性”等多尺度神经可塑性机制,整合得到这种基于神经调制依赖可塑性的新型类脑学习方法。
张铁林指出,这一新型类脑学习方法参考大脑中复杂的神经调制通路结构,并以期望矩阵编码的形式对神经调制通路构建数学模型,在接受刺激信号后产生不同浓度的多巴胺监督信号并进一步影响局部突触和神经元可塑性类型。该方法支持采用纯前馈的流式学习方法训练脉冲和人工神经网络,通过全局多巴胺的弥散支持与输入信号同步,甚至先于输入信号的正向信息传播,再加上选择性对“局部时序依赖可塑性”的调整,使其表现出明显的快速收敛和缓解灾难性遗忘优势。
论文通讯作者徐波研究员表示,在两类典型的图片和语音模式识别任务中,研究团队从准确率和计算成本两方面对新型类脑学习方法的算法进行评估,并选取两种全局学习算法作为对比,在人工神经网络中则以目标传播和反向传播算法作为对比对象。结果显示,在图片分类和语音识别标准数据集上,新型类脑学习方法都实现更高的分类精度和更低学习能耗。
同时,在验证静态分类任务的拟合能力后,研究团队重点测试新型类脑学习方法的连续学习能力,并将神经调制扩充到神经元可塑性范围。在连续手写数字、连续手写字母、连续手写数学符号、连续自然图片、连续动态手势等五大类连续学习任务中,新型类脑学习方法具有更低的能耗且发现可以极大地缓解灾难性遗忘问题。
研究团队认为,这次研究提出的新型类脑学习方法,是一类生物合理的全局优化算法,其采用宏观可塑性来进一步“调制”局部可塑性,可视为一种“可塑性的可塑性”方法,与“学会学习”“元学习”等有直观上的功能一致性。
新型类脑学习方法同时在两种优化问题中获得性能和计算成本上的优势,更在连续学习这一更贴合生物生存环境和实际应用场景的动态任务范式下发挥出重要作用。“这些纯前馈学习、低训练能耗、支持动态连续学习等综合特征,也将有望进一步引导新型类脑芯片的设计。”徐波说。(完)
-
上一篇
-
下一篇
相关推荐
黑龙江饶河再现野生东北虎足迹
四川内江市市中区发生3.2级地震 震源深度10千米
海南将迎来春节前出岛车客高峰 各港口出岛秩序总体平稳
(新春走基层)“喜迎全运会 瑞蛇贺新春”新春庙会在广州举行
羊角把、牛角、十字扣,春运涨知识→小设计大用途
岁暮冰嬉 寒尽春生 这些“速度与激情”谁看了不想玩一把?
“家门口能挣钱,好日子有盼头”(新春走基层)
国家中医药局:九成以上三级妇幼保健院设置中医类临床科室
湖南零陵腊肉飘香年味浓 供销两旺助增收
春节临近 你的家乡举办哪些活动?一起来寻找年味儿→
新春走基层丨让每一盏车灯都安然明亮 他们是“魔鬼风口”的风雪护路人
中国将386.7万家固定污染源纳入排污许可管理
- 最近发表
-
- 随机阅读
-
- “AI厨师”开始掌勺,能否缓解餐饮业用工短缺?
- 【天山脚下的“新”年味】社火闹元宵 天山南北贺新春
- “海伦妮”致美国162人死亡 拜登批准佐治亚州重大灾难声明
- “贝碧嘉”影响渐弱 浙江北部城市交通陆续恢复
- 海南省气象台发布台风蓝色预警
- 戴德梁行:中国已有29支基础设施 REITs产品正式发售 发行规模达1000亿元
- 加拿大外长证实41名加方外交人员撤离印度
- 泰国妹中国创业 开泰式餐馆火爆南宁
- 那个跳霹雳舞的穷小子带来了美梦
- 报告:金砖国家女性董事比例有所提升
- 2023年度“中国网络文学影响力榜”发布
- 谁来回收动力电池?
- 引导优质医疗资源下沉基层——国家卫健委介绍2024年卫生健康工作重点
- 武汉:儿童免票线调至1.3米 乘公交不限人数,需成人陪同
- 云南等地有较强降水 新疆有雨雪天气
- 业界专家称要有序扩大碳交易行业覆盖范围 推动碳资产投融资管理
- 江南等地仍有较强降水和强对流 中东部将有明显降水过程
- 诺曼底登陆地访问记:探寻80年后的二战记忆
- “碳”路先行|政企研代表聚首山西共议煤炭绿色低碳发展良策
- 一个青年画家与一座抗战纪念馆
- 热门推荐
-
- 更多种类农机纳入报废更新补贴范围
- 百幅名家版画代表作展出
- 中国铁路中秋小长假预计发送旅客7400万人次
- (乡村行·看振兴)江西吉水乡贤返乡创业 养好致富鸽走上致富路
- “古都、红色、京味、创新” 北京全国文化中心底色亮成色足
- 山东开展地方立法制定专门规章 破解小清河交通管理难题
- 创新产品提升便民服务水平
- 相声汉服增妙趣 少年讲解员渐成文博“潮力量”
- 大运河杭钢公园公共空间建成试运营 首场万人音乐节将亮相
- 杭州街头“小铜人”成网红打卡地 背后蕴含温暖善举
- 湖南首部“多规合一”的省级国土空间规划获批
- 曼谷唐人街发生火灾 泰国总理下令救援
- 探访新疆罗布人村寨:塔里木河畔好时光
- 理发师晓华走红背后,是一场从“头”开始的文旅热
- 春意浓 暖意融!中央广播电视总台《2024年春节联欢晚会》完成第四次彩排
- 文旅康养融合发展 山西晋城如何成为“样板城市”?
- 推动经济持续回升向好!当前中国经济热点问答
- 首届全球客家文化使者总决赛上演客家文化盛宴
- 【世界说】美国枪击案频发再现“血腥周末”,目击者描述“到处都是枪声”
- 桥梁坍塌事故发生后,美国马里兰州州长宣布进入“紧急状态”