心理与认知科学学院毕彦超课题组合作提出新型神经网络框架CATS Net,实现类人概念形成、理解与交流

北京大学
发布时间: 42次浏览

人类智能的一个独特能力,是能够从感官体验中抽象出概念,从而脱离直接的感官输入,在概念空间中思考与交流。一般认为,将高维感知“压缩”为低维概念、再由概念“重构”感知的双向过程,构成了人类符号化思维的基础,并进一步支持了语言的产生。然而,当前的人工智能(AI)系统却难以实现这一过程:传统深度网络往往将知识纠缠在海量参数之中,难以提取出独立的概念;而近年来备受关注的大语言模型则高度依赖人类既有的语言符号进行训练,无法真正“从无到有”地从感知经验中自发形成概念。如何在计算系统中实现类人的概念形成,是认知科学和人工智能领域中的核心问题。o0Y知多少教育网-记录每日最新科研教育资讯

近日,北京大学心理与认知科学学院毕彦超课题组与中国科学院自动化研究所余山课题组合作,在《自然·计算科学》(Nature Computational Science)在线发表题为“A neural network for modeling human concept formation, understanding and communication”的研究论文。该研究提出一种新型神经网络框架CATS Net,系统模拟了概念形成、概念理解和概念交流三个核心过程。研究发现,神经网络可以从感知经验中自发形成结构化的概念空间,且这一概念空间与人类语义空间和人脑神经表征具有显著对应关系,为理解人类概念认知提供了新的计算模型,也为构建具备类人概念智能的人工智能系统提供了重要基础。o0Y知多少教育网-记录每日最新科研教育资讯

o0Y知多少教育网-记录每日最新科研教育资讯

图1 CATS Net模型框架示意o0Y知多少教育网-记录每日最新科研教育资讯

为解决这一问题,研究团队提出了CATS Net,即概念抽象与任务求解双模块神经网络。该模型包含两个核心组成部分:概念抽象模块(Concept Abstraction,CA)和任务求解模块(Task Solving,TS)。在视觉任务中,CA模块能够将高维视觉输入压缩为紧凑的低维概念向量;这些概念向量随后通过分层门控机制调节TS模块的神经网络活动,使模型能够根据当前概念灵活完成相应的视觉判断任务。o0Y知多少教育网-记录每日最新科研教育资讯

这一过程模拟了人类概念认知中的两个关键环节:一方面,个体可以从感知经验中抽象出概念;另一方面,概念又可以反过来调节感知和行为,使系统能够根据“正在使用的概念”选择性地处理相关信息。o0Y知多少教育网-记录每日最新科研教育资讯

o0Y知多少教育网-记录每日最新科研教育资讯

图2 CATS Net自发形成的概念空间与人类语义模型的对齐o0Y知多少教育网-记录每日最新科研教育资讯

研究发现,CATS Net可以在与环境交互的过程中自主形成大量新概念,并组织出结构化的概念空间。进一步地,当不同神经网络形成的概念空间被对齐后,模型之间可以不再依赖外部环境重新学习,而是直接通过概念向量传递知识。这一过程模拟了人类通过语言等符号系统进行概念交流的核心机制。o0Y知多少教育网-记录每日最新科研教育资讯

o0Y知多少教育网-记录每日最新科研教育资讯

图3 独立训练的CATS Net之间的概念交流o0Y知多少教育网-记录每日最新科研教育资讯

研究团队进一步将CATS Net形成的概念表征与人类认知语义模型及脑成像数据进行比较。基于功能磁共振成像(fMRI)的表征相似性分析显示,CATS Net自发形成的概念空间与人类语义空间具有显著相似性,并与人脑腹侧枕颞皮层中视觉语义表征的活动模式显著相关。同时,模型中CA模块的动态门控机制与人脑语义控制网络的活动模式相吻合,提示该模型不仅在功能层面模拟了人类的概念形成和理解,也在机制层面为人脑概念认知提供了可能的计算解释:概念并不是静态储存在系统中的标签,而是可以通过动态门控机制调节神经网络的信息处理过程。o0Y知多少教育网-记录每日最新科研教育资讯

4.pngo0Y知多少教育网-记录每日最新科研教育资讯

图4 CATS Net概念表征与人脑语义表征、语义控制网络的对应关系o0Y知多少教育网-记录每日最新科研教育资讯

该研究为理解人类如何从感知经验中形成概念、如何利用概念指导认知行为以及如何通过符号进行概念交流提供了统一的计算框架。与此同时,该工作也为发展具备自主概念形成能力的新一代人工智能系统奠定了基础。未来,如果人工智能系统能够超越人类已有语言范畴,自主形成新的概念结构,将有望在科学发现、复杂环境适应和开放式知识学习等领域发挥重要作用。o0Y知多少教育网-记录每日最新科研教育资讯

本研究的共同第一作者为中国科学院自动化研究所博士研究生郭良轩、北京大学博士研究生陈昊扬及中国科学院自动化研究所陈阳副研究员;余山、毕彦超与陈阳为共同通讯作者。研究得到中国科学院、国家自然科学基金委及科技部等的支持。o0Y知多少教育网-记录每日最新科研教育资讯

本文链接:http://knowith.com/news-3-5920.html心理与认知科学学院毕彦超课题组合作提出新型神经网络框架CATS Net,实现类人概念形成、理解与交流

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

热门文章

延伸阅读

相关阅读

胶州市卫校了3+2录取分数线 胶州市第二卫校录取分数线
胶州市卫校没有3+2的录取制度。 胶州市卫校录取条件:1、初中应届毕业生:3+3(大专)3+4(本科),要求中考成绩300分以上,同时参加学校组织的招生面试。2、初中往届毕业生:3+3(大专)3+4(本科)要求具有初中毕业证同时参加学校组织的
2023年辽宁高考状元是谁 2023年辽宁高考状元榜是由谁获得的?
2023年辽宁高考状元是谁 2023年辽宁高考状元榜是由谁获得的?很多朋友对这方面很关心,整理了相关文章,供大家参考,一起来看一下吧! 辽宁理科状元是刘浩宇,出自朝阳第一高中,总分为722分,文科状元是高溪屿
罗山高考成绩喜报2024 宁夏六盘山高级中学高考成绩
今天小编整理了罗山高考成绩喜报2024 宁夏六盘山高级中学高考成绩相关信息,希望在这方面能够更好的大家。 宁夏六盘山高级中学2022年高考成绩:宁夏六盘山高中有1925名学生参加高考,本科上线1845人,上
江苏合格考2024年考试是什么时候?
江苏合格考2024年考试是什么时候?相关内容,小编在这里做了整理,希望能对大家有所帮助,关于江苏合格考2024年考试是什么时候?信息,一起来了解一下吧! 高考艺考时间介绍如下: 2024艺考时间: 1
辽宁理工学院地址在哪里,哪个城市哪个区
小编今天整理了一些辽宁理工学院地址在哪里,哪个城市哪个区相关内容,希望能够帮到大家。 锦州所有大学名单有:锦州有辽宁工业大学、锦州医科大学、渤海大学、辽宁理工职业大学、锦州医科大学医疗
艺考播音主持怎么考
今天小编整理了艺考播音主持怎么考相关信息,希望在这方面能够更好的大家。 播音主持艺考需要的条件如下: 1. 五官端正,落落大方,身高合规。 播音主持艺考对于外形的要求是需要考生仪态

热点精选

最新推荐

您可能感兴趣