近日,安徽大学计算机科学与技术学院江波教授团队在结构模式识别与多模态信息处理研究方面取得新进展。相关成果分别发表在人工智能顶级期刊IEEE Transactions on Pattern Analysis and Machine Intelligence (影响因子:23.6)和International Journal of Computer Vision (影响因子:19.5),安徽大学均为唯一单位。
图1 基于图注意力扩散模型的神经网络框架
在图表示学习方面,针对现有的图注意力网络难以对图结构关系信息进行充分利用等挑战问题,江波教授团队提出了一种新的图注意力扩散模型(GRA)。GRA能够在注意力扩散的过程中保持图的结构化稀疏特性,并进一步通过能量最小化框架实现了对GRA的机理进行理论分析。相关成果在线发表于人工智能领域顶级期刊《IEEE Transactions on Pattern Analysis and Machine Intelligence》。江波教授为论文的第一作者,汤进教授为论文的通讯作者。
图2 交叉扩散注意力模块的架构图
在多模态信息融合方面,该团队利用异质图扩散模型设计了一种新的交叉扩散注意力(CDA)机制,并基于此实现了一种新的多模态融合模型MutualFormer。相比于传统的交叉注意力,该团队提出的CDA模型能够较好地缓解不同模态域差异给多模态信息融合带来的不利影响。相关成果在线发表于人工智能领域顶级期刊《International Journal of Computer Vision》,博士研究生汪茜茜为论文的第一作者,江波教授为论文的通讯作者。
新闻链接:http://www.ahu.edu.cn/2024/0508/c15059a339391/page.htm
网站内容来源于互联网,由网络编辑负责审查,目的在于传递信息,提供专业服务,不代表本网站平台赞同其观点和对其真实性负责。如因内容、版权问题存在异议的,请与我们取得联系,我们将协调给予处理(按照法规支付稿费或删除),联系方式:ahos@vplshi.com 。网站平台将加强监控与审核,一旦发现违反规定的内容,按国家法规处理,处理时间不超过24小时。