江南大学吴小俊团队在深度学习及多模态视觉信息融合研究中取得重要进展

扬子晚报网4月23日讯（记者 张建波）近日，江南大学人工智能与计算机学院吴小俊教授团队的李辉博士等在深度学习及多模态视觉信息融合研究中取得重要进展，研究成果以“LRRNet: A Novel Representation Learning Guided Fusion Framework for Infrared and Visible Images”为题，发表在人工智能领域顶级学术期刊《IEEE Transactions on Pattern Analysis and Machine Intelligence》（IEEE TPAMI）上（IF：24.314），实现了江南大学在该刊的首次突破，标志着该校的人工智能研究上了新台阶。

IEEE TPAMI是人工智能、模式识别、计算机视觉及机器学习领域最重要的学术期刊之一，也是目前信息领域中影响最大、水平最高的期刊。团队相关人士称，深度神经网络在视觉信息融合任务中已经取得了优异的性能，网络结构在融合过程中扮演着非常重要的角色。然而在人工智能领域，神经网络结构的设计仍然是一个黑盒问题。为了探索这一问题，该论文提出了一种视觉信息融合的数学优化模型，并揭示了模型最优解与融合网络结构之间的联系。

基于表示模型网络构建方法与一般网络构建方法的区别

基于上述思想，论文提出了一种新颖的构建轻量级深度学习方法，使用优化模型指导网络结构设计，避免了使用试错策略来设计深度网络结构，为促进人工智能领域的发展，论文的算法代码和数据均已开源：https://github.com/hli1221/imagefusion-LRRNet。

据了解，上述研究工作得到了国家自然科学基金国际合作重点项目(62020106012)、国家自然科学基金联合基金重点项目(U1836218)、英国EPSRC项目(EP/N007743/1, MURI/EPSRC/DSTL, EP/R018456/1)等基金资助。

记者获悉，以吴小俊教授团队为主的科研人员承担了江苏省人工智能国际合作联合实验室、江苏省模式识别与计算智能工程实验室和中国轻工联合会智能信息处理重点实验室的建设任务。该团队同时是江苏省高校科技创新团队、江苏高校“青蓝工程”优秀教学团队，承担国家和省部级以及国际合作项目五十余项。团队在人工智能领域为国内外提供了广泛的学术服务，连续14年承担了中国大学生服务外包创新创业大赛（A类竞赛）的组织工作，为全球大学生搭建了施展才华的舞台。团队培养了一大批优秀的人工智能人才，曾多次获得全国和省优秀博士、硕士论文奖。

校对 李海慧