本文源自:金融界
金融界2024年10月29日消息，国家知识产权局信息显示，西安中科立德红外科技有限公司申请一项名为“一种基于Transformer的多光谱图像融合方法”的专利，公开号CN 118823537 A，申请日期为2024年7月。
专利摘要显示，本申请属于多光谱图像检测技术领域，具体涉及一种基于Transformer的多光谱图像融合方法，包含：步骤1、输入经过配准的多光谱图像和RGB图像；步骤2、通过三层卷积对图像进行初步处理；步骤3、利用联合自注意力模块提取光谱相关性特征和空间相似性特征；步骤4、通过深层跨模态融合模块进一步提取和融合特征；所述深层跨模态融合模块利用Transformer网络进行特征提取和融合；步骤5、重复融合和提取步骤三次；步骤6、通过拼接与卷积层将融合特征映射为高质量融合特征图。本申请通过引入Transformer网络和多头注意力机制，实现了多光谱图像和RGB图像的融合，保留了更多的细节信息，从而提高了多光谱物体检测的准确性和鲁棒性。
