一种基于多模态融合的多时相遥感影像超分辨率重建方法
申请号:CN202410722960
申请日期:2024-06-05
公开号:CN118735778A
公开日期:2024-10-01
类型:发明专利
摘要
本发明公开了一种基于多模态融合的多时相遥感影像超分辨率重建方法,主要包括:对目标低分辨率图像和质量评价图像分别进行相同的特征提取处理;将所述目标低分辨率图像特征和质量评价图像特征切片后输入多模态特征融合模块进行融合处理从而获取融合特征序列;将所述融合特征序列进行输入Transformer模型来捕获序列维度上的长距离依赖关系,从而输出序列融合后的最终特征向量;通过卷积层对最终特征向量进行空间变换,在卷积层之后接一个PReLU激活函数,再采用PixelShuffle层对特征进行空间上的重排,从而合成高分辨率的输出图像。本发明综合利用不同时间点影像的优势,提高了重建结果的准确性和可靠性,能够更好地满足遥感影像处理的需求。
技术关键词
评价图像
多模态特征融合
融合特征
模块
浅层特征提取
特征切片
序列特征
分支
影像
关系
编码器
通道
语义
视觉
像素