摘要
本发明涉及目标检测与跟踪技术领域,且公开了一种多模态实时目标检测与跟踪系统,多模态数据采集模块,集成高清摄像头、毫米波雷达、激光雷达和红外传感器,用于从视觉图像、距离速度角度、三维点云、热辐射等多维度采集目标信息;数据预处理模块,对所述多模态数据采集模块获取的原始数据进行去噪、增强、归一化、滤波、坐标转换、温度校正处理。本发明通过集成多种传感器采集多维度数据,经预处理后利用分层融合与注意力机制实现高效融合,检测模块结合改进算法与动态阈值,跟踪模块融合多特征并具备在线学习能力,系统控制模块实现智能管理,该系统大幅提升检测跟踪准确性、实时性与稳定性,创新技术优势显著,为相关领域提供新方案。