摘要
本发明提供一种基于空间科学实验视频的斑马鱼多目标跟踪方法及系统,该方法首先获取斑马鱼空间科学实验视频。然后,基于斑马鱼空间科学实验视频提取运动信息,运动信息用于表征斑马鱼空间科学实验视频中像素点表示的运动状态。接下来,基于运动信息和外观信息进行多模态特征融合,确定多模态融合特征。最后,根据多模态融合特征进行目标检测和跟踪,确定多条目标斑马鱼分别对应的目标运动轨迹信息。该方法通过基于自适应阈值的运动建模,提取表征动态变化的运动特征信息,进而利用异构图逐级建模外观和运动特征的交互和融合关系,增强目标检测、数据关联和轨迹预测的鲁棒性。这样,可以有效地提高对斑马鱼进行多目标跟踪的稳定性和准确性。