摘要
本发明涉及视频监控技术领域,公开了一种北斗视频多行为分析预警系统及终端,视频采集模块,用于构建时空同步的视频监控框架,采用自适应图像增强算法对采集的视频流进行预处理,得到预处理后视频;多模态特征融合模块,用于利用3D‑CNN网络从预处理后视频中提取行人局部时空特征,并结合HRNet模型获取人体特征坐标,将北斗定位的摄像头坐标与人体特征坐标映射到统一地理坐标系,得到多模态特征集;行为识别模块,用于基于ST‑GCN网络建模行人肢体的动作序列,结合Transformer编码器捕捉长期依赖关系,确定为异常行为及对应等级;预警模块,用于根据异常行为等级触发对应的预警机制,并推送异常信息;本发明提升预警效率。