一种基于多模态数据融合的人员关系分析方法和系统

本发明提出了一种基于多模态数据融合的人员关系分析方法和系统，采集手机中的多模态数据并进行预处理，对预处理后的多模态数据提取特征；将提取的特征进行标准化处理，使得特征具有的相同量纲和分布，通过注意力机制为每个模态的特征分配权重，对加权后的特征向量进行拼接，得到融合的特征向量；分别计算所有多模态数据涉及的人员对应的特征向量，并对每个人员对应的特征向量进行排序，将人员之间的紧密关系并进行图像化展示，人员之间的紧密关系包括双向紧密、单向紧密和不紧密。本申请综合不同人的社交特征，避免了性格不同出现的分析偏差，双向关系机制能更准确地分析人员对象之间的相互关系，能快速处理大规模数据并挖掘出隐藏的关系线索。