一种全模态有害信息的识别方法、装置及电子设备

本公开提供了一种全模态有害信息的识别方法、装置及电子设备，获取多模态的待识别数据，根据对应的模态类型将待识别数据分配至对应的模态处理分支；针对每个模态处理分支，提取待识别数据对应的数据模态特征，并输入至满足预设任务需求的至少一个有害信息识别模型，确定有害信息识别结果，其中，每个有害信息识别模型具备基于身份，或基于内容，或基于属性类别，或基于语义进行有害信息识别能力；确定各模态有害信息识别结果对应模态、任务以及置信度的识别结果三元组，针对全模态的识别结果三元组进行置信度融合以及投票融合，确定有害信息融合判别结果。可以实现高精度的有害信息识别。