基于双不确定性引导网络的多模态讽刺检测方法及系统

本发明提供一种基于双不确定性引导网络的多模态讽刺检测方法及系统，涉及人工智能与情感处理技术领域，包括：获取文本数据和图像数据；对文本数据和图像数据分别进行编码处理，得到文本特征序列和图像特征序列；对文本特征序列和图像特征序列进行跨模态图语义交互处理，构建文本关系图和图像关系图，并通过图注意力网络与跨模态注意力机制进行语义交互，得到增强的文本特征和图像特征；对增强的文本特征和图像特征进行决策不确定性量化处理；融合潜在变量与增强特征，并通过通道注意力机制进行多模态特征融合，得到融合特征；基于融合特征进行讽刺分类预测，输出分类结果。本发明解决了多模态讽刺检测中的多模态数据和模型决策不确定的问题。