基于多模态数据的表情识别方法、装置、边缘设备及介质
申请号:CN202411733047
申请日期:2024-11-28
公开号:CN119723635A
公开日期:2025-03-28
类型:发明专利
摘要
本申请提供一种基于多模态数据的表情识别方法、装置、边缘计算设备及介质,该方法包括:获取待识别图像和被试者的脑电信号,待识别图像包括被试者的人脸面部图像,脑电信号是在被试者处于不同的情绪状态下由脑电信号采集设备采集得到;对待识别图像进行预处理,得到面部特征图;对脑电信号进行预处理,得到脑电特征图;将面部特征图和脑电特征图进行数据融合,得到多模态融合数据;基于面部特征图、脑电特征图和多模态融合数据进行表情识别。本申请提供的方法,有助于提高表情识别的准确性,捕捉细微表情差异,增强表情识别的可靠性和稳定性,更好地适应不同个体的差异。
技术关键词
脑电特征
面部特征
融合特征提取
多模态
表情识别方法
电信号
注意力机制
数据
图像
序列
周期
采集设备
表情识别装置
滤波
人脸
通道
频率
存储计算机程序
识别模块