基于AI数字人的行为预测方法、系统、设备及存储介质

本申请涉及一种基于AI数字人的行为预测方法、系统、设备及存储介质，该方法包括获取原始视觉数据、语音数据和环境传感数据，并进行初步预处理，得到处理数据集；从处理数据集中提取多模态特征，得到视觉特征、语音特征和环境感知特征，并基于注意力机制对各模态特征进行加权融合，生成多模态特征表示；基于多模态特征表示，采用深度学习模型进行遮挡补偿优化，识别并修复原始视觉数据中的遮挡区域，进而生成优化特征集；通过时序分析模型对优化特征集进行行为预测，生成与用户当前交互状态相关的行为输出。本申请具有提高行为预测效率的效果。