一种基于多模态的头部姿态校正凝视方向估计方法

本发明涉及图像处理与模式识别技术领域，具体涉及一种基于多模态的头部姿态校正凝视方向估计方法，该方法包括：步骤1，对凝视估计数据集进行预处理并划分为训练集和测试集；步骤2，构建基于多模态的头部姿态校正凝视方向估计模型；步骤3，将训练集中的双眼图像和人脸图像作为输入，训练基于多模态的头部姿态校正凝视方向估计模型；步骤4，利用训练好的凝视方向估计模型预测测试集数据。本发明显著地提升凝视方向估计的性能，改善了用户在虚拟现实和人机交互领域的体验，为用户提供了更智能、更自然的交互方式。