多模态数据处理方法、装置、设备、介质和程序产品

本公开涉及人工智能技术领域，公开了多模态数据处理方法、装置、设备、介质和程序产品，方法包括获取多模态任务对应的非文本数据，并对非文本数据进行编码，得到非文本数据的特征向量；对非文本数据的特征向量进行全局信息的特征空间映射以及局部信息的特征空间映射，得到非文本数据的特征向量在文本特征空间下的全局特征向量以及局部特征向量；将全局特征向量以及局部特征向量输入语言模型中，以得到多模态任务的处理结果。可以提高模型精度。