一种基于路径相关性的动态知识融合图像问答方法

本发明公开了一种基于路径相关性的动态知识融合图像问答方法，包括：S1、对外部知识库进行关系类型分类，根据图像问答任务特点保留相应关系类型，得到轻量化知识图谱；S2、分别从图像和问题文本中提取实体，将该实体映射至S1中轻量化知识图谱节点，得到种子节点集合；S3、从S2中种子节点集合出发，通过广度优先搜索生成候选知识子图；S4、根据文本匹配度和视觉一致性对S3中知识子图内的知识路径进行相关性评分；S5、根据S4中知识路径评分，通过贪心剪枝策略迭代优化知识子图；S6、计算知识权重系数，实现外部知识的动态融合，根据问题文本自适应调整知识嵌入程度，输入图像问答模型生成最终答案。