摘要
本发明公开了一种基于隐式文本查询的开放词汇3D推理高斯溅射方法。本发明包括:1、选取参考的代表性视图集合;2、采用视觉语言模型解析隐式查询文本,并在代表性视图集合上生成目标检测边界框,用分割模型对目标检测边界框进行分割,生成精细化2D目标掩码;3、对2D目标掩码进行提炼,获取精炼掩码;4、将精炼掩码嵌入3D高斯以实现与隐式查询文本对齐的3D目标掩码;通过优化后的精炼掩码,指导单维掩码编码的优化过程,最终实现与隐式查询文本精确匹配的3D目标掩码。本发明在多个模型和数据集上的实验表明,基于隐式文本查询的开放词汇3D推理高斯溅射方法能够有效提升3D高斯中隐式分割的速度和性能。