基于多模态深度分布监督的高效3D高斯场景重建方法

本发明公开了基于多模态深度分布监督的高效3D高斯场景重建方法，相比于现有技术，在高斯初始化阶段直接提取了像素级的深度稠密点云，生成多模态深度分布图，有效避免了根据COLMAP稀疏点云随机初始化稠密高斯位置，解决了少视图情况下COLMAP获取的点云过于稀疏提供的几何约束不足，同时随机初始化的高斯由于局部最小值阻碍其移动到正确位置的问题。本发明对图像帧应用基于边缘检测的图像分割算法，融合了大量远离边缘点且深度相近的高斯基元，有效修剪了3D高斯数量，节省了GPU的内存消耗。本发明对全局高斯引入额外的各向同性正则化损失，避免了沿视线方向产生伪影的高度拉长的高斯分布问题。