一种基于3DGS的相机位姿求解方法、系统及终端与流程
技术特征:
1.一种基于3dgs的相机位姿求解方法,其特征在于,所述基于3dgs的相机位姿求解方法包括:
2.根据权利要求1所述的基于3dgs的相机位姿求解方法,其特征在于,所述获取第一预设数量的rgbd图像,根据所述第一预设数量的rgbd图像,生成真实位姿和当前场景的点云信息,根据所述点云信息生成初始3d高斯模型,具体包括:
3.根据权利要求2所述的基于3dgs的相机位姿求解方法,其特征在于,所述根据所述真实位姿对所述初始3d高斯模型进行迭代优化,得到目标3d高斯模型,具体包括:
4.根据权利要求1所述的基于3dgs的相机位姿求解方法,其特征在于,所述根据所述目标3d高斯模型生成不透明度图、深度图和颜色图,具体包括:
5.根据权利要求1所述的基于3dgs的相机位姿求解方法,其特征在于,所述根据所述不透明度图、所述深度图和所述颜色图,迭代更新初始位姿,得到目标相机位姿估计,具体包括:
6.根据权利要求5所述的基于3dgs的相机位姿求解方法,其特征在于,所述根据初始位姿、所述不透明度图、所述深度图和所述颜色图,计算当前损失值,具体包括:
7.根据权利要求5所述的基于3dgs的相机位姿求解方法,其特征在于,所述根据当前损失值优化初始位姿,具体包括:
8.一种基于3dgs的相机位姿求解系统,其特征在于,所述基于3dgs的相机位姿求解系统包括:
9.一种终端,其特征在于,所述终端包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于3dgs的相机位姿求解程序,所述基于3dgs的相机位姿求解程序被所述处理器执行时实现如权利要求1-7任一项所述的基于3dgs的相机位姿求解方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有基于3dgs的相机位姿求解程序,所述基于3dgs的相机位姿求解程序被处理器执行时实现如权利要求1-7任一项所述的基于3dgs的相机位姿求解方法的步骤。
技术总结
本发明公开了一种基于3DGS的相机位姿求解方法、系统及终端,所述方法包括:获取第一预设数量的RGBD图像,根据所述第一预设数量的RGBD图像,生成真实位姿和当前场景的点云信息,根据所述点云信息生成初始3D高斯模型,根据所述真实位姿对所述初始3D高斯模型进行迭代优化,得到目标3D高斯模型;获取目标RGB图像,将所述目标RGB图像输入到深度学习网络中,输出相机的初始位姿;根据所述目标3D高斯模型生成不透明度图、深度图和颜色图,根据所述不透明度图、所述深度图和所述颜色图,迭代更新初始位姿,得到目标相机位姿估计。本发明可以通过3D高斯模型优化深度学习网络输出的初始位姿,最终实现更高精度的相机位姿估计。
技术研发人员:李游,李梓维,肖涛,姚萌萌
受保护的技术使用者:人工智能与数字经济广东省实验室(深圳)
技术研发日:
技术公布日:2024/12/2
技术研发人员:李游,李梓维,肖涛,姚萌萌
技术所有人:人工智能与数字经济广东省实验室(深圳)
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
