三维场景建模方法、云端系统、存储介质及电子装置与流程

本发明实施例涉及通信领域，具体而言，涉及一种三维场景建模方法、云端系统、存储介质及电子装置。

背景技术：

1、目前已有的一些三维重建和渲染方法存在以下问题：

2、数据获取困难：现有的三维重建方法需要使用专业设备，例如：激光传感器、深度相机或者多个rgbd相机构成的相机组，其中，rgbd为三原色加图像深度；并由专业的操作人员进行数据采集，才可以获取高精度的三维重建源数据，如此，数据获取难度大，数据获取成本高。

3、动态场景重建效果不佳：在对户外建筑、街景进行三维重建时，场景中通常存在动态物体，例如：行人、动物、车辆(例如：轿车、卡车、非机动车等)、与行人相关联的静物(如被人手持的笔记本电脑、手提包、拉杆箱等)，需要耗费大量的时间和计算资源进行动态场景重建，同时，当动态物体对建模主体有所遮挡时，三维重建效果将更不理想。

4、重建主体视角缺失：对于重建主体的三维建模，特别是高层写字楼、斜拉桥等，不借助专业的无人机采集设备，难以捕获俯视角度的图像，从而导致三维重建训练阶段在数据源上就有所缺失，难以实现360度全景的三维重建和渲染。

5、渲染效率低下：已有的三维渲染任务大多在智能移动设备上计算得到，考虑到移动端的算力限制，往往只能提供较低的可视分辨率和简化的渲染模型，渲染效果和体验都受到限制。

技术实现思路

1、本发明实施例提供了一种三维场景建模方法、云端系统、存储介质及电子装置，以至少解决相关技术中已有的三维重建和渲染方法存在的数据获取困难、重建主体视角缺失以及渲染效率低下的问题。

2、根据本发明的一个实施例，提供了一种三维场景建模方法，包括：基于用户终端采集并上传的多个众包数据，通过增量式生成神经辐射场模型对待建模场景进行三维场景建模，得到所述待建模场景的全视场角的三维渲染模型。

3、根据本发明的另一个实施例，提供了一种云端系统，包括：建模模块，用于基于用户终端采集并上传的多个众包数据，通过增量式生成神经辐射场模型对待建模场景进行三维场景建模，得到所述待建模场景的全视场角的三维渲染模型。

4、根据本发明的又一个实施例，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。

5、根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。

6、通过本发明上述实施例，通过云端系统进行场景的三维建模，避免了因移动终端的算力不足而限制了三维重建和渲染的效果，而云端系统所使用的众包数据，可由用户终端采集并上传，降低了数据获取难度；同时，通过增量式生成神经辐射场模型能够对缺失视场角的三维辐射场分布进行生成，得到全视场角的三维渲染模型。因此，可以解决相关技术中已有的三维重建和渲染方法存在的数据获取困难、重建主体视角缺失以及渲染效率低下的问题，达到提高三维场景建模效率的效果。

技术特征：

1.一种三维场景建模方法，其特征在于，应用于云端系统，包括：

2.根据权利要求1所述的方法，其特征在于，基于用户终端采集并上传的多个众包数据通过云端系统中的增量式生成神经辐射场模型对待建模场景进行三维场景建模，包括：

3.根据权利要求2所述的方法，其特征在于，第一云端系统对所述多个众包数据进行图像数据处理，包括：

4.根据权利要求3所述的方法，其特征在于，第一云端系统对所述多个众包数据进行图像数据处理，得到优化的第一图像序列集，包括：

5.根据权利要求2所述的方法，其特征在于，第一云端系统对所述多个众包数据进行图像数据处理，得到各所述众包数据的相对位姿信息，包括：

6.根据权利要求2所述的方法，其特征在于，将更新后的所述多个众包数据输入第二云端系统之前，所述方法还包括：

7.根据权利要求6所述的方法，其特征在于，通过增量式生成神经辐射场模型进行三维场景建模之前，所述方法还包括：

8.一种云端系统，其特征在于，包括：

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被处理器执行时实现所述权利要求1至7任一项中所述的方法的步骤。

10.一种电子装置，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现所述权利要求1至7任一项中所述的方法的步骤。

技术总结
本发明实施例提供了一种三维场景建模方法、云端系统、存储介质及电子装置。该方法包括：基于用户终端采集并上传的多个众包数据，通过增量式生成神经辐射场模型对待建模场景进行三维场景建模，得到所述待建模场景的全视场角的三维渲染模型。通过本发明实施例，可以解决相关技术中已有的三维重建和渲染方法存在的数据获取困难、重建主体视角缺失以及渲染效率低下的问题，达到提高三维场景建模效率的效果。

技术研发人员：王屹进
受保护的技术使用者：中兴通讯股份有限公司
技术研发日：
技术公布日：2025/1/2