(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210265215.0 (22)申请日 2022.03.17 (71)申请人 深圳市其 域创新科技有限公司 地址 518000 广东省深圳市南 山区粤海街 道高新区社区科苑南路3170号留学生 创业大厦一期2 207 (72)发明人 赵开勇　 (74)专利代理 机构 济南鼎信专利商标代理事务 所(普通合伙) 37245 专利代理师 白守畔 (51)Int.Cl. G06T 17/00(2006.01) G06T 15/00(2011.01) G06T 7/194(2017.01) G06N 3/04(2006.01)G06K 9/62(2022.01) G06V 10/80(2022.01) G06V 10/82(2022.01) (54)发明名称 一种基于辐射场技 术的三维 实时重建方法 (57)摘要 本发明公开了一种基于辐射场技术的三维 实时重建方法， 涉及虚拟现实技术领域。 包括以 下步骤： S1， 在三维场景空间部署多个摄像头进 行空间数据实时采集， 通过网络模块把数据都传 输到后端分布式平台上； S2， 利用automl深度学 习算法获得深度估计切割前景和背景； S3， 通过 多个摄像头的数据， 融合数据， 得到粗糙的三维 模型， 三维模型设定为V0； S4， 根据可逆体渲染方 法对V0进行精确的重建， 利用Vfine←R‑1(V0)； 其 中R‑1为体素渲染的逆渲染； S5， 构建loss方程， S6， 采用a dam方程求解。 本发明的有 益效果在于： 做到高精度实时三维重建。 权利要求书1页 说明书2页 CN 114663584 A 2022.06.24 CN 114663584 A 1.一种基于辐射场技 术的三维 实时重建方法， 包括以下步骤： S1， 在三维场景空间部署多个摄像头进行空间数据实时采集， 通过网络模块把数据都 传输到后端分布式平台上； S2， 利用automl深度学习算法获得深度估计切割前 景和背景； S3， 布局多个摄像头， 通过多个摄像头的数据， 然后通过每一个角度有一台摄像头负责 一个volume区域进行计算的方式 融合数据， 得到粗 糙的三维模型， 三维模型设定为V0； S4， 根据可逆体渲染方法对V0进行精确的重建， 利用Vfine←R‑1(V0)； 其中R‑1为体素渲染 的逆渲染； S5， 构建l oss方程， C为原 始图像， 表示预估的值； 方程如下 所示： 其中Ci表示颜色值， Pi表示入射射线在volume块的占比， 体素密度σ(x)定义为光线停留 在位置x处无穷小粒子的可导概率， δi＝ti+1‑ti是相邻样本之间的距离； 由于计算的每一个 点的颜色数量太多， 可以根据物体 的材质提前预设颜色Ci的材质表示， 这样可以大大降低 计算复杂度。 S6， 采用adam方程 求解。 2.根据权利要求1所述的一种基于辐射场 技术的三维实时重建方法， 其特征在于： 所述 网络模块 为网线和/或w ifi和/或5G。权　利　要　求　书 1/1 页 2 CN 114663584 A 2一种基于 辐射场技术的三维实时重建 方法 技术领域 [0001]本发明主要涉及虚拟现实技术领域， 具体是一种基于辐射场技术的三维实时重建 方法。 背景技术 [0002]各大游戏、 智慧 园区、 VR房屋展示等应用市场对3D内容的需求在近年来  呈指数级 增长， 而传统的3D内容通常由专 业团队或其他人力方式生 成。 这种 3D内容的获取方式在质 量上参差不齐， 在时间、 资源上费时费力， 是 社会资源  的巨大损失。 [0003] 发明内容 [0004]为解决现有技术的不足， 本发明提供了一种基于辐射场技术的三维实时重建方 法， 它能够实时的对场景进行3d重建， 然后进行三维传输和直 播， 在终端 进行展示。 [0005]本发明为实现上述目的， 通过以下技 术方案实现： [0006]一种基于辐射场技 术的三维 实时重建方法， 包括以下步骤： [0007]S1， 在三维场景空间部署多个摄像头进行空间数据实时采集， 通过网络模块把数 据都传输 到后端分布式平台上； [0008]S2， 利用automl深度学习算法获得深度估计切割前 景和背景； [0009]S3， 通过多个 摄像头的数据， 融合数据， 得到粗 糙的三维模型， 三维模型设定为V0； [0010]S4， 根据可逆体渲染方法对V0进行精确的重建， 利用Vfine←R‑1(V0)； 其中 R‑1为体 素渲染的逆渲染； [0011]S5， 构建l oss方程， C为原 始图像， 表示预估的值； 方程如下 所示： [0012] [0013] [0014]其中Ci表示颜色值， Pi表示入射射线在v olume块的占比， 体素密度σ(x)定义为光线 停留在位置x处无穷小粒子的可导 概率， δi＝ti+1‑ti是相邻样本之间的距离； [0015]S6， 采用adam方程 求解。 [0016]所述网络模块 为网线和/或w ifi和/或5G。 [0017]对比现有技 术， 本发明的有益效果是： [0018]本发明使用的方法布局多个摄像头， 然后每一个角度有一台摄像头负责一个 volume区域进行计算， 由于每一个角度的互不相干性， 可以把空间网格分布到多个机器上 进行分布式计算， 做到高精度实时三维重建。说　明　书 1/2 页 3 CN 114663584 A 3