有效

基于神经辐射场的三维场景重建方法

陈瑞、牟洋、杨航
天津大学

摘要

本发明公开一种基于神经辐射场的三维场景重建方法,由图像拼接模块拼接输入多视角图像序列,图像特征提取模块提取输入图像的深层图像特征,图像特征和相机参数送入多视角特征融合模块中通过单应性变换单元构建三维特征,然后送入特征融合单元获取融合特征,由相机参数计算神经辐射场中的三维点坐标和点的方向编码并为三维点坐标附加位置编码,获取具有位置编码的三维点特征,将方向编码、深层图像特征、融合特征和三维点特征共同送入三维调制解码模块,获取三维点颜色和点透明度,最后通过渲染模块渲染输出相机参数对应的指定视角图像。本发明取得了较高运行速度表现与良好的重建效果,提高了三维场景重建的质量。