Progress in neural radiance field and its application in large-scale real-scene 3D visualization
Qiang Zhao, Jiangfeng SHE, Qifeng Wan, Lixia HE, Sirui LI, Shuangpin Wu · National Remote Sensing Bulletin · 2024
实景三维是重要的国家数字基础设施，其将地理信息从传统二维平面扩展到信息更丰富更全面的三维空间，数据以显式三维模型的形式存储表达，但经典的显式三维模型具有数据量大、可视化效果粗糙等问题，在一定程度上限制了其实际应用。神经辐射场（Neural Radiance Field，NeRF）是一种基于神经隐式立体表达（Neural Implicit Volume Representing）进行可微渲染（Differentiable Rendering）以实现高质量视图合成的新方法，被Mildenhall等（2020）首次提出，以其逼真的视图合成效果与新颖的实现方式成为计算机视觉领域的热点研究方向。自提出以来，国内外爆发式涌现出大量有关神经辐射场的研究文献，其中有少量研究开始探索将其用于大规模实景三维场景可视化，主要聚集于可视化效果的生成方法。本文回顾了神经辐射场提出的背景，介绍了神经辐射场及其在大规模实景三维可视化方面的研究进展，分析了目前利用神经辐射场进行大规模实景三维场景可视化研究中被关注的无边界场景、锯齿效果、瞬态遮挡、光度一致性、场景重照明与可见性场等问题，指出了目前研究在多源数据融合、视觉效果优化、虚拟环境感知等方面面临的挑战，对未来值得进一步探索的方向提出了见解。