现有的卫星图像 NeRF 模型存在速度慢、强制输入太阳信息以及处理大型卫星图像的限制等问题。作为回应,我们提出了 SatensoRF,它显着加速了整个过程,同时为大尺寸卫星图像使用更少的参数。此外,我们观察到神经辐射场中朗伯表面的普遍假设不符合植物和水生元素的要求 ...
估计图像之间的相对相机姿势一直是计算机视觉中的核心问题。在大多数情况下,找到对应关系并求解基本矩阵的方法可以提供高精度。相反,直接使用神经网络预测姿势的方法对于有限的重叠更加稳健,并且可以推断绝对平移比例,但代价是精度降低 ...
神经辐射场 (NeRF) 通过使用多层感知 (MLP) 和体积渲染程序对场景进行建模,在新颖的视图合成方面取得了卓越的性能,但是,当给出的已知视图较少时(即少镜头视图合成) ,模型很容易过度拟合给定的视图 ...
事件摄像机的设计理念形成鲜明对比,使其特别适合在高速、高动态范围和低光照条件下运行,而标准摄像机在这些条件下表现不佳。尽管如此,事件摄像机仍然存在一定程度的运动模糊,特别是在这些具有挑战性的条件下,这与大多数人的想法相反。这是由于事件传感器像素的带宽有限,该带宽主要与光强度成正比 ...
稀疏输入的新颖视图合成对神经辐射场(NeRF)提出了巨大的挑战。最近的工作表明,位置编码(PE)的频率正则化可以在少样本 NeRF 中取得有希望的结果。在这项工作中,我们揭示了 PE 的频率正则化和渲染损失之间存在不一致 ...
提高 3D 隐式神经表示的效率和性能,特别是神经辐射场 (NeRF) 和符号距离场 (SDF),对于使其在实时应用中使用至关重要。这些模型虽然能够生成逼真的新颖视图和详细的 3D 重建,但通常会面临计算成本高和推理时间慢的问题。为了解决这个问题,我们引入了一种称为“放大器”的新型神经网络层,旨在减少这些模型中的训练参数数量,而不牺牲其表达能力 ...
在这项工作中,我们使用多视图航空图像通过神经符号距离场 (SDF) 重建立面的几何形状、照明和材料。我们的方法不需要复杂的设备,只需将无人机捕获的简单 RGB 图像作为输入,即可实现基于物理的、逼真的小说视图渲染、重新照明和编辑。然而,现实世界的立面通常具有复杂的外观,从具有微妙细节的漫射岩石到具有镜面反射的大面积玻璃窗,使得人们很难注意到一切 ...
我们提出 TensoRF,一种建模和重建辐射场的新方法。与纯粹使用 MLP 的 NeRF 不同,我们将场景的辐射场建模为 4D 张量,它表示具有每体素多通道特征的 3D 体素网格。我们的中心思想是将 4D 场景张量分解为多个紧凑的低秩张量分量 ...
基于 NeRF 的方法通过构建具有隐式或显式表示的辐射场来重建 3D 场景。虽然基于 NeRF 的方法可以执行任意规模的新颖视图合成 (NVS),但具有低分辨率 (LR) 优化的高分辨率新颖视图合成 (HRNVS) 的性能通常会导致过度平滑。另一方面,单图像超分辨率(SR)旨在将 LR 图像增强为 HR 图像,但缺乏多视图一致性 ...
最近的研究使用数十张模糊图像构建去模糊神经辐射场(DeRF),如果只有有限数量的模糊图像,这不是实际场景。本文重点关注从稀疏视图构建 DeRF,以实现更务实的现实场景。正如我们在实验中观察到的,从稀疏视图建立 DeRF 被证明是一个更具挑战性的问题,因为同时优化模糊核和稀疏视图 NeRF 所产生的固有复杂性 ...