我们提出了一种新颖的方法,使用神经辐射场 (NeRF) 与野外不受控制的照片合成逼真的新颖视图。虽然 NeRF 在受控设置中显示了令人印象深刻的结果,但它在处理动态和随时间变化的场景中常见的瞬态对象时遇到了困难。我们的框架称为 \textit{Inpainting Enhanced NeRF} 或 \ours,通过从图像修复技术中汲取灵感来增强传统 NeRF ...
虽然神经辐射场 (NeRF) 已展现出卓越的品质,但其训练持续时间过长仍然是一个限制。可泛化且基于 MVS 的 NeRF 虽然能够缩短训练时间,但通常会在质量上进行权衡。本文提出了一种称为 BoostMVSNeRFs 的新颖方法,用于提高大规模场景中基于 MVS 的 NeRF 的渲染质量 ...
对象级映射构建场景中对象的 3D 地图,其中包含来自多视图传感器观察的详细形状和姿势。由于部分遮挡和传感器噪声,传统方法很难构建完整的形状并估计准确的姿势。它们需要密集的观察来覆盖所有物体,这在机器人轨迹中很难实现 ...
为空间中的点生成适合学习的表示是机器学习中一个长期存在的基本问题。最近,提出了多尺度编码方案(例如Space2Vec和NeRF),将2D/3D欧几里德空间中的任意点直接编码为高维向量,并已成功应用于各种地理空间预测和生成任务。然而,当前所有 2D 和 3D 位置编码器均设计用于对欧几里得空间中的点距离进行建模 ...
利用卫星图像进行 3D 建模对于环境科学、城市规划、农业和灾害响应领域至关重要。然而,传统的 3D 建模技术在遥感环境中面临着独特的挑战,包括广泛区域内有限的多视图基线、变化的直接、环境和复杂的照明条件,以及捕获过程中随时间变化的场景变化。在这项工作中,我们介绍了 SUNDIAL,这是一种使用神经辐射场对卫星图像进行 3D 重建的综合方法 ...
随着深度神经网络、预训练语言模型 (PLM) 和最近的大型语言模型 (LLM) 的出现,文本摘要研究经历了几次重大转变。因此,本次调查通过这些范式转变的视角,对文本摘要的研究进展和演变进行了全面的回顾。它分为两个主要部分:(1) LLM 时代之前的数据集、评估指标和汇总方法的详细概述,涵盖传统统计方法、深度学习方法和 PLM 微调技术,以及 (2) 第一个部分详细检查 LLM 时代在基准测试、建模和评估总结方面的最新进展 ...
从卫星图像中了解复杂地球表面的各向异性反射率对于许多应用至关重要。神经辐射场(NeRF)作为一种能够从多个图像推导出场景的双向反射分布函数(BRDF)的机器学习技术已经变得流行。然而,之前的研究主要集中在将 NeRF 应用于近距离图像,估计基本的 Microfacet BRDF 模型,这对于许多地球表面来说是不够的 ...
在这项工作中,我们提出了一种学习 2D 图像和 3D 点云匹配的局部跨域描述符的新方法。我们提出的方法是一个双自动编码器神经网络,它将 2D 和 3D 输入映射到共享的潜在空间表示中。我们表明,共享嵌入中的此类局部跨域描述符比从 2D 和 3D 域中的单独训练中获得的描述符更具辨别力 ...
3D 高斯分布 (3DGS) 已成为一种很有前途的 3D 场景表示方法,与神经辐射场 (NeRF) 相比,它可以减少计算开销。然而,3DGS 容易受到高频伪影的影响,并且在稀疏视点条件下表现出次优性能,从而限制了其在机器人和计算机视觉中的适用性。为了解决这些限制,我们引入了 SVS-GS,这是一种用于稀疏视点场景重建的新颖框架,它集成了 3D 高斯平滑滤波器来抑制伪影 ...
从一组稀疏的输入图像合成新颖的视图是一个具有很大实际意义的挑战性问题,特别是当相机姿势不存在或不准确时。由于位姿和深度之间的耦合以及单目深度估计的不准确性,在神经辐射场算法中直接优化相机位姿和使用估计深度通常不会产生良好的结果。在本文中,我们利用最新的 3D 高斯分布方法开发了一种新颖的构造和优化方法,用于无需相机姿态的稀疏视图合成 ...