打赏本站
支付宝
单目深度估计的成功依赖于大量且多样化的训练集。由于在不同环境中大规模获取密集的地面实况深度所面临的挑战，出现了许多具有不同特征和偏差的数据集。我们开发的工具可以在训练期间混合多个数据集，即使它们的注释不兼容 ...
本文介绍了一种从现实世界的全面 3D 扫描中参数化采样和渲染多任务视觉数据集的管道。更改采样参数可以“引导”生成的数据集以强调特定信息。除了支持有趣的研究之外，我们还展示了工具和生成的数据足以训练强大的视觉模型 ...
随着多个行业开始对大规模 3D 虚拟世界进行建模，对能够在 3D 内容的数量、质量和多样性方面进行扩展的内容创建工具的需求变得越来越明显。在我们的工作中，我们的目标是训练高性能的 3D 生成模型来合成纹理网格，这些网格可以直接由 3D 渲染引擎使用，从而可以立即在下游应用程序中使用。先前的 3D 生成建模工作要么缺乏几何细节，要么受限于它们可以生成的网格拓扑，通常不支持纹理，要么在合成过程中利用神经渲染器，这使得它们在常见 3D 软件中的使用变得非常重要 ...
3D高斯泼溅（3DGS）的出现最近给神经渲染领域带来了一场革命，促进了实时速度的高质量渲染。然而，3DGS 在很大程度上依赖于运动结构 (SfM) 技术生成的初始化点云。当处理不可避免地包含无纹理表面的大型场景时，SfM 技术总是无法在这些表面中产生足够的点，并且无法为 3DGS 提供良好的初始化 ...
在这项工作中，我们提出了一种新的多视图深度估计方法，该方法在最近提出的神经辐射场（NeRF）上利用传统的重建和基于学习的先验。与依赖估计对应关系的现有基于神经网络的优化方法不同，我们的方法直接对隐式体积进行优化，消除了在室内场景中匹配像素的挑战性步骤。我们方法的关键是利用基于学习的先验来指导 NeRF 的优化过程 ...
神经辐射场 (NeRF) 将场景编码为神经表示，从而实现新颖视图的照片级真实感渲染。然而，从 RGB 图像成功重建需要在静态条件下获取大量输入视图 - 对于房间大小的场景，通常最多需要数百个图像。我们的方法旨在从数量级少的图像合成整个房间的新颖视图 ...
多边形网格是 3D 几何的有效表示，在计算机图形、机器人和游戏开发中至关重要。现有的基于学习的方法避免了使用 3D 网格的挑战，而是使用与神经架构和训练方法更兼容的替代对象表示。我们提出了一种直接对网格进行建模的方法，使用基于 Transformer 的架构顺序预测网格顶点和面 ...
我们引入了 MeshGPT，这是一种生成三角形网格的新方法，它反映了艺术家创建的网格的典型紧凑性，与通过等曲面方法从神经场提取的密集三角形网格形成对比。受到强大的大型语言模型最新进展的启发，我们采用基于序列的方法来自回归生成三角形网格作为三角形序列。我们首先使用图卷积学习潜在量化嵌入的词汇，它告知这些局部网格几何和拓扑的嵌入 ...
近年来，神经隐式表面重建方法在多视图 3D 重建中变得流行。与传统的多视图立体方法相比，由于神经网络的归纳平滑偏差，这些方法往往会产生更平滑和更完整的重建。最先进的神经隐式方法可以从许多输入视图中高质量地重建简单场景 ...
我们提出了一种新颖的可微分基于点的渲染框架，用于从多视图图像中进行材质和照明分解，从而实现 3D 点云的编辑、光线追踪和实时重新照明。具体来说，3D 场景表示为一组可重新照明的 3D 高斯点，其中每个点还与法线方向、BRDF 参数和来自不同方向的入射光相关联。为了实现稳健的照明估计，我们进一步将每个点的入射光划分为全局和局部组件，以及依赖于视图的可见性 ...