A Continuous Time Framework for Discrete Denoising Models

我们为离散数据的去噪扩散模型提供了第一个完整的连续时间框架。这是通过将前向噪声过程和相应的反向时间生成过程表述为连续时间马尔可夫链（CTMC）来实现的。该模型可以使用连续时间版本的 ELBO 进行有效训练 ...

Protein Design with Guided Discrete Diffusion

蛋白质设计的一种流行方法是将生成模型与条件采样的判别模型相结合。生成模型对合理的序列进行采样，而判别模型则指导搜索具有高适应度的序列。鉴于其在条件采样方面的广泛成功，分类器引导的扩散模型是蛋白质设计的一个有希望的基础，导致许多人开发用于具有反向折叠的结构的引导扩散模型以恢复序列 ...

Point Cloud Pre-training with Diffusion Models

预训练模型，然后在下游任务上对其进行微调，已经在 2D 图像和 NLP 领域取得了巨大的成功。然而，由于点云的无序和非均匀密度特性，探索点云的先验知识并预训练点云主干并不是一件容易的事。在本文中，我们提出了一种新颖的预训练方法，称为点云扩散预训练（PointDif） ...

BiDM: Pushing the Limit of Quantization for Diffusion Models

扩散模型（DM）由于其优异的生成质量而得到了显着的发展并广泛应用于各种应用中。然而，DM 昂贵的计算和大量的参数阻碍了它们在资源有限的场景中的实际使用。作为有效的压缩方法之一，量化允许 DM 通过减少位宽同时保持生成性能来实现存储节省和推理加速 ...

DYffusion: A Dynamics-informed Diffusion Model for Spatiotemporal Forecasting

虽然扩散模型可以成功生成数据并做出预测，但它们主要是为静态图像设计的。我们提出了一种有效训练概率时空预测扩散模型的方法，其中生成稳定且准确的推出预测仍然具有挑战性，我们的方法 DYffusion 利用数据中的时间动态，将其与模型中的扩散步骤直接耦合。我们训练一个随机的、时间条件插值器和一个预测器网络，分别模拟标准扩散模型的正向和反向过程 ...

DiffLoad: Uncertainty Quantification in Electrical Load Forecasting with the Diffusion Model

电力负荷预测在电力系统决策中发挥着至关重要的作用，包括机组组合和经济调度。可再生能源的整合和外部事件（例如COVID-19大流行）的发生，迅速增加了负荷预测的不确定性。负荷预测的不确定性可分为两类：认知不确定性和任意不确定性 ...

On the Constrained Time-Series Generation Problem

合成时间序列在实际应用中经常用于扩充历史时间序列数据集，以提高机器学习算法的性能，放大罕见事件的发生，并创建时间序列描述的反事实场景。分布相似性（我们称之为真实性）以及满足某些数值约束是反事实时间序列场景生成请求中的常见要求。例如，美联储发布了由金融机构受限时间序列给出的综合市场压力情景，以评估其在假设衰退中的表现 ...

Time Series Diffusion in the Frequency Domain

傅立叶分析一直是信号处理发展的重要工具。这让我们想知道这个框架是否同样有利于生成建模。在本文中，我们通过时间序列扩散模型的范围来探讨这个问题 ...

TransFusion: Generating Long, High Fidelity Time Series using Diffusion Models with Transformers

由于其广泛的应用，高质量、长序列的时间序列数据的生成至关重要。过去，独立的基于循环和卷积神经网络的生成对抗网络（GAN）被用来合成时间序列数据。然而，由于架构的限制，它们不足以生成长序列的时间序列数据 ...

Generative Time Series Forecasting with Diffusion, Denoise, and Disentanglement

时间序列预测已成为许多应用中非常重要的广泛探索的任务。然而，现实世界的时间序列数据通常是在很短的时间段内记录的，这导致深层模型与有限且嘈杂的时间序列之间存在很大差距。在这项工作中，我们建议通过生成建模来解决时间序列预测问题，并提出一种配备扩散、降噪和解缠结的双向变分自动编码器（BVAE），即 D3VAE ...