Uncovering the Missing Pattern: Unified Framework Towards Trajectory Imputation and Prediction

轨迹预测是从观察序列中理解实体运动或人类行为的一项关键任务。然而，当前的方法通常假设观测序列是完整的，而忽略了由于物体遮挡、范围限制、传感器故障等导致的缺失值的可能性。这种限制不可避免地影响了轨迹预测的准确性 ...

Provably Convergent Schrödinger Bridge with Applications to Probabilistic Time Series Imputation

薛定谔桥问题（SBP）在生成模型中越来越受到关注，甚至与基于分数的生成模型（SGM）相比也显示出广阔的潜力。 SBP 可以解释为熵正则化最优传输问题，它交替地对每个其他边际进行投影。然而，在实践中，只能获得近似投影，并且它们的收敛性尚不清楚 ...

Learning to Reconstruct Missing Data from Spatiotemporal Graphs with Sparse Observations

将多元时间序列建模为（可能是动态的）图上的时间信号是一种有效的表示框架，允许开发时间序列分析模型。事实上，离散的图序列可以通过自回归图神经网络进行处理，以递归地学习时间和空间上每个离散点的表示。时空图通常是高度稀疏的，时间序列的特征是多个、并发和长的缺失数据序列，例如 ...

DiffCollage: Parallel Generation of Large Content with Diffusion Models

我们提出了 DiffCollage，一种组合扩散模型，可以通过利用经过训练来生成大型内容片段的扩散模型来生成大型内容。我们的方法基于因子图表示，其中每个因子节点代表内容的一部分，变量节点代表它们的重叠。这种表示形式允许我们聚合各个节点上定义的扩散模型的中间输出，以并行生成任意大小和形状的内容，而无需诉诸自回归生成过程 ...

Self-Supervised Learning for Time Series Analysis: Taxonomy, Progress, and Prospects

自监督学习（SSL）最近在各种时间序列任务上取得了令人印象深刻的表现。 SSL最突出的优点是减少了对标记数据的依赖。基于预训练和微调策略，即使少量的标记数据也能实现高性能 ...

Estimating or Propagating Gradients Through Stochastic Neurons for Conditional Computation

随机神经元和硬非线性在深度学习模型中出于多种原因可能很有用，但在许多情况下它们提出了一个具有挑战性的问题：如何估计损失函数相对于此类随机或非非线性输入的梯度平滑神经元？也就是说，我们可以通过这些随机神经元“反向传播”吗？我们研究了这个问题、现有的方法，并比较了适用于不同环境的四种解决方案 ...

Conditional Diffusion Based on Discrete Graph Structures for Molecular Graph Generation

学习分子图的基本分布并生成高保真样本是药物发现和材料科学中的一个基本研究问题。然而，准确地建模分布和快速生成新颖的分子图仍然是至关重要且具有挑战性的目标。为了实现这些目标，我们提出了一种基于离散图结构（CDGS）的新颖条件扩散模型，用于分子图生成 ...

Add and Thin: Diffusion for Temporal Point Processes

时间点过程 (TPP) 框架内的自回归神经网络已成为连续时间事件数据建模的标准。尽管这些模型可以以一种超前的方式表达性地捕获事件序列，但由于其顺序性质导致的误差累积，它们本质上限制了长期预测应用。为了克服这些限制，我们推导了 ADD-THIN，这是一种针对整个事件序列运行的 TPP 原则性概率去噪扩散模型 ...

Autoregressive Diffusion Model for Graph Generation

基于扩散的图生成模型最近在图生成方面获得了有希望的结果。然而，现有的基于扩散的图生成模型大多是在去量化的邻接矩阵空间中应用高斯扩散的一次性生成模型。这种策略可能会遇到模型训练困难、采样速度慢以及无法合并约束的问题 ...

CoDi: Co-evolving Contrastive Diffusion Models for Mixed-type Tabular Synthesis

随着人们对表格数据的日益关注，将合成表应用于各种任务的尝试已经扩展到各种场景。由于生成建模的最新进展，表格数据合成模型生成的假数据变得复杂且现实。然而，对表格数据的离散变量（列）进行建模仍然存在困难 ...