Beyond Statistical Similarity: Rethinking Metrics for Deep Generative Models in Engineering Design

变分自动编码器 (VAE)、生成对抗网络 (GAN)、扩散模型和 Transformer 等深度生成模型在图像和语音合成、自然语言处理和药物发现等各种应用中显示出了巨大的前景。然而，当应用于工程设计问题时，评估这些模型的性能可能具有挑战性，因为基于可能性的传统统计指标可能无法完全满足工程应用的要求。本文同时也是对工程设计中深度生成模型（DGM）评估指标的回顾和实用指南 ...

Deep Generative Modeling with Backward Stochastic Differential Equations

本文提出了一种名为 BSDE-Gen 的新型深度生成模型，它将后向随机微分方程（BSDE）的灵活性与深度神经网络的强大功能相结合，用于生成高维复杂目标数据，特别是在图像生成领域。生成建模过程中随机性和不确定性的结合使 BSDE-Gen 成为生成高维数据的有效且自然的方法。本文提供了 BSDE-Gen 的理论框架，描述了其模型架构，提出了用于训练的最大平均差异（MMD）损失函数，并报告了实验结果 ...

How Good Are Deep Generative Models for Solving Inverse Problems?

深度生成模型，例如扩散模型、GAN 和 IMLE，在解决逆问题方面表现出了令人印象深刻的能力。然而，模型生成的解决方案的有效性 ...

A Likelihood Based Approach to Distribution Regression Using Conditional Deep Generative Models

在这项工作中，我们探索了分布回归统计框架下条件深层生成模型的理论特性，其中响应变量位于高维环境空间中，但集中在潜在的低维流形周围。更具体地说，我们研究了用于估计这些模型的基于可能性的方法的大样本特性。我们的结果导致了筛最大似然估计器 (MLE) 的收敛速度，用于估计 Hellinger (Wasserstein) 度量中给定预测变量的响应的条件分布（及其对应的退化对应物） ...

A Gentle Introduction and Tutorial on Deep Generative Models in Transportation Research

深度生成模型（DGM）近年来迅速发展，由于其学习复杂数据分布和生成合成数据的能力而成为各个领域的重要工具。它们在交通研究中的重要性日益得到认可，特别是对于交通数据生成、预测和特征提取等应用。本文对 DGM 进行了全面的介绍和教程，重点关注其在交通运输中的应用 ...

A Primer on Variational Inference for Physics-Informed Deep Generative Modelling

变分推理 (VI) 是一种计算高效且可扩展的近似贝叶斯推理方法。它在不确定性量化的准确性和实际可处理性之间取得了平衡。由于其内置的贝叶斯正则化和灵活性，这是物理相关问题的基本品质，它在生成建模和反演任务方面表现出色 ...

Towards Human-centered Proactive Conversational Agents

最近关于主动会话代理（PCA）的研究主要集中在提高系统预测和规划动作序列的能力，以在用户表达其请求之前完成任务和实现目标。这篇观点论文强调了建立以人为本的 PCA 的重要性，该 PCA 强调人类的需求和期望，并考虑这些代理的道德和社会影响，而不是仅仅关注技术能力。主动式系统和被动式系统的区别在于主动式系统的主动性 ...

ComPeer: A Generative Conversational Agent for Proactive Peer Support

作为同伴支持者的对话代理（CA）已被广泛研究并证明对人们的心理健康有益。然而，以前的对等支持 CA 要么是用户发起的，要么遵循预定义的规则来发起对话，这可能会阻碍用户为了长期利益而与 CA 互动并建立关系。在本文中，我们开发了 ComPeer，这是一种生成式 CA，可以主动为用户提供自适应对等支持 ...

Proactive Agent: Shifting LLM Agents from Reactive Responses to Active Assistance

由大型语言模型支持的智能体在解决复杂任务方面表现出了卓越的能力。然而，大多数代理系统仍然是被动的，限制了它们在需要远见和自主决策的场景中的有效性。在本文中，我们解决了开发主动代理的挑战，该代理能够在没有明确的人类指令的情况下预测和启动任务 ...

Variational Inference in Sparse Gaussian Process Regression and Latent Variable Models - a Gentle Tutorial

在本教程中，我们解释了为稀疏高斯过程（GP）回归和高斯过程潜变量模型（GPLVM）开发的推理过程。由于页数限制，Titsias (2009) 和 Titsias & Lawrence (2010) 中给出的推导很简短，因此要全面了解它需要从几个不同的来源收集结果，并需要大量的代数来填补空白。因此，我们的主要目标是将所有结果和完整推导收集到一个地方，以帮助加快理解这项工作 ...