Machine learning with neural networks

这些是我在瑞典哥德堡的哥德堡大学和查尔姆斯理工大学为科学家和工程师讲授的神经网络机器学习课程的讲义。该材料分为三个部分：Hopfield 网络、标记数据的监督学习以及未标记数据集的学习算法。第一部分介绍随机循环网络：Hopfield 网络和玻尔兹曼机 ...

Gaussian Processes: A Quick Introduction

高斯过程 (GP) 的简要介绍。该文档的三个部分考虑了 GP 的回归、分类和降维 ...

An Introduction to Gaussian Process Models

在过去的二十年中，由于偏差方差权衡以及与贝叶斯数学的紧密联系等一些有益的特性，高斯过程回归越来越多地用于动态系统建模。作为数据驱动的方法，高斯过程是非线性函数回归的强大工具，无需太多先验知识。与大多数其他技术相比，高斯过程建模不仅提供平均预测，还提供模型保真度的度量 ...

Some Fractional and Multifractional Gaussian Processes: A Brief Introduction

本文简要介绍了自然现象和人造系统建模中常用的一些重要的分数和多重分数高斯过程。这些过程包括分数布朗运动（标准型和黎曼-刘维尔型）、多重分数布朗运动、分数和多重分数奥恩斯坦-乌伦贝克过程、分数和多重雷斯-贝塞尔运动。简要提及了这些过程的可能应用 ...

Inference in Deep Gaussian Processes using Stochastic Gradient Hamiltonian Monte Carlo

深度高斯过程 (DGP) 是高斯过程的分层概括，它将经过良好校准的不确定性估计与多层模型的高度灵活性相结合。这些模型的最大挑战之一是精确推理很棘手。当前最先进的推理方法，变分推理（VI），采用后验分布的高斯近似 ...

Deep Neural Networks as Gaussian Processes

人们早就知道，具有 i.i.d. 的单层全连接神经网络 ...

Animate Anyone: Consistent and Controllable Image-to-Video Synthesis for Character Animation

角色动画旨在通过驱动信号从静止图像生成角色视频。目前，扩散模型因其强大的生成能力已成为视觉生成研究的主流。然而，图像到视频领域仍然存在挑战，特别是在角色动画中，暂时保持与角色详细信息的一致性仍然是一个艰巨的问题 ...

MuseTalk: Real-Time High Quality Lip Synchronization with Latent Space Inpainting

在面部视觉配音中实现高分辨率、身份一致性和准确的唇语同步提出了重大挑战，特别是对于实时视频流等实时应用。我们提出了 MuseTalk，它在由变分自动编码器编码的潜在空间中生成唇形同步目标，从而能够通过高效的推理生成高保真说话的脸部视频。具体来说，我们将人脸图像被遮挡的下半部分及其本身作为参考投影到低维潜在空间中，并使用多尺度 U-Net 来融合各个级别的音频和视觉特征 ...

Tutorial on Diffusion Models for Imaging and Vision

近年来，生成工具的惊人增长为文本到图像生成和文本到视频生成领域的许多令人兴奋的应用提供了支持。这些生成工具背后的基本原理是扩散的概念，这是一种特殊的采样机制，克服了以前的方法中被认为难以解决的一些缺点。本教程的目标是讨论扩散模型的基本思想 ...

Stochastic Scene-Aware Motion Prediction

计算机视觉的一个长期目标是捕捉、建模和真实地综合人类行为。具体来说，通过从数据中学习，我们的目标是使虚拟人类能够在杂乱的室内场景中导航并自然地与物体交互。这种具体行为在虚拟现实、计算机游戏和机器人技术中都有应用，而合成行为可以用作训练数据源 ...