传统观点认为，图像生成的自回归模型通常伴随着矢量量化标记。我们观察到，虽然离散值空间可以促进表示分类分布，但它并不是自回归建模所必需的。在这项工作中，我们建议使用扩散过程对每个标记的概率分布进行建模，这使我们能够在连续值空间中应用自回归模型 ...
使用均方误差损失训练的扩散模型往往会生成不切实际的样本。当前最先进的模型依赖于无分类器的指导来提高样本质量，但其令人惊讶的有效性尚未得到充分理解。在本文中，我们表明，无分类器指导的有效性部分源于它是一种隐式感知指导的形式 ...
生成 Transformer 在合成高保真和高分辨率图像方面在计算机视觉社区中经历了快速流行。然而，迄今为止最好的生成 Transformer 模型仍然将图像天真地视为 Token 序列，并按照光栅扫描顺序（即，按顺序解码图像） ...
近年来，视觉文档理解领域取得了显着的进步，主流架构包括一系列视觉和语言模型。可以在基于 OCR 的方法中使用外部 OCR 模型显式提取文本组件，或者可以在无 OCR 的方法中赋予视觉模型阅读功能。通常，对模型的查询仅输入到语言组件，因此需要视觉特征来涵盖整个文档 ...