最近,基础模型在多模式学习方面取得了显着进步。这些模型配备了数百万(或数十亿)参数,通常需要大量的数据以进行填充。但是,由于独特的隐私法规,从不同部门收集和集中培训数据变得具有挑战性 ...
在移动和物联网系统中,联合学习(FL)对于在维护用户隐私的同时有效地使用数据越来越重要。 FL中的一个主要挑战是管理统计异质性,例如非i.i ...
在过程系统的代理建模的背景下,传统数据驱动的深度学习方法经常遇到重大挑战,例如大量数据引起的大量培训成本以及有限的概括能力。作为一种有希望的替代方案,物理学模型结合了部分物理知识,以改善这些挑战。尽管证明了功效,但它们在探索深度和普遍性方面缺乏 ...
尽管在3D场景的理解中取得了令人鼓舞的进展,但开发有效的大型多模式模型(LMM)仍然具有挑战性,该模型能够在复杂的3D环境中理解和推理。大多数以前的方法通常编码3D点和2D图像特征,从而忽略了2D语义和3D对象属性之间的相互作用,以及3D环境中的空间关系。这种限制不仅阻碍了3D场景的全面表示,还损害了培训和推理效率 ...
在过去的几年中,深度学习在各种任务中取得了巨大的进步,例如图像识别,语音识别和机器翻译。这一进展的一个关键方面是新型神经体系结构。目前,人类专家主要是手动开发的,这是一个耗时且容易出错的过程 ...
来自单个图像的3D场景理解是计算机视觉中的关键问题,具有图形,增强现实和机器人技术的下游应用程序。尽管基于扩散的建模方法已经表现出了希望,但它们通常很难维持对象和场景一致性,尤其是在复杂的现实情况下。为了解决这些局限性,我们提出了一种称为局部随机访问序列(LRAS)建模的自回归生成方法,该方法使用局部补丁量化和随机有序的序列生成 ...
对不同数据集进行了现代基础模型的培训,以增强任务和领域的概括,在此过程中,一个核心挑战是如何有效地混合和采样来自多个来源的数据,这自然会导致多任务学习(MTL)的观点(MTL)的角度,而先前的工作MTL的MTL的先前工作则强调了较小的梯度冲突,我们观察到了越来越多的跨度逐渐验证的情况,而远程逐渐消失了,或者远程相互竞争,或者远程相互群体的差异或 Motivated by this observation we propose PiKE (Positive gradient interaction-based K-task weights Estimator) an adaptive data mixing algorithm that dynamically adjusts sampling weights during training PiKE exploits nonconflicting gradient interactions to minimize a neartight upper bound on the average loss decrease at each step while incurring negligible computational overhead We provide theoretical convergence guarantees and show that PiKE outperforms static and非适应性混合基线的基线还扩展了派克,以促进跨任务的平衡学习,而对大刻度语言模型进行了广泛的实验,这证实了与现有方法相比,派克可实现更快的融合并改善下游性能 ...
在极低的比特率下,遥感(RS)图像压缩在实际情况下一直是一项具有挑战性的任务,例如Edge设备存储和狭窄的带宽传输。已经探索了包括VAE和GAN在内的生成模型,以将RS图像压缩到极低的bItrate流中。但是,这些生成模型由于极低的二甲酸酯图像压缩性质高度不足而难以重建视觉上合理的图像 ...
用于获得尺寸正则化Feynman积分W.R.T.的复发关系的系统算法 ...
这篇评论的目的是通过选定主题的旅程提供分析性共形性自举计划的教学介绍。我们回顾了包括大型自旋扰动理论,梅林空间方法和洛伦兹倒置公式的分析方法。这些技术应用于从大N理论到Epsilon扩展和全息超符合符号相关器的各种主题,并在许多明确的例子中得到了证明 ...