部分微分方程(PDE)问题通常表现出强烈的局部空间结构,并且有效捕获这些结构对于近似其溶液至关重要。最近,傅立叶神经操作员(FNO)已成为解决这些PDE问题的有效方法。通过在频域中使用参数化,FNO可以有效捕获全局模式 ...
多通道成像(MCI)包含一系列挑战,用于编码传统图像中不存在的有用特征表示。例如,来自两个不同卫星的图像都可能包含RGB通道,但是对于每个成像源,其余的通道可能不同。因此,MCI模型必须在测试时支持各种通道配置 ...
Vision Transformer(VIT)已成为现代计算机视觉领域的强大架构。但是,它在某些成像场(例如显微镜和卫星成像)中的应用提出了独特的挑战。在这些域中,图像通常包含多个通道,每个通道都带有语义上不同和独立的信息 ...
我们介绍了一种称为条件可逆神经网络(CINN)的新体系结构,并使用它来解决自然图像的各种图像到图像翻译的任务。由于某些基本限制,现有INN模型不容易实现这一目标。 CINN将纯生成的Inn模型与不受约束的进料网络相结合,该网络有效地将调理图像预处理成最大信息的特征 ...
建模高频信息是科学机器学习的关键挑战。例如,由于涡流和涡流引起的旋转流体运动,雷诺数字3500及以上的Navier-Stokes方程的完全湍流模拟可能会产生高频信号。忠实地使用神经网络对此类信号进行建模取决于准确地重建中等至高频 ...
加速的MRI重建过程提出了一个充满挑战的逆问题,这是由于K空间中大量采样的广泛采样。最近,Vision Transformers(VIT)已成为此任务的主流,证明了绩效的实质性改进。但是,仍然存在三个重要问题:(1)VIT难以捕获图像的高频组成部分,从而限制了它们检测本地纹理和边缘信息的能力,从而阻碍了MRI恢复; (2)以前的方法计算相关和无关 Token 中的多头自我注意力(MSA),引入噪声并显着增加计算负担; (3)VIT中的幼稚前馈网络无法对图像恢复很重要的多尺度信息进行建模 ...
通常,地球系统(例如天气和气候)的预测依赖于具有复杂物理模型的数值模拟,因此计算既昂贵又对领域专业知识的要求很高 ...
准确的天气预报对人类活动至关重要。当前,天气预报有两个范例:数值天气预测(NWP)和基于深度学习的预测(DLP)。 NWP利用大气物理学进行天气建模,但数据利用率不佳和高计算成本,而DLP可以直接从大量数据中学习天气模式,但要努力纳入物理定律 ...
本文介绍了一种方法,旨在通过有限的计算,通过多保真评估,机器学习模型和优化算法的战略协同作用来扩大受限计算的情况下的反向设计优化过程。对两个不同的工程逆设计问题进行了分析:翼型逆设计和标量场重建问题。它利用了一个机器学习模型在每个优化周期中训练有低保真模拟数据,从而熟练地预测了目标变量,并辨别是否需要进行高保真模拟,这特别是保守计算资源 ...
如果我们想在现实中部署它们之前在模拟中训练机器人,那么假定减少SIM2REAL差距的人似乎很自然,并且几乎是不言而喻的,涉及创建增加忠诚度的模拟器(因为现实就是事实)。我们挑战了这一假设,并提出了相反的假设-SIM2REAL转移机器人可以通过较低(不是更高)的保真度模拟来改善。我们使用3种不同的机器人(A1,Aliengo,Spot)对这一假设进行了系统的大规模评估 - 在现实世界中以及2个不同的模拟器(栖息地和Igibson) ...