我们介绍了Poseidon,这是一个学习PDE的解决方案运营商的基础模型。它基于多尺度运算符 Transformer ,具有时间条件的层规范,可连续评估。还提出了一种利用时间依赖性PDE的半组特性来允许大量扩展训练数据的新型培训策略 ...
对有限数据培训的深度学习模型缺乏对物理世界的完全了解。另一方面,通过将数学表达的自然定律纳入其训练损失函数,将物理知识的神经网络(PINN)注入了这种知识。通过遵守物理定律,Pinns在有限数据制度中提供了比纯数据驱动模型的优势 ...
物理知识的神经网络(PINNS)位于科学机器学习的最前沿,这使得可以建立具有物理定律并能够准确模拟它们的机器智能。但是,当今的PINN经常接受单个物理任务的培训,并且需要针对每个新任务的计算昂贵重新训练,即使是针对来自类似物理域的任务。为了解决这一限制,本文提出了一种开创性的方法,以通过鲍德维尼亚进化的框架提高PINNS的普遍性 ...
基础模型已经彻底改变了语言建模,而在科学计算中是否复制了这种成功。我们提出了Omniarch,这是第一个旨在通过物理对齐来解决多尺度和多物理科学计算问题的原型。我们通过一个统一的建筑解决了这三个挑战 ...
基于梯度的元学习方法主要应用于经典的机器学习任务,例如图像分类。最近,诸如神经操作员之类的诸如神经操作员之类的深度学习方法开始对学习和预测复杂物理系统的响应产生重要影响,直接直接从观察性数据中。由于在这种情况下的数据采集通常具有挑战性且昂贵,因此利用和将现有知识转移到新的和看不见的物理系统的呼吁更加敏锐 ...
用机器学习解决部分微分方程(PDE)最近引起了人们的极大关注,因为PDE是建模现实世界系统的基本工具,从基本物理科学到高级工程学科。各个学科的大多数实际物理系统实际上都参与了多个耦合的物理领域,而不是一个字段。但是,以前的机器学习研究主要集中于解决单场问题,但忽略了现实世界中多物理问题的重要性和特征 ...
作为物理替代模型的神经操作员最近引起了人们的兴趣。随着问题的复杂性的越来越多,出现了自然的问题:什么是将神经操作员扩展到更大且更复杂的模拟的有效方法 - 最重要的是考虑到不同类型的仿真数据集。这是特别感兴趣的,因为类似于其数值对应物,即使系统的基础动力学相似,在应用程序中也使用了不同的技术 ...
部分微分方程(PDE)对于描述复杂的物理系统模拟至关重要。他们昂贵的解决方案技术导致人们对基于深神网络的替代物的兴趣增加。但是,训练这种替代物的实际实用性取决于它们对复杂多尺度时空现象进行建模的能力 ...
由于复杂的几何形状,物理变量之间的相互作用以及有限量的高分辨率培训数据,现有的神经操作员体系结构在解决多物理问题的耦合部分微分方程(PDE)时面临挑战。为了解决这些问题,我们提出了CODOMAIN注意神经操作员(CODA-NO),该神经操作员将功能沿着代码域或渠道空间施加,从而实现了多个PDE系统的自我监督学习或预处理。具体而言,我们将位置编码,自我注意力和归一化层扩展到功能空间 ...
尽管在常规机器学习中非常成功使用,但基于卷积的神经网络体系结构(认为在功能空间中是不一致的)在PDE的学习解决方案操作员的背景下被忽略了。在这里,我们提出了卷积神经网络的新颖适应性,以证明它们确实能够作为输入和输出处理功能。所得的架构被称为卷积神经操作员(CNOS),专门旨在保留其潜在的连续性,即使在计算机上以离散的形式实施也是如此 ...