What do physics-informed DeepONets learn? Understanding and improving training for scientific computing applications

基于物理的深度算子网络 (DeepONets) 已成为一种很有前景的偏微分方程 (PDE) 解的数值近似方法。在这项工作中，我们的目标是通过评估提取的基函数的普遍性并展示其使用谱方法进行模型简化的潜力，进一步了解基于物理的 DeepONet 正在学习的内容。结果清楚地表明了如何通过奇异值和展开系数的衰减来测量基于物理的 DeepONet 的性能 ...

An Implicit Adaptive Fourier Neural Operator for Long-term Predictions of Three-dimensional Turbulence

三维（3D）动荡流的长期预测是机器学习方法最具挑战性的问题之一。尽管某些现有的机器学习方法，例如隐式U-NET增强的傅立叶神经操作员（IUFNO），已被证明能够实现稳定的湍流长期预测，但它们的计算成本通常很高。在本文中，我们将自适应傅立叶神经操作员（AFNO）从二维空间扩展到3D空间 ...

Hybrid Two-Stage Reconstruction of Multiscale Subsurface Flow with Physics-informed Residual Connected Neural Operator

新型的神经网络在解决部分微分方程方面具有巨大的潜力。对于具有高对比度系数的地下多孔介质中的单相流问题，关键是要开发具有准确的重建能力和严格遵守物理定律的神经操作员。在这项研究中，我们提出了一个混合的两阶段框架，该框架使用多尺度基础功能和物理学引导的深度学习来解决高对比度断裂的多孔介质中的达西流动问题 ...

DoMINO: A Decomposable Multi-scale Iterative Neural Operator for Modeling Large Scale Engineering Simulations

数值模拟在工程产品和流程的设计和开发中起着至关重要的作用。传统的计算方法（例如CFD）可以提供准确的预测，但在计算上却很昂贵，尤其是对于复杂的几何形状而言。文献中已经提出了几种机器学习（ML）模型，以显着减少计算时间，同时保持可接受的准确性 ...

Spatially-Aware Diffusion Models with Cross-Attention for Global Field Reconstruction with Sparse Observations

扩散模型因其表示复杂分布和纳入不确定性的能力而受到关注，这使得它们成为在存在噪声或不完整数据的情况下进行稳健预测的理想选择。在这项研究中，我们在场重建任务中开发和增强了基于分数的扩散模型，其目标是从部分观测中估计完整的空间场。我们引入了一种条件编码方法，使用稀疏观察和插值场的可学习集成作为归纳偏差，在观察到的区域和未观察到的区域之间构建易于处理的映射 ...

Using Large Language Models for Parametric Shape Optimization

最近先进的大语言模型（LLM）展示了其上下文学习的新兴能力，通过自然语言提示促进智能决策，而无需重新训练。这种新的机器学习范式在各个领域都显示出了前景，包括一般控制和优化问题。受这些进步的启发，我们探索了 LLM 在特定且重要的工程任务中的潜力：参数形状优化（PSO） ...

Physics simulation capabilities of LLMs

[摘要]大型语言模型（LLM）可以解决一些本科水平到研究生水平的物理教科书问题，并且精通编码。将这两种功能结合起来，有一天可以使人工智能系统能够模拟和预测物理世界。我们对博士级别到研究级别计算物理问题的最先进（SOTA） LLM 进行了评估 ...

Towards a Foundation Model for Partial Differential Equations: Multi-Operator Learning and Extrapolation

基础模型（例如大型语言模型）已在解决各种语言和图像处理任务方面取得了成功。在这项工作中，我们引入了一种用于科学问题的多模态基础模型，名为 PROSE-PDE。我们的模型专为双模态到双模态学习而设计，是一种多算子学习方法，可以预测时空系统的未来状态，同时学习物理系统的基础控制方程 ...

FLUID-LLM: Learning Computational Fluid Dynamics with Spatiotemporal-aware Large Language Models

学习计算流体动力学 (CFD) 传统上依赖于纳维-斯托克斯方程的计算密集型模拟。最近，大语言模型（LLM）在自然语言处理（NLP）和计算机视觉（CV）方面表现出了卓越的模式识别和推理能力。然而，这些模型难以应对流体动力学固有的复杂几何形状 ...

Text2PDE: Latent Diffusion Models for Accessible Physics Simulation

深度学习的最新进展激发了许多关于偏微分方程（PDE）问题的数据驱动解决方案的研究。这些神经 PDE 求解器通常比数值求解器快得多；然而，每种方法都有其独特的局限性，并且通常会平衡培训成本、数值准确性和对不同问题设置的适用性。为了解决这些限制，我们介绍了几种将潜在扩散模型应用于物理模拟的方法 ...