Evolving Large Language Model Assistant with Long-Term Conditional Memory

随着大型语言模型的迅速发展，像Chatgpt这样的AI助手已经广泛进入了人们的作品和生活。在本文中，我们提出了一种不断发展的大语模型助手，该助理利用了口头的长期记忆。它重点是保留用户和AI助手之间历史对话中的知识和经验，可以将其应用于未来的对话，以产生更好的响应 ...

Dynamic Modes as Time Representation for Spatiotemporal Forecasting

本文介绍了一种数据驱动的时间嵌入方法，用于对时空预测任务中的长期季节性依赖性进行建模。所提出的方法采用动态模式分解（DMD）直接从观察到的数据中提取时间模式，从而消除了对明确时间戳或手工制作的时间特征的需求。这些时间模式用作时间表示，可以将它们无缝整合到深时时空预测模型中 ...

Constraint-aware and Ranking-distilled Token Pruning for Efficient Transformer Inference

在资源受限的方案中，在下游任务上部署预训练的 Transformer 模型，由于其高推理成本的高推理成本，该模型的推理成本很高，该成本随输入序列长度而迅速增长。在这项工作中，我们提出了一个约束意识和排名延伸的 Token 修剪方法，该方法有选择地删除不必要的 Token ，因为输入序列通过层次，从而使模型可以提高在线推理速度，同时保留准确性。 TOP通过排名降低的 Token 蒸馏技术克服了 Token 重要性排名不准确的 Token 重要性排名的局限性，该技术将有效的 Token 排名从未经修复的模型的最终层蒸馏到修剪模型的早期层中 ...

Approximate evaluation of marginal association probabilities with belief propagation

数据关联是目标和测量之间对应关系的推理问题，是跟踪的基本问题。本文提出了数据关联的图形模型公式，并应用了一种近似推断方法，即信仰传播（BP），以获得边缘关联概率的估计。我们证明，BP保证会收敛，并绑定必要的迭代次数 ...

Decoupling Human and Camera Motion from Videos in the Wild

我们提出了一种从野外视频中重建全球人类轨迹的方法。我们的优化方法将相机和人类的运动解开，这使我们能够将人们放置在同一世界坐标框架中。大多数现有方法不会对相机运动进行建模；依靠背景像素来推断3D人类运动的方法通常需要进行完整的场景重建，这对于内部视频通常是不可能的 ...

Trajectory Flow Matching with Applications to Clinical Time Series Modeling

在广泛的应用中，尤其是在医学中，建模随机和不规则抽样的时间序列是一个具有挑战性的问题。神经随机微分方程（神经SDES）是针对此问题的有吸引力的建模技术，它可以用神经网络参数化SDE的漂移和扩散项。但是，当前用于训练神经SDE的算法需要通过SDE动力学进行反向传播，从而极大地限制了它们的可扩展性和稳定性 ...

Synergistic Global-space Camera and Human Reconstruction from Videos

在从单眼视频中重建静态场景或人体的重建方面取得了显着的进步。然而，这两个问题在很大程度上是独立解决的，没有太多协同作用。大多数视觉大满贯方法只能重建摄像头轨迹和场景结构的缩放，而大多数HMR方法以度量标准重建人网格，但使用相机和场景的推理不足 ...

FieldFormer: Self-supervised Reconstruction of Physical Fields via Tensor Attention Prior

从\ textIt {原位观察值（例如无线电图和海洋声速场）重建物理场张量，对于在各种应用中启用环境意识的决策至关重要，例如，无线通信和水下声学 ...

An Interpretable Automated Mechanism Design Framework with Large Language Models

长期以来，机理设计一直是经济理论的基石，传统方法依赖数学推导。最近，出现了自动化方法，包括具有神经网络的可微分经济学，用于设计付款和分配。尽管分析方法和自动化方法都已经提高了该领域，但它们每个都面临着重要的弱点：数学推导不是自动化的，并且经常难以扩展到复杂的问题，而自动化，尤其是基于神经网络的方法的方法有限 ...

Entropy-Lens: The Information Signature of Transformer Computations

Transformer 模型已经彻底改变了从自然语言处理到计算机视觉的领域，但是它们的内部计算动力学仍然了解到引起了人们对可预测性和鲁棒性的关注。在这项工作中，我们介绍了熵镜，这是一个可扩展的模型不合SNOSTIC框架，利用信息理论来解释冷冻的，现成的大规模 Transformer 。通过量化中间残差流中香农熵的演变，我们的方法提取了区分模型家族，对特定于任务的提示进行分类并与输出精度相关的计算标志 ...