最近,使用预训练语言模型(PLM)进行提示调整已经证明了关系提取(RE)任务的能力得到了显着增强。然而,在资源匮乏的情况下,可用的训练数据稀缺,由于对关系的肤浅理解,以前的基于提示的方法对于基于提示的表示学习可能仍然表现不佳。为此,我们强调了在资源匮乏的场景中学习高质量关系表示对于 RE 的重要性,并提出了一种新颖的基于提示的关系表示方法,称为 MVRE (\underline{M}ulti-\underline{V}iew \underline{R}elation \underline{E}xtraction),以更好地利用 PLM 的能力来提高低资源提示调整范例中 RE 的性能 ...
数据处理的最新进展刺激了对学习超大规模图的需求。图神经网络(GNN)是解决图学习任务的一种新兴且强大的方法,但众所周知难以扩展。大多数可扩展模型都应用基于节点的技术来简化 GNN 昂贵的图消息传递传播过程 ...
尽管视觉变换器( vit)在计算机视觉领域取得了巨大的成功 ...
图像分类模型倾向于根据与目标变量具有强相关性的数据项的外围属性(即数据集偏差)做出决策 ...
我们提出了一种新的神经网络设计范例可逆列网络(RevCol)。 RevCol的主体由多个子网络副本组成,分别命名为列,子网络之间采用多级可逆连接。这种架构方案使 RevCol 的行为与传统网络有很大不同:在前向传播过程中,RevCol 中的特征在经过每一列时被学习逐渐解开,其总信息被保留,而不是像其他网络那样被压缩或丢弃 ...
物化视图可以显着提高数据库查询性能,但确定要物化的最佳视图集具有挑战性。先前有关自动化和优化物化视图选择的工作在执行时间和总成本方面存在局限性。在本文中,我们提出了一种基于遗传算法的新颖的物化视图选择方法,旨在最大限度地减少执行时间和总成本 ...
文本到SQL模型可以生成候选SQL查询列表,最佳查询通常位于候选列表中,但不在列表顶部。有效的重新排序方法可以从候选列表中选择正确的SQL查询并模型的性能。先前关于提高代码生成的研究自动生成测试示例并使用它们对候选代码重新排序... ...
随着大型语言模型(llm)的最新发展,对于广大开发人员来说,llm加快了功能开发过程,llm生成具有适当安全措施的代码是比功能代码生成更具挑战性的任务... ...
为用户查询生成准确的 SQL(文本到 SQL)是一个长期存在的问题,因为 SQL 的生成需要理解查询和数据库,并相应地从数据库中检索准确的数据。现有的模型依赖于大型语言模型(LLM)的综合能力来根据数据库模式生成SQL。然而,有一些必要的知识没有明确包含在数据库模式中,或者 LLM 已经学到了 ...
文本到 SQL (Text2SQL) 的最新进展强调在上下文学习中刺激大型语言模型 (LLM),取得了显着的成果。然而,他们在处理详细的数据库信息和复杂的用户意图时面临挑战。本文提出了一个两阶段框架来增强当前基于 LLM 的自然语言到 SQL 系统的性能 ...