QaNER: Prompting Question Answering Models for Few-shot Named Entity Recognition

最近，基于提示的预训练语言模型学习通过利用提示作为任务指导来提高标签效率，在少量命名实体识别（NER）中取得了成功。然而，之前基于提示的少样本 NER 方法存在一些局限性，例如计算复杂度较高、零样本能力差、需要手动提示工程或缺乏提示鲁棒性。在这项工作中，我们通过提出一种新的基于提示的学习 NER 方法和问答 (QA) 来解决这些缺点，称为 QaNER ...

How far is Language Model from 100% Few-shot Named Entity Recognition in Medical Domain

语言模型 (LM) 的最新进展导致了强大模型的出现，例如小型 LM（例如 T5）和大型 LM（例如 T5） ...

Improving Large Language Models for Clinical Named Entity Recognition via Prompt Engineering

目的：本研究量化了 GPT-3.5 和 GPT-4 在临床命名实体识别 (NER) 任务中的能力，并提出了特定于任务的提示以提高其性能。材料和方法：我们在两项临床 NER 任务上评估了这些模型：(1) 根据 2010 年 i2b2 概念提取共享任务，从 MTSamples 语料库中的临床记录中提取医疗问题、治疗和测试，以及 (2) 识别神经系统疫苗不良事件报告系统 (VAERS) 中安全报告中与疾病相关的不良事件 ...

Inspire the Large Language Model by External Knowledge on BioMedical Named Entity Recognition

大型语言模型 (LLM) 在许多 NLP 任务中表现出了主导性的性能，尤其是在生成任务中。然而，它们在某些信息提取任务中常常达不到要求，特别是那些需要特定领域知识的任务，例如生物医学命名实体识别（NER）。在本文中，受Chain-of-thought的启发，我们利用LLM逐步解决生物医学NER：将NER任务分解为实体跨度提取和实体类型确定 ...

Aligning Instruction Tasks Unlocks Large Language Models as Zero-Shot Relation Extractors

最近的工作表明，在大规模指令跟踪数据集上微调大型语言模型 (LLM) 可以显着提高其在各种 NLP 任务上的性能，尤其是在零样本设置中。然而，即使是高级指令调整的 LLM 在关系提取（RE）（一项基本的信息提取任务）方面仍然无法胜过小型 LM。我们假设指令调优无法在法学硕士中激发出强大的 RE 能力，因为 RE 在指令调优数据集中的发生率较低，占所有任务的比例不到 1%（Wang 等人） ...

GPT-RE: In-context Learning for Relation Extraction using Large Language Models

尽管大型语言模型（LLM）（例如 GPT-3）具有突破性成就的潜力，但它们仍然远远落后于完全监督的基线（例如 ...

DeepStruct: Pretraining of Language Models for Structure Prediction

我们介绍了一种提高语言模型结构理解能力的方法。与之前通过特定于任务的增强来微调模型的方法不同，我们在与任务无关的语料库集合上预训练语言模型，以从文本生成结构。我们的结构预训练可以实现模型所学到的有关结构任务的知识的零样本迁移 ...