近年来,及时调整引发了适应预训练模型的研究热潮。与语言领域采用的统一预训练策略不同,图领域呈现出多样化的预训练策略,这给设计适当的基于提示的图神经网络调整方法带来了挑战。虽然一些开创性工作为采用边缘预测作为预训练任务的模型设计了专门的提示函数,但这些方法仅限于特定的预训练 GNN 模型,缺乏更广泛的适用性 ...

0 0 0 0 2024/06/05 arXiv:2209.15240v5 xiaohao

联合集群(FC)是一个无监督学习问题,出现在许多实际应用中,包括个性化推荐和医疗保健系统。随着最近确保“被遗忘权”的法律的通过,FC方法的机器遗忘问题变得非常重要。我们首次引入了 FC 的机器遗忘问题,并为定制的安全 FC 框架提出了一种有效的遗忘机制 ...

0 0 0 0 2024/05/23 arXiv:2210.16424v2 xiaohao

在这项工作中,我们探讨了无监督联合学习 (FL) 的独特挑战和机遇。我们基于广泛使用的 Lloyd's 方法进行 $k$-means 聚类,开发并分析了一种一次性联合聚类方案 $k$-FED。与许多监督问题相反,我们表明联邦网络中的统计异质性问题实际上可以有利于我们的分析 ...

0 0 0 0 2024/05/23 arXiv:2103.00697v2 xiaohao

自训练算法训练模型以适应另一个先前学习的模型预测的伪标签,在使用神经网络学习未标记数据方面非常成功。然而,目前对自训练的理论理解仅适用于线性模型。这项工作为半监督学习、无监督领域适应和无监督学习的深度网络自训练提供了统一的理论分析 ...

0 0 0 0 2024/05/06 arXiv:2010.03622v5 xiaohao

最近的自我监督学习工作依靠对比学习范式推进了最先进的技术,该范式通过将正对或来自同一类的相似示例推得更近,同时保持负对远离来学习表示。尽管取得了实证上的成功,但理论基础仍然有限——先前的分析假设给定相同类别标签的正对的条件独立,但最近的实证应用使用高度相关的正对(即, ...

0 0 0 0 2024/04/30 arXiv:2106.04156v7 xiaohao

聚类是一种基本的无监督学习方法。许多聚类算法(例如 $k$-means)依赖欧氏距离作为相似性度量,这通常不是图像等高维数据最相关的度量。因此,学习可以更好地反映数据集几何形状的低维嵌入对于性能很有帮助 ...

0 0 0 0 2024/04/23 arXiv:1910.09036v1 xiaohao

联邦学习已成为一种有前途的大规模分布式方式,可以在大量边缘设备上训练联合深度模型,同时将私人用户数据严格保留在设备上。在这项工作中,出于确保用户之间的公平性和针对恶意对手的鲁棒性的动机,我们将联邦学习制定为多目标优化,并提出了一种新算法 FedMGDA+,保证收敛到 Pareto 平稳解。 FedMGDA+ 易于实施,需要调整的超参数较少,并且不会牺牲任何参与用户的性能 ...

0 0 0 0 2024/04/03 arXiv:2006.11489v2 xiaohao

联邦学习在去中心化数据建模方面取得了有效的表现。在实践中,客户数据没有被很好地标记,这使得使用非 IID 数据进行联合无监督学习 (FUSL) 成为可能。然而,现有 FUSL 方法的性能因表示不足而受到影响,即 ...

0 0 0 0 2024/04/01 arXiv:2403.16398v1 xiaohao

联邦学习通常用于标签容易获得的任务(例如,下一个单词预测) ...

0 0 0 0 2024/04/01 arXiv:2205.11506v2 xiaohao

节点分类是一种经典的图机器学习任务,图神经网络(GNN)最近在该任务上取得了很好的成果。然而,人们通常认为标准 GNN 只适用于同亲图,即 ...

0 0 0 0 2024/03/28 arXiv:2302.11640v2 xiaohao

来一起翻译吧!


为了您和其他读者获得更好的阅读体验,请您在阅读时勇敢地改正翻译,特别是一些显而易见的机器翻译错误。


虽然我们追求卓越,但我们并不要求翻译十全十美,因此请不要担心您翻译有误 —— 我们的服务器已经记录所有的翻译,您不必担心会因为您的失误导致无法挽回的破坏。(改编自维基百科)