基本信息

在大规模内容推荐系统中，检索充当管道中的初始阶段，负责从数十亿个选项中选择数千个候选项目以传递到排名模块。传统上，占主导地位的检索方法是使用深度神经网络（DNN）双塔结构的基于嵌入的检索（EBR）。然而，在检索任务中应用 Transformer 一直是最近研究的焦点，尽管现实世界的工业部署仍然面临着巨大的挑战。在本文中，我们介绍了 KuaiFormer，这是一种部署在大型内容推荐系统中的新型基于 Transformer 的检索框架。 KuaiFormer 通过从传统的分数估计任务（例如点击率估计）转变为 Transformer 驱动的下一步行动预测范例，从根本上重新定义了检索过程。这种转变可以实现更有效的实时兴趣获取和多兴趣提取，从而显着提高检索性能。 KuaiFormer自2024年5月起成功接入快手App短视频推荐系统，服务超4亿日活跃用户，快手用户日均使用时长显着增长。我们提供了在大规模推荐系统中部署 Transformer 的技术和业务方面的见解，解决了工业实施过程中遇到的实际挑战。我们的研究结果为旨在利用 Transformer 模型来优化大规模内容推荐系统的工程师和研究人员提供了宝贵的指导 ...