基本信息

多模式病理-基因组分析在癌症生存预测中变得越来越重要。然而，现有研究主要利用多实例学习来聚合斑块级特征，忽略了病理图像中上下文和层次细节的信息丢失。此外，病理学和基因组学之间数据粒度和维度的差异导致显着的模态不平衡。病理数据固有的高空间分辨率使其发挥主导作用，同时在多模式整合中掩盖基因组学。在本文中，我们提出了一种多模式生存预测框架，该框架结合了超图学习，可以有效地从病理图像中捕获上下文和层次细节。此外，它采用模态重新平衡机制和交互式对齐融合策略来动态重新加权两种模态的贡献，从而减轻病理基因组不平衡。在五个 TCGA 数据集上进行了定量和定性实验，证明我们的模型在 C-Index 性能方面优于先进方法 3.4% 以上 ...