arxiv Robult: Leveraging Redundancy and Modality Specific Features for Robust Multimodal Learning

阅 读

Star 0
名称
Robult: Leveraging Redundancy and Modality Specific Features for Robust Multimodal Learning
首页
https://yiyibooks.cn/arxiv/2509.03477v1/index.html
原始地址
https://arxiv.org/pdf/2509.03477
描述
解决缺失的模式和有限的标记数据对于推进稳健的多模式学习至关重要。我们提出了 Robult，这是一个可扩展的框架，旨在通过保留特定于模态的信息并通过新颖的信息论方法利用冗余来缓解这些挑战。 Robot 优化了两个核心目标：(1) 软正未标记 (PU) 对比损失，可最大限度地提高与任务相关的特征对齐，同时在半监督设置中有效利用有限的标记数据；(2) 潜在重建损失，可确保保留独特的模态特定信息 ...