跳到正文
原文
HF Daily Papers·· 5 天前精选AI 评分40

哪些对比学习策略真正有效:通用多模态嵌入的受控研究

What Really Works for Universal Multimodal Embeddings? A Controlled Study of Contrastive Training Strategies

AI 导读

这篇论文在 MMEB 基准上系统评估了多模态嵌入对比学习的多种负样本选择、批次构建与梯度调节策略,发现多数现有策略相比标准对齐基线增益有限,部分甚至会降低整体性能。

推荐理由

论文在统一框架下复现并对比了多种对比学习策略,揭示出多数策略增益有限,并给出三条失败模式与可迁移的训练组合方案。

来源:HF Daily Papers · huggingface.co