HF Daily Papers·· 5 天前精选AI 评分40
哪些对比学习策略真正有效:通用多模态嵌入的受控研究
What Really Works for Universal Multimodal Embeddings? A Controlled Study of Contrastive Training Strategies
AI 导读
这篇论文在 MMEB 基准上系统评估了多模态嵌入对比学习的多种负样本选择、批次构建与梯度调节策略,发现多数现有策略相比标准对齐基线增益有限,部分甚至会降低整体性能。
推荐理由
论文在统一框架下复现并对比了多种对比学习策略,揭示出多数策略增益有限,并给出三条失败模式与可迁移的训练组合方案。
来源:HF Daily Papers · huggingface.co