跳到正文
HF Daily Papers·· 2 天前精选AI 评分70

EmbeddingGemma 2 论文提出统一高效的多模态表征方案

EmbeddingGemma 2: Unified and Efficient Multimodal Representations

AI 导读

EmbeddingGemma 2 论文提出一个原生统一文本、图像、音频、视频及其组合表征的开源多模态嵌入模型。模型采用简化逐层嵌入与包含模态和目标递进的多阶段课程,并在覆盖各模态的综合嵌入基准中超过专用模型及规模大 2 至 12 倍的模型。设计支持选择性加载模态编码器、调整视觉 token 预算、截断嵌入维度和量化权重,论文地址为 https://arxiv.org/abs/2610.37364。

推荐理由

论文在统一多模态表征之外,还报告了相对专用模型和规模大 2 至 12 倍模型的性能对比。

来源:HF Daily Papers · huggingface.co