HF Daily Papers·· 4 天前精选AI 评分37
MixTok:结合全局 1D token 与稀疏 2D 精修的自适应视觉分词方法
MixTok: Adaptive Visual Tokenization with Global 1D Tokens and Sparse 2D Refinement
AI 导读
MixTok 提出一种混合视觉分词器,用紧凑 1D 全局表示结合稀疏 2D token 做局部精修,并通过内容自适应路由器在平均 token 预算下选定需要精修的位置。在 ImageNet 256x256 上,平均约 128 个内容 token 重建 rFID 达 1.195,约 131 个 token 生成 gFID 达 1.95。项目页与 GitHub 仓库已公开。
推荐理由
提出 1D 全局加 2D 稀疏精修的混合视觉分词方案,并给出在 ImageNet 上具体的重建与生成指标,可作为对比参考。
来源:HF Daily Papers · huggingface.co