HF Daily Papers·· 3 天前精选AI 评分47
AskStream 基准:流式视频理解在不确定性下何时主动提问、问什么
AskStream: When and What to Ask Proactively under Uncertainty in Streaming Video Understanding
AI 导读
研究团队提出 AskStream 多轮基准,用于评估流式视频理解模型在不确定性下主动询问缺失信息的能力。该基准覆盖视频和用户两类不确定性,包含 4 类任务、8 个子任务、438 个视频及 2,714 个人工标注的帧级时间窗口,动作分为等待、提问和回答。在选择题和开放式设置中,最强模型的 Ask-F1 也仅为 52.18%,反映出模型主动寻求信息能力的局限。
推荐理由
AskStream 将流式视频交互拆分为等待、提问和回答三类动作,并用多轮数据呈现模型主动补全信息的关键难点。
来源:HF Daily Papers · huggingface.co