xAI News·· 2024-03-28精选AI 评分67
xAI 发布 Grok-1.5:128K 上下文与改进的推理能力
Announcing Grok-1.5 Grok-1.5 comes with improved reasoning capabilities and a context length of 128,000 tokens. Available on 𝕏 soon. Mar 28, 2024
AI 导读
xAI 发布 Grok-1.5 模型,支持 128K tokens 上下文长度,主打长上下文理解与改进的推理能力;在 MATH 上取得 50.6%(4-shot)、GSM8K 90%(8-shot)、HumanEval 74.1%(0-shot)、MMLU 81.3%(5-shot),并在 Needle In A Haystack 评测中实现 128K 长度内的完美检索。
推荐理由
原文提供了与 GPT-4、Claude 3 Opus、Gemini Pro 1.5 等模型的横向基准对比,读者可以据此判断 Grok-1.5 的相对性能位置。
来源:xAI News · x.ai