Claude Haiku 5.5公布ARC-AGI系列评测成绩

ARC Prize 于2026年10月14日公布 Claude Haiku 5.5 在 ARC-AGI 系列评测中的结果，报告其在 ARC-AGI-1、ARC-AGI-2 和 ARC-AGI-3 上分别取得89.0%、61.3%和2.8%的成绩；关注价值在于同一模型在不同难度与评测设定下表现差异明显，不能用单一排名概括能力。

• ARC-AGI-2 的报告成本为每任务0.085美元，ARC-AGI-1 为0.051美元。
• ARC-AGI-3 的成绩同时受 provider adapter harness 与标准 harness 影响，分别为2.8%和0.5%，成本也不同。
• 这些数字属于特定基准与运行配置下的结果，不等同于通用推理能力或实际工作效率。
• ARC Prize 将其描述为 Anthropic 小模型梯队中的有竞争力表现，但这属于基准语境下的评价。
• 影响/看点：如果成绩在统一模型版本、预算和执行框架下稳定复现，Haiku 5.5 可能在成本敏感型推理任务中具备吸引力；是否适合生产部署，还取决于任务分布、延迟和错误代价。
• 资料依据:
• ARC Prize（2026-10-14）：https://arcprize.org/results/anthropic-claude-haiku-5-5
• ARC Prize（2026-10-14）：https://x.com/arcprize/status/2110417867288039864

本内容由 AI 生成，仅供参考，请注意甄别