ARC Prize 公布对 OpenAI GPT-6 Astra 的实测:在 ARC-AGI-3 Semi-Private 上,标准 harness 约 62.7%(约 $26k),Provider Adapter harness 可达 99.9%(约 $19k);并称在 96% 关卡上动作效率优于人类基线。分析强调 Astra 会自建符号记法与自定义工具。
核心要点速览 (Key Takeaways)
- ✓标准 harness:ARC-AGI-3 Semi-Private 约 62.7% / ~$26k,可与厂商无关接口对比。
- ✓Provider Adapter:保留不透明推理状态与压缩上下文,分数升至约 99.9%,总 token 约少 49%。
- ✓动作效率:在 96% 关卡少于人类中位动作数;会现场生成符号记法与游戏专用工具代码。
讨论与评论
0登录后即可参与深度讨论
与广大 AI 开发者、工程师交流评测心得与前沿洞察