Vals AI 表示，OpenAI 发布 Astra for Law 后使用 Legal Research Bench 进行验证。OpenAI 自报结果显示，Astra for Law 在各价格点均超过带 Web Search 的 GPT-6 Astra：加权评分 90.0% 对 84.1%，全通过率 53.7% 对 39.6%；Vals 正在用保留测试集复核结果。

核心要点速览 (Key Takeaways)

  • ✓Astra for Law 在 Vals 加权法律研究评分中自报达到 90.0%，高于 GPT-6 Astra + Web Search 的 84.1%。
  • ✓全通过率为 53.7%，对比 GPT-6 Astra + Web Search 的 39.6%，但结果仍待 Vals 保留集复核。
  • ✓该案例强调专门化提示、工具与检索配置会显著影响大模型基准表现及价格比较。
ADSponsored