基准测试共1篇
Runta FrontierHarness Eval v1.1:83B token 实测,Coding Agent 的钱 64.5% 花在了失败上 - 巴巴小站

Runta FrontierHarness Eval v1.1:83B token 实测,Coding Agent 的钱 64.5% 花在了失败上

Runta 联合 Baseten 发布 FrontierHarness Eval v1.1:83B token、27,280 次 agent 运行的大规模实测显示,Coding Agent 64.5% 的推理成本花在了未通过的试验上,换 harness 最高能让成本差 5 ...
巴巴小站的头像 - 巴巴小站巴巴小站昨天
53220