CACB Agent 能力基准 · 功能说明

1题/10题宿主观察与第二阶段精确清理

我可以先用很小、固定的任务观察宿主怎样显示额度、费用和耗时,再决定是否值得启动正式基准;这次观察不会被误算成模型能力结果。

当前情况:已有小任务观察额度和耗时的方法;本轮未运行,没有新的费用、耗时或清理结果。

项目快照核对于 ;具体测试保留各自日期,页面不实时探测运行状态。

复制 AI 续作说明带着这个项目,交给 AI 接着做

写下接下来想做什么。这里会把你的目标、本页事实和来源整理在一起,复制给 Astra 或 Gemini 后,就不用重新介绍项目了。

整理续作说明

只在当前网页整理,不会发起 AI 任务。

用途与实际影响

这项功能怎样使用

为什么需要它

为了观察额度和费用而临时运行的小任务,不能占用正式评测目录、反复重试或顺手删掉别的内容。

举个实际例子

我只想先看看一个新模型大概消耗多少额度和费用。它会做一次固定的小转换,让我在宿主界面里看清真实消耗;我确认完后再单独清掉这次临时目录,不把探针结果塞进排行榜。

最后我会得到什么

实际执行探针后,得到这一次宿主显示的额度、费用或耗时,以及哪些数字无法可靠换算;再单独核对只清理本次临时目录。它不产生能力结论。当前页面没有重新运行探针。

正常时

临时位置原本为空,小任务完成、宿主显示结果已观察,随后只清理这一次内容时,探针才闭合。

发现问题时

小任务失败就保留真实失败,不能反复抽样挑最好的结果。

入口不可用或证据不足时

临时位置已有内容或无法精确清理时停止,不覆盖或扩大删除范围。

从哪里开始

在 CACB 项目的 AI 对话中说只想观察宿主额度、费用或耗时,请先判断一题短探针是否够用。

需要准备什么

  • 想观察额度、费用还是耗时
  • 是否有必须使用较长探针的原因

从开始到拿到结果

  1. 1

    系统核对并处理

    先看一题能否得到可观察数据,必要时才运行十题版;探针与正式评测分开。

  2. 2

    交付与接续

    交回当场观察和精确清理回执;探针不进入能力分数,原目录已存在时不覆盖。