ZeroBench 风格视觉推理
每条样例由一张图片和一道题目组成,题目通过给定的公式把多个视觉子任务(计数,读取价格、标签或时钟指针,镜像推理)串联起来,最终得出一个精确数值。
通过率
将每次尝试的最终答案与参考答案比较。GPT-6-Astra
pass@1,每题尝试 1 次
25.14%
题目答对的比例
74.9%
25.1%
错误正确
题目占比
Qwen3.8-Max-0902
pass rate@5,每题尝试 5 次
9.31%
全部尝试中答对的比例
72.6%
13.7%
8.3%
5.4%
0.0%
0.0%
0/51/52/53/54/55/5
按 5 次尝试中答对次数统计的题目占比