SOURCE-PINNED BENCHMARK RECORDS

公开任务库

从 18 个固定版本基准来源收集的 4,552 条公开基准任务定义和 831 条参数化定义(模板与层级变体),保留来源原文、验证器引用与源码快照。

任务定义,不是执行成绩。保留原始文本与上游许可。

来源对照

来源记录平台许可证据
OSWorld418Linux / WindowsApache-2.0b138d348 · 源码 ZIP
Windows Agent Arena154WindowsMIT6d39ed88 · 源码 ZIP
WebArena812WebApache-2.0dce04686 · 源码 ZIP
VisualWebArena910WebMIT89f5af29 · 源码 ZIP
macOSWorld231macOSCC-BY-NC-4.0e2ca8334 · 源码 ZIP
AndroidWorld116AndroidApache-2.030583e22 · 源码 ZIP
TheAgentCompany175LinuxMIT98b68ef8 · 源码 ZIP
Enterprise-Bench (DevRev)14LinuxApache-2.0c921345c · 源码 ZIP
iOSWorld133iOSApache-2.0c59287b6 · 源码 ZIP
WorkArena / WorkArena++715WebApache-2.0e8851309 · 源码 ZIP
CADWorld200LinuxApache-2.0fa02aa03 · 配置 ZIP
DeskCraft538LinuxApache-2.073985ecd · 源码 ZIP
WeaveBench114LinuxMITcd887bf5 · 源码 ZIP
WindowsWorld181WindowsApache-2.0fbccd464 · 源码 ZIP
OmegaUse-OfficeVal100未声明Apache-2.05f3da616 · 源码 ZIP
SCUBA300WebApache-2.0b893e223 · 源码 ZIP
Finch / FinWorkBench172未声明CC-BY-3.0-US530700c2 · 原始 JSONL+数据卡 ZIP
BankerToolBench100LinuxCC-BY-4.06407cdc2 · 原始 JSONL+数据卡 ZIP

JSONL · 来源清单 · 许可与说明