Star
SOURCE LIBRARY

SWE-bench 测试状态与修复评分

原始来源、版本、阅读范围与本地保存记录。

阅读原文
This article is written in Chinese. The original equations, source links, and code remain unchanged.
本页目录

来源ID:v1-benchagents-swebench-grading

打开原始来源 · 原始登记信息 · 保存记录

这份资料用在哪里

阅读与版本

  • 实际登记的读取范围:test_passed/test_maintained/test_failed 85–109;get_logs_eval 113–176;get_eval_tests_report 179–285;compute与resolution 288–326;get_eval_report 329–393
  • 原生版本:02e7a74ffd0b707aab73d203fe87bdc7c76afc8e
  • 原登记指纹:text-sha256:a095273010175001a6779e365b3b77abb8657c7ac2e4f80b4bc360faa6f09483
  • 定位:swebench/harness/grading.py::get_eval_tests_report、get_resolution_status、get_logs_eval

本地资料

已有来源快照的保存记录;取得时间见档案,新克隆需重新下载本地缓存。

原文缓存位于Git忽略的sources/.local/,具体相对路径与字节SHA-256见保存记录。缓存可能是论文正文、源码文件或网站入口,保存记录中的representation会说明范围;保存不表示全文已阅读或结论已复现。

第三方全文默认只在本地留存。原作许可未核实时不随本仓库公开分发;本库MIT许可证不改变原作权利。

返回来源资料库

发现新的理解,或需要修正的地方?一起完善这篇笔记 ↗
试试 Transformer、RAG、Codex 或 KV 缓存