Collinear AI 发布 CWE-bench v2 公开评测集

Collinear AI 发布 CWE-bench v2 公开评测集，开放 100 个安全漏洞修复任务，覆盖 91 种 CWE。智能体需在真实开源仓库中定位并修复安全弱点，同时不破坏原有功能。 Collinear AI 称评分完全程序化，结果确定，任何人无需额外成本即可复现。数据集设有访问门槛，需先在数据集页面接受访问条件；Harbor 通过 git 获取任务，还需将 HF token 保存到 git 的凭据助手。若要在留出集上评测模型，需联系 cyber@collinear.ai。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。