Anthony Gitter· anthonygitter·· 7 小时前精选AI 评分58
Anthony Gitter 质疑 DRYLAB-Bench 生物安全风险评分可解释性
I read DRYLAB-Bench and do not find the proposed Biosecurity Risk Score to be interpretable. At the core, it is a z-score (with clipping,...
AI 导读
Anthony Gitter 表示读过 DRYLAB-Bench 后认为其提出的 Biosecurity Risk Score 不可解释，核心只是一个经过截断和归一化等调整的 z-score。他引用的介绍称，该基准用 ProteinGym 与 ViroGym 的 187,695 条深度突变扫描测量为设计打分，在 30 个生物安全场景中评估 agentic LLM 的迭代突变设计，并报告工具使用使汇总 BRS 从 0.359（S0）升至 0.475（S2）。
阅读原文
来源：Anthony Gitter · x.com
推荐理由
作者从统计构造角度质疑 DRYLAB-Bench 生物安全风险评分的可解释性，适合关注 AI 生物安全评测指标设计的读者。