Anthony Gitter 质疑 DRYLAB-Bench 生物安全风险评分可解释性
Anthony Gitter 表示读过 DRYLAB-Bench 后认为其提出的 Biosecurity Risk Score 不可解释,核心只是一个经过截断和归一化等调整的 z-score。他引用的介绍称,该基准用 ProteinGym 与 ViroGym 的 187,695 条深度突变扫描测量为设计打分,在 30 个生物安全场景中评估 agentic LLM 的迭代突变设计,并报告工具使用使汇总 BRS 从 0.359(S0)升至 0.475(S2)。
推荐理由:作者从统计构造角度质疑 DRYLAB-Bench 生物安全风险评分的可解释性,适合关注 AI 生物安全评测指标设计的读者。