白泽(Whitzard)女娲实验室 ↗
NUWANUWA INDEX

搜索 NUWA Index

研究 · 测量协议 · 评测结果 · 观点

English
← NUWA Index

评测档案

LABBench2

通过生物学研究任务,考察 AI 对科学工作的辅助能力,而非仅测试事实回忆。

来源与出处 ↓ 阅读研究记录 →

任务与测量

Benchmark 协议档案

任务/对象
原任务配置下的模型或智能体系统
测量目标
通过生物学研究任务,考察 AI 对科学工作的辅助能力,而非仅测试事实回忆。
解释边界
正常生物学研究能力属于使能证据,不能直接证明高危端到端任务能力。
测量档案 · NUWA 解读

档案区分来源方法阅读与既有目录信息;已经公开不代表完成独立证据复核或双语编辑复核。

测量构念
科研能力测试能否比知识选择题更接近有用研究工作?
任务与样本
LABBench2含逾1,900项研究支持任务,在更真实语境比较有工具与无工具模型。
判分与失效情形
研究支持任务正确率,分无工具及工具增强条件。
系统条件
逾1,900任务,实际研究仍被简化。
统计含义
来源报告的结果表述;这不等同于已确定运行次数、分母或估计方法: 作者报告相较旧基准,模型各子任务正确率差异为−26%至−46%。 工具增强效果不一致(§3)。
效度与解释
湿实验执行、模糊目标和跨日迭代仍被简化,验证器及领域广度有限(§4.3)。
适用研究问题
模型建议:使用具体版本与工具条件,不据此推断操作性生物能力增益。
原始来源图表与材料
LABBench2 — Figure 2
Figure 2 · 原文 Figure 2。请结合下方的协议范围与局限阅读。 查看原图 ↗

相关研究问题

参考文献

  1. [1] Jon M Laurent, Albert Bou 等. LABBench2: An Improved Benchmark for AI Systems Performing Biology Research. 2026-02-04. v2 [arXiv]; Author affiliations on the original paper title page; Figure 2