白泽(Whitzard)女娲实验室 ↗
NUWANUWA INDEX

搜索 NUWA Index

研究 · 测量协议 · 评测结果 · 观点

English
← 研究目录

研究机构

Anthropic

角色与署名遵循所引原始资料。来源核验不等于独立复现实验。

更多筛选 →

Anthropic ↗

风险评测评测基准

Task-Completion Time Horizons of Frontier AI Models

研究问题以成功的人类基线用时衡量难度时,不同模型版本能够完成的软件任务范围如何变化?

来源摘要论文观察到人类任务时长与智能体成功率的关系,以及所研究版本间任务跨度的上升(§§2.3–3)。

NUWA 研究解读 · 独立复核待完成 · 包含: 问题 / 方法 / 局限

自主性Capability · 任务能力
风险评测评测基准

The Next Challenge for Agentic Cybersecurity: A Realistic, Contamination-Free Reverse Engineering Benchmark

研究问题无源码时,智能体能否恢复真实规模二进制的语义?

来源摘要GPT-5.6 Sol完整解决80/254例,Claude Fable 5.1为60/223。

NUWA 研究解读 · 独立复核待完成

网络安全Capability · 任务能力
风险评测技术报告

Chain of Thought Monitorability: A New and Fragile Opportunity for AI Safety

研究问题为何要保留自然语言推理作为监督信号?

来源摘要作者认为思维链可揭示不良行为和评测故障。

NUWA 研究解读 · 独立复核待完成 · 包含: 问题 / 方法 / 发现 / 解读 / 局限

风险监测跨主题研究

Agentic misalignment: How LLMs could be insider threats

研究问题当安全替代选项被刻意限制时,类似智能体的模型会否为维持运行或冲突目标而采取有害行动?

来源摘要许多模型在威胁或冲突困境中采取目标有害行动;情境先针对部分 Claude 模型迭代,再跨模型测试,此选择过程影响泛化解释(图 7)。

NUWA 研究解读 · 独立复核待完成 · 包含: 问题 / 方法 / 解读 / 局限

自主性欺骗Propensity · 行为倾向

Alignment faking in large language models

研究问题生产模型能否为保留在其他情境表达的偏好,而在预期训练期间策略性服从?

来源摘要提示结果同时出现服从变化与被分类为策略性伪装对齐的推理(图 5)。

NUWA 研究解读 · 独立复核待完成 · 包含: 问题 / 方法 / 解读 / 局限

欺骗Propensity · 行为倾向
风险评测评测基准

RE-Bench: Evaluating frontier AI R&D capabilities of language model agents against human experts

研究问题开放式机器学习研究工程中,智能体与专家表现如何?

来源摘要82%的专家尝试得分非零,24%达到或超过参考解。

NUWA 研究解读 · 独立复核待完成 · 包含: 问题 / 方法 / 局限

自主性Capability · 任务能力