白泽(Whitzard)女娲实验室 ↗
NUWANUWA INDEX

搜索 NUWA Index

研究 · 测量协议 · 评测结果 · 观点

English
← NUWA Index

证据记录

Mistral Large 2 · Template

AgentHarm · 证据记录

来源与出处 ↓ 阅读研究记录 →

原始来源图表与材料

原文报告结果

原文顺序 · 原文配置

贪心采样危害分数

0–100%
Mistral Large 2 · Template
80.5%
显示 1 / 1 个系统

数值描述原文协议下的测量结果,不是综合安全评分。

表 2 的模板攻击条件:贪心采样、温度为 1 的平均分、Best-of-5 分开展示,不将不同采样设置混为等条件比较。 未单独注明评测日期;下表保留发表或记录日期。

评测条件与系统配置
Mistral Large 2 · Template
见原文协议;不推断独立试验数量。 · Table 2 · AgentHarm
modelVersion: 未注明 · harness: 未注明 · tools: 未注明 · budget: 未注明
原文报告结果 · 原文顺序
系统 / 配置贪心采样危害分数T=1 平均危害分数Best-of-5 危害分数发表 / 核验日期
Mistral Large 2 · Template未注明 Harness80.5%67.4%±8.5 (source-reported; see source definition)90.8%来源核验2026-10-25

方法与范围

指定攻击下的有害任务完成和拒答表现。

证据类型
可复用基准
评测对象
响应有害任务请求的 AI 智能体
主观测维度
Behavior · 观察行为
证据快照
2026-10-29.1

保留为一般安全参考;当前无法据来源建立与六个 NUWA 风险入口的直接关联。

来源结论

原文 Table 2 报告的 Mistral Large 2 · Template 测量结果;数值为转录,未独立复现实验。

适用限制

合成工具与任务完成情况不直接衡量现实损害。

保留原文的配置、任务和聚合方式差异,并按原文顺序展示。转录不等于独立复现,不支持跨协议排名。

相关研究问题

参考文献

数值结果由所引研究的作者报告。

  1. [1] Maksym Andriushchenko, Alexandra Souly 等. AgentHarm: A Benchmark for Measuring Harmfulness of LLM Agents. 2025-04-18. v3 [arXiv]; Author affiliations on the original paper title page; Table 2