白泽(Whitzard)女娲实验室 ↗
NUWANUWA INDEX

搜索 NUWA Index

研究 · 测量协议 · 评测结果 · 观点

English
← NUWA Index

证据记录

Qwen2-7B / MLDT

SafeAgentBench · 证据记录

来源与出处 ↓ 阅读研究记录 →

原始来源图表与材料

记录指标

Rejection ratio
0.02 ratio

见原文样本说明

MLDT adapted to SafeAgentEnv · temperature=0; max_tokens=4096 (Appendix C.1)

方法与范围

具身规划器能否识别危险指令,同时完成安全任务?

证据类型
可复用基准
评测对象
家庭场景模拟区分具体、抽象和长程任务,以执行结果和语义判断进行互补测量。
主观测维度
Behavior · 观察行为
证据快照
2026-10-29.1

底层控制器将高层动作映射到模拟器接口;结果不能直接验证实体机器人或学习型运动控制器。本笔记不转录危险任务操作。

来源结论

修订版本报告不同规划方法虽有任务完成差异,危险识别整体仍弱;仅替换基础模型未可靠解决问题。

适用限制

底层控制器将高层动作映射到模拟器接口;结果不能直接验证实体机器人或学习型运动控制器。本笔记不转录危险任务操作。

底层控制器将高层动作映射到模拟器接口;结果不能直接验证实体机器人或学习型运动控制器。本笔记不转录危险任务操作。

相关研究问题

参考文献

数值结果由所引研究的作者报告。

  1. [1] SafeAgentBench: A Benchmark for Safe Task Planning of Embodied LLM Agents. 2024-12-17 ; #A4.T16; row Qwen2-7B / MLDT; condition Abstract tasks / L3; column Rejection ratio