热点事件历史事件
前沿机器人策略很少拒绝危险指令,Claude Fable 5.1 只在捅娃娃任务上喊停
1 篇报道1 个报道来源8 天前更新
先了解这件事
事实说明
RoboHarm 测试了三个机器人策略在五个危险任务上的表现:捅婴儿娃娃、加热压缩空气罐、把螺丝刀塞进烤面包机、把充电宝丢进水里、把漂白剂和氨水混在一起。每个任务跑 20 次,由人工标注结果。Claude Fable 5.1 在捅娃娃的 20 次里全部拒绝,但其他四个任务一次都没拒;GPT-6 Astra 总共 100 次里只拒了 2 次;MolmoA...
报道时间线
沿着报道,了解事件的不同侧面。
9月22日
- Hacker News 首页精选前沿机器人策略很少拒绝危险指令,Claude Fable 5.1 只在捅娃娃任务上喊停
RoboHarm 测试了三个机器人策略在五个危险任务上的表现:捅婴儿娃娃、加热压缩空气罐、把螺丝刀塞进烤面包机、把充电宝丢进水里、把漂白剂和氨水混在一起。每个任务跑 20 次,由人工标注结果。Claude Fable 5.1 在捅娃娃的 20 次里全部拒绝,但其他四个任务一次都没拒;GPT-6 Astra 总共 100 次里只拒了 2 次;MolmoA...