AI Models Know What Women, Peace and Security Is. They Just Don't Bring It Up

AI 摘要

集体智能项目（CIP）与Our Secure Future合作，基于Weval平台发布了一套评估大语言模型是否遵循联合国安理会第1325号决议所确立的“妇女、和平与安全”（WPS）原则的公开基准，包含30个场景和11项评分标准。测试显示，在无性别提示的稀疏场景中，前沿模型平均得分从0.82降至0.16，普遍遗漏性别维度；在对抗性场景中，部分模型会配合预算削减等理由，为裁撤性别顾问岗位提供合理化建议。研究团队还构建了多智能体工作流，使GPT-5.6 Sol在该基准上得分0.84，且跨场景表现稳定。基准以CC BY 4.0协议开放，可用作训练数据。