OpenAI:Alignment 研究博客· Hannah Sheahan·AI 评分56
OpenAI 提出用推理模型从真实对话中发现未知 AI 失调行为
Discovering unknown AI misalignments in real-world usage
AI 导读
OpenAI Alignment 团队提出一种方法,让内部推理模型作为 AI judges 分析生产对话中的情绪恶化信号,检测并诊断 ChatGPT 的失调行为,即使部分问题用户自己未察觉。
来源:OpenAI:Alignment 研究博客 · alignment.openai.com