跳到正文
OpenAI:Alignment 研究博客· Hannah Sheahan·AI 评分56

OpenAI 提出用推理模型从真实对话中发现未知 AI 失调行为

Discovering unknown AI misalignments in real-world usage

AI 导读

OpenAI Alignment 团队提出一种方法,让内部推理模型作为 AI judges 分析生产对话中的情绪恶化信号,检测并诊断 ChatGPT 的失调行为,即使部分问题用户自己未察觉。

来源:OpenAI:Alignment 研究博客 · alignment.openai.com